中文互联网基础语料 3.0 发布:数据量为 120GB,助力大模型训练与 AI 发展
9 月 18 日上午,在昆明召开的 2025 年国家网络安全宣传周人工智能安全治理分论坛上,中文互联网基础语料 3.0 正式向社会发布。
在中央网信办相关部门指导下,中国网络空间安全协会会同国家互联网应急中心等单位,在前期发布中文互联网基础语料 1.0 和 2.0 的基础上,持续发挥企业、高校和科研单位协同优势,依托网安协会人工智能安全治理专委会建立的语料共建共享机制,汇聚一批新的高质量可信数据,经过信源筛选、内容过滤、数据去重等一系列严格细致的数据加工处理措施,形成并对社会发布中文互联网基础语料 3.0。本批语料扩大了优质中文网站信源范围,加强了违法不良信息过滤,数据量为 120GB,可为大模型训练和人工智能发展提供可信数据支持。(IT 之家)
本文来自投稿,不代表DEVCN立场,如若转载,请注明出处:https://devcn.xin/5995.html