中文互联网语料AI资源平台发布:27个数据集、总量2.7T

2025-01-11 11:43:18阅读()中国网络空间安全协会
推荐题库

中国网络空间安全协会于1月9日发布公告,面向社会发布中文互联网语料资源平台,支持行业领域、内容模态、体量规模等多种标签分类,便于用户下载与使用。

该协会表示在中央网信办指导下,会同国家互联网应急中心,在前期发布中文互联网基础语料 1.0的基础上,依托专委会建立的语料共建共享机制,汇聚一批新的高质量可信数据,经过信源筛选、内容过滤、数据去重等一系列严格细致的数据加工处理措施,形成并对社会发布中文互联网基础语料2.0,规模120GB,数据3800万条。

注:目前平台共入驻27个语料数据集,数据总量约2.7T,主要分三类:

一是中国网络空间安全协会会同国家互联网应急中心等建设的中文互联网基础语料;

二是人民网、北京智源研究院、上海人工智能实验室等单位共享的互联网语料;

三是中国网络空间研究院、中国国家版本馆、中国大百科全书出版社、中国社会科学院图书馆等单位贡献的优质中文基础语料样本。

用户登录中国网络空间安全协会网站(https://www.cybersac.cn/newhome),点击“中文互联网语料资源平台”链接,通过注册、认证等程序,即可下载相关语料。

网安协会人工智能安全治理专委会负责人表示,数据是发展人工智能的基础关键资源,中文互联网基础语料2.0是各界协同共建高质量中文语料的又一重要成果,专委会将持续加强中文互联网基础语料建设,为人工智能技术创新和产业发展提供有力支撑和保障。


扫一扫,手机继续看
    特别声明:文章多为招考官网转载,如有侵权请联系!
    部分数据为彩果考试网(www.cgksw.com)收集整理,转载或复制请注明出处!-彩果考试网-