WAP手机版 RSS订阅 加入收藏  设为首页
mg官方网站
当前位置:首页 > mg官方网站

mg官方网站:数据短缺问题已经开始显现

时间:2024/6/30 12:15:38   作者:   来源:   阅读:0   评论:0
内容摘要:然而,在大模型产业如火如荼发展的同时,其训练数据规模的增长速度却跟不上,语料库的质量参差不齐。特别是高质量汉语语料库的短缺问题日益突出,成为各方关注的焦点。阿里研究院5月发布的《大模型训练数据白皮书》(以下简称《白皮书》)显示,互联网上中文语料库和英文语料库的比例存在显著差异:在全球网站中,英文占比高达59.8%,而中...

然而,在大模型产业如火如荼发展的同时,其训练数据规模的增长速度却跟不上,语料库的质量参差不齐。特别是高质量汉语语料库的短缺问题日益突出,成为各方关注的焦点。

阿里研究院5月发布的《大模型训练数据白皮书》(以下简称《白皮书》)显示,互联网上中文语料库和英文语料库的比例存在显著差异:在全球网站中,英文占比高达59.8%,而中文仅占1.3%。mg官方网站

同样,语料库的质量可以显著影响大型模型的性能。在大模型领域,输入低质量的数据必然会产生低质量的结果。

在日前召开的第六届北京智能大会上,中国互联网协会理事长尚冰指出,高质量数据的生成速度远低于AI大模型训练数据的需求增速,数据短缺问题已经开始显现。

如何获得大规模、高质量的中文数据?构建高质量中文数据集的困难和障碍是什么?加快数据流通、推动中国特色大模型创新开发应用的意义是什么?对此,记者进行了采访。




上一篇:没有了
下一篇:mg官方网站:迎来行业发展的重要里程碑
本站所有站内信息仅供娱乐参考,不作任何商业用途,不以营利为目的,专注分享快乐,欢迎收藏本站!
所有信息均来自:百度一下 (mg代理注册)
浙ICP备11022576号-1