大模型既要“吃得饱”更要“吃得好”
时间:2025-03-03 12:47:26来源:科技日报
前段时间,网络上流传着一些由大模型生成的“异次元篇章”。比如,有人让大模型续写《红楼梦》情节时,竟得出一幕“贾宝玉倒拔垂杨柳”的奇景,令人啼笑皆非。之所以会出现这种“混搭”和“幻觉”,是因为大模型不仅学习了原著,还“广纳博采”了不少错误信息。

这些人工智能(AI)生成的“胡言乱语”虽是网友们茶余饭后的笑谈,但提醒我们要清醒认识到其背后折射出的问题:数据质量是大模型应用成败的关键。以个性化推荐AI系统为例,一些企业在开发过程中,虽然收集了大量的用户行为数据,但数据中充斥着错误的标注、重复的数据以及相互矛盾的信息,数据的量增加了,但系统推荐的准确性并没有显著提升。《自然》杂志(Nature)刊登的一篇有关大模型可靠性研究的文章指出,一个西班牙研究团队发现,包括OpenAI公司的GPT在内的几个大模型升级后,虽然参数量更大了,误答情况却更严重了。因此,大模型长得壮不壮,不仅取决于“食量”(即数据的数量),更在于食物的“质量”(即数据的质量)——吃得饱并不等同于吃得好。

数据是大模型的基石,在数据质量不高、可靠性缺失的情况下,一味追求大模型参数量的增加,不仅无法提升模型性能,反而会放大偏差和谬误,产生更多不可信数据。如此一来,势必造成计算与存储资源的浪费,增加开发和维护成本,降低用户信任度。更为严重的是,这种“大模型幻觉”和“灾难性遗忘”现象如果发生在精确性要求极高的工业生产领域中,还可能引发不可预测的风险和隐患。以油气勘探为例,基于大模型给出的错误预测进行开采可能导致数亿元的资金损失,并对自然环境造成不可逆转的破坏。

提升大模型性能,关键是处理好数据“质”和“量”的关系,构建大规模、高质量的数据集。应建立完善的数据收集、清洗、验证和存储机制,加强对数据质量的监控和评估,确保数据的准确性、完整性和一致性。此外,还应注重跨领域合作,引入数据科学家、AI算法工程师等多方力量,开展大模型算法合作、制定数据共享和隐私安全保密协议,推动大模型产学研用生态建设。

如今,大模型的发展已迈入多模态融合阶段。通过加强数据治理,优化人工智能学习、训练和验证的“基础食材”,端上大规模、高质量、多模态数据集的“丰盛大餐”,必将助力大模型能力的提升,让人工智能更好地赋能千行百业、造福人类社会。

标签:

生活指南
  • 全国学生资助管理中心:警惕“助学贷款还款”骗局

    中新网2月20日电 全国学生资助管理中心19日在其官网发布2025年第1

  • 网友热议新学期新气象 新意满满 活力飞扬

    新学期,新气象。近日,全国各地中小学校陆续开学,沉寂了一个寒假

  • 2024年西藏普兰口岸货物进出口贸易额超2000万元

    中新社拉萨2月15日电 (贡桑拉姆 格热)记者14日从西藏自治区普兰出

  • 教育惩戒学生应秉持合法适度原则

    学生在校期间扎、咬同学,老师发现后对其批评并要求其道歉,因态度

  • 铁路12306已累计发售春运期间车票2.97亿张

    记者从中国国家铁路集团有限公司获悉,1月24日,全国铁路客流持续攀

  • 广东移动5G全程覆盖黄茅海跨海通道

    中新网珠海12月11日电 (孙秋霞 黎颖欣)粤港澳大湾区核心工程黄茅

  • 2024中国定海东海云廊街舞邀请赛舟山落幕

    12月1日,2024中国定海东海云廊街舞邀请赛暨第四届长三角街舞公开赛

  • 《可信数据空间发展行动计划(2024—2028年)》公布

    11月23日,由国家数据局印发的《可信数据空间发展行动计划(2024—2

  • 免签“朋友圈”再扩大!中国目的地搜索热度暴涨

    中国外交部11月22日宣布,自2024年11月30日起至2025年12月31日,对

  • 邢台梁家庄:双水源让饮用水更安全

    现在水随时够用,再也不担心缺水了。11月16日,邢台市临城县梁家庄

  • 深化校企合作 北京链家2024年吸纳5000名应届生

     为助力拓展高校毕业生等青年就业成才渠道,北京链家2024年以

  • 大课间体育活动成中小学校长新“考点”

    教育部要求中小学校每天统一安排30分钟的大课间体育活动,但如何才

  • 前三季度海洋生产总值7.7万亿元 新兴产业加快发展

    记者从自然资源部获悉:前三季度海洋经济呈现稳中有进态势。初步核

  • 垃圾分类趣味多,南京市第四届垃圾分类家庭PK赛举行

    小手拉大手,垃分全家有。10月30日,由南京市城市管理局指导的第四

  • 2024年携手东盟“10+1”统计合作发展论坛在广西南宁举办

    中新网南宁10月23日电(韦佳秀 林洁琪)10月22日至23日,2024年携手

  • 北京大幅压缩特种设备使用登记办理时限 助力企业发展

    中新网北京10月21日电 北京市市场监督管理局以局长走流程活动为契

  • 民生
    • 新技术为羽绒服“换皮肤”“装大脑”

    • 浙江宁波与中东欧国家贸易额去年创新高

    • 中国最大滩涂光储电站在山东莱州投产

    • 1月3日人民币对美元中间价报7.1878元 上调1个基点