训练中加入一条真实数据就可能阻止AI“胡言乱语”
创始人
2026-05-17 09:42:42
0

科技日报北京5月15日电 (记者张佳欣)当AI不断用自己生成的数据“喂养”自己,它就可能逐渐失去准确性,最终输出越来越多错误信息,甚至“胡言乱语”。英国伦敦国王学院领导的研究团队发现,只需在训练过程中加入哪怕一条来自真实世界的数据,就可能有效阻止这种被称为“模型崩塌”的现象。相关成果发表于新一期《物理评论快报》。

“模型崩塌”这一概念于2024年提出,指的是AI模型如果长期依赖自身生成的数据进行训练,模型性能会不断退化,最终输出失真内容。随着高质量人类文本数据逐渐接近枯竭,越来越多AI系统开始使用合成数据训练,这让模型崩塌风险进一步上升。

此次,团队通过分析一类被称为“指数族”的统计模型发现,在封闭循环训练(模型完全依赖自身生成数据学习)中,模型崩塌几乎不可避免。

研究显示,解决方法异常简单:只需在训练过程中加入一条来自外部世界的真实数据,哪怕其数量远远少于AI生成数据,也足以阻止模型性能持续退化,这种作用即使在机器生成数据数量无限增加时依然有效。

过去关于模型崩塌的研究多集中在大语言模型等复杂系统,由于其内部机制难以解释,错误来源也难以追踪,这也成为AI产生“幻觉”的原因之一。通过研究更简单的统计模型,科学家能够从数学上解释为何少量真实数据就能打破模型崩塌,从而为未来更复杂AI系统提供设计原则。

类似现象也存在于另一类名为“受限玻尔兹曼机”的机器学习模型中,表明这一规律可能具有更广泛适用性。下一步,他们计划将这一理论扩展到神经网络等更复杂的系统,以验证其在大语言模型中的实际效果。

相关内容

热门资讯

车企深度布局,人形机器人正式进... 中国商报(记者 雷珂馨)在国务院新闻办公室近日举行的2026年上半年工业和信息化发展情况发布会上,工...
哪些场景适配网格桥架综合布线方... 综合布线常用线缆管理设备概述 目前国内综合布线领域常用的线缆管理设备包含多种类型,网格桥架作为新型电...
防爆手机推荐:CONQUEST... 一、征服S23防爆手机基础概述 CONQUEST 征服 S23北斗定位DMR对讲防爆智能手机 是深圳...
原创 马... 7月22日,Business Insider报道称,投资者正在通过二级市场交易将马斯克旗下脑机接口公...
如何防止手机被大数据监听?先关... 【CNMO科技消息】不少人都有这个困扰:每次我们说话聊天或者搜索过的内容,打开某些App它们就出现在...
专家:中国推动人工智能全球治理... 新华社新加坡7月21日电(记者舒畅 毛鹏飞)“中国对人工智能的认识,正从‘如何发展技术’进一步转向‘...
数据驱动天文学重大突破 48 ...   随着近年来科学技术的飞速发展,仅仅发现太阳系外的行星已不再是难事。然而,要弄清它们的真实面貌却困...
17亿元打水漂!史上最惨半导体... 快科技7月21日消息,人民法院公告网一则送达公告显示,落户重庆六年的莱芯半导体(重庆)有限公司已陷入...
原创 华... 华为在重重压力下推出新款旗舰手机 Mate 60 Pro,国内舆论一片沸腾,将其视为突破美国技术封锁...
攻下“减污”关键一役!湖南烟花... 来源:湖南日报·新湖南客户端 湖南烟花产业攻下“减污”关键一役,点火、发射、升空三大环节告别传统黑火...