训练中加入一条真实数据就可能阻止AI“胡言乱语”
创始人
2026-05-17 09:42:42
0次

科技日报北京5月15日电 (记者张佳欣)当AI不断用自己生成的数据“喂养”自己,它就可能逐渐失去准确性,最终输出越来越多错误信息,甚至“胡言乱语”。英国伦敦国王学院领导的研究团队发现,只需在训练过程中加入哪怕一条来自真实世界的数据,就可能有效阻止这种被称为“模型崩塌”的现象。相关成果发表于新一期《物理评论快报》。

“模型崩塌”这一概念于2024年提出,指的是AI模型如果长期依赖自身生成的数据进行训练,模型性能会不断退化,最终输出失真内容。随着高质量人类文本数据逐渐接近枯竭,越来越多AI系统开始使用合成数据训练,这让模型崩塌风险进一步上升。

此次,团队通过分析一类被称为“指数族”的统计模型发现,在封闭循环训练(模型完全依赖自身生成数据学习)中,模型崩塌几乎不可避免。

研究显示,解决方法异常简单:只需在训练过程中加入一条来自外部世界的真实数据,哪怕其数量远远少于AI生成数据,也足以阻止模型性能持续退化,这种作用即使在机器生成数据数量无限增加时依然有效。

过去关于模型崩塌的研究多集中在大语言模型等复杂系统,由于其内部机制难以解释,错误来源也难以追踪,这也成为AI产生“幻觉”的原因之一。通过研究更简单的统计模型,科学家能够从数学上解释为何少量真实数据就能打破模型崩塌,从而为未来更复杂AI系统提供设计原则。

类似现象也存在于另一类名为“受限玻尔兹曼机”的机器学习模型中,表明这一规律可能具有更广泛适用性。下一步,他们计划将这一理论扩展到神经网络等更复杂的系统,以验证其在大语言模型中的实际效果。

相关内容

热门资讯

黑科技开挂!江山大厅(开挂),... 黑科技开挂!江山大厅(开挂),卡丁互娱好像是有透视挂攻略(有辅助挂解密)一、江山大厅可以开透视的定义...
黑科技开挂!新卡丁(开挂),悦... 黑科技开挂!新卡丁(开挂),悦趣竞技本来有透视挂软件(有辅助挂技巧)亲,关键说明,悦趣竞技透视脚本安...
黑科技作弊器!朋友安徽麻将(作... 黑科技作弊器!朋友安徽麻将(作弊器),海南骨牌都是有透视挂方法(有辅助挂助手)朋友安徽麻将脚本下载中...
黑科技透视挂!卡丁互娱(透视挂... 黑科技透视挂!卡丁互娱(透视挂),盛世都是有透视挂攻略(有辅助挂实锤)1、卡丁互娱辅助软件下载优化,...
黑科技辅助器!富友茶苑(辅助器... 黑科技辅助器!富友茶苑(辅助器),长牌切实存在有透视挂技巧(有辅助挂规律)1、完成富友茶苑有辅助插件...
黑科技辅助器!海安麻将(辅助器... 黑科技辅助器!海安麻将(辅助器),福州十八扑本来是有透视挂软件(有辅助挂存在)1、下载好福州十八扑脚...
黑科技透视挂!祺友互娱(透视挂... 黑科技透视挂!祺友互娱(透视挂),途游斗地主比赛版总是真的有透视挂技巧(有辅助挂存在)1、途游斗地主...
黑科技辅助!抢庄牛牛(辅助),... 黑科技辅助!抢庄牛牛(辅助),欣欣好像真的有透视挂教程(竟然有辅助挂)1、抢庄牛牛透视辅助软件激活码...
黑科技外挂!飞鹰大厅(外挂),... 黑科技外挂!飞鹰大厅(外挂),凯旋棋牌都是真的是有透视挂攻略(有辅助挂技巧)1、飞鹰大厅脚本辅助下载...
黑科技透视器!奉化八扣(透视器... 黑科技透视器!奉化八扣(透视器),尊享社区果然真的有透视挂方法(有辅助挂猫腻)一、奉化八扣可以开透视...