科学家设定衡量人工智能能力新标准
创始人
2025-05-02 11:20:23
0

参考消息网5月1日报道据美国趣味科学网站4月27日报道,人工智能(AI)可以在执行短时长任务时轻松超越人类,但是如果我们希望AI成为真正的智慧系统,耗时较长的任务才是真正需要应对的挑战。

科学家设计出一种衡量AI系统能力的新方法,能考察AI在完成复杂任务时以多快的速度击败人类或者与人类比肩。

为量化AI模型的性能提升幅度,这一最新研究成果建议科学界参考人类完成相关任务的时长,然后基于AI完成相同任务的时长来衡量AI系统的能力。3月30日,该科研团队在美国预印本文献库公布了研究成果,但论文尚未经过同行评审。

科研团队发现,对于人类需要不到4分钟就能完成的任务,AI模型的成功率能够达到近100%。可是,对于人类需要超过4个小时才能完成的任务,AI模型的成功率仅有10%。对于耗时较长的任务,早期AI模型的表现不如最新版本。

这是意料之中的发现。科研团队强调说,在过去6年里,每7个月,通用型AI以50%的可靠度完成任务的时长就能增加一倍。

这项研究发现,AI的“注意力持续时间”正在迅速延长。根据这一发展趋势,科研团队预计(前提是其研究结果能够普遍适用于现实世界的任务),到2032年,AI就可以自动完成人类软件开发一个月的工作量。

科研团队表示,为更好地理解AI能力的快速提升幅度及其对社会的潜在影响和风险,这项研究可以建立与现实世界结果相关联的新标尺,以便“对AI工作表现的绝对状态、而非单纯的相对状态给出有意义的解读”。

这一潜在的新标尺便于我们更好地理解AI系统的实际智慧和能力。

资深AI专家索罗布·卡泽鲁尼安说:“这一标尺本身不太可能改变AI的发展进程,但是对于一些很适合使用AI的任务而言,它可以跟踪AI系统在这些类型任务上的发展速度。”

卡泽鲁尼安说:“基于人类完成特定任务所需的时长来评估AI,为衡量AI的智力水平和通用能力提供了有趣的替代性指标。首先,没有任何单一指标可以体现我们对‘智慧’的理解。其次,完成一项耗时较长的任务而不出现漂移或错误的可能性微乎其微。第三,这种方法可以直接衡量我们希望利用AI去完成的那些任务类型,即解决复杂的人类问题。”

可以认为,除了提出新的衡量标尺,上述最新论文的最大影响在于其凸显AI系统的发展速度,以及不断提升的AI处理长时长任务的能力。有鉴于此,美国电气电子工程师学会会员、奇点大学AI伦理工程师埃莉诺·沃森预测说,能够处理各种任务的通用型智能体将很快出现。

沃森说:“到2026年,我们将看到AI变得越来越通用,可以一整天或者一个星期都在处理各种任务,而不是仅仅处理经过严格限定的短时长任务。”

沃森认为,对企业而言,这一发展趋势会促成能够承担大量专业工作的AI系统。这不仅可以降低成本,提高效率,还便于人类专注于更具创造性、战略性和人际交往性的任务。

沃森还指出:“对消费者而言,AI将从简单的助手演变为可靠的个人助理,能够连续数日乃至数周处理复杂的生活任务,比如制定旅行计划、监测身体健康状况或者管理金融投资,而且只需要最低程度的监督。”

事实上,AI处理各类长时长任务的能力,很可能在今后几年对社会互动方式和社会利用AI的方式产生重大影响。(编译/刘子彦)

3月31日在汉诺威工博会开幕式上,参观者正在谈论展台上的人工智能机器人。(法新社)

相关内容

热门资讯

物理学陷入停滞——进步主义神话... 当今的物理学家需要抛弃那个极具吸引力的神话——他们正在揭示我们宇宙的隐藏现实。 浏览物理学科普书籍...
从“数字化”到“数智化”(观象... 从“数字化”到“数智化”,一字之变,体现出我国牢牢把握人工智能机遇,体系化推进人工智能产业创新和赋能...
10万次Claude真实对话洞... IT之家 11 月 26 日消息,Anthropic 昨日(11 月 25 日)发布研究报告,通过分...
AI技术应用越广泛,越要明确边... 发展科技的初心和落点都是服务于人,服务于国家和社会。让安全和便捷成为AI技术应用的一体两面,成为技术...
【多彩新论】警惕碎片化传播的负... 注意力不集中,看书听讲说话容易走神,刷手机却停不下来……数字时代的碎片化传播,已成为我们获取资讯的主...
原创 1... 神舟二十二飞船成功发射,代号“天宫应急1号”,并且也圆满完成了中国空间站任务对接,整个任务全面成功了...
工信部:启动为期两年的卫星物联... C114讯 11月26日消息(颜翊)昨日,工业和信息化部正式印发《关于组织开展卫星物联网业务商用试验...
华为Mate80全系降价背后 华为需要通过更亲民的定价,来从iPhone手上抢更多的市场份额。 文|游勇 编|石兆 作为华为旗下最...
亚洲第一!我国自主研制,海试成... ◎ 科技日报记者 都芃 25日,记者从中交天津航道局有限公司获悉,当天下午,新一代超大型耙吸挖泥船“...
一加总裁:第五代骁龙8由一加高... 【CNMO科技消息】11月26日,一加中国区总裁李杰在社交平台透露,已受邀出席当天下午举行的高通“第...