蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
黑科技辅助!同城游麻将辅助透视...
黑科技辅助!同城游麻将辅助透视挂，三湘互动真的是有挂，原来证实有挂1、实时同城游麻将透视辅助更新：用...
有了最新消息!青云辅助透视挂，...
有了最新消息!青云辅助透视挂，山西棋牌真的是有挂，好像有挂教程1、该软件可以轻松地帮助玩家将青云辅助...
第三方辅助挂!随便跑得快辅助透...
第三方辅助挂!随便跑得快辅助透视挂，传奇游戏休闲确实有挂，原来有挂教学随便跑得快辅助器是一种具有地方...
最新消息!沐辉麻将辅助透视挂，...
最新消息!沐辉麻将辅助透视挂，正宗乐平麻将真的是有挂，竟然有挂工具一、正宗乐平麻将可以开透视的定义与...
出乎意料的是!A8娱乐辅助透视...
出乎意料的是!A8娱乐辅助透视挂，一起好友麻将真的有挂，本来发现有挂1、打开软件启动之后找到中间准星...
此事引发网友热议!v湘西辅助透...
此事引发网友热议!v湘西辅助透视挂，友缘茶馆真的有挂，真是有挂猫腻暗藏猫腻，小编详细说明v湘西破解器...
有玩家发现!多乐够级辅助透视挂...
有玩家发现!多乐够级辅助透视挂，指牌屋亲友版真的是有挂，真是有挂猫腻亲，关键说明，多乐够级透视脚本安...
有玩家发现!电娱游戏辅助透视挂...
您好，电娱游戏这款游戏可以开挂的，确实是有挂的，需要了解加去威信【136704302】很多玩家在这款...
此事备受玩家关注!盛唐娱乐辅助...
此事备受玩家关注!盛唐娱乐辅助透视挂，中天游戏是有挂，果然有挂教学1、下载好盛唐娱乐正确养号方法之后...
黑科技攻略!众友麻将辅助透视挂...
黑科技攻略!众友麻将辅助透视挂，皮皮四川麻将至尊版是有挂，其实有挂教学1、实时皮皮四川麻将至尊版透视...