蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
第8分钟教你！宝宝吃吃吃怎么开...
第8分钟教你！宝宝吃吃吃怎么开挂，瓜瓜丰城双剑旧版攻略（果然存在有挂）-哔哩哔哩1、这是跨平台的瓜瓜...
八分钟教你！牵手跑辅助，葫芦娃...
八分钟教你！牵手跑辅助，葫芦娃通杀辅助使用（好像有挂）-哔哩哔哩1、该软件可以轻松地帮助玩家将葫芦娃...
第3分钟关于！钱塘十三水怎么开...
第3分钟关于！钱塘十三水怎么开挂辅助，科乐天天踢辅助视频（一贯真的是有挂）-哔哩哔哩钱塘十三水怎么开...
第六分钟外挂！广东雀神智能插件...
第六分钟外挂！广东雀神智能插件是真的，蜜瓜大厅可以装挂吗（切实有挂）-哔哩哔哩1、广东雀神智能插件是...
第一分钟普及！边锋老友乳山辅助...
第一分钟普及！边锋老友乳山辅助，途游辅助官网（好像存在有挂）-哔哩哔哩1、每一步都需要思考，不同水平...
5分钟解密！518互游辅助器免...
5分钟解密！518互游辅助器免费下载，宝宝游戏辅助（其实有挂）-哔哩哔哩1、完成518互游辅助器免费...
八分钟了解！微信小程序家乡大贰...
八分钟了解！微信小程序家乡大贰辅助器，福建天天开心辅助工具下载（竟然存在有挂）-哔哩哔哩小薇（透视辅...
第七分钟揭露！可乐辅助，好友赣...
第七分钟揭露！可乐辅助，好友赣南脚本插件（一贯存在有挂）-哔哩哔哩1、超多福利：超高返利，海量正版游...
第5分钟解密！人海大厅脚本，新...
第5分钟解密！人海大厅脚本，新众亿辅助（果然有挂）-哔哩哔哩1、第5分钟解密！人海大厅脚本，新众亿辅...
第6分钟总结！爱趣玩辅助，决战...
第6分钟总结！爱趣玩辅助，决战卡五星必赢神器（确实是真的挂）-哔哩哔哩1、用户打开应用后不用登录就可...