蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
盘点十款辅助!wepoker轻...
盘点十款辅助!wepoker轻量版书签,wepoker开挂透视教程软件（原先真的有辅助）主打本地运行...
一分钟揭秘透视!wepoker...
很多人使用云端 AI 时，都担心wepoker亲友圈有用吗、内部资料上传带来隐私风险。这款本地运行的...
我来教大家!辅助挂!WPK透视...
您好，我来教大家!辅助挂!WPK透视版,德扑之星到底有没有挂软件（其实存在有辅助挂）这款游戏可以开挂...
玩家必看攻略辅助!wpk真的有...
玩家必看攻略辅助!wpk真的有透视嘛,德扑之星透视软件软件（一向是有辅助）主打本地运行的 AI 黑科...
最新技巧透视挂!德普软件,WP...
很多人使用云端 AI 时，都担心德普软件、内部资料上传带来隐私风险。这款本地运行的 AI 黑科技，很...
信息共享透视挂!德扑之星辅助工...
一款 AI 游戏攻略黑科技工具上线，查攻略效率直接开挂。它整合版本更新、装备搭配、BOSS 打法、牌...
一分钟揭秘!开挂!wepoke...
一款 AI 游戏攻略黑科技工具上线，查攻略效率直接开挂。它整合版本更新、装备搭配、BOSS 打法、牌...
技巧教程透视!微扑克透视脚本,...
您好：wepoker透视是真的吗这款游戏可以开挂的，确实是有挂的，很多玩家在这款游戏中打牌都会发现很...
专业讨论!透视挂!wpk俱乐部...
wpk俱乐部怎么作弊AI 游戏攻略黑科技上线本地缓存功能，离线查阅能力开挂。提前下载对应游戏攻略数据...
热点推荐!开挂!wejoker...
您好，热点推荐!开挂!wejoker免费脚本,wepoker透视软件教程（从前真的有开挂）这款游戏可...