蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
解密透视！wepokerplu...
解密透视！wepokerplus作必弊，哈糖大菠萝挂，大纲教程（有挂功能）-哔哩哔哩wepokerp...
揭露透视!哈糖大菠萝有挂吗!一...
揭露透视!哈糖大菠萝有挂吗!一直存在有辅助工具(有挂教程)-哔哩哔哩1、不需要AI权限，帮助你快速的...
解密透视！pokerworld...
解密透视！pokerworld软件，wpk俱乐部辅助器，讲义教程（有挂教学）-哔哩哔哩；1、下载好w...
揭露透视!哈糖大菠萝有挂吗!果...
揭露透视!哈糖大菠萝有挂吗!果然是有辅助app(有挂详细)-哔哩哔哩哈糖大菠萝有挂吗辅助器是一种具有...
专业透视！werplan透视挂...
专业透视！werplan透视挂，wepoker可以透视码，教程书教程（有挂头条）-哔哩哔哩一、wep...
详情透视!德州透视插件!好像存...
详情透视!德州透视插件!好像存在有辅助神器(详细教程)-哔哩哔哩1、玩家可以在德州透视插件透视最简单...
了解透视！德州私人局脚本，hh...
了解透视！德州私人局脚本，hhpoker哪个俱乐部靠谱，烘培教程（讲解有挂）-哔哩哔哩1、金币登录送...
了解透视!智星菠萝可以辅助吗!...
了解透视!智星菠萝可以辅助吗!本来是真的有辅助软件(有挂分享)-哔哩哔哩所有人都在同一条线上，像星星...
曝光透视！wepoker私人局...
曝光透视！wepoker私人局透视方法，wpk俱乐部辅助器，资料教程（发现有挂）-哔哩哔哩1、实时w...
解密透视!pokemmo手机版...
解密透视!pokemmo手机版脚本!真是是有辅助教程(有挂总结)-哔哩哔哩1、超多福利：超高返利，海...