蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
实测揭晓“微信小程序边锋斗地主...
实测揭晓“微信小程序边锋斗地主辅助”一向有开挂辅助工具（存在有挂）；1、选手技艺的积累：德州微信小程...
透视能赢！wepoker可以设...
透视能赢！wepoker可以设置房间-普及开挂透视辅助工具（有挂方式）1、在wepoker可以设置房...
专业讨论“陕麻圈脚本修改器”一...
【福星临门，好运相随】；专业讨论“陕麻圈脚本修改器”一向有开挂辅助挂（有挂头条）；暗藏猫腻，小编详细...
玩家必看科普“填大坑辅助器视频...
玩家必看科普“填大坑辅助器视频”竟然有开挂辅助下载（有挂讲解）；运填大坑辅助器视频辅助工具，进入游戏...
透视脚本！newpoker脚本...
透视脚本！newpoker脚本-推荐开挂透视辅助教程（有挂讲解）1、newpoker脚本系统规律教程...
科技揭秘“哥哥打大a辅助”往昔...
科技揭秘“哥哥打大a辅助”往昔有开挂辅助插件（有挂方法），哥哥打大a辅助是用手机号来登录游戏的系统规...
透视游戏！wepoker提高好...
透视游戏！wepoker提高好牌率-曝光开挂透视辅助插件（有挂教学）透视游戏！wepoker提高好牌...
一分钟了解“决战辅助”原本有开...
一分钟了解“决战辅助”原本有开挂辅助下载（有挂实锤）；决战辅助中的10万兆豆可能无法通过常规的游戏方...
透视总结！竞技联盟辅助-了解开...
透视总结！竞技联盟辅助-了解开挂透视辅助方法（有挂功能）1、点击下载安装，竞技联盟辅助插件透视分类一...
推荐一款“拱趴大菠萝辅助”本来...
您好：拱趴大菠萝辅助这款游戏可以开挂的，确实是有挂的，很多玩家在这款游戏中打牌都会发现很多用户的牌特...