蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
五谷寄期许、科创谢师恩，中国农...
6月17日，中国农业大学8000余名2026届毕业生迎来拨穗礼。毕业典礼上演了一场特别的“双向奔赴”...
三大运营商“杀熟”，搞区别对待...
评论员 陈柯旭 手机套餐越用越贵，流量却越来越少，专挑老用户下手？ 最近，央视曝光三大运营商“杀熟”...
原创 雷...
有些手机，第一眼看上去不是参数，而是一种气质。像夏天傍晚街边橱窗里的一束光，明明不张扬，却会让人忍不...
索尼宣布开发Rialto 65...
【CNMO科技消息】6月17日，索尼宣布正在开发一款用于数字电影拍摄的大尺寸传感器模块Rialto ...
阿里、字节再加码具身，互联网大...
6月16日，阿里巴巴发布千问具身智能大模型Qwen-Robot系列，包含 VLA 操作模型Qwen-...
领拓创新取得具有分层散热风道的...
国家知识产权局信息显示，深圳市领拓创新电子有限公司取得一项名为“具有分层散热风道的电脑主板”的专利，...
原创 人...
一台超级计算机给出了一个让人脊背发凉的数字——2.5亿年。这不是科幻小说里的桥段，而是英国布里斯托大...
8GB内存也能流畅运行，微软T...
IT之家 6 月 17 日消息，科技媒体 Windows Latest 昨日（6 月 16 日）发布...
中国国产大功率双转子发动机实现...
中新社哈尔滨6月17日电 (记者 王妮娜)东安动力首台双转子增压发动机R10TE17日在哈尔滨成功点...
博睿康冲刺脑机接口第一股，如何...
（文/万肇生 编辑/张广凯） 中国脑机接口赛道的第一张上市门票，可能要被一家尚未盈利的医疗器械公司拿...