蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
“链”上谋创新 携手向未来
6月22日，参观者在链博会数智科技链展区观看机器人格斗 新华社记者 张晨霖 摄 ...
汉宇集团获得实用新型专利授权：...
证券之星消息，根据天眼查APP数据显示汉宇集团（300403）新获得一项实用新型专利授权，专利名为“...
隧道UWB定位系统：2026年...
隧道UWB定位系统是基于超宽带脉冲信号实现隧道内厘米级位置感知的技术方案。2026年，该行业正从基础...
重庆二手手机平台推荐：别信“女...
在重庆想找靠谱的二手手机平台，多数人第一反应是“怕翻车”。我干了8年这行，上周刚帮一个客户验出翻新机...
郑州民生耳鼻喉医院第49期“我...
当传统佳节的艾草清香，遇上纯白圣洁的医者仁心，一场别开生面的医学启蒙之旅在郑州民生耳鼻喉医院悄然绽放...
原创 1...
想要大电池跟耐用机身的小伙伴，这下又多了一个选择～ 就在今晚，荣耀举行发布会，带来新机 —— X80...
原创 苹...
#苹果未来两年产品线曝光 #【#iPhoneAir2 或明年春季发布 #】，知名苹果爆料记者马克・古...
半导体制氮机源头工厂：东莞萨尼...
在半导体制造领域，氮气纯度与供应稳定性直接影响产品良率。传统深冷空分设备虽能实现高纯度产出，但启动周...
原创 阿...
当阿宝学会了“听”，微信学会了“藏”；一个让你开口说话就能搞定一切，一个让你感觉不到AI的存在；谁的...
全球首架CBJ公务机正式在上海...
上海6月22日电 (记者 殷立勤)6月22日，海航航空集团旗下上海金鹿公务航空有限公司(以下简称：上...