蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
视频丨超935亿元涌入 具身智...
每小时1200件，准确率95%，24小时不停歇……曾经在展会上跳舞翻跟头的“显眼包”，如今已成为广州...
原创 A...
AI芯片催生7N超高纯铜需求，产能缺口超25%，国产替代提速 1、超高纯铜行业简介 超高纯铜指纯度达...
谷歌Pixel发布会亮点盘点：...
谷歌近日举办了年度"Made by Google"硬件发布会，发布了一系列新品，包括Pixel 9a...
打通AI落地链路！广州白云举办...
8月13日，在广州白云区政务服务和数据管理局、广州民营科技园管委会指导下，广州白云产业投资集团有限公...
康美韶关智慧药房（中药代煎代配...
8月11日，康美（韶关）智慧药房（中药代煎代配中心）正式开业。该药房是国内首创的一站式药事服务平台，...
返家乡 | 共青团宁江区委开展...
为深化“返家乡”社会实践活动成效，引导返乡大学生厚植乡土情怀、传承奉献精神，8月11日，共青团宁江区...
科技加持，法典制度优势化为治理...
（来源：千龙网） 卫星遥感、水质荧光指纹溯源等技术，让隐蔽排污无所遁形；AI自动识别污染源，为环境风...
持续深耕AI技术创新，博彦科技...
来源：博彦科技官微 近期，博彦科技知识产权矩阵再添一项核心技术成果——博问AI智能体平台V1.0软件...
机器人4S店不只是门好生意
机器人产业发展，不能只靠实验室里的技术突破，更不能离开消费端的市场土壤。在新业态新机遇面前，不仅要算...
中国电信再度问鼎“光华杯” 千...
（记者 林碧涓）第四届“光华杯”千兆光网应用创新大赛全国总决赛日前在重庆圆满落幕，中国电信从众多入围...