蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
白酒是由粮食酿造出来的
在山西杏花村汾酒厂的实验室里，一组对比数据揭开了酿酒界公开的秘密：同等发酵条件下，高粱的出酒率竟比大...
《疯狂动物城2》IMAX快闪出...
近日，一场以“情绪复健、快乐加倍”为主题的IMAX快闪活动在北京上演：多位职场打工人和保洁阿姨惊喜变...
【活动报名】AI 驱动产业创新...
南山区是全国智能终端创新核心，集聚可穿戴设备、工业物联网终端等企业。当前智能终端正从 “单一功能” ...
粤港澳全运会科技狂想曲奏响未来...
来源：热点解码局 当人形机器人从深海可燃冰中点燃火炬、马拉松选手跨境竞赛无需刹车时，这届粤港澳全运会...
原创 他...
这几天，学术圈又爆出了一桩令人瞠目结舌的丑闻。 江苏科技大学那位头戴“首席科学家”、“俄罗斯工程院...
中国国家卫健委：警惕健康科普等...
中新社北京11月21日电 (记者 李纯)中国国家卫生健康委员会新闻发言人杨金瑞21日提示，在健康科普...
建龙微纳获得实用新型专利授权：...
证券之星消息，根据天眼查APP数据显示建龙微纳（688357）新获得一项实用新型专利授权，专利名为“...
创新实践案例！邢台1项目上榜
省文化和旅游数字化创新实践案例公布 市图书馆数智文旅AI项目上榜 近日，2025年河北省文化和旅游数...
在都市深处播种未来 深圳坪山玉...
11月21日上午，首届玉米新农荟暨第二十四届广东种业博览会（深圳分会场），在位于坪山区龙田街道的深圳...
罗福莉首个小米成果！开源具身大...
henry 发自 凹非寺 量子位 | 公众号 QbitAI 正式入职小米还不到10天，罗福莉的首篇论...