蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
20%封死涨停！大幅降价80%...
硬件走弱，软件接力。 A股市场早盘，AI应用概念股大幅拉升，软件板块指数一度涨超3.5%，个股表现更...
经历多个首次 实现多项突破！神...
8月5日，中国航天员科研训练中心在北京航天城举办神舟二十一号航天员乘组与记者见面会。这是张陆、武飞、...
研究显示：苹果Vision P...
IT之家 8 月 6 日消息，美国加州大学圣迭戈分校（UC San Diego）一项经过同行评审的研...
江苏恒铭达航空设备取得单向阀专...
国家知识产权局信息显示，江苏恒铭达航空设备有限公司取得一项名为“一种单向阀”的专利，授权公告号CN2...
如何选择分布式光伏并网设备 光...
分布式光伏并网管控背景 近年来分布式光伏装机规模快速增长，其出力波动、间歇性的特性对传统电网的安全稳...
投资于人蕴机遇 民企拓新岗育新...
广大民企将培育新型人才融入企业发展，推动岗位需求向知识型、技术型跃升，助力更多劳动者实现高质量就业。...
江波龙：HBF技术尚未形成广泛...
证券之星消息，江波龙(301308)08月05日在投资者关系平台上答复投资者关心的问题。 投资者提问...
企业AI落地：从大模型走向本体...
概要：Orion AIP：以本体论、大模型与Agentic AI构建企业级AI决策行动中枢 过去两年...
显卡8月起全线涨价：RTX 5...
快科技8月5日消息，据博板堂透露，显卡市场迎来8月首轮大规模调价，华硕与技嘉已正式执行新的价格政策，...