蚂蚁回应新模型训练成本降低:基于不同芯片持续调优,会逐步开源
创始人
2025-03-25 07:21:29
0

IT之家 3 月 24 日消息,据新浪科技报道,针对有关蚂蚁“百灵”大模型训练成本有关消息,蚂蚁集团回应称,公司针对不同芯片持续调优,以降低 AI 应用成本,目前已经取得一定进展,也将逐步通过开源分享。

IT之家附事件背景:

近日,蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要:无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》,宣布推出两款不同规模的 MoE (混合专家)大语言模型 —— 百灵轻量版(Ling-Lite)与百灵增强版(Ling-Plus),并提出一系列创新方法,实现在低性能硬件上高效训练大模型,显著降低成本

百灵轻量版参数规模为 168 亿(激活参数 27.5 亿),增强版基座模型参数规模高达 2900 亿(激活参数 288 亿),性能均达行业领先水平。实验表明,其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练,性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。

相关内容

热门资讯

飞流科技、纵横股份……绍兴低空... 近日,绍兴低空经济领域喜讯频传,浙江飞流科技有限公司在深圳国际无人机展上揽获双奖;由越城区纵横股份长...
图|从“县城跑”到“进村送”,... 近日,泗洪县分公司打破常规,将原本仅在县城中心运行的无人车试点线路,首次延伸至乡村邮路。 此前,无人...
数智融合 向实同行——2026... 为深入贯彻落实云南省“3815”战略,抢抓数字产业数实融合发展机遇,立足面向两亚区位优势,发挥中国联...
北京城市副中心电力设备“会诊”... 新京报讯(记者吴婷婷)6月12日,在北京城市副中心10千伏前榆路不停电综合检修作业现场,国网北京市电...
AMD CEO苏姿丰:AI具有... 6月12日消息,据Windows Central报道称,AMD首席执行官苏姿丰近日在麻省理工学院毕业...
多方消息证实苹果首款触屏Mac... 6月12日消息,据macworld报道称,苹果公司首款搭载触摸屏的MacBook产品已“100%确认...
前后脚推出云台相机新品 大疆影... 财联社6月12日讯(记者 王碧微)手持云台相机市场此前几乎由大疆(Dji)的Pocket系列定义。随...
2234元的小米15:一场精心... ——————————————————— 小米15价格腰斩危机 2234元。这个数字出现在小米15 1...
测运控数据安全方案成关注亮点 ... 2026年6月11日,以“创新发展 合作共赢”为主题的第五届遥感·通信创新大会在长春开幕。大会由长光...
38.8公里仅需27分钟,科技... 2026年6月5日,云南省阜外心血管病医院成功完成了首次无人机紧急用血配送任务。此次首飞航线全长38...