蚂蚁回应新模型训练成本降低:基于不同芯片持续调优,会逐步开源
创始人
2025-03-25 07:21:29
0

IT之家 3 月 24 日消息,据新浪科技报道,针对有关蚂蚁“百灵”大模型训练成本有关消息,蚂蚁集团回应称,公司针对不同芯片持续调优,以降低 AI 应用成本,目前已经取得一定进展,也将逐步通过开源分享。

IT之家附事件背景:

近日,蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要:无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》,宣布推出两款不同规模的 MoE (混合专家)大语言模型 —— 百灵轻量版(Ling-Lite)与百灵增强版(Ling-Plus),并提出一系列创新方法,实现在低性能硬件上高效训练大模型,显著降低成本

百灵轻量版参数规模为 168 亿(激活参数 27.5 亿),增强版基座模型参数规模高达 2900 亿(激活参数 288 亿),性能均达行业领先水平。实验表明,其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练,性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。

相关内容

热门资讯

【行业动态】协同建设“六张网”... 今年以来,我国有序推进水网、新型电网、算力网、新一代通信网、城市地下管网、物流网“六张网”协同建设。...
世界首个!东方影都4D高斯空间... 8月19日, 第三十三届北京国际广播电影电视展览会 (BIRTV 2026)在北京启幕。 青岛西海岸...
上语堂AI好不好?以持续迭代的... AIGC行业的显著特点,是技术迭代速度快、新工具新玩法层出不穷。从AI绘画工具的功能更新,到AI视频...
北京市共建“一带一路”直通车综... 北京企业出海将更加稳健便捷。8月19日,北京市共建“一带一路”直通车综合服务平台2.0发布。此次新上...
卢伟冰宣布小米重磅旗舰9月登场... 快科技8月19日消息,小米集团总裁卢伟冰已确认,小米重磅旗舰将于9月份正式登场,该机将首发搭载新一代...
135小时续航!罗技新旗舰鼠标... 快科技8月19日消息,德媒WinFuture当地时间18日分享了泄露的罗技G PRO X3 SUPE...
上证视评|朱雀“归巢”可回收火... 8月19日,蓝箭航天朱雀三号遥二火箭成功发射并顺利实现一子级回收,被视为我国在重复使用火箭关键技术上...
展品加速变商品 机器人千行百业... 来源:证券时报 证券时报记者 郭博昊 韩忠楠 走进2026世界机器人大会展馆,一股务实的产业新风扑面...
超70家训练场建成启用 具身智... 中国信息通信研究院近日发布《具身智能训练场研究报告(2026年)》。报告显示,随着各部门密集部署人形...
澳大利亚科学家攻克锌碘电池寿命... 【CNMO科技消息】近日,澳大利亚弗林德斯大学的研究团队在电池技术领域取得了一项重大突破。他们开发出...