蚂蚁回应新模型训练成本降低:基于不同芯片持续调优,会逐步开源
创始人
2025-03-25 07:21:29
0

IT之家 3 月 24 日消息,据新浪科技报道,针对有关蚂蚁“百灵”大模型训练成本有关消息,蚂蚁集团回应称,公司针对不同芯片持续调优,以降低 AI 应用成本,目前已经取得一定进展,也将逐步通过开源分享。

IT之家附事件背景:

近日,蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要:无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》,宣布推出两款不同规模的 MoE (混合专家)大语言模型 —— 百灵轻量版(Ling-Lite)与百灵增强版(Ling-Plus),并提出一系列创新方法,实现在低性能硬件上高效训练大模型,显著降低成本

百灵轻量版参数规模为 168 亿(激活参数 27.5 亿),增强版基座模型参数规模高达 2900 亿(激活参数 288 亿),性能均达行业领先水平。实验表明,其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练,性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。

相关内容

热门资讯

以人工智能助力服务业制造业融合... 来源:滚动播报 (来源:上观新闻) “十五五”既是我国转变发展方式、优化经济结构、转换增长动力的攻...
又一平台推出AIGC频道! 主编温静导读:芒果TV全新AIGC专属频道正式上线。 来源:传媒内参—温静聚焦 日前,在AIGC技...
携手推进网智融合 智启6G美好... 6月24日,以“Mobile AI智启6G未来”为主题的2026年GTI国际产业大会在上海召开。GS...
原创 颠... 天文学家发现神秘UFO,竟是黑洞边狂飙的气体风暴?刷到"天文学家发现UFO"这种新闻,估计不少朋友心...
首都互联网协会召开“规范网络测... 为深入贯彻国家网信办、市场监管总局联合印发的《网络测评活动规范》相关要求,着力破解网络测评领域突出问...
原创 8... 红米K90至尊版正式官宣,发布时间定档6月30日,这次的Slogan是“为3K档游戏性能自由而战”。...
红魔游戏平板5 Pro官方超前... IT之家 6 月 24 日消息,红魔游戏手机产品总经理姜超今日开箱了红魔游戏平板 5 Pro。 据...
在达沃斯,听见“天津声音” 6月23日,世界经济论坛第十七届新领军者年会(2026夏季达沃斯论坛)在大连启幕。全球企业家与学界精...
2026智能客服产品推荐:主流... 2026-06-24 18:43:30 作者:狼叫兽 当企业数字化转型步入深水区,传统依赖人海战术的...
2026年高价值AI工作手机推... 2026年真正高价值AI工作手机,需要同时满足硬件稳定、全链路风控、落地型AI赋能、轻量化管理、长期...