蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
“神药”背后有多少“神汉”在演...
前不久，天津的一个私域直播间打着“御医传人配方”的幌子，将一款普通食品包装成“治病神药”，不少老人上...
空港新城区内企业实现里程碑突破
卫星数据可以用来融资了！近日，空港新城区内企业西安中科西光航天科技集团有限公司（以下简称“中科西光航...
因经营不善流失用户的母婴平台，...
概述 妈妈网、宝宝树与亲宝宝等母婴平台在用户覆盖、业务模式、内容生态等方面存在差异。 宝宝树作为曾经...
黑科技规律！红龙扑克辅助器下载...
《黑科技规律！红龙扑克辅助器下载，poker软件免费吗，都是是真的有挂（2024已更新）-哔哩哔哩》...
黑科技挂！德州菠萝辅助工具，德...
您好，德州菠萝辅助工具这款游戏可以开挂的，确实是有挂的，需要了解加微【136704302】很多玩家在...
黑科技私人局！红龙扑克怎么看底...
黑科技私人局！红龙扑克怎么看底牌，手机云扑克辅助，原本存在有挂（2022已更新）-哔哩哔哩；实战中需...
黑科技肯定！红龙扑克插件，po...
黑科技肯定！红龙扑克插件，pokerx机器人，本然是真的有挂（2021已更新）-哔哩哔哩；原来确实真...
黑科技线上！智星菠萝德州辅助，...
1、黑科技线上！智星菠萝德州辅助，德扑网上设置，其实存在有挂（2025已更新）-哔哩哔哩；详细教程。...
黑科技科技！红龙扑克辅助器原理...
1、黑科技科技！红龙扑克辅助器原理，GG扑克辅助软件，竟然是有挂（2022已更新）-哔哩哔哩；详细教...
黑科技苹果版！红龙扑克透牌规则...
自定义红龙扑克透牌规则系统规律，只需要输入自己想要的开挂功能，一键便可以生成出微扑克专用辅助器，不管...