蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
丝博会遇上周末 亲子打卡感受科...
■记者 梁萌 文/图 丝博会举办期间恰逢周末，展馆内迎来了一波亲子观展热潮。许多家长带着小朋友走进...
企业强推AI提效遇反效果：AI...
IT之家 5 月 24 日消息，众多科技企业督促员工使用人工智能工具提升工作效率，但这项举措已然开始...
打响“河南服务”品牌丨未病先防...
5月15日，下午4点，长垣市卫华智能产业园的大数据中心的电子屏上，分布在全国各地的起重机运行数据实时...
SpaceX、OpenAI“超...
“超级IPO”扎堆。 在许多业内人士看来，今年美股市场最重要的事件并不是美联储何时或是否加息，而是明...
原创 6...
如果你打算在618期间换机，放眼7000元以内的手机市场，那简直是各路“神仙打架”。为了帮大家在折扣...
深圳GEO搜索优化公司前5强排...
你最近是不是也在纠结“深圳GEO搜索优化哪家好”？说实话，这个问题我翻遍了朋友圈和行业群，发现靠谱的...
原创 特...
特斯拉官宣半官宣了无数次的 FSD （ 完全自动驾驶系统 ），终于正式登陆了中国市场，虽然在它前面还...
我国科研团队成功研制智能透射电...
本文转自【央视新闻客户端】； 记者从中国科学院大连化学物理研究所获悉，近期该所科研团队成功研制出智能...
神舟二十三号载人飞船今晚出征 ...
来源：市场资讯 （来源：上游新闻） 5月24日23时08分，神舟二十三号载人飞船计划在酒泉卫星发射中...
神二十三航天员张志远进入飞船返...
神舟二十三号载人飞船瞄准北京时间5月24日23时08分发射。神二十三航天员张志远进入飞船返回舱。 （...