蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
杭州这个AI养鱼工厂捧回全国冠...
一大早，临平区运河街道“智物嘉渔”基地里的投喂系统悄然启动。饵料落入水面的声音细密如雨，原本平静的池...
AI替你自动下单买东西，接受吗...
来源：投资界 原标题：AI替你自动下单买东西，接受吗？ 当AI浪潮来临，如何通过AI（人工智能）支付...
太阳能壁灯的独立照明逻辑与工程...
从依附到独立的能源转向 太阳能壁灯的出现，回应了一个本应朴素却被长期忽视的追问：一盏壁灯能否不依赖埋...
用秸秆等研制成电子皮肤 中国团...
中新网合肥8月5日电 (记者 张俊)中国科学技术大学先进技术研究院团队近日研制出一款具备多维触觉感知...
评分高的多重IHC产品是什么？...
在肿瘤免疫微环境研究和空间生物学探索中，多重免疫组化正在成为解析组织原位细胞表型和空间关系的关键工具...
震撼，马斯克联手老黄扔出星际大...
新智元报道 就在刚刚，SpaceX交出了首份公开财报。 在财报中，SpaceX正式宣布，携手英伟达...
SpaceX一枚火箭即将撞击月...
8月5日消息，SpaceX一枚曾执行商业探月任务的猎鹰9号火箭二级预计将于美国东部时间周三凌晨撞击月...
导航让你往河里开？浙江团队出手...
对着导航说句：先公园散步、再买咖啡、最后吃饭，结果，它给出的路线却让你“过河穿墙”。 你是不是也被奇...
二手3C平台选哪个？四大主流平...
随着循环消费理念普及，二手手机、平板、笔记本等3C数码凭借高性价比、低碳实惠的特点，成为大众购机主流...
无人机光伏智能巡检系统如何成为...
光伏电站的故障不是突然出现的，组件热斑、隐裂、遮挡、接线松动等隐患，都会经历一个从轻微到严重的发展过...