蚂蚁回应新模型训练成本降低：基于不同芯片持续调优，会逐步开源
创始人
2025-03-25 07:21:29
0次
IT之家 3 月 24 日消息，据新浪科技报道，针对有关蚂蚁“百灵”大模型训练成本有关消息，蚂蚁集团回应称，公司针对不同芯片持续调优，以降低 AI 应用成本，目前已经取得一定进展，也将逐步通过开源分享。
IT之家附事件背景：
近日，蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要：无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》，宣布推出两款不同规模的 MoE （混合专家）大语言模型 —— 百灵轻量版（Ling-Lite）与百灵增强版（Ling-Plus），并提出一系列创新方法，实现在低性能硬件上高效训练大模型，显著降低成本。
百灵轻量版参数规模为 168 亿（激活参数 27.5 亿），增强版基座模型参数规模高达 2900 亿（激活参数 288 亿），性能均达行业领先水平。实验表明，其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练，性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。
相关内容
热门资讯
年味里的新质生产力｜“无人机烟...
春节临近，湖南省浏阳象形精品烟花出口制造有限公司，钢板包裹的成品测试区里，工作人员正在测试一款新型烟...
从课堂知识到产业应用，学而思科...
2月9日，随着最后一批孩子接过实践证书，由中国青少年宫协会联合学而思开展的“AI与未来世界 科技与少...
极氪5G智慧工厂里的AI：慧眼...
引言：极氪5G智慧工厂基于全面融合5G、AI、工业大数据等先进技术，实现数字化、智能化生产，逐渐形成...
松特立取得改进结构支重轮专利，...
国家知识产权局信息显示，泉州市松特立工程机械有限公司取得一项名为“一种改进结构的支重轮”的专利，授权...
致海内外明籍乡亲的新春贺信
- 新春快乐 马年大吉 - 亲爱的港澳台同胞、海外侨胞，朋友们： 天地春晖近，日月开新元。值此辞旧迎...
银心无线电信号或能测试爱因斯坦...
科学家希望通过在银河系中心、靠近一个超大质量黑洞处发现的一颗可能存在的脉冲星来探索广义相对论的本质。...
2026好用又实惠的云手机推荐...
想找款云手机挂游戏、搬砖，结果翻遍各大平台，发现选云手机比玩游戏还累。市面上云手机要么价高配置拉胯，...
全球为何争购中国变压器
平时不起眼的变压器成了稀缺资源。当前人工智能快速迭代、数据中心大规模建设，引发巨量电力需求。受此影响...
推动人工智能从实验室走向生产线...
党的二十届四中全会通过的《中共中央关于制定国民经济和社会发展第十五个五年规划的建议》指出，加快人工智...
郑州市6家单位入围国家级“揭榜...
日前，工信部、国家药监局联合公布了2025年人工智能医疗器械创新任务和第二批生物医用材料创新任务揭榜...