蚂蚁回应新模型训练成本降低:基于不同芯片持续调优,会逐步开源
创始人
2025-03-25 07:21:29
0

IT之家 3 月 24 日消息,据新浪科技报道,针对有关蚂蚁“百灵”大模型训练成本有关消息,蚂蚁集团回应称,公司针对不同芯片持续调优,以降低 AI 应用成本,目前已经取得一定进展,也将逐步通过开源分享。

IT之家附事件背景:

近日,蚂蚁集团 Ling 团队在预印版 Arxiv 平台发表技术成果论文《每一个 FLOP 都至关重要:无需高级 GPU 即可扩展 3000 亿参数混合专家 LING 大模型》,宣布推出两款不同规模的 MoE (混合专家)大语言模型 —— 百灵轻量版(Ling-Lite)与百灵增强版(Ling-Plus),并提出一系列创新方法,实现在低性能硬件上高效训练大模型,显著降低成本

百灵轻量版参数规模为 168 亿(激活参数 27.5 亿),增强版基座模型参数规模高达 2900 亿(激活参数 288 亿),性能均达行业领先水平。实验表明,其 3000 亿参数的 MoE 大模型可在使用国产 GPU 的低性能设备上完成高效训练,性能与完全使用英伟达芯片、同规模的稠密模型及 MoE 模型相当。

相关内容

热门资讯

国投智能董事长滕达: 让保安从... 来源:中证网 中证报中证网讯(记者罗京)在市场规模超3600亿元的保安行业,“人难招、人难管、留人难...
三星紧急下架偷跑带宽应用,数百... 三星正从其智能电视平台大规模移除秘密共享用户互联网连接的应用。包括《吃豆人》在内的多款看似无害的游戏...
预算2000元左右手机怎么选?... 快科技8月5日消息,安兔兔放出2026年7月1500至2499元手机性价比排行榜。 统计周期为7月1...
上午雌性下午雄性,它是怎么办到... 图片来源:Brandon Mejia 为了避免自花授粉,牛油果树会在一天中的不同时段交替开放雄花与雌...
科技赋能赛事安保 中国联通5G... 荆门晚报讯(通讯员陆洪兰)2026年湖北省城市足球联赛荆门主场赛事期间,中国联通联合荆门市公安局交通...
OpenAI否认窃密指控:苹果... 苹果与OpenAI的“泄密之争”迎来新进展。当地时间8月3日,在苹果向美国加州北区联邦法院申请临时禁...
互联网巨头,多个团队落户武汉! 8月3日,腾讯游戏-腾娱云梦工作室、北境星游以及腾讯云雀子公司正式入驻武汉洪山科创大厦。据介绍,武汉...
小米汽车开始卖增程了!澎程系列... IT时报记者 毛宇 7月30日晚,小米集团在北京举办技术发布会,发布小米汽车第二套整车技术底座小米昆...
王勇:用科技赋能产业升级的机器... 王勇: 用科技赋能产业升级的 机器人“智造者” 2025年青岛理工大学临沂校区毕业典礼上,机电装备学...
国企风采|7月27日至8月2日... 改革·创新·发展 近期(7月27日至8月2日)国企风采要闻,陪您快速回顾—— 国产首颗OLED TD...