DeepSeek R1推理性能提升3.8倍,AMD发布下一代开源软件栈技术ROCm 7
创始人
2025-06-14 11:40:47
0

6 月 13 日消息,在今日凌晨的 AMD Advancing AI 2025 活动中,AMD 正式推出其下一代开源软件栈技术 ROCm 7,进一步加速 AI 与开发者生产力。

随着 ROCm 7 的发布,AMD 终于从其 ROCm 6 软件栈向前迈进,该软件栈在过去几年中 —— 尤其是在 AI 计算出现以来 —— 已经经历了多次更新。以下是 AMD 在 ROCm 7 中重点关注的一些功能:

最新算法与模型

用于扩展 AI 的高级功能

MI350 系列支持

集群管理

企业级功能

通过 ROCm,AMD 表示其正更加专注于其软件堆栈中日益增长的推理能力。ROCm 7 堆栈将包括增强型框架,如 vLLM v1、llm-d、SGLang,并专注于提供多种优化。即将到来的 ROCm 7 新内核和算法包括 GEMM 自动调优、MoE、Attention 和基于 Python 的内核编写。

AMD 已宣布对其 MI350 系列提供 FP6 和 FP4 支持,ROCm 7 也包含对这些高级数据类型的全面支持,如 FP8、FP6、FP4 和混合精度。

IT之家从发布会获悉,在性能方面,AMD 表示 ROCm 7 将推理作为重点,为 AI 工作负载带来了高达 3.5 倍的性能提升。

具体来看,相较于 ROCm 6,ROCm 7 的 Llama 3.1 70B 提升了 3.2 倍,Qwen2-72B 提升了 3.4 倍,DeepSeek R1 提升了 3.8 倍。

【来源:IT之家】

相关内容

热门资讯

价格大跳水!23000Pa的小... #优质图文扶持计划#开篇先问大家一句:去年夏天那台让无数人种草,却因为3999元起售价让人犹豫再三的...
博通电话会:2027年AI芯片... 受AI芯片业务翻倍增长的强力引擎驱动,博通2026财年第一季度营收创下历史新高,并预计在2027年实...
扬州实景三维应用实践入选省典型... 近日,省自然资源厅、省数据局联合公布2025年度实景三维江苏创新应用典型案例名单。市资规局、市数据局...
海康威视大模型为广州白云城市治... 本报讯 (记者冯思婕)3月4日,杭州海康威视数字技术股份有限公司(以下简称“海康威视”)公众号发布消...
正点原子手把手教你学Linux... 在物联网(IoT)与人工智能(AI)深度融合的浪潮下,嵌入式系统正经历着从“功能实现”到“体验至上”...
政府工作报告:一年来,我国发展... 3月5日上午,十四届全国人大四次会议在人民大会堂举行开幕会。 政府工作报告指出:一年来,我国发展向新...
娄勤俭:春晚人形机器人表现让我... 十四届全国人大四次会议3月4日12时在人民大会堂举行新闻发布会,大会发言人娄勤俭就大会议程和人大工作...
苹果连推低价手机和笔记本 美媒... MacBook Neo 北京时间3月5日,苹果公司最近连续推出了低价手机iPhone 17e和低价笔...
全国政协委员周鸿祎:“黑客智能... 今年全国两会期间,全国政协委员、360集团创始人周鸿祎重点关注人工智能高质量发展。他认为,我国人工智...
原创 臻... 研发费用被多次问询。 作者|刘钦文 编辑|高远山 在某家12英寸晶圆厂的洁净车间里,一台台等离子体刻...