IT之家 7小时前
挑战英伟达垄断地位:和硕展示基于 AMD MI350X 的 1177 PFLOP 级 AI 机架
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

和硕在台北国际电脑展上展示了一款搭载128颗AMD Instinct MI350X GPU的AI机架解决方案,旨在为高性能AI推理与训练提供强大算力。该系统采用液冷散热,总显存高达36.8TB,可支持大型AI模型。虽然在GPU互连方面不如英伟达GB200/GB300 NVL72平台,但其为OCP用户提供了即用型AI算力平台,并为挑战英伟达在机架级AI解决方案的垄断地位奠定了基础。该方案更适合AI推理或多实例训练,是当前高性能、大内存AI解决方案的重要突破。

💡和硕发布了搭载128颗AMD Instinct MI350X GPU的AI机架解决方案,该方案专为高性能AI推理与训练设计,其架构比AMD官方开发的机架方案领先一代。

💻该系统采用8组5U计算单元,每组包含1颗AMD EPYC 9005处理器和4颗Instinct MI350X加速器,并采用液冷散热方案。整机采用51OU ORV3规格设计,适配遵循OCP开放计算标准的云数据中心。

🌐由于AMD尚未推出Infinity Fabric专用交换机,该系统通过400GbE网络连接不同GPU,这与英伟达GB200/GB300 NVL72平台通过NVLink实现72颗GPU直连形成对比,MI350X系统在扩展性方面相对较弱。

💾该系统理论峰值性能可达1,177 PFLOPS(FP4精度),每颗MI350X搭载288GB HBM3E显存,系统总显存达36.8TB,可支持超越英伟达Blackwell架构GPU容量上限的巨型AI模型。

🎯该系统更适合AI推理或多实例训练场景,而非需要高度同步的大语言模型训练。但仍是当前高性能、大内存AI解决方案的重要突破,也为AMD下一代Instinct MI400系列产品铺平了道路。

IT之家 5 月 24 日消息,Tom's Hardware 发现,和硕在台北国际电脑展上展示了一款独特的 AI 机架解决方案。

▲ 图源:Tom's Hardware,下同

据介绍,该系统配备了 128 颗 AMD 新一代 Instinct MI350X GPU,专为高性能 AI 推理与训练设计,其架构比 AMD 官方开发的机架方案领先一代。

该平台将成为和硕研发下一代 AMD Instinct MI450X 处理器 IF64 / IF128 系统的技术验证平台,相关产品预计一年后量产,IT之家后续将保持关注。

和硕 AS501-4A1 / AS500-4A1 系统采用了 8 组 5U 计算单元,每组包含 1 颗 AMD EPYC 9005 处理器和 4 颗 Instinct MI350X 加速器,采用液冷散热方案以保障高负载下的稳定性能。整机采用 51OU ORV3 规格设计,适配遵循 OCP 开放计算标准的云数据中心(例如 Meta)。

由于 AMD 尚未推出 Infinity Fabric 专用交换机,该系统只是通过 400GbE 网络连接不同 GPU(目前 AMD 加速器最大集群规模为 8 颗)。这与英伟达 GB200 / GB300 NVL72 平台形成对比 —— 后者通过 NVLink 实现 72 颗 GPU 直连。因此,MI350X 系统在扩展性方面尚无法与英伟达方案抗衡。

该系统的核心价值在于:可为 OCP 用户提供即用型 AI 算力平台,同时帮助开发者从软硬件层面掌握多 GPU 系统搭建技术;并为挑战英伟达在机架级 AI 解决方案的垄断地位奠定基础。

根据 AMD 官方参数,和硕 128-GPU 系统的理论峰值性能可达 1,177 PFLOPS(FP4 精度)。每颗 MI350X 搭载 288GB HBM3E 显存,系统总显存达 36.8TB,可支持超越英伟达 Blackwell 架构 GPU 容量上限的巨型 AI 模型。

该系统的主要限制在于依赖以太网的 GPU 间通信方案。由于最大单集群规模为 8 颗 GPU,其更适合 AI 推理或多实例训练场景,而非需要高度同步的大语言模型训练 —— 这正是英伟达 NVL72 系统的优势领域。尽管如此,这仍是当前高性能、大内存 AI 解决方案的重要突破,也为 AMD 下一代 Instinct MI400 系列产品铺平了道路。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

和硕 MI350X AI机架 AMD 英伟达
相关文章