AI & Big Data 06月05日 13:38
挑戰Nvidia,AMD收購AI優化軟體新創業者Brium
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

AMD宣布收购AI推理优化技术公司Brium,旨在提升大型语言模型(LLM)在AMD等非Nvidia硬件架构上的推理效率。Brium的技术专注于优化模型接触硬件前的整个技术堆栈,减少对特定硬件配置的依赖,从而在更多元的环境中实现更快的AI应用。此次收购将有助于AMD提升其硬件平台的效率和灵活性,并强化其执行开源软件生态系统的能力,最终目标是使LLM在AMD Instinct GPU上达到接近或超越Nvidia的性能。

💡 AMD收购Brium的主要目的是提升大型语言模型(LLM)在AMD硬件架构上的推理性能,特别是针对非Nvidia GPU的优化。

⚙️ Brium的技术核心在于其组译器技术、模型执行框架和AI推理优化方案,能够优化模型接触硬件前的整个技术堆栈,从而减少对特定硬件配置的依赖。

🚀 Brium的加入将加速AMD在OpenAI Triton、WAVE DSL和SHARK/IREE等核心项目上的进展,并推动AMD Instinct GPU平台更快地执行AI模型。

🤝 AMD希望通过此次收购,结合新的精度格式(如MX FP4和FP6),提升其AI硬件执行新兴训练和推理任务的效能,目标是使LLM在AMD Instinct GPU上的性能接近或超越Nvidia。

AMD宣布收購AI推論優化技術業者Brium,以協助LLM在AMD等非Nvidia硬體架構上的推論效能。

Brium產品涵括的組譯器技術、模型執行框架及完整的AI推論最佳化技術,其方案旨在提升多種硬體架構上大型語言模型(LLM)的推論效率。AMD解釋,Brium技術特別之處在於它能優化模型接觸到硬體前的整個技術堆疊,有助於減少對特定硬體配置的依賴,而能在更多元環境上,實現更快的AI應用。

AMD表示,Brium的收購有助於提升該公司硬體平臺的效率和彈性。而Brium的收購連同AMD之前收購的Silo AI、Nod.ai及Mipsology,可強化該公司執行開源軟體生態系的能力。

Brium擁有組譯器開發和分散式機器學習基礎架構能力的團隊加入後,可立即投入AMD OpenAI Triton、WAVE DSL和SHARK/IREE等核心專案,能實現AMD Instinct GPU平臺上更快速執行AI模型。配合AMD加強投入新的精度格式如MX FP4和FP6,將可推升其AI硬體執行新興訓練和推論任務的效能。AMD希望藉此提升LLM在非NVIDIA GPU(即AMD Instinct)上執行GPT模型時,達到接近或超越 CUDA/NVIDIA 的效能。

AMD並強調Brium成功將其Deep Graph Library(DGL,一種 Graph Neural Network框架)移植到AMD Instinct平臺,有助於AMD方案打入醫學、生物科技、金融和製造領域。

Techcrunch分析,由於現行大部分AI專屬軟體,都是為Nvidia晶片和硬體設計。透過建立更大開放AI生態系,有助於AMD挑戰業界霸主Nvidia。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

AMD Brium AI推理 LLM Nvidia
相关文章