AI & Big Data 02月27日
Arm發表首款鎖定邊緣AI的Armv9架構運算平臺
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Arm发布了首款Armv9架构边缘AI运算平台,旨在满足日益增长的边缘端AI运算需求。该平台整合了Cortex-A320 CPU和Ethos-U85 NPU,能够支持超过10亿参数的边缘端AI模型,预计将推动AI应用从云端向边缘计算发展。新平台不仅提升了物聯網的效能、效率及安全性,還將Armv9.2架構的安全功能帶到小型化的Cortex-A裝置。此外,Arm还优化了AI框架的开发工具Arm Kleidi,以提升Arm CPU的AI及ML负载性能。此举标志着AI发展进入新阶段,将加速智慧城市、工业自动化等领域的智能化进程。

🚀 Arm发布首款Armv9架构边缘AI运算平台,标志着AI发展从云端向边缘端的重要里程碑,旨在满足物联网智慧化发展带来的边缘AI处理需求。

💡 该平台整合Cortex-A320 CPU和Ethos-U85 NPU,其中Ethos-U85 NPU支持Transformer运算子网络,使得其机器學习性能比上一代基于Cortex-M85的平台高出8倍。

🛡️ 新平台将Armv9.2架构的安全功能引入小型Cortex-A设备,例如PAC指标验证和MTE内存标签扩展,从而提高物联网设备的安全性。

🛠️ Arm还针对边缘AI应用开发优化了AI框架开发工具Arm Kleidi,以提升Arm CPU的AI及ML负载性能,例如使用Llama.cpp处理微軟Tiny Stories数据集时,Kleidi为Cortex-A320提升了70%的性能。

看準邊緣端的AI運算需求,Arm發表首款Armv9架構邊緣AI運算平臺,整合CPU與NPU功能,強調可支援超過10億參數的邊緣端AI模型,預期將進一步帶動AI應用從雲端及資料中心向邊緣運算發展。

Arm指出,現今AI發展不再只限於雲端,隨著物聯網的智慧化發展提升,從智慧城市到工業自動化,在邊緣端處理AI工作負載將帶來優勢,也有其必要性,首款Armv9邊緣AI運算平臺,代表此一發展進入重要的里程碑。

隨著物聯網發展愈來愈普及,也帶動運算需求的增加,Arm以自駕車為例,在工廠的環境下自駕車如何精準導航,或是利用AI建立更自然的人機互動體驗。Arm指出,AI向邊緣端發展,更接近資料源,可降低延遲,並且提升隱私保護。

這款專門定位在邊緣AI運算需求設計的Armv9架構運算平臺,內部整合號稱全新的Cortex-A320 CPU,以及Ethos-U85 NPU,其中的Ethos-U85 NPU支援Transformer運算子網路,使得這款定位在邊緣AI運算需求的Armv9運算平臺,要比去年推出基於Cortex-M85的邊緣AI運算平臺,機器學習效能高出8倍。

如果單看CPU,Arm指出,Cortex-A320能夠提高物聯網的效能、效率及安全性,支援Armv9架構的AI功能及軟體支援,比前一代的Cortex-A35,在機器學習方面的效能提升10倍,純量效能則提高3成。

至於隨著物聯網普及,而受到重視的物聯網裝置安全性方面,新平臺則將Armv9.2架構的安全功能帶到小型化的Cortex-A裝置,例如PAC指標驗證、MTE記憶體標籤擴充等等。

Arm稱新平臺將Armv9架構技術,從雲端擴大到邊緣端,涵蓋不同類型的裝置,包括從強調高效能設計的裝置,到有限電源下需要延長使用時間的高能效裝置。

另外,針對邊緣端的AI應用開發,Arm也將針對AI框架的開發工具Arm Kleidi,專門優化Arm CPU的AI及ML負載,Arm以物聯網AI框架Llama.cpp執行微軟Tiny Stories資料集為例,Kleidi為Cortex-A320提升7成的效能。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Armv9 边缘AI 物联网 Cortex-A320 Ethos-U85
相关文章