全球首个Armv9边缘AI计算平台发布:实现超10亿参数模型运算

  九游新闻     |      2025-05-09 07:05

  近日,Arm公司在全球范围内推出了首个基于Armv9架构的边缘AI计算平台,以全新Cortex-A320处理器和Ethos-U85NPU边缘AI加速器为核心,该平台专为物联网应用优化,具有支持运行超过10亿参数的端侧AI模型的强大能力。此举标志着边缘智能决策的新时代,为数据收集源头的智能化应用奠定了基础。

  Armv9边缘AI计算平台的推出,不仅标志着边缘计算技术的重大突破,还受到亚马逊云科技(AWS)、西门子、瑞萨电子等行业巨头的强力支持。这一全新平台能够在设备上流畅运行经过调优的大语言模型(LLM)和小语言模型(SLM),极大地提升了响应速度,减少了因过度依赖云计算而导致的数据传输延迟,并有效增强隐私保护能力。

  在技术实现方面,Cortex-A320表现卓越,通过Armv9架构,实现了物联网应用在性能、安全性和能效方面的显著提升。与上一代Cortex-A35相比,其机器学习性能提升了10倍,标量性能提升了30%。这一雄心勃勃的技术改进推进了工业自动化、智能摄像头等领域的应用,使得物联网设备具备了更强大的AI处理能力。

  Ethos-U85NPU则在这一平台中扮演了重要角色,支持Transformer算子网络,使得模型推理速度和效率大大提升。特别是对于边缘设备而言,它们通常需在恶劣环境中运行,并处理大量敏感数据,因此,安全性成为了重中之重。Armv9边缘AI计算平台融入了先进的安全特性,如指针验证(PAC)、分支目标识别(BTI)和内存标记扩展(MTE),能够有效防范黑客攻击,为物联网应用的安全性提供了保障。

  应用场景也随之多样化,从自动驾驶车辆在工厂内的精准导航,到智能摄像头灵活的软件升级,再到支持更自然的人机交互的AI接口,Armv9边缘AI计算平台正在推动各行各业的智能化进程。为了满足OEM厂商对于创新和扩展的需求,Arm还推出了ArmKleidi计算库,以期简化软件开发和部署过程,助力2000多万Arm开发者更方便地集成主流AI框架。

  KleidiAI的引入带来了最高70%的性能提升,使得如MetaLlama3和Phi-3等关键模型的应用更加高效。例如,当在Llama.cpp上运行微软的TinyStories数据集时,KleidiAI为新处理器带来了显著的性能提升。在当今迅速变化的技术环境中,快速的产品上市能力为企业竞争提供了重要的支持,新平台的无缝兼容性让开发者能够更加灵活地满足市场需求。

  Arm的高管们指出,AI技术的创新早已不再局限于云计算。随着全球互联程度加深,边缘计算对于智能化应用的重要性日益凸显,特别是在智慧城市、工业自动化等领域,处理AI工作负载的需求持续增长。即使在当前环境下仍面临许多挑战,AI的进步却承载着改变全球性问题的希望,如改善生态环境和医疗健康。

  通过与AWS物联网技术的深度合作,全新Arm边缘AI计算平台还实现了轻量级设备运行时环境——NucleusLite,确保边缘设备的高效运行,适用于智能制造、农业中的精准监测以及自动驾驶中异异常检测等多领域。

  总的来说,Armv9边缘AI计算平台的发布,为未来的物联网应用打下了坚实的基础。它不仅提升了设备的智能化程度,也为安全性和效率提供了新的解决方案。用户在享受边缘AI带来的便利时,也应保持对新技术的理性思考,关注其潜在问题与风险,积极探索利用AI产品如简单AI来推动自媒体创业的机会,寻求更加人性化和可持续的发展方式。未来,随着又一轮科技进步的到来,边缘计算将在推动社会进步与经济发展方面继续发挥至关重要的作用。