在AIoT领域,机器视觉以其高速度、高精度、高度自动化的特点,在诸多行业中得到了广泛和深度的应用。更重要的是,市场对机器视觉的需求愈发庞大,这一产业正迎来前所未有的发展机遇。
而这也带来了一个现实的问题,那就是如何高效、敏捷地开发机器视觉产品和解决方案。产业内的相关公司急需一个可信赖的底层架构平台,为他们打造扎实的技术根基。
为满足这些日益强烈的需求,作为全球领先半导体 IP 供应商的Arm终于开始行动了。2023年6月13日,这可能是机器视觉开发者们难忘的一天,因为Arm正式推出了针对视觉应用设备的 Arm 智能视觉参考设计。
该设计的独特之处在于,它是Arm和安谋科技联合开发,融合了双方各自的核心产品,具有浓厚中国本土化特色的解决方案。
Arm 物联网事业部业务拓展副总裁马健表示:“面向中国市场的Arm智能视觉参考设计集 Arm 与安谋科技 IP 于一体,将为视觉芯片和系统设计奠定坚实可靠的基础。它支持灵活配置,能为客户降本增效,使视觉软硬件联合创新成为可能。”
作为一款融合型解决方案,其中的CPU和ISP由Arm提供,NPU和VPU则由安谋科技提供,这从字面上就很容易看出来了。
马健强调,这套设计是以成熟的Arm CPU IP 为基础的。Arm CPU 在智能摄像头领域有九成以上的份额,已经用于诸多智能视觉品牌设备,拥有优异的质量和强大的软件生态系统。
她进一步解释道:“Corstone-1000 是首款为 Cortex-A 设计的子系统,基本配置包括经过量产考验的 Cortex-A35 或 Cortex-A53。Corstone-300 的定位则是低功耗待机子系统,其可降低边缘设备的功耗,凯时k8官网下载提高系统效率。”
参考设计中的 ISP 选用的是 Arm Mali-C55,它是 Arm 迄今为止面积最小、功耗最低、且可配置性最高的 ISP 产品。“Mali-C55 提供升级的图像质量功能,拥有全方位的软件工具支持,包括软件驱动实现自动曝光、自动白平衡、自动对焦的 3A 库以及全套调校和校准工具,可助力客户达到优异画质。”马健表示。
来自安谋科技智能物联及汽车业务线的负责人赵永超对安谋科技自研的 VPU 和 NPU进行了解读。其中,“玲珑” VPU 作为编解码融合、灵活可配、可编程的多核视频处理器,不断在编码标准、编码质量、PPA(功耗、性能、面积)等各个方面进行提升,并保持与 Arm 架构以及多媒体生态的兼容。
”全新一代‘玲珑’V6、V8 的 H.264 编码质量提升了 10%,现已经全面达到并高于行业客户对编码质量的要求”,赵永超表示。
作为灵活可配置的人工智能加速器,“周易” NPU 则可根据需求配置出 1-30 TOPS 的处理性能,支持多种典型的深度学习框架,并可加速客户应用的部署。“目前已经针对 100 多种算子算法进行了优化适配,并表现出了出色性能,包括常见的 CNN 网络以及 Transformer 网络,并已经完成了对 ChatGPT 大模型的适配。”
同样是在6月13日,伴随着Arm智能视觉参考设计一起发布的,还有“Arm 智能视觉合作伙伴计划”。
该计划汇集了 AI 视觉、芯片设计、软件、算法和系统集成商伙伴,旨在帮助设计者与开发者加速将其生产就绪的视觉应用设备推向中国市场。加入该计划的合作伙伴将与视觉应用生态厂商紧密合作k8凯发,共同优化产品与开发者体验,加速推向市场。
目前已有十多家国内领先企业加入了该项计划。马健表示:“通过这项生态计划,我们希望使芯片设计服务伙伴们能够访问并熟悉 Arm 的参考设计,并在参考设计的基础上快速流片,助力客户推出满足 SystemReady 和 PSA 安全标准的芯片。”
来自百度飞桨产品团队的负责人赵乔表示,作为生态伙伴中的重要一员,百度飞桨将与 Arm 通过“Arm 智能视觉合作伙伴计划”进一步深化双方的合作关系。“飞桨的模型库横跨了诸多 Arm Cortex-A、Cortex-M、服务器 CPU 等计算平台,能为 Arm 的生态伙伴实现视觉算法的加速运行,助力智能视觉的落地。”返回搜狐,查看更多