视觉AI也称为计算机视觉,旨在训练计算机复制人类视觉系统,让数字设备(如人脸检测器、QR码扫描仪)能够像人类一样识别和处理图像、视频中的物体。视觉AI可以主动识别不安全因素,实现AI智能值守,节约人力成本,满足不同应用场景的安全管理需求。
本文引用地址:推出解决方案,基于AI对象检测与识别平台,使用多个摄像头收集数据并获得有效的无线数据传输。方案采用了具有丰富外设功能的RZ/V2M AI-MPU和优化的电源IC、VersaClock时钟发生器,以及用于Wi-Fi、蓝牙和LTE的通信模块,不仅具有灵活的连接选项和优化的电源系统,而且有助于加速强大AI网关设备的开发。该解决方案具有高性能和低功耗的特性,同时,集成的边缘AI功能提高了此方案的网关应用价值。
器件详解
解决方案使用了内置视觉AI加速器的、能够处理多个摄像头图像数据的全新RZ/V2MA器件,进一步扩充了RZ/V系列微处理器(MPU)产品线,并为视觉AI应用带来了更高水平的高精度图像识别能力。
这款器件集成了两个64位Arm® Cortex® -A53内核,能够1GHz最高工作频率实现高计算性能;专有的低功耗DRP-AI(动态可重构处理器)加速器可以1TOPS/W(每秒百万次操作/瓦)级的性能处理图像数据。
RZ/V2MA器件配备以太网、USB和PCI Express等高速接口,可以从多个外部摄像头输入图像。除了DRP-AI加速器外,RZ/V2MA还包含一个OpenCV加速器,可以同时执行基于规则的图像处理。这些功能有助于AI网关、视频服务器、安全门、POS终端和机械臂等机器视觉产品获得高精度图像识别能力。该器件的目标应用主要是AI功能网关和AI视频服务器等。
系统框图
为了帮助用户快速上手,新款RZ/V2MA提供一整套开发工具辅助视觉AI系统设计。新器件的DRP-AI Translator可以将AI模型转换为DRP-AI可执行文件,而新增的基于开源深度学习编译器Apache TVM技术的DRP-AI TVM编译器可让DRP-AI加速器与CPU一起工作,使DRP-AI能够转换和生成比以往更多的AI模型。现在瑞萨已对ONNX和PyTorch AI模型的支持,计划未来支持Tensorflow。
方案优势
● 通过解码视频流(H.264或H.265)并以最小切换开销处理多个AI推理,从而实现快速视觉AI处理
● 支持带以太网协议的高速视觉网关功能:100/1000Mbps和快速USB连接:USB 3.1第1代(5Gbps)
● 支持PCI Express 2.0(第2代/2通道)的外设扩展
● RZ/V2MA内置电源时序控制功能可使电源设计更简单且具有更高的可靠性
● 集成多种通信设备、高性能Wi-Fi模块、紧凑且高性能的低功耗蓝牙(LE)模块和LTE Cat-M1蜂窝物联网模块
● 为合作伙伴提供评估板RZ/V2MA评估板
作为“成功产品组合”的一部分,上述解决方案将相互兼容的瑞萨器件完美结合,实现无缝协作,帮助用户缩短设计流程,加快产品上市。与此同时,这款解决方案也将为电商个性化图像搜索、3D模型构建、OCR扫描、人脸识别、图像探测器等创新用例赋能。