据外媒报道,先进神经拟态视觉传感公司普诺飞思(Prophesee)宣布推出 Metavision®事件视觉传感器GenX320,这是业界首款专门为超低功耗边缘人工智能(Edge AI)视觉设备而开发的事件视觉传感器。
(图片来源:Prophesee公司)
该第五代Metavision传感器产品尺寸仅为3x4mm的裸片大小,将Prophesee开创性事件视觉技术平台的应用范围拓展至快速增长的边缘市场领域,包括虚拟现实/增强现实(VR/AR)设备、安全和监控/检测系统、非接触式显示器、眼动追踪功能和智能物联网设备等等。
基于Prophesee的丰富经验和技术积累,GenX320事件视觉传感器可以提供速度、低延迟、动态范围、能效和隐私优势。该传感器采用BSI堆栈式技术,像素尺寸为320×320 6.3μm,并采用微型1/5”光学格式,在能源、计算和尺寸都受制约的嵌入式边缘视觉系统中,能够满足对于高效集成事件视觉传感的技术要求。即使在极具挑战性的操作和照明条件下,GenX320仍能以超低功耗提供稳定、高速的视觉感知。
GenX320的优势包括:
低延迟的事件时间戳,分辨率为微秒,具有灵活的数据格式;
片上智能电源管理模式,可将功耗降至36uW,并支持智能唤醒事件,还提供深度睡眠和待机模式;
易于与标准SoC集成/连接,具备多个集成事件数据预处理、过滤和格式化功能,可充分减少外部处理需求;
MIPI或CPI数据输出接口可为嵌入式处理平台提供低延迟连接,包括低功耗微控制器和现代神经拟态处理器架构;
片上直方图输出可兼容多个AI加速器;
得益于事件传感器固有的稀疏无帧事件数据,以及去除静态场景功能,可从传感器层面保护隐私;
与Prophesee Metavision Intelligence原生兼容,这是一款最全面、免费、基于事件的视觉软件套件,目前在全球拥有10000多名用户。
Prophesee首席执行官、联合创始人Luca Verre表示:“事件视觉传感器具备卓越的能效及性能,非常适合Edge-AI市场的广泛应用。这款全新Metavision事件视觉传感器旨在满足边缘系统开发人员的需求,并且易于集成、配置和优化,适合运动和物体检测、存在感知、手势识别、眼球追踪等高增长市场用例。”
潜在应用场景
用于AR/VR/XR设备中的注视点渲染,以实现无缝交互的高速眼动追踪;
消费类电子设备(如电视、笔记本电脑、游戏机、智能家居和设备、智能显示器等)中低延迟免触摸人机交互界面;
物联网摄像头中的智能存在检测和人员计数;
超低功耗“永久在线”区域监控系统;
家庭及医疗设备中的跌倒检测摄像头。
商业可用性
GenX320现可从Prophesee及其销售合作伙伴处购买,并配套一整套开发工具,包括含板载芯片(COB)GenX320模块或紧凑型光学柔性模块的综合评估套件,可帮助开发人员轻松探索和开展优化工作。此外,Prophesee还提供一系列适配器套件,可无缝连接到各种嵌入式平台(如STM32 MCU),从而加快产品上市。
XPERI首席技术官Petronel Bigioi表示:“当将视觉技术应用于驾驶员监控解决方案(DMS)和电视服务等产品中时,隐私仍然是消费者最关心的问题之一。受益于Prophesee Metavision事件视觉技术,我们可以在不对场景进行明确视觉表征的情况下理解场景,从而将‘隐私设计(privacy by design)’原则提升至更安全的水平。仅需捕捉每个像素的变化,而非像传统图像传感器那样收集整个场景,这种算法即可感知场景细节,而不用再对其进行详细表征。我们还开发出概念验证演示,从而证明使用神经拟态传感器完全可以实现DMS。使用1MP神经拟态传感器,我们可以实现接近基于主动近红外照明2MP视觉传感解决方案的性能。展望未来,本公司将重点关注GenX320神经拟态传感器,该传感器适用于隐私敏感型智能设备,有助于进一步提升用户体验。”