激光雷达具有远距离、高精度、高分辨率的3D感知能力,是自动驾驶系统中重要的传感器之一。基于激光雷达输出的高精度3D点云,自动驾驶感知算法能精确感知周围环境,识别自动驾驶汽车周围的路面等可行驶区域和车辆、行人等障碍物,为自动驾驶的决策和控制提供依据。
经纬恒润与Innoviz于2018年达成合作,共同推动激光雷达在自动驾驶领域的应用。Innoviz可提供InnovizOne、InnovizTwo等系列产品,该系列产品是面向L2.5到L5级量产自动驾驶汽车开发的高性能车规级固态激光雷达传感器,具有卓越的3D感知性能,可以在高帧率下在250米的检测范围内输出高密度、高分辨率、高精度的3D点云数据,还具有重量轻,尺寸小,功耗低,受日光和天气影响小等优点,可根据用户场景需求,对ROI、纵向FOV、像素汇聚、帧率、反射回波参数进行预定义。另外,Innoviz系列产品稳定可靠,满足功能安全要求,且价格相对低廉,能满足前装量产的需求。
Innoviz激光雷达
激光雷达输出丰富的三维空间信息需要算法进行处理,才能实现对周围环境的有效感知。3D点云感知算法通常采用类似图像处理算法的深度学习网络,但相比于图像,点云维度更高,所以数据量更大,处理点云的深度学习网络也更复杂,而且点云是无序、连续和非结构化的,需要有针对性的开发一些自定义算子。因此,深度神经网络点云识别算法在嵌入式平台上实时运行一直是业界难点之一。
经纬恒润经过潜心研发,于2020年攻克了深度神经网络在嵌入式平台部署所面临的自定义算子与加速、量化、模型压缩等难题,率先实现了高性能激光点云神经网络在嵌入式平台(德州仪器TI TDA4系列)上的部署。
目前该系统:
支持接入Innoviz、Velodyne、禾赛、速腾聚创和Ouster等激光雷达
可完成激光点云中的多种车辆、行人、摩托车等识别,并输出位置、姿态、3D外形尺寸、速度等信息
处理速度达到13帧/秒
识别性能与国际上主流的先进网络性能相当
经纬恒润所采用的德州仪器TI公司的TDA4VM具有强大的片上深度神经网络推理能力,其深度学习矩阵乘法加速器(MMA),算力达8 TOPS,具有两个64位 Arm Cortex-A72微处理器子系统,工作频率高达1.8GHz,但功耗仅5到20W。
目前,经纬恒润自研的港口无人集卡自动驾驶系统正在持续运营,其中激光雷达作为其重要传感器,并采用自研的、运行于嵌入式平台的深度学习算法进行点云的处理和识别。该自动驾驶系统自动化程度高,运行稳定,接管率非常低,极大地节省了人力,并提高了港口生产效率。
除了车端感知之外,经纬恒润还将固态激光雷达用于V2X车路协同场景。5合1融合感知单元(FPU)包含了车规级的摄像头、毫米波雷达以及InnovizOne激光雷达,将采集到的图像、点云等传感器数据实时地汇聚到HPC计算单元完成障碍物信息的识别。所有传感器采用一体化设计,节省传感器校准时间,易安装维护。
V2X设备港口部署实况图