人工智能对于自动驾驶概念至关重要,并且正在以惊人的速度发展。 然而,与车辆的“大脑”一样重要的是眼睛,它为人工智能提供信息以供其做出决策,而数据的传输与传感和处理同样重要。
这里,我们不得不提GMSL2相机和GMSL协议。e-con Systems 联合创始人兼副总裁 Maharajan Veerabahu说道:“GMSL 协议可确保这些相机和处理单元之间的数据传输稳健且可靠。” 通过与 Minus Zero 的合作,e-con Systems 展示了他们在 Zpod 方面的专业知识,Zpod 是印度首款全自动驾驶汽车,可扩展至 5 级自动驾驶,为其配备 GMSL2 HDR NVIDIA Jetson AGX Orin 相机和行业标准 GMSL 协议。这种集成减少了处理时间,从而提高了在不断变化的道路环境中精确导航的能力。
GMSL2相机和GMSL协议
Zpod 利用GMSL改变了信息从传感器传输到处理器的质量。 从历史上看,以太网摄像头是汽车应用的首选,但它们在数据压缩和帧速率一致性等方面存在不足,特别是在涉及多个摄像头时。
GMSL 协议通过允许更高的带宽和未压缩的数据传输,确保在图像处理阶段不会丢失任何细节。 这是通过非对称、全双工 SerDes 技术来完成的,这意味着它在下行链路上以高速率传输数据,同时在上行链路上传输较低的数据速率。 它通过单根同轴电缆或屏蔽双绞线电缆同时传输电源、双向控制数据、以太网、双向音频和多个单向视频流。 通过这样的流程,GMSL 能够为每个摄像头分配带宽,避免帧速率下降,并允许摄像头同步操作以提供周围环境的 360°环视。
同样,与该协议配合使用的 GMSL2 摄像机可实现更高的带宽,以未压缩的 YUV 格式实现 1080p@30fps流媒体传输,即使在长达 15 米的长距离数据传输和低延迟流媒体时,也能保留场景中的关键细节。“这使得人工智能算法能够更有效地检测物体、行人、交通标志/信号等以进行自主导航。”Veerabahu 说。从明亮的阳光到阴影区域,GMSL2 为人工智能算法提供清晰的图像,以有效地检测和响应物体、行人和交通信号。
这种增强的馈送加上更高的带宽可以比以前更快地处理更多更好的信息,并为与之配合使用的软件提供更好的机会来获得正确的信息。 “这种低延迟对于自主导航中的时间敏感型应用至关重要,可确保车辆接收和处理信息的延迟最小,”Veerabahu 解释道。 然后,E-con Systems 使用获得的这些信息并将其运行到其图像信号处理软件中,该软件使用自动曝光、自动白平衡和 HDR 处理等功能来适应不同的照明条件,通过调整图像使 Zpod 更容易获取原始数据,以满足特定的系统要求和环境条件。将其与配套的FAKRA 连接器配对,连接性不仅得到改善,而且足够坚固,能够承受车辆的振动。
对自动驾驶意味着什么
尽管 Zpod 的形状、尺寸甚至速度能力与其他自动驾驶车辆不同,但 Zpod 的成功对自动驾驶汽车技术的未来及其他领域具有更广泛的影响:“自动驾驶应用的不断发展,例如送货机器人和农用车辆 ,显示了 GMSL 相机和 ISP 软件更广泛使用的潜力,表明这些技术在各个领域的前景光明。”Veerabahu 总结道。
GMSL2相机与GMSL协议的集成不仅可以增强安全性和效率,而且还可为各个领域的创新开辟了新的途径。