汽车电子的lidar检测车道线原理分析

发布时间:2023-05-18  

1.通过vision+lidar求取3D车道线

1.1 lidar检测车道线原理

一般来说lidar点包含四个维度的信息,xyz坐标和intensity,其中intensity表征着障碍物表面对激光的反射率。车道线一般是使用具有高反射率特性的涂料绘制的,车道线区域lidar点intensity相对其他地面区域要高,如下图所示。其中地面区域都是低intensity点(绿色),车道线、curb和地面标识都是高intensity点(红色和白色)。利用深度学习或者传统方法可以很容易提取lidar车道线。

d636aae2-a63e-11ed-bfe3-dac502259ad0.png

图1 lidar点云BEV视图,其中红色和白色为高反射率点,绿色为低反射率点 另一方面,从图1我们也可以发现,由于lidar点云在远处是稀疏的,lidar车道线的有效范围较短。总结起来,利用lidar可以获取范围较短但是定位精度较高的3D车道线。现在业内流行在BEV视角下提取lidar、vision特征,以便于后续的融合,我们也使用BEV的方法提取车道线。


1.2 来自图像拼接的启发

上文中我们提到使用lidar可以获取较短范围(40m以内),BEV视角下的高精度车道线,但是40的长度显然不太能满足控车需求。vision 2D车道线检测距离远,2D精度高,但是很难获取高精度的3D车道线信息。本文探讨一下如何使用vision高精度的2D信息和lidar距离受限的3D信息实现远距离的BEV车道线感知。


使用lidar获取BEV车道线后,可以获得一个稀疏的BEV图,用来表征车道线的位置,如图2所示。按(RentyZhu:自动驾驶系列3:一种简单的视觉3D车道线感知方法)提到的坐标系构建方法建立地面系。BEV视图可以等效为一个相机在距离地平面一米高度处俯视地平面,其投影方程为:

d66baa8a-a63e-11ed-bfe3-dac502259ad0.png

相机的光轴基本与地面平行,相机2D车道线成像和BEV视图可以视为在两个不同的视角下车道线的成像。如果我们能类比图像拼接的方法,将相机视图“拼接”到BEV视图下,理论上可以实现较好的3D车道线检测。


我们调研了一些图像拼接方法,其中 计算机视觉life:计算机视觉方向简介 | 图像拼接 一文中介绍了经典的图像拼接框架。典型的图像拼接可以分解为以下四步:

d685ec7e-a63e-11ed-bfe3-dac502259ad0.png

其中特征提取已经完成,即vision和lidar车道线检测结果;特征匹配即vision 2D车道线和lidar 3D车道线的匹配;视觉SLAM相关博文中介绍了很多基于特征点匹配的单应性矩阵计算方法,在本方法中不再适用。本方法使用线对线的匹配对求取单应性矩阵,具体方法在后续博文展开。在求取单应性矩阵H后,我们将视觉2D检测结果warp到BEV视角下,再和lidar BEV车道线做简单的加权拟合,即可完成3D车道线的感知。


1.3 结果

实验结果如下图所示,粉色为lidar车道线,距离较短。黄色为真值,红色为利用我们的方法求取的车道线。从结果看本方法在保证3D检测精度的情况下大大提升了车道线的感知距离。

d69cbf44-a63e-11ed-bfe3-dac502259ad0.png

图2 车道线BEV视图 粉色:lidar检测结果 黄色:真值 红色:本方法结果


2.BEVFusion

在上一篇博客(RentyZhu:自动驾驶系列3:一种视觉3D车道线感知&&地面重构方法)中提到了视觉可以无监督重构地面:

d6b80a2e-a63e-11ed-bfe3-dac502259ad0.png


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    度和识别能力等因素,以提供流畅和安全的驾驶体验。 ◎ 针对本车道行驶,用户对舒适性和车辆保持在车道内的效果十分关注。舒适性体现在车速的加减速度,而车道保持效果则通过车辆与车道线的距离来评估。 ◎ 对于弯道行驶,系统......
    优化本车换道计算结果,获得本车换道变速的最优解。   1功能原理设计   在本车因为同车道的前方车辆(以下简称“前车”)行驶慢而考虑是否进行换道超车的决策中(假定换道超车不额外增加危险),驾驶员的常识是换道能保证本车按现有车速行驶......
    因在红灯时间窗到达停车线造成的减速、停车、启动加速等过程,显著减少了所有车辆的总油耗,提高了通行效率。由于本文只考虑了CAV在单车道行驶的情况,在未来的研究中,将进一步研究CAV在多车道的行驶情况,考虑CAV......
    须针对不同路况做一些定向的优化,例如在机动车和非机动车容易混合行驶的路段,让车辆尽可能在最左侧车道行驶;再例如在路口一些小区出口、公交站出口的路段,也尽可能保持车辆在左侧车道行驶。 而这......
    加一次换道,临界距离相应增加,导致了上述现象。不同国家和地区的驾驶员行为差异,需要通过设置临界距离来加以区分。 3、仿真原理 说了上面的原因后,用户不得不需要了解一下变道模型的仿真原理了。通常,车辆变更车道......
    4月26日,在山西省侯平高速路段发生一起交通事故,一辆问界新M7 Plus在内侧快车道行驶中追尾碰撞作业中的道路养护车。问界表示对于交通事故深感痛心,事故发生后积极配合交警部门开展事故调查,提供......
    助驾驶,但各级功能系统所「接管」的驾驶工作却有明显差异。 例如:ACC只能控制加减速、LCC能控制加减和保持车道内的方向居中,领航辅助则在此基础上增加了自主的多车道行驶能力。 若辅......
    Palo Alto 试驾共 300 车道英里,记录的原始资料高达 1 TB 大,但删减不需要的资料,可以压到 8 MB。有了这些资料,车子能够知道行驶的路上可能遇到什么状况,确保......
    到4m,高度为1到2m,水平界面安装角度 25±1º (水平界面,辐射轴相对车辆行使方向角度)。监测离去的车辆。被监控车道数-1到3个车道。 窄波雷达前两种安装方式一般适用于固定测速抓拍系统,并现......
    .其次就是路线规划可以再优化。 举个例子,视频中有一处展示了极越01的“效率变道”能力。极越01在第二车道跟行一辆黑色特斯拉一段时间后,选择向左变道行驶,然而受限速影响,它变......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>