毫末智行BEV-LaneDet大幅提高3D车道线检测性能

发布时间:2023-03-09  

2月28日,一年一度的计算机视觉顶会CVPR 2023放榜。由毫末智行人工智能中心技术团队提交的《BEV-LaneDet: a Simple and Effective 3D Lane Detection Baseline(一种简单有效的3D车道线检测方法)》论文成功入选。


毫末智行BEV-LaneDet大幅提高3D车道线检测性能


计算机视觉与模式识别会议(IEEE Conference on Computer Vision and Pattern Recognition,简称:CVPR)是计算机视觉与模式识别领域的三大顶级会议之一,由纽卡斯尔大学、悉尼科技大学、约翰霍普金斯大学等顶级名校和机构组织。CVPR有着较为严苛的录用标准,CVPR官方透露,CVPR2023一共收到了9155份论文,创下历史新高,而组委会最终录用了2360篇论文,接收率为25.78%。


3D车道检测作为自动驾驶领域的热门话题,在车辆路径选择中起着至关重要的作用。在以往,相关技术往往由于其复杂的空间转换和3D车道的不灵活表示而难以实用。面对这些问题,毫末完全自主研发了一种高效、鲁棒的单目3D车道检测,简称:BEV-LaneDet。


毫末智行BEV-LaneDet大幅提高3D车道线检测性能

 

BEV-LaneDet模型


毫末团队在BEV-LaneDet中,首先通过虚拟相机将输入图像的所有内外参数转换为统一的内外参数,确保了不同车辆中前置摄像头空间关系的一致性,有效促进学习过程。并且,毫末团队使用特征提取器来提取前视图图像的特征,并提出了一种简单但有效的三维车道表示,被称为“Key-Points Representation”,该模块更适合于表示复杂多样的3D车道结构。在此基础上,受FPN启发,毫末团队还设计了一个轻量级和芯片友好的空间变换模块,称为“Spatial Transformation Pyramid”,这是一个基于VPN的快速多尺度空间变换模块,主要负责从前视图特征到BEV特征的转换。最后,毫末团队预测了与局部路面相切的平面上的车道,并将局部路面分成s1×s2个grid,预测了置信度confidence、用于聚类的embedding、横向误offset以及每个grid的高度height,在推理中使用快速聚类方法来融合每个分支的结果,以获得3D车道。


毫末智行BEV-LaneDet大幅提高3D车道线检测性能


BEV-LaneDet在公开集合Openlane的表现


通过以上这些方法,在公开集合OpenLane数据集上,BEV-LaneDet的F1-Sßcore可以达到185FPS,比目前的SOTA提升了10.6%。在公开集合Apollo 3D Lane Synthetic上的表现,BEV-LaneDet同样可以做到大幅度领先目前的SOTA方法4.0%。


毫末智行BEV-LaneDet大幅提高3D车道线检测性能

 

BEV-LaneDet在公开集合上的可视化表现


毫末团队BEV-LaneDet撰写的论文入选CVPR,再次彰显了毫末的深厚AI技术积累。如今,毫末已经快速成长成为中国量产自动驾驶第一名。HPilot已迭代三代产品,在魏牌、坦克、哈弗、欧拉、长城炮等多个品牌近20款车型上实现了规模化量产,未来搭载毫末辅助驾驶产品的乘用车将达到百万量级。截至2023年2月,毫末用户辅助驾驶行驶里程突破3500万公里。中国第一个可大规模落地的城市导航辅助驾驶毫末城市NOH目前也已软件封版达到交付状态。此外,毫末末端物流自动配送车已初步完成商业闭环,交付超1000台,末端物流自动配送车小魔驼系列配送订单量也已突破16万单,商业化进程正全面提速。


当下,随着各类新兴技术逐步渗透到自动驾驶行业,毫末智行也将继续加码在大模型训练、重感知、认知推理等AI技术领域,助推更多前沿技术在自动驾驶领域落地。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    整机VMC-1000,目前产品已经稳定运行了超过2年,并且已经应用在多个工业视觉检测场景中,深受客户认可。 高精度机器视觉检测系统主要应用场景: 1、手机BG点胶3D引导&复检 手机......
    业领域,机器视觉也被广泛应用到制造业各个环节,协助进行检测、测量、识别、定位等工作。典型应用包括新能源动力电池和液晶屏的表面缺陷检测、半导体识别与测量、食品色选、零件的定位与引导等。本文将系统介绍机器视觉......
    智造 光伏组件视觉检测系统领先者 面对光伏行业技术革新需求,维视智造依托20年的技术积累和对光伏生产工艺的深刻理解,基于自主研发的通用智能视觉开发平台VisionBank AI的强......
    软件平台。目前我们已只需要使用视觉图像来检测或定位的各种场景,该产品均可适用。随着视觉技术的普及,越来越多行业开始青睐视觉识别与定位,面对未知的行业应用,需要在未来的时间里逐步完善。GOI通用视觉检测......
    节卡机器人基于机器视觉的车灯接插件视觉检测系统;汽车车灯是汽车照明的关键部件,通常由灯泡、电机、传感器等多种不同的电气部件组成,这些部件需要通过线束和连接器等接插件进行连接。如果......
    节卡机器人基于机器视觉的车灯接插件视觉检测系统;案例背景本文引用地址:车灯是照明的关键部件,通常由灯泡、电机、传感器等多种不同的电气部件组成,这些部件需要通过线束和连接器等接插件进行连接。如果......
    浅谈机器视觉检测技术和机器视觉定位技术;机器视觉检测与机器视觉定位是两种重要的机器视觉应用技术,主要区别在于检测对象和应用领域不同。机器视觉检测技术可以用于检测产品的外观、尺寸、密封性、移动......
    影响机器视觉检测设备精度有哪些?要如何提高机器视觉检测精度?;机器视觉是一项综合技术,包括图像处理、机械工程技术、控制、电光源照明、光学成像、传感器、模拟与数字视频技术、计算机软硬件技术(图像......
    。这时候,机器视觉更多地偏向或者专指以图像传感器为采集软件,辅助以光源,PLC甚至机器人等外部设备,以实现特定的检测或定位等特定目的。如果你从事的是机器视觉......
    果可能危及生命。测量工具也可用于确定药瓶或疫苗注射器的灌装液位高度,或者验证是否存在安全密封。 5、机器人引导除了检测物体外,机器视觉还可通过机器人引导对其进行定位。这个过程包括定位和验证机器人引导......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>