专注双目立体视觉,打造完整的感知方案

发布时间:2023-01-13  

双目立体视觉作为机器视觉的一个重要技术分支,近年来得到越来越广泛的应用。元橡科技成立于2017年,凭借在立体视觉领域多年的资源积累和技术沉淀,目前已成功研发了双目立体视觉芯片、双目摄像头模组、双目标准化相机等产品,在车载领域形成了完善的系统解决方案,并逐步向机器人、工业检测等领域扩展。近日,中国机器视觉网特别采访了元橡科技(北京)有限公司CEO鲁耀杰,一起来看看元橡科技双目立体视觉如何为行车安全保驾护航?双目立体视觉的未来又将走向何方?

CMVU:C


鲁耀杰:L


C:鲁总您好,很高兴采访到您,元橡科技作为国内3D视觉领域的佼佼者,您能分享一下您的创业故事吗?

元橡科技(北京)有限公司CEO鲁耀杰


L:大家好,我是鲁耀杰,来自元橡科技,很高兴接受中国机器视觉网的邀请,元橡科技成立于2017年,成立至今始终专注于双目立体视觉技术的开发应用。我们整个研发团队在立体视觉相关领域拥有多年的经验积累,我们非常希望能搭建一个开放的平台,让有志于从事立体视觉的人,可以在这个平台上发光发热。


C:在车载领域,双目立体视觉具有高密度、低延时、算力小、实时性输出等优势,但还存在对算力要求较高、立体相机校准难、成本高等限制,元橡科技是如何将以上问题进行优化的?


L:立体视觉本身的原理导致对算力要求比较高,刚开始我们就选择了高效率的FPGA芯片,但是对于大规模FPGA可选的芯片厂商比较少,对于车厂来说也会考虑供应链安全。所以我们决定开始做自己的专用芯片。2018年我们开始进行立体视觉专用芯片的研发,元橡的定位是从芯片到解决方案,2021年我们的立体视觉芯片通过车规级认证并成功应用于车载端。


元橡立体视觉专用芯片,支持720P@60FPS,功耗和效率上有很大提升。在专用芯片的基础上,元橡还有自研双目标准化相机产品,灵活适配客户产品,直接输出各种图像+深度信息。独立的双目相机适用于各种不同的业务领域,能够快速满足客户需求,元橡也针对多种场景定制立体视觉解决方案来解决行业痛点,满足各类需求,也降低了立体视觉传感器的使用门槛。


C:据悉,元橡科技和保隆科技联手与国内一线乘用车企达成合作关系,共同赢得该车企主动悬架路面预瞄系统的前装定点。请您介绍一下“主动悬架路面预瞄系统”,元橡科技在该项目中的技术优势体现在哪些方面?

L:“主动悬架路面预瞄系统”是通过摄像头提前扫描测量路面的起伏程度和障碍物高程,最高测量精度需要达到厘米级,提前拿到这些信息之后就可以动态调节悬架,保证车辆通过该路面的平顺性,减少崎岖道路给驾驶员和驾驶舱内乘客带来的颠簸感,以提高驾乘的平稳性和舒适性。要实现“主动悬架路面预瞄系统”功能,视觉系统必须具备以下几种能力:


1、获取道路色彩信息的同时需要通过深度信息区分路面的颠簸程度,如井盖、路面施工钢板或减速带等路面障碍物的相对于路面的高度差;


2、能够识别路面的减速带、井盖或者凹坑,做到精准测量;


3、整个系统的实时性需满足底盘的响应时间和调节需求;


4、系统能够识别道路类型,然后与整个底盘以及空气悬架等实现智能联动。

双目相机完全具备以上功能,也因此是车辆实现“主动悬架路面预瞄系统”的必备感知传感器。另外,双目相机路面预瞄系统可拓展功能包括: LDW、FCW、HMW、AEB、ACC、LCC、TJA等ADAS功能以及扩展行泊一体功能;限高、限宽等可通过区域检测功能;高精度地图绘制采集功能等。


2022年元橡科技已经获得国内两家头部乘用车企定点,并且也是国内首家获得“主动悬架路面预瞄系统”的企业。


C:车载视觉与工业视觉的差异主要表现在哪些地方?元橡科技视觉方案除了商用车领域还用在哪些地方?


L:车载视觉与工业视觉其实在使用原理上大致相同,都是利用机器视觉技术实现检测、测量、识别、定位等功能。差异性主要表现在技术的应用领域不同,根据不同的需求采用不同的方案,而本质是一样的,都要求看得清、测得准、辨得真。车载领域主要应用于提升车辆安全性能的ADAS功能和舒适性能的“主动路面预瞄”功能,而工业视觉是在工业生产制造过程中应用机器视觉技术来完成检测、定位、测量,识别任务,达到质量检测、自动化控制的目的,主要阵地在生产制造领域。

元橡科技双目立体相机目前主要应用在车载、机器人、工业检测这三个领域,根据使用场景的不断成熟和细化,视觉感知传感器不断发展,元橡将以更高的分辨率、更丰富的感知信息密度、更远的探测距离和更精准微小的探测能力为主要方向。


C:2022年,公司自研的双目立体视觉解决方案累计出货量是多少?与去年相比有哪些突破?


L:2022年由于疫情和整体经济环境的影响,元橡的绝对出货量并不高,甚至比2021年都有下滑。但是2022年元橡的产品应用领域有了很多突破,比如2021年元橡的主要量产产品应用在商用车,2022年元橡在继续保持商用车的市场应用的基础上实现了往乘用车领域的拓展。同时2022年元橡的立体视觉相机也在低速机器人领域有了突破,比如无人清扫车、无人巡逻车上的感知应用等。


C:您对双目立体视觉的未来怎么看?公司下一步要挑战的难点是什么?接下来将会给大家带来哪些惊喜?


L:我们生活在三维环境里,传感器的未来一定是三维的。立体感知,一定是感知领域的重点,但是相关的公司不多,这个赛道一定是很好的方向。对于元橡科技来说,我们会不断的从实用性角度来做产品的迭代及新产品的规划,新产品在性能上将测得更远、测得更准;在业务发展规划上,元橡科技将不局限于仅提供传感器,而是将更注重传感器的协同整合,输出完整的感知方案,为后续更高等级的自动驾驶及机器人等行业服务。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    以形成冗余。        2.3 产业链上下游情况 双目立体视觉与单目视觉的产业链情况大致相同,主要包括上游是零部件供应商(光学镜头、图像传感器、壳体、连接器等)、中游是系统集成商、下游是主机厂。产业链的不同之处主要在于软件算法......
    镜头、图像传感器、壳体、连接器等)、中游是系统集成商、下游是主机厂。产业链的不同之处主要在于软件算法。单目视觉的软件算法主要是深度学习,而双目立体视觉的软件算法则更为复杂,还包括双目对齐、图像矫正、立体......
    自动驾驶研发系统Berta Benz也是,而且和雷达系统后融合,其中双目匹配的障碍物检测算法STIxel很出名。以前Bosch和ConTI这些Tier-1公司也研制过双目视觉解决方案,但没有在市场上产生影响力,据说......
    驾乘体验,增进汽车行驶过程中的操作平稳性和乘坐舒适性。对于非标障碍物检测,孙钊指出,双目视觉传感器有效弥补了数据驱动的 AI 算法在泛化性能上的短板,深度学习模型与视差点云技术的结合,极大扩张了视觉......
    驾乘体验,增进汽车行驶过程中的操作平稳性和乘坐舒适性。 对于非标障碍物检测,孙钊指出,双目视觉传感器有效弥补了数据驱动的 AI 算法在泛化性能上的短板,深度学习模型与视差点云技术的结合,极大扩张了视觉......
    系统,通过加入定制的光学偏振片来取消整体遮光罩,并通过更优异的自标定算法取消了刚性连接杆。这使得传感器的安装更加简单,两颗摄像头的距离也可以在180毫米到400毫米间灵活配置。取消刚性连接杆是双目视觉......
    情况下是指从不同的视点获取两幅或多幅图像重构目标物体3D结构或深度信息。目前立体视觉3D成像方法可以分为单目视觉双目视觉、多(目)视觉和光场3D成像等。 单目视觉深度感知线索通常有:透视、焦距差异、多视觉成像、覆盖、阴影、运动......
    基于AI算法与视觉传感器的软硬协同优化,构建以视觉3D理解为核心的智能驾驶系统「双目立体视觉智能驾驶系统」。 一、为什么用“双目”研发智驾系统? 视觉路线在信息涵载方面具有显著优势,视觉......
    文“Towards Robust Visual Odometry with a Multi-Camera System”中,作者设计了一种基于光度一致性的多目视觉SLAM系统,在配备有前、后、左、右四组双目......
    系列的一员,新型SmartRunner Explorer 3D传感器除了提供2D图像外,还提供高精度的3D点云图像,采用双目视觉技术或飞行时间(ToF)技术。倍加福帮助用户选择合适的3D视觉传感器,并根......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>