ARHUD技术难点分析 | 真正的ARHUD虚拟融合是关键

发布时间:2023-02-21  

在刚刚结束的2023年CES上,宝马发布了i Vision Dee概念车配备了大尺寸HUD,与此同时还在前风挡和其他玻璃上集成了显示系统。宝马集团CEO Oliver Zipse表示,超大尺寸的屏幕将会从汽车内消失,因为它会分散驾驶员的注意力。按照计划,这款概念车的一些设计,包括HUD部分,未来都将在宝马的下一代Neue Klasse平台上覆盖多款新车型,陆续会在2025年投产,包括下一代3系、X3等等。由此可以看出大尺寸大画幅显示的HUD将成为未来智能座舱的重要组成部分。


目前市场上大规模搭载的HUD仍然以较小画幅、2D显示的W-HUD为主,之前奔驰S级搭载的HUD让大家感受到ARHUD更多的可能性,但追其根本也只是W-HUD的小幅度升级。那到底什么是真正的ARHUD?ARHUD又应该给用户带来怎样的体验?


ARHUD技术难点分析 | 真正的ARHUD虚拟融合是关键


ARHUD顾名思义是将AR技术搭载在HUD上,AR技术翻译过来为增强现实技术,其根本在于展现真实世界信息的同时,将虚拟信息实时显示出来,两种信息相互补充、叠加。AR系统具有三个突出的特点:真实世界和虚拟世界的信息集成、具有实时交互性、在三维尺度空间中增添定位虚拟物体。结合HUD抬头显示将信息投射在车辆前挡风玻璃的天然特性,因此将AR技术应用在车载HUD场景中,则应该实现根据真实道路场景进行标定,实时生成贴合道路的导航、并融合仪表盘信息等更多驾驶关键信息、POI等信息的虚拟融合场景,从而提升智能座舱的体验感,是颠覆未来智能汽车下一代人机交互的关键环节。


ARHUD技术难点分析 | 真正的ARHUD虚拟融合是关键


从技术层面上来说,实现虚拟融合有以下几点:


从感知层及数据处理层面来讲, ARHUD目前仍普遍作为一个独立模块存在,其主要从智能驾驶域和智能座舱域获取环境感知信息及地图导航信息。具体包括:


Ø   地图导航信息:路线指引曲线方程、前方路面与车辆相对倾角、目的地信息及相对车辆坐标、导航箭头形式信息及机动点信息、导航剩余距离信息、导航剩余时间信息等。


Ø   环境感知信息:车道线类型、车道线曲线方程及颜色、前车位置及车速、设定车速、行人及障碍物信息、信号灯状态信息、限速信息等。


因此HUD的体验升级需要相关V2X、ADAS数据及更多高精地图数据进行融合,随着智能座舱系统进一步升级,AR系统可获取更多来自智能驾驶域信息,这对AR系统的算力提出了更高的要求的同时,也进一步促进ARHUD成为车载人机交互的第一平台。目前汽车行业正处于燃油车到纯电动车市场的切换周期,车型平台化、规模化也处于早期阶段,随着智能座舱市场快速增长,ARHUD也将迎来大幅度市场增量预期。


在图像处理层面,HUD的图像畸变有两种:其一是由于风挡本身是一个不规则曲面,光线经过反射进入到人眼中很容易变形,就像哈哈镜成像那样。第二种畸变则是HUD光学结构中的反射镜不可能100%的标准,在AR HUD较传统WHUD数倍的放大倍数之下,轻微的畸变都不可忽视。因此在畸变矫正方面,Raythink通过自研软件畸变矫正算法,消除因为风挡玻璃面型,安装误差导致的图像畸变。


ARHUD技术难点分析 | 真正的ARHUD虚拟融合是关键


此外开车的过程中,人眼将会跟随车辆根据路面信息产生随车抖动,如果画面处于完全静止状态,不跟随人眼距离进行调节,则会容易产生眩晕感,影响ARHUD效果体验,因此Raythink在AR软件算法中集成DMS系统,可内置眼神追踪摄像头,保障画面跟着眼睛动,保持动态中的相对静止,提升ARHUD体验感。


ARHUD技术难点分析 | 真正的ARHUD虚拟融合是关键


基于以上技术难点,Raythink凭借20多年的汽车软件开发经验,积累了稳定、成熟、高效的算法,并经过多年的深度测试,实现AR Visualization。其自主研发的AR软件算法集成AR Generator®融合车辆内外部感知数据,进行坐标空间转换,实时重建虚拟3D空间,实现虚拟AR内容与现实世界的映射。以轻量化算法整合各种数据来源,包括车机仪表、ADAS以及移动设备等信息。即时融合,保证画面低延迟的实时输出。主要功能:基于人工智能进行的AR显示调整、AR导航、车道警告系统(LDW)、行人检测(PCW)以及前车防撞(FCW)等功能。多种HMI画面及场景,支持多种皮肤切换,带来更酷炫的驾驶体验,如赛道模式、可爱模式等等,未来随着智能驾驶的发展,可支持接入更多丰富的应用,如人脸识别停车付费等等。


同时Raythink 的AR渲染引擎,支持多种软硬件平台。通过自研的模拟软件,基于光线追踪的实时渲染技术,模拟AR HUD成像特性和真实环境光照,测试系统能够实现在不同光照和天气条件下的HUD图像可视性分析,无需借助真实汽车或台架,仅需一台计算机即可轻松模拟AR HUD成像。可以快速满足客户不同的AR定制需求。


目前Raythink关于汽车行业软件开发过程和升软件能力的标准化流程管理审核认证ASPICE认证正在准备中,预计将于2023年完成。凭借锐思华创国际化的产业布局,印度班加罗尔算法和软件开发中心及长沙嵌入式软件开发中心两地协同的软件团队,未来Raythink将通过平台化的AR软件,构建多场景AR产品开发落地生态圈。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    实道路路口结合的体验更好。 软件体验 - AR融合 姿态补偿层面融合了独家AR Kernel®️整车运动姿态捕捉及延时补偿算法,AR显示相对真实世界更稳定贴合,实现车抖而HUD画面不抖,用户体验更好。 应用场景: 适用L2......
    将为驾驶员提供全新驾驶体验,引领下一代智能汽车融合交互变革。软件的持续升级是ARHUD提升驾驶体验的关键因素驾驶员在驾驶过程中最大的需求就是对路况信息的掌控,AR-HUD整合摄像头、雷达、高精......
    -HUD整合来自摄像头、雷达、地图等多端信息,通过渲染,低延迟、无变形、高精准地将图像呈现在驾驶员前方。其产品特性要求AR-HUD软件能够在任何车况下保障图像渲染的稳定性,对软件的防抖、畸变矫正、空间......
    结构中的反射镜不可能100%的标准,在AR HUD较传统WHUD数倍的放大倍数之下,轻微的畸变都不可忽视。因此在畸变矫正方面,Raythink通过自研软件畸变矫正算法,消除因为风挡玻璃面型,安装......
    AR软件和可视化测试系统,加速Real AR落地」 在AR软件方面,顾惠良补充道,Raythink自研的AR-HUD软件捆绑成AR Generator®SDK,由AR渲染引擎、AR投影矫正模块、支持......
    和系统,如地图和 iMessages。据称,这些应用都针对 AR / VR 进行了设计优化,而且苹果还在为这款头显开发一个软件开发包,以便第三方开发者为它提供第三方应用程序。 彭博......
    现空间、虚像距离扩大,这必然会对配套的软件平台、算法提出了更高的要求。 AR-HUD和W-HUD有什么差异?它们在硬件上是很类似的,都是基于成像PGU,走光学路线,但支撑AR-HUD的是更好的AR算法......
    更大的视场角和长的虚像距离,以获得更好的用户体验;此外,需要光学设计和PGU的专业知识,确保稳定的图像,清晰明亮、无重影、不变形、无畸变;还需要减少AR HUD的体积以支持AR HUD的广泛采用;最后,需要一个强大的软件......
    ,需要一个强大的软件平台,对各种输入执行实时的数据融合,处理该信息。结合AR的算法正确渲染AR图形。 接下来将详细的介绍这三项关键技术: 第一,为什么要有一个强大的视场角呢?因为......
    微美全息用ChatGPT技术实现全息数字孪生;微美全息软件有限公司(纳斯达克: WIMI)(以下简称为"微美全息"或"公司"),一家全球领先的全息AR应用技术提供商,宣布用ChatGPT技术......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>