基于TMS320DM6437数字媒体处理器实现高级驾驶员辅助系统的设计

发布时间:2023-05-31  

汽车已成为现代社会不可缺少的一部分,为全球货物及人员运输提供了一种低成本的交通方式。不幸的是,每天都会因车辆驾驶而出现大量的事故与伤亡事件。据世界卫生组织统计,1998年全球交通事故死亡人数高达120万;1990年交通事故是全球导致人类死亡的第九大原因,预计到2020年它将进一步上升为第三大致死原因。


鉴于上述原因,汽车原始设备制造商(OEM)及其供应商合作伙伴,以及全球政府机构一直在努力开发并推广主动安全与高级驾驶员辅助系统(ADAS),其设计旨在降低事故发生率并减少碰撞的严重程度。汽车产业界分析师认为,到2010年,ADAS将成为顶级新技术,其不仅可以帮助驾驶员提前意识到潜在的危险,而且还可通过车道偏离警告系统(LDWS)、睡意检测及夜视系统等技术潜在地延长驾驶员的反应时间。


随着消费者对ADAS的深入了解,得知其能够提供更高的安全性,预计他们将更容易接受该技术,从而推动市场对这一需求的增长。ADAS已应用于豪华轿车,随着技术的成熟,其将逐渐进入大众市场,应用到普通车辆中,同时产量的提高将大幅降低产品成本。就汽车OEM厂商而言,鉴于目前被动安全系统快速成为汽车的标准技术,主动安全与ADAS技术还将有助于实现与众不同的特色化产品。


ADAS概览

ADAS的设计方案并不是要控制车辆,而是向驾驶员提供车辆周围环境及车辆运行状况等相关信息,提醒驾驶员注意潜在危险,从而提高行车安全性。


ADAS应用采用多种传感器来收集有关车辆及车辆周围环境的物理数据。收集相关数据后,ADAS系统将采用目标检测、识别与跟踪等处理技术来评估危险性。我们不妨举两个应用实例来说明,一是车道偏离警告系统(检测到车道无意偏离,立即提醒驾驶员),二是交通标志识别。启用车道偏离警告系统时,系统会根据车辆位置检测并跟踪车道情况,在车辆越线进入相邻车道时通知驾驶员。就交通标志识别而言,系统能识别交通标志并告诉驾驶员当前最高限速,或通知驾驶员目前行驶的具体区段。


不同系统通常要求采用不同类型的传感器来收集环境信息。我们不妨举几个实例,如车道偏离警告系统采用CMOS摄像头传感器,夜视系统采用红外传感器,自适应巡航控制系统(ACC)通常采用雷达技术,而停车辅助系统则采用超声波技术。尽管不同应用的技术细节各有差异,但技术处理过程通常都包括数据采集、预处理及后处理等三个阶段。预处理阶段执行全图像处理功能,数据工作强度较大,结构也较为常规化,具体包括图像的变换、稳定性、特征信号增强、噪声降低、颜色转换、运动分析等。后处理阶段则进行特征跟踪、场景解释、系统控制及决策制定等工作(见图1)。用于收集环境信息的传感器,不管其类型如何,均可获得生成基本图像的数据集。

基于TMS320DM6437数字媒体处理器实现高级驾驶员辅助系统的设计

图1:主动安全系统的整个处理过程

识别、跟踪并评估驾驶相关的对象是一项复杂的工作。驾驶风格与条件会影响传感器收集的原始数据的质量,并会使识别和跟踪对象所需的重要细节变模糊。在不同的天气条件(如较强的阳光、下雨、起雾及下雪等)下,驾驶员驾驶车辆这一过程的动态化程度极高,而且操作具不可预见性。当面对更为复杂的情况,必须对所有数据进行实时处理,且处理时延不得超过30ms。警告延迟半秒钟,就很可能导致事故发生,而不能让驾驶员及时对警告做出反应。


从数据采集到采取行动的每一步都要求强大的信号处理能力,因此,及时、准确地执行主动安全与ADAS系统必须要求高性能产品提供支持。专为汽车安全应用设计并优化的数字信号处理器(DSP),如德州仪器(TI)推出的TMS320DM643x达芬奇处理器就能提供所需的性能,从而使OEM厂商能够向市场推出主动安全与ADAS技术。


动态灵活性

除了高性能之外,ADAS应用还要求灵活的架构来满足多种功能要求。例如,各国的交通标志从语言、文字字体、形状到颜色等各不相同。我们必须提供足够的灵活性,这样才能在不同的产品线间尽可能地重复使用该技术,并根据新兴市场的要求以正常速度低成本地推进技术创新。软件创新是效率最高的方式。达芬奇处理器采用软件可编程的架构,因此能为开发人员提供足够的灵活性,以便支持不断变化的算法。


我们不妨设想一下在不考虑驾驶条件(如较强的阳光等)这一因素情况下的预处理算法。有些汽车供应商采用一种算法,有些则在白天采用一种算法,在夜间驾驶又采用另一种算法。实际上,针对多种不同的驾驶条件,我们将需要各种不同的预处理与后处理算法。系统还必须具备快速适应能力,比方说车辆进入遂道时,就会瞬间从白天驾驶模式切换到夜间驾驶模式。


请注意,车辆的不同传感器应执行不同的功能(见图2)。如侧向传感器进行盲点检测;前向传感器负责车辆、车道、交通标志及行人识别工作;车内传感器则检测车内是否有人,驾驶员是否出现睡意及想做些什么等。


图2:车辆安装的多种传感器执行各种具体任务

此外,不同传感器应处理不同类型的数据。一些交通标志识别算法的执行主要依靠标志颜色进行,在此情况下,正向传感器应支持宽泛的颜色范围。另一方面,灰度传感器对亮度的变化更敏感,其空间分辨率几乎是色彩传感器的两倍。大多数ADAS功能的实现主要依赖于传感器的敏感性,因此灰度摄像头更合适。我们还要注意到,针对ADAS应用的图像传感器通常具有较高的动态范围,一般每像素多于8位,这也十分重要。


解决技术难题最有效的方法就是在单个DSP上执行多种算法。举例来说,正向图像传感器能同时提供车道偏离警告与交通标志识别所需的视频信息。从理想的角度说,单个DSP能在所有驾驶条件下执行预处理与多种识别任务,如车道偏离警报与交通标志识别等,这有助于精简芯片数量,从而减少故障点,提高系统可靠性,并降低系统成本,这些对汽车应用的发展都是至关重要的。


为了提高ADAS的稳健性,我们还要在车辆内部所有主动安全子系统间进行协调。举例来说,驾驶员的关注方向及关注点会直接影响到交通标志警告的有效性。比方说,驾驶员正常驾驶本应该可以注意到前方的标志并减速,但系统却过早发出警告,这样做不但不利于驾驶,反而会给驾驶员制造麻烦。因此,在发出警告信号前,我们要从交通标志识别系统及车内驾驶员监控系统同时收集信息。如果驾驶员监控系统反映驾驶员正面向道路方向,那么我们不必马上发出前方有停车标志的警告。


稳健性能较高的ADAS系统甚至还能评估复杂的驾、驶环境。举例来说,如果汽车快速靠近停止或减速的车辆,那么很可能需要紧急变线。在这种情况下,我们应当暂停车道离线警告,避免驾驶员在变线时分神。当然,如果盲点监控系统检测到汽车旁边还有别的车辆,那么系统就应发出警告。


系统级芯片架构提高设计效率

目前的系统级芯片(SoC)架构在单芯片上集成了整个视频/图像处理系统所需的全部外设,从而进一步提高了设计效率。由于支持多种外设,目前高度集成的器件还能方便地连接至车辆系统的其他部分。举例来说,SoC可为停车辅助后视仪等应用提供直接视频输出,也可通过CAN、LIN或FlexRay等适当总线直接连接至车辆的主控系统。


SoC架构在无需增加ASIC成本的基础上就能提供专用功能。经过适当处理,SoC能保持可编程软件架构的灵活性,而不像ASIC那样固定。例如,TI的达芬奇处理器采用了功能强大的视频前端,从而使主CPU从关键而繁重的预处理任务中解脱出来(见图3)。具体而言,视频前端提供了缩放功能块,可根据适当分辨率对图像进行重采样(放大或缩小图像),同时又不会占用DSP周期。缩放图像是必要的,因为对象在视频帧中的尺寸会随汽车接近对象而变化。

图3:TMS320DM6437数字媒体处理器的结构框图

达芬奇视频前端还提供柱状图,以显示不同视频帧的像素荧光强度分布情况。从像素荧光强度分布图,我们可以看出捕获到的图像质量。举例来说,如果图像太暗,那么DSP可调节对比度,从而提高处理的精确度。前端还能在不占用主CPU的情况下完成色域转换工作。这些集成模块结合使用可以显著减轻CPU的负载,从而使开发人员能够在单个DSP上集成更多ADAS增值功能。


SoC架构的设计应确保数据传输的高效性。与任何视频应用一样,数据传输得越频繁,处理时延就越长。为了提高系统性能并最大化一级存储器资源的使用,开发人员通常应将处理工作限于其感兴趣的特定领域,这样才能确保待处理的图像块明显小于整个图像在处理与评估时的尺寸。比如在车道识别与跟踪过程中,由于路面上空不含相应数据,因此帧中这一部分可以删除。


为了支持这种类型的数据传输,SoC需要多通道、多线程的直接存储器存取(DMA)引擎。DMA控制器应支持多种传输几何与传输序列。前代DMA控制器的传输技术(如前代TI芯片上的EDMA2控制器)仅限于二维功能,且数据来源与目的地共享索引参数。与此不同的是,达芬奇处理器上的EDMA3控制器支持独立的来源与目的地索引以及三维传输。


除视频输入及处理功能,停车辅助等应用还要求具备视频输出功能。即便没有针对生产进行视频输出设计,视频输出功能在研发与系统调试阶段也相当有用。为了支持视频输出,达芬奇处理器采用了视频处理后端技术,其包括屏幕视控系统(OSD)与视频编码器(VENC)。OSD引擎能处理两个独立的视频窗口与两个独立的OSD窗口。VENC可提供4个模拟视频输出,就多种格式而言,最高可支持24位的数字输出。


简化设计

ADAS应用是发展快速的尖端技术,开发人员应采用能够简化开发工作并有助于加速原型设计的工具,所以ADAS算法开发过程借助C或Simulink、MATLAB等建模软件可以达到最佳效果。当然,运行良好的系统所需要的不仅仅是算法。因此,拥有实时内核与外设驱动器等现成可用的软件组件是至关重要的。当然,现成可用的专用开发工具及算法库也同等重要。这些组件不仅能够缩短数月的ADAS开发时间,而且还能够得到达芬奇处理器的支持。


总之,供应商要想其产品适用于汽车应用的话,就必须通过业界集成电路质量标准AEC-Q100认证。但要想通过该认证是非常困难的,除非相关解决方案的设计从一开始就考虑到认证的要求。供应商可以选择DM643x达芬奇处理器等设计本身符合AEC-Q100标准的组件,从而能够确保他们成功地满足产品汽车质量认证要求。


目前,工程师与业界领导者都应通过主动安全与ADAS技术进一步降低交通事故死亡率。凭借基于DSP灵活架构的高性能SoC、专用开发工具与软件库以及创新算法,汽车供应商与OEM厂商能够为市场带来稳定、可靠的ADAS应用。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

相关文章

    车等车辆可以优先通行等效益。不过具体而言,安装了AI智能灯号控制系统的路口会与现在有何不同?许凯翔解释,在有此类适应性交通信号灯的路口上,信号灯的相机会先将影像传送到灯设备内的边缘计算服务器中,由边缘计算服务器实时判断当下状况控制信号......
    管控问题。该公司具备相控阵毫米波交通监视雷达全栈研发及生产能力,不仅自研了边缘计算单元、交通信号控制机等交通自动调优与信号控制设备,也开发了城市交通诊断平台、智慧高速感知平台、智能红绿灯实时控制等系统......
    流量优化,智能识别、提醒货车违法载人、不礼让行人、车内违章等交通违法行为,并为驾驶员提供风险行为实时危险警告,保障交通秩序,守护一路平安。 如何提供更优质的出行体验,智能化给出了一个答案。智能交通信号控制系统深度融合视频和毫米波雷达感知技术实时感知交通......
    海信拟出资10亿美元收购西门子交通系统部门;综合澎湃新闻、第一财经报道,海信拟出资近10亿美元收购西门子交通信号灯和其他道路交通控制系统业务。 此前就有报道称,西门子计划在2021财年剥离并在今年夏季开始出售智能交通......
    无线手持智能交通灯控制系统;城市道路交错分布,车辆穿梳,行人熙攘。那么靠什么来实现这井然秩序呢?靠的是交通信号灯的自动指挥系统交通灯是城市交通的重要指挥系统交通信号灯作为管制交通流量、提高......
    基于AT89C52的多功能交通灯控制系统设计与仿真实现;本文介绍的交通灯控制系统与目前国内一般的交通灯控制系统相比较,具有一定的优势,具体体现在以下几方面: 1)控制参数可以灵活调整。目前,城市交叉口大多采用定周期控制......
    基于非线性宏观方法的交通信号预测控制分析;本文引用地址:0 引言 在目前的交通系统中,关于模型预测的研究已经逐渐增多。作为管理与控制城市路网交通的基础模型,信号控制策略控制......
    对人力的投入。 1 系统总体方案设计 针对上述背景,设计了基于图像处理的智能交通信号灯控制系统,该系统在OpenCV 平台的基础上,利用Python语言编写,并以树莓派为主控。在使......
    终可替代人操作的新一代汽车。 - 智能车路协同IVIC(Intelligent Vehicle Infrastructure Cooperative)是智能交通系统ITS的最新发展方向。采用无线通信和新一代互联网技术,将交通系统......
    传感器和执行器的设备。PLC可广泛应用于各种自动化控制领域,如机器人、生产工艺控制交通信号控制、楼宇自动化控制等。   PLC的核心部件是处理器(CPU),控制程序和I/O模块。其工作原理是将输入信号(例如传感器和其他控制......

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>