纯视觉、真无图、多模态,Nullmax发布新一代自动驾驶技术“NI”

发布时间:2024-07-17  

智能驾驶领域正经历着前所未有的竞争和创新。各大车企、初创公司乃至科研机构都在这一领域内投入巨大资源,力求在技术突破和市场应用上占据先机。


7月16日,Nullmax在上海举办“AI无止境,智变新开端”2024技术发布会,正式推出新一代自动驾驶技术Nullmax Intelligence(简称NI)。该技术着重于打造全场景的自动驾驶应用,号称以纯视觉、真无图、多模态的技术特点,助力汽车智能进化。


纯视觉、真无图、多模态,Nullmax发布新一代自动驾驶技术“NI”


图源:Nullmax


端到端,Nullmax的解法


自特斯拉提出引入“端到端”大模型发展自动驾驶后,在业内迅速引起震荡。随后小鹏、蔚来、理想等车企以及华为、地平线等供应商公司接连宣布跟进部署基于端到端的智能驾驶系统。今年,端到端已成为了智驾领域最火热的概念。


主流的自动驾驶系统将感知、规划与控制各个模块分离,每个模块专注于处理特定的任务。但模块间信息传递可能导致处理延迟,影响系统的实时响应能力。不同模块可能采用不同的技术栈,也增加了技术人员的培训成本和技术更新的难度。


端到端模型则将三大模块整合在一起,消除了模块间的界限,简化了系统架构,提高了运行效率。整合后的模型能够更快地处理数据,提高系统的响应速度。同时也减少了对激光雷达和高精地图的依赖,降低了成本。


不过,尽管不少企业在往端到端方向发力,但也有不同的技术方案。目前,已有不少玩家宣布量产端到端智驾方案,但用户难以感知具体的技术水平,缺乏可解释性的弊端也依然是围绕在各个端到端玩家头上的阴云,并且需要海量的高质量数据提升模型能力。


此次Nullmax发布会,对其端到端方案进行细致的拆解。


具体来看,Nullmax Intelligence包含多模态模型和安全类脑两大板块。


该方案在视觉基础上,增加了对声音、文本、手势等信息的输入支持,通过多模态的端到端模型进行任务的推理,并构建了基于类脑神经网络的安全类脑,由系统整体输出可视化结果、场景描述和驾驶行为。


纯视觉、真无图、多模态,Nullmax发布新一代自动驾驶技术“NI”


图源:Nullmax


在技术层面,Nullmax Intelligence整合了Nullmax在静态感知、动态感知、时序融合方面的多项研究。同时将岩芯数智的非Attention机制通用大模型Yan1.2在车端进行部署,并与岩思类脑研究院合作构建类脑神经网络。


就实际应用而言,NI的主要特点在于支持纯视觉、真无图、多模态的全场景自动驾驶应用。


纯视觉、真无图、多模态


近年来,汽车智能化程度快速提升,智驾应用场景逐步扩大,高阶功能向城市加速渗透。但是由于重规则、泛化差、成本高、开不好等问题,智能驾驶的普及受到限制,范围、规模有待提升。


高阶智驾功能的成本降低是推动其大规模应用的关键因素,车企和技术供应商正努力通过技术创新和优化,在保证安全性的同时,进一步降低智驾系统的整体成本。行业争论的焦点所在主要集中在去激光雷达、去高精地图等方面。


目前,以激光雷达为基础的多传感器融合感知方案是多数汽车品牌采用的策略,但也能看到特斯拉和极越等厂商坚持纯视觉方案,依赖高清摄像头和先进的计算机视觉算法,实现智驾功能。


在高精地图方面,其能提供详细道路信息,增强自动驾驶的安全性,但成本高昂且更新困难。部分车企开始尝试去高精地图,采用轻地图或不依赖高精地图的自动驾驶方案。无法否认,但修改多数宣称去高精地图的车企并未完全与高精地图割裂,而是采用“轻地图”方案作为过渡。


据介绍,在不依赖激光雷达、双目相机的情况下,Nullmax可以通过纯视觉进行精准障碍物检测和三维重建,并通过实时生成局部地图结合基础导航,实现不依赖高精地图、轻地图、低精地图、众包地图的真无图应用。


这一系列的特点使得Nullmax的方案应用于不同级别的智驾体验,并且号称能在小于100T的稀疏算力上,实现全场景的领航辅助驾驶。


Nullmax创始人兼CEO&CTO徐雷徐雷指出,Nullmax研发纯视觉方案,是希望将来即使是低价位的车型,也能够拥有城市智驾的能力。“我们希望这套纯视觉系统能够具备这种能力,视觉是must to have,但激光是nice to have。所以,我觉得增加算力也好,增加传感器也好,都是为了把车开的更好。我们的方案靠视觉就能开,但我们并没有排斥它们。”


此外,为支持Nullmax Intelligence模型壮大和应用拓展,Nullmax还构建了数据平台和算法平台。在真实数据基础上,Nullmax通过AIGC方式生成虚拟数据,加速模型开发与迭代,尤其是稀缺的高价值数据。目前,Nullmax已经实现了生成元素、图片及视频。


纯视觉、真无图、多模态,Nullmax发布新一代自动驾驶技术“NI”


图源:Nullmax


通过对多模态输入token化、多模态模型推理和自动驾驶功能集成这三个环节进行抽象,以及自研中间件MaxOS的平台调度,Nullmax的算法平台可以支持多种车型,适配不同数量传感器,且易于部署。


除了应用于自动驾驶汽车,这些算法能力同样可以复用至机器人上,比如视觉导航、学习人类行为、理解并与物理世界进行交互。


值得一提的是,目前,不少车企正在加速布局人形机器人领域。国外以特斯拉为主,国内,比亚迪、小鹏、小米和奇瑞等车企也正也在加紧布局。


徐雷表示:“我们希望能打造一个AI的大脑,可以用到不同形态的物理的机器人。我们认为无论是Nullmax intelligence还是基石架构,都是是完全为具身智能服务的。”


基于NI,Nullmax计划2025年实现全场景智驾应用的落地,并将其AI能力拓展到载人、运货和机器人等领域。


自2016年成立以来,Nullmax坚持以渐进式路线打造无人驾驶。在此过程中,Nullmax先后推出和落地了包括行泊一体在内的高中低配置智驾方案。


徐雷透露,Nullmax未来的规划主要包含两个方面:一是扩展应用范围,目标将解决方案应用于更广泛的车型中,涵盖不同的芯片平台、计算能力和合作伙伴,以促进技术的普及和多样性;二是提升智驾功能,开发更高阶的智能驾驶功能,提升单车价值并提高Nullmax在市场中的份额。


在传统ADAS领域,Nullmax将争取在未来两年左右实现现金流转正,但也会继续投入Mobility方向的业务。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>