历史上的今天
返回首页

历史上的今天

今天是:2024年09月10日(星期二)

正在发生

2019年09月10日 | 传感器融合成自动驾驶领域另一个突围方向

2019-09-10 来源:Ai芯天下

传感器是汽车感知周围的环境的硬件基础,在实现自动驾驶的各个阶段都必不可少。自动驾驶离不开感知层、控制层和执行层的相互配合。摄像头、雷达等传感器获取图像、距离、速度等信息,扮演眼睛、耳朵的角色。目前自动驾驶的安全事故原因绝大多数出现在传感器这个重要环节,将各类传感器融合在一起,能否就能起到1+1>2的效果呢?


多传感器融合是必然趋势


通过增加传感器的数量,并让多个传感器融合来提高自动驾驶能力。多个同类或不同类传感器分别获得不同局部和类别的信息,这些信息之间可能相互补充,也可能存在冗余和矛盾,而控制中心最终只能下达唯一正确的指令,这就要求控制中心必须对多个传感器所得到的信息进行融合,综合判断。


在使用多个传感器的情况下,要想保证安全性,就必须对传感器进行信息融合。多传感器融合可显著提高系统的冗余度和容错性,从而保证决策的快速性和正确性,是自动驾驶的必然趋势。


当然,要实现传感器融合,也是有前提条件的。硬件层面,数量要足够,也就是不同种类的传感器都要配备,才能够保证信息获取充分且有冗余;软件层面,算法要足够优化,数据处理速度要够快,且容错性要好,才能保证最终决策的快速性和正确性。

AI芯天下丨传感器融合:自动驾驶领域的另一个突围方向

传感器融合的技术概述


每种传感器都有自己无法克服的缺陷,因此数量的增加无法解决实际的问题。真正的解决之道是综合不同传感器采集到的信息。而目前的雷达技术在分辨率上也有些不合格,可以说每种传感器都有自己的软肋。


想做到完美的传感器融合,就要接受不同传感器的输入,并利用综合信息更准确的感知周边环境,其得出的结果比不同传感器各自为战要好得多。将不同传感器进行融合还能换来一定程度的冗余,即使某个传感器出了问题也不会影响车辆的安全。


目前车辆上搭载的大多数ADAS系统都是独立运作的,这就意味着它们不会与其他车辆上的系统交换信息。此外,车上的后置摄像头、360度全景系统、雷达和前置摄像头都有自己的独立任务,它们之间几乎没有交流。


给车辆安装这些独立系统后,司机就能获知更多信息,车辆也能实现少数自动驾驶功能。不过,我们也可以对这些传感器进行融合,实现更为强悍的功能。

AI芯天下丨传感器融合:自动驾驶领域的另一个突围方向

①后置摄像头+超声波距离传感器这项配置在现售车辆上早已不再新鲜,倒车时它能用警报声提醒我们车辆离周边物体还有多远。

在这套新系统中,后置摄像头能让司机看清车辆后方情况,而机器视觉算法则负责探测车辆后方物体或马路牙子。超声波距离传感器则是辅助设备,它能在在没有任何照明的夜晚帮司机顺利倒车入库。


②前置摄像头+多模前置雷达能产生意想不到的效果。前置雷达能探测到150米范围内物体的移动速度和距离,而且它几乎不受天气情况影响。摄像头则负责发现并辨别前方物体,比如读取街道上的交通标识和红绿灯。


虽然一些ADAS功能只靠单个传感器或独立系统就能实现,但一旦遇到不可预知的情况,车辆就会变得手忙脚乱。反观能支持更复杂自动驾驶功能的传感器融合,就可大幅降低车辆的误报和漏报率。


传感器融合的体系结构


对自动驾驶汽车而言,没有必须将哪几类传感器数据融合在一起的说法。传感器数据间的融合可以有多种组合。处于中间过程的传感器融合将会产生各种假设和转变。


因为多传感器的使用会使需要处理的信息量大增,这其中甚至有相互矛盾的信息,如何保证系统快速地处理数据,过滤无用、错误信息,从而保证系统最终做出及时正确的决策十分关键。


多传感器融合在硬件层面并不难实现,重点和难点都在算法上。多传感器融合软硬件难以分离,但算法是重点和难点,拥有很高的技术壁垒,因此算法将占据价值链的主要部分。


算法是多传感器融合的核心。传感器融合就是将多个传感器获取的数据、信息集中在一起综合分析以便更加准确可靠地描述外界环境,从而提高系统决策的正确性。

AI芯天下丨传感器融合:自动驾驶领域的另一个突围方向

随着传感器技术、成像技术、雷达、LiDAR、电子设备和人工智能技术的进步,数十种先进驾驶辅助系统(ADAS)功能已得以实现,包括防撞、盲点监测、车道偏离报警和停车辅助。


①分布式:先对各个独立传感器所获得的原始数据进行局部处理,然后再将结果送入信息融合中心进行智能优化组合来获得最终的结果。分布式对通信带宽的需求低、计算速度快、可靠性和延续性好,但跟踪的精度却远没有集中式高。


②集中式:集中式将各传感器获得的原始数据直接送至中央处理器进行融合处理,可以实现实时融合。其数据处理的精度高,算法灵活,缺点是对处理器的要求高,可靠性较低,数据量大,故难于实现。


③混合式:混合式多传感器信息融合框架中,部分传感器采用集中式融合方式,剩余的传感器采用分布式融合方式。混合式融合框架具有较强的适应能力,兼顾了集中式融合和分布式的优点,稳定性强。

AI芯天下丨传感器融合:自动驾驶领域的另一个突围方向

传感器融合的要素和流程


关于传感器和传感器融合需要考虑的因素:成本、体积、重量、可拓展性、可靠性、制冷、安装、空间、故障自检、报告、容错性、灵活性、冗余性、反戏弄。


通过传感器融合同步运行,以允许全自动驾驶车辆或无人驾驶车辆对周围环境检测,并警告驾驶员潜在的道路危险,甚至可以采取独立于驾驶员的规避动作来避免碰撞。


①驾驶中雷达图像被捕获,负责雷达单元的电子控制单元(ECU)花很短的时间对捕捉到的图像进行预处理。然后借助控制区域网络(CAN),把图像发送到传感器融合中心。在区域网络传输图像,以及接受信息都要花时间。


②同时传感器融合中心也会接受来自摄像头、超声波传感器和激光雷达传感器的数据。传感器融合处理了所有这些数据,又需要短暂时间。


③最终结果被传到人工智能上,需要对其进行处理,并更新环境模型。这需要时间。


④通过控制区域网络(CAN),人工智能向汽车控制系统发出指令,这需要时间来完成。


⑤控制系统接收命令,明确它要做什么,继而采取实际行动。

AI芯天下丨传感器融合:自动驾驶领域的另一个突围方向

算法和成本因素是关键所在


目前企业都在积极寻找传感器融合的方法,推出的解决方案也不尽相同,但尚未出现一种经过验证、最可靠的方案。因为传感器融合是一个不断推进的过程,难点有不少。


①不同类型传感器的优缺点不同,获取的信息量巨大,要保证最终融合结果及时、准确,就需要在传感器的选型配置和算法精度上有巧妙的布局,而能把这些环节都做好的企业目前还不多。


②为了提升传感器融合的效果,最理想的状态就是将各类最顶级传感器融合在一起。但光一个激光雷达的价格就已与一辆传统汽车持平,可见某些关键传感器的价格还远没到消费类电子产品的水平。


③在传感器融合过程中,一些厂商不愿公开自己获取的原始数据,怕因此沦为纯粹的数据采集供应商,导致利润空间有限。由此造成的数据壁垒也是实现传感器融合的一大障碍。


结尾:


传感器融合得越好,自动驾驶汽车也会越安全。因此传感器融合是自动驾驶汽车发展中的一个重要方面,相信在不久的将来,将有更多机会来提出新思路和创新方式来改进传感器融合。


推荐阅读

史海拾趣

顺芯(Everest-semi)公司的发展小趣事

随着技术的不断进步,顺芯公司意识到只有不断创新才能在激烈的市场竞争中立于不败之地。因此,公司加大了在研发方面的投入,积极引进高端人才,并与国内外知名高校和研究机构建立了合作关系。在XXXX年,顺芯公司成功研发出了一款具有自主知识产权的高性能数模混合芯片,填补了国内市场的空白,并获得了多项专利。

ALLEN BRADLEY公司的发展小趣事

近年来,随着5G、物联网等技术的快速发展,电子行业面临着巨大的变革。顺芯公司及时调整战略方向,加大在5G通信芯片、物联网安全芯片等领域的研发力度。同时,公司还积极探索新的商业模式和市场机会,如与汽车制造商合作开发车载芯片等。这些举措使顺芯公司在行业变革中保持了竞争优势。

DIOTECH公司的发展小趣事

DIOTECH公司成立于电子行业的黄金时期,凭借其创始人在半导体领域的深厚造诣,公司迅速在高性能处理器领域取得了技术突破。通过不断优化产品设计和生产工艺,DIOTECH的产品在性能和稳定性上均达到了行业领先水平,逐渐赢得了市场的认可。随着智能手机的普及,DIOTECH的高性能处理器成为了市场上的抢手货,公司的营收和市场份额均实现了快速增长。

Hittite Microwave(ADI)公司的发展小趣事

为了进一步提升市场份额和品牌影响力,DIOTECH公司开始加大市场拓展力度。通过参加国际电子展会、举办新品发布会等活动,公司成功吸引了全球范围内的客户和合作伙伴的关注。同时,公司还加强了品牌建设,通过一系列营销活动提升了品牌知名度和美誉度。这些努力使得DIOTECH逐渐成为了电子行业内的知名品牌。

GE Sensing ( Amphenol Advanced Sensors )公司的发展小趣事

在市场竞争日益激烈的背景下,DIOTECH公司意识到单靠技术突破已经难以保持领先地位。于是,公司开始积极探索创新驱动和跨界合作的发展路径。通过与多家知名科技公司的合作,DIOTECH成功将人工智能技术应用于其产品中,推出了一系列具有智能化功能的电子产品。这些产品在市场上引起了强烈反响,为公司带来了新的增长点。

Advanced_Linear_Devices_Inc.公司的发展小趣事

随着市场需求的不断增长,ALD不断拓展其产品线。除了最初的CMOS线性集成电路外,公司还研发出了轨到轨运算放大器、双斜率A/D前端转换器、电压比较器等一系列产品。这些产品不仅满足了不同行业的需求,还进一步提升了ALD在电子行业的市场地位。同时,公司还针对特定应用,如医疗仪器和汽车领域,推出了定制化的解决方案,赢得了客户的广泛赞誉。

问答坊 | AI 解惑

pt2264的资料

本帖最后由 paulhyde 于 2014-9-15 08:59 编辑 pt2264的资料,大家看看吧  …

查看全部问答>

请教如何在android工程中如何开发内核模块

如题, 小弟刚接触android,还不是很清楚开发流程, 主要是不知道在eclipse环境下的android工程,具体怎样开发设备的驱动程序, 需要建立那些文件,在环境中具体怎样开始驱动程序的开发。…

查看全部问答>

tcpmp支持流媒体吗?

比如说网络电台啥的?…

查看全部问答>

Windows XP Embedded 免费公测版

XPe工作室根据客户测试需求免费推出Windows XP Embedded公测版本,该版本具备操作系统的基本功能模块与Windows XP Embedded的嵌入式特性以及系统保护功能。系统小巧、高效与简单的安装操作方法,是您的嵌入式项目可行性测试的首选。     ...…

查看全部问答>

调试STR912F碰到问题

https://bbs.eeworld.com.cn/upfiles/img/20083/200837153155345.jpghttps://bbs.eeworld.com.cn/upfiles/img/20083/200837153248677.jpg …

查看全部问答>

国赛前走后一晚上

本帖最后由 paulhyde 于 2014-9-15 08:53 编辑 国赛前走后一晚上大家都在忙什么,刚参赛的是不是很紧张啊哈哈哈,老队员应该就没什么了哈哈哈,偶在看电视剧,调节一下嘿嘿,你没干嘛呢啊????分享分享嘿嘿!!!  …

查看全部问答>

ADC10序列通道单次转换又读不到数据

最近在学430,但是总遇到这样那样的问题,还请各位多多指点啊~~#include \"msp430x21x2.h\" void Delay(unsigned short time);unsigned  int ad_value[3]; void main(){     WDTCTL = WDTPW + WDTHOLD;   ...…

查看全部问答>

菜鸟取经

各位大师,想请问一下,MSP430F149串口通信如何向PC机发送一串浮点型的数据。…

查看全部问答>

寓教于乐深刻--体验易电源

      为了更好参加这次活动,本着不一定获奖,但要再一次学好,熟悉TI易电源在使用中的巨大魅力,,到活动组织贴提供的易电源的参考易电源参考资料(https://bbs.eeworld.com.cn/thread-333423-1-1.html)。中,下载观看。了 ...…

查看全部问答>

求助,开发ACTEL和ALTERA公司的FPGA用的仿真器和下载线的型号。

请各位大侠给我提供一些具体的型号,不胜感激!…

查看全部问答>