历史上的今天
返回首页

历史上的今天

今天是:2025年02月19日(星期三)

正在发生

2021年02月19日 | DMS之争,Mobileye/英伟达准备好了吗

2021-02-19 来源:EEWORLD

DMS(Driver monitor system) 驾驶员状态监测系统,早期的驾驶员状态监测主要是驾驶员疲劳监测,伴随自动驾驶、车联网及相关技术逐渐的成熟逐渐演进和迭代出了更多功能。

 

在驾驶员监控系统(DMS)方面,本人认为高通和Seeing Machines 在技术上优于Mobileye和英伟达的优点显而易见,但显然值得进一步讨论。所以,让我们从技术角度来谈谈细节。

 

先来比较一下Seeing Machines和英伟达提供的DMS产品,分别访问两个供应商提供的视频。请记住,这些视频是公关,因此将展示该公司最好的技术成就。

 

英伟达完全是从软件角度(视觉算法的人工智能)来实现驾驶员监控,而不是作为一个完整的系统。DMS的专业技术从光学路径开始,来自于视觉机器。

 

 

可靠、鲁棒和稳定的DMS信号取决于光路的质量。设计挑战包括关于IEC 62471标准的司机眼睛安全,利用940nm的红外光源时的量子效率,以及专利的照明技术,以最大化眼睛闪烁的对比度,以获得精确的眼球凝视矢量。

 

毫无疑问,英伟达擅长利用人工智能和深度学习开发视觉算法,但需要极大地扩展其940nm红外光路专长,这是成像专家如ON Semiconductor和Omnivision的领域。在一月初,Omnivision宣布了它的OAX 8000 DMS ASIC。这款采用 AI 技术的汽车专用集成电路( ASIC )针对入门级DMS进行了优化。OAX8000 采用芯片堆叠架构,为一款 DMS 处理器提供片上 DDR3 SDRAM 1GB内存。豪威科技表示,这也是唯一一款集成了神经处理单元( NPU )和图像信号处理器( ISP )的专用 DMS 处理器,可为眼睛注视和眼动跟踪算法提供高达每秒 1.1 万亿次操作的专用处理速度。

 

 

对于最先进的DMS, CMOS图像传感器、图像处理器和成像算法越来越多地被视为一个信号链,而不是单独考虑。这种成像信号链带来了更高的性能、更高的信号可用性和更低的功耗。对于英伟达来说,他们需要拓展其思维,超越成像算法,考虑整个光学路径,这样才能与高通和Seeing Machines这类公司抗衡。

 

接下来,让我们说一下培训数据。在人工智能和深度学习时代,得数据者得天下,这话一点不假,亚马逊、Facebook、谷歌就是很好的例子。对于DMS来说,数据从超过2.65万辆重型卡车上收集得来, 这些卡车安装了“Guardian”系统,可以捕获公路上、机舱内的视频。

 

 

在过去的12个月里,Seeing Machines已经捕获了近60亿公里的道路自然驾驶数据,超过830万次分心事件和约16.5万次疲劳干预。该款名为Guardian后备驾驶员监控系统的设计旨在确保自动驾驶车辆中的后备驾驶员在必要时能保持警觉、清醒并随时准备好执行驾驶任务。利用Seeing Machines汽车级FOVIO驾驶员监控技术,可便捷地用于SAE L3(眼睛不看路面)至L5(无需配备驾驶员)自动驾驶测试车队经过改装的驾驶员监控系统。Guardian使用汽车级的红外光路,也就是说训练数据是通过红外光谱捕获的。使用全彩(RGB)静止图像和视频进行训练,结果在真实世界条件下的DMS性能较差。

 

基于摄像头的Guardian后备驾驶员监控系统的主要功能包括:

 

追踪在道路上测试的自动驾驶和半自动驾驶车辆驾驶员的面部和眼睛

报告驾驶员状态信息(如看路还是不看路)

识别越来越严重的驾驶分心事件(如驾驶员对道路场景注意力不够)

 

除此之外,该公司还与高通合作为一家全球高端汽车制造商部署DMS方案。由于该方案采用了高通骁龙平台的高效异构计算模块,因而可扩展应用于不同档次的座舱,且可以与信息娱乐系统集成在一起,以确保驾驶员将注意力集中在道路上。

 

在检测到司机注意力不集中、昏昏欲睡或从驾驶任务中脱离后,DMS会做什么?我的观点是理解人为因素科学和行为研究,使汽车制造商能够使用DMS信号安全地纠正司机或车辆。

 

 

英伟达的DMS看起来有些初级,功能包括头部姿态估计、眼睛和嘴巴大小,但缺乏眼睛-凝视矢量。在DMS的技术领先度方面,我大致将供应商进行了些许排名:Seeing Machines, Smart Eye, Cipia(原为sight),Jungo, Xperi, Mitsubishi。

 

英伟达虽然也是这里的玩家,但是从数据排名来看,它内部的数据管理服务排名不超过第七。

 

英特尔拯救了Mobileye

 

Mobileye在自动驾驶道路上开发了令人难以置信的技术,包括地图(REM)、驾驶政策(RSS)、基于FMCW的激光雷达和软件定义雷达。我们可以从EyeQ产品路线图中看到,Mobileye的长期战略是通过SAE国际标准J3016中规定的驾驶自动化水平。

 

 

Mobileye在2017年为L3提供EyeQ4,在2020年为L4-5提供EyeQ5。如今,许多评论员都在质疑L3的合理性,因为机器与人的交接存在问题,而本人则在成本、法律责任和可靠性方面质疑L4乘用车的合理性。在今年1月的CES上,Mobileye首席执行官Amnon Shashua提出了2025年“L4消费型自动驾驶”的新目标。

 

法律法规快速跟进

 

据世界卫生组织的报告显示,疲劳/分心驾驶造成80%的交通事故和25%的交通事故死亡,随着大环境对疲劳/分心导致的交通事故问题日益重视,DMS功能搭载率不断提高。

 

为此,出于公共出行安全考虑,欧盟和中国均已出台法律法规,国内已率先对“两客一危”等商用车车型安装DMS系统作出强制要求,乘用车搭载要求也在推进制定中,而欧盟要求从2022年7月开始新车都必须强制配备DMS。

 

早在2017年,Euro NCAP就表示有意将DMS测试纳入其5星安全评级的一部分,而欧盟委员会(European Commission)也于2018年5月推出了将DMS测试纳入所有四轮及以上车辆的计划。2019年11月,修订后的《欧洲通用安全法规》(GSR)被投票成为法律,从2024年开始,任何新型号在欧洲获得类型批准都需要配备DMS。在拜登政府的领导下,类似的立法很可能在美国获得通过。

 

DMS的技术难点

 

目前,如何量化界定疲劳状态、瞌睡状态是DMS系统研发面临的瓶颈。当DMS融入ADAS后,则需要进一步提升对于驾驶员疲劳和分心监测的精细程度。目前国内能够具备DMS乃至整个ADAS系统前/后装量产能力的公司为数不多。蓝小欧车载安全机器人作为行业代表,在清华大学强大背景资源支持下,拥有17项国家发明专利,65项专有知识产权,已为车主成功预警危险行为50万余次。

 

Mobileye能否快速跟上?

 

英特尔以153亿美元的价格收购的Mobileye在DMS的监管环境方面一直处于沉睡状态。与此同时,高通与Arriver合作开发vision和driving stack,与Valeo合作开发DMS停车系统并和Seeing Machines共同创造一个解决方案,一次性解决其汽车制造商客户的所有问题。

 

Omnivision介绍了DMS处理器的路线图。以OAX 8000 DMS ASIC为模板,英特尔进入市场的最快途径是从Seeing Machines获得Occula NPU DMS核心许可,将cpu增强为四核Arm Cortex-A53,并添加双核Arm Cortex-R5作为符合ISO 26262标准合规。

 

 

倘若英特尔芯片交货期大约为6个月,我认为时间尺度是不可能的,但是如果Mobileye想要满足欧洲NCAP和欧洲GSR的要求,从2024年起用一个全系统的解决方案与高通竞争,新任CEO Pat Gelsinger将不得不尝试一些激进计划。英特尔现在是在一场竞赛中,通过开发DMS技术来拯救Mobileye。

 

为了赢得L4客运车辆的比赛, Mobileye和英伟达忽视了DMS日益重要的作用,这样做为高通发展伙伴关系和生态系统以满足汽车制造商对数字座舱/车载信息娱乐(IVI)、L2+高速公路援助以及满足NCAP和GSR需求的解决方案敞开了大门。

 

话又说回来,汽车业是一个严格监管、以标准为基础的行业,所以在试图以聪明才智击败竞争对手之前,首先要看咨询和监管机构的脸色,并且要三思而行。


推荐阅读

史海拾趣

Cal Test Electronics公司的发展小趣事

随着全球市场的不断变化和公司规模的扩大,Cal Test Electronics开始实施全球化战略。公司积极拓展海外市场,通过参加国际展会、建立海外销售渠道等方式,提高品牌知名度和市场份额。同时,公司还加强与国际同行的合作与交流,引进先进的技术和管理经验,不断提升自身的竞争力。这些努力使得Cal Test Electronics逐渐成为一个具有全球影响力的电子配件和测试产品制造商。


这些故事旨在展示Cal Test Electronics公司可能的发展轨迹和成就,但并非基于实际发生的事件。对于该公司的真实发展历程和故事,建议查阅相关官方资料或行业报告以获取更准确的信息。

CoolerMaster公司的发展小趣事

Cooler Master一直致力于技术创新,不断推出具有颠覆性的产品。例如,其推出的MasterLiquid 360 Ion高性能散热器,配备了壮观的2.1英寸LCD屏幕,可实现无与伦比的定制显示内容。这一产品不仅展现了Cooler Master在散热技术上的领先地位,更体现了其对于用户体验的深刻洞察。此外,公司还借助Atmos系列迈向可持续散热的未来,为行业的发展注入了新的活力。

Alorium Technology公司的发展小趣事

林仁政跳出已有的框架,不断思考机箱的设计。他敏锐地觉察到人们对于免工具安装的主板散热片的偏好,并深知散热效果不仅仅取决于散热片和风扇,更需要考虑空气的流动情况。结合日本高水准的立体设计灵感,林仁政带领工程师挑战困难,成功设计出了一台铝制机箱。这一机箱不仅具有高度的创新性,更因其纯手工制作的特性而显得弥足珍贵,对Cooler Master的发展具有重要意义。

广州奥松公司的发展小趣事

奥松电子在传感器领域取得了显著的突破。公司凭借其强大的研发实力和技术创新能力,成功开发出一系列具有自主知识产权的传感器产品。这些传感器产品不仅性能稳定、测量精度高,而且具有广泛的应用领域。在医疗、轨道交通、智能家电等多个领域,奥松电子的传感器产品都得到了广泛的应用和认可。这些产品的成功应用,不仅提升了公司的市场竞争力,也为公司的未来发展提供了更多的可能性。

这五个故事展示了广州奥松电子股份有限公司在电子行业中发展起来的历程和成就。通过不断的技术创新和市场拓展,奥松电子已经成功成为了国内电子行业中的佼佼者。未来,随着技术的不断进步和市场需求的不断变化,奥松电子将继续保持其领先地位,为电子行业的发展做出更大的贡献。

Datatronic公司的发展小趣事

Datatronic公司深知人才是企业发展的核心。因此,公司一直注重人才的培养和引进。公司建立了完善的人才培训体系,为员工提供广阔的发展空间和机会。同时,公司还积极引进国内外优秀人才,为公司的技术创新和市场拓展提供了有力支持。这些举措使得Datatronic公司在人才方面形成了竞争优势。

EOREX公司的发展小趣事

在电子行业的早期,EOREX公司由一群热衷于技术创新的工程师创立。他们专注于研发高性能的半导体芯片,以满足当时市场对更快、更稳定电子产品的需求。通过不断的技术创新和产品迭代,EOREX逐渐在半导体领域树立了良好的口碑,吸引了众多合作伙伴和投资者的关注。随着公司规模的扩大,EOREX不断加大对研发的投入,推出了更多具有竞争力的产品,逐渐在电子行业中崭露头角。

问答坊 | AI 解惑

汽车CAN数据传输系统的原理及故障实例

(1)什么是数据总线  一辆汽车不管有多少块电控单元,不管信息容量有多大,每块电控单元都只需引出两条线共同接在两个节点上,这两条导线就称作数据总线。以前各电控单元之间好比有许多人骑着自行车来来往往,现在是这些人乘坐公共汽车,公共汽车 ...…

查看全部问答>

LM3S8962 Evaluation Board开发板

SW-EK-LM3S8962-5961  软件包里面 can_device_qs_debug  就是小板的工程文件 小板的程序使用KEIL软件,LM3S8962 Evaluation Board开发板板载调试器调试外部芯片,就可以下载程序了。 IAR软件下载不成功,知道的告诉一声如何 ...…

查看全部问答>

USB下载接口驱动程序.rar

本帖最后由 paulhyde 于 2014-9-15 08:57 编辑 USB下载接口驱动程序.rar  …

查看全部问答>

请大家来帮手看看编译u-boot时出现的错误?

ot@localhost u-boot-1.1.6]# export PATH=/ning/2.95.3/bin:$PATH [root@localhost u-boot-1.1.6]# make B2_config Configuring for B2 board... [root@localhost u-boot-1.1.6]# make for dir in tools examples post post/cpu ; do make - ...…

查看全部问答>

cpu片内寄存器读写

各位大虾,小弟最近遇到一个关于cpu寄存器读写的问题,望不吝赐教 我在bootloader里面,对cpu里面的控制寄存器进行,但是无法写成功。比如:*(UINT32 *)(CAP_Reg_Addr_Base+0x0008)=0x10000000;进行写时,会死在这里。对其他的寄存器也是这样。这 ...…

查看全部问答>

用CC1100能否实现多对一传输

如题,用CC1100能不能实现多个节点给一个节点传输数据,若能,求大致方案!望各位大侠指点~~…

查看全部问答>

LED显示屏为什么能够得到广泛使用,我的总结是以下几点:

  1、可延展性:LCD屏做的越大,生产线设备投入越高。而LED显示屏尺寸的增大是很容易的,就像搭积木一样。分辨率也方便根据用户需求实现。   2、全彩:灯泡,霓虹灯等都是单色的,LED实现了RGB三原色的组合。   3、可靠性高:LED是固体照明, ...…

查看全部问答>

我读新18号文之财税政策

财税政策从增值税、营业税、企业所得税、进口关税、以及进口环节增值税等多个方面对集成电路企业给予了优惠。 (一)继续实施软件增值税优惠政策。天天谈芯---以前相关政策继续适用。 (二)进一步落实和完善相关营业税优惠政策,对符合条件 ...…

查看全部问答>

晚睡早起读解STM32之ISP命令格式及应用前景和其不足之处

                                 今早它又比我起得早,果然HOT!!! …

查看全部问答>