历史上的今天
返回首页

历史上的今天

今天是:2025年03月01日(星期六)

2019年03月01日 | 自动驾驶视觉系统:不仅可以”看“,还能预测“未来”

2019-03-01 来源:新智元

图1

对于自动驾驶的视觉系统而言,“看”到路人是一个基础工作,更重要的是,能否能像人类一样,判断出路人下一个动作将是什么。来自密歇根大学的团队,便研究了一种改进算法,让自动驾驶视觉系统能够对路人的行为进行预测。

视觉系统,不仅是用来看的,还能预测“未来”!

密歇根大学(University of Michigan)向来以自动驾驶汽车技术闻名,最近,他们又有了大动作——研究一种改进的算法,来预测路上行人的动作。

图2

这种算法不仅考虑了行人在做什么,还考虑了他们是如何做的。这种肢体语言对于预测一个人接下来要做什么是至关重要的。

图3

密歇根大学团队将研究成果发布在了Arxiv及IEEE中,有兴趣的读者可以访问上方或者文末链接进行详读。

本文提出了一种基于生物力学的递归神经网络(Bio-LSTM),该网络可以在全局坐标系下预测行人的位置和三维关节体位姿,该网络能够同时预测多个行人的姿态和全局位置,以及距离摄像机45米以内的行人(城市交叉口规模)。

“看”到更细节的动作,预测路人行动

关注路上行人并预测他们将要做什么是任何自动驾驶视觉系统的重要组成部分。

图4

让自动驾驶车辆理解路上行人的存在,并分析一些细节信息,会对车辆一下步如何操作产生巨大的影响。

有些公司宣称其自动驾驶车辆的视觉系统,在这样或那样的范围/条件下可以看到并标记“人”,但目前很少人提出,可以看到并标记像“手势”或“姿势”这样更为细节的部分。

图5

这种视觉算法可以(尽管现在不太可能)像识别一个人并观察他在几帧内移动了多少像素那样简单,然后从那个节点进行推断。但人类的运动自然要比这复杂得多。

UM的新系统使用激光雷达和立体摄像机系统,不仅可以估计一个人的轨迹,还可以估计他们的姿势和步态:

  • 姿势可以表明一个人是否在靠近或远离汽车、是否在使用拐杖、是否在弯腰接电话等等;

  • 步态不仅表示速度,也表示意图。

例如,路人将头转向他们肩膀方向时,他们可能接下来会转身,或者只是看了一眼肩膀然后继续向前走;路人伸出手臂,他们可能在向某人(或车辆)发出停车信号。

这些额外的数据将有助于视觉系统对动作的预测,使得导航规划和防止意外事件更加完备。

图6

图7

图8

图9

更重要的是,它只需要几个框架就可以很好地完成工作——可能只需要包括单步和手臂的摆动。

这就足以做出一个轻松击败简单模型的预测,这是一种关键的性能衡量指标。


推荐阅读

史海拾趣

Hewlett Packard Co公司的发展小趣事
采用性能优良的差分电路作放大电路,使得电路的信噪比和动态范围达到了较高的技术水平。
百蓉(ECE)公司的发展小趣事

随着公司的发展,百蓉公司意识到技术创新是保持竞争力的关键。他们决定投入更多资源在研发上,特别是集成电路设计领域。经过几年的努力,百蓉成功开发出了一系列高效能、低功耗的集成电路芯片,广泛应用于消费电子、汽车电子和工业控制等领域。这些芯片在市场上大受欢迎,进一步提升了百蓉在电子行业中的地位。

API Technologies公司的发展小趣事

API Technologies一直将品质管理作为公司的核心竞争力之一。公司建立了完善的质量管理体系,从原材料采购到产品生产的每一个环节都进行严格的质量控制。同时,公司还注重持续改进和优化生产流程,提高生产效率和产品质量。这些措施使得API Technologies的产品在市场上具有极高的口碑和竞争力。

Elpaq公司的发展小趣事
American Power Management Inc公司的发展小趣事

随着技术的成熟,APMI开始着手市场拓展。公司积极与各大电子制造商合作,为其提供定制的电源管理解决方案。同时,APMI还加大了品牌宣传力度,通过参加行业展会、发布技术白皮书等方式,提高品牌知名度和影响力。凭借卓越的产品性能和完善的售后服务,APMI在市场上赢得了良好的口碑,客户群体不断扩大。

Apx-Crystal公司的发展小趣事

Apx-Crystal公司起初是一家专注于研发新型晶体振荡器的小型科技公司。在创始人的领导下,团队通过不懈的努力,成功研发出了一款具有高稳定性和长寿命的晶体振荡器,这一技术突破在行业内引起了广泛关注。随着产品性能的不断提升和成本的有效控制,Apx-Crystal开始赢得越来越多客户的青睐,市场份额逐年攀升。公司逐渐扩大生产规模,并在多个国家和地区设立了销售和服务网络,实现了从初创企业到国际知名电子元件供应商的华丽转身。

问答坊 | AI 解惑

单片机做的智能台灯

这是用片机做的智能台灯,大家看看....…

查看全部问答>

国外玩家的diy精神

好像散热排是从空调里拆下来的。所有的东西都是自己加工。 …

查看全部问答>

征求意见,无线钥匙追踪器

    今天又帮妈找钥匙,累的一身汗。妈上了年纪,记性不好了,每次出门前都是一顿找,做电子的我感觉这也不是个难事儿,无线收发模块就能解决,钥匙上放一个发射器,再做一个接收器,上面配一个小灯,亮度或者闪烁频率表示和目标的 ...…

查看全部问答>

求Proteus仿真例子

我现在正在学单片机仿真,希望各位多提供关于这方面的资料,谢谢…

查看全部问答>

项目寻求合作(热敏打印机相关),有兴趣的请进

项目描述:本公司仪器上目前是接热敏打印机打出结果,不过由于热敏打印结果时间长了就看不清楚了,所以想开发一个代替热敏打印机的小硬件单元,当按仪器上的打印按钮后,小硬件单元接收打印信息,然后通过串口或USB口等计算机接口传到计算机上保存 ...…

查看全部问答>

STM32的AD精度-±1.3LSB

ST又出了新的数据手册 Rev 6,其中可以看出AD精度很高,跟我以前做过的试验相符,请看,第65页:Table 46. ADC accuracy - limited test conditionsSymbol Parameter   &nb ...…

查看全部问答>

请问:STM32中双ADC快速交替模式如何使用?

最近在学习使用STM32的ADC,单ADC已经调试成功了,LCD可以显示实际波形。 看到有双ADC快速交替模式,可以提高一倍的速度,就改为该模式,用二个ADC采样同一个输入。 但是无论如何都调试不出来,只有ADC1的值,没有ADC2的值。 看了论坛几乎 ...…

查看全部问答>

元芳,你对此电路有何看法?(5)

元芳:大人,上次您给我指出了案件中的零极点分布,案情各个要素已经显露出来,但元芳还是一时还是无法理清整个案子的来龙去脉,还请大人明示! 狄:元芳,你来看。在整个反馈网络中,芯片内部的电路决定了参考电压和运放的增益,这些是在我们选择 ...…

查看全部问答>

被墙无法下载,求助一下

哪位能下载,请帮我下载一下,非常感谢 https://addons.cdn.mozilla.net/u ... er_cu-0.18.4-fx.xpi…

查看全部问答>