历史上的今天
今天是:2025年04月28日(星期一)
2020年04月28日 | 特斯拉也在研究“伪激光雷达”
2020-04-28 来源:智车科技
近日,特斯拉AI高级总监Andrej Karpathy在机器学习会议上透漏也在做一些 pseudo-LiDAR 技术研究,他认为虚拟激光雷达与真实激光雷达的差距越来越小了。
pseudo-LiDAR
最早提出“伪激光雷达”数据(pseudo-LiDAR)这个概念的论文,要追溯到2018年一篇来自康奈尔大学的技术论文,作者 Yan Wang 与 Wei-Lun Chao 均为华人,该论文提出了一种新方法来缩短纯视觉技术架构与激光雷达间的性能差距。

该论文通过改变立体摄像机目标检测系统的 3D 信息呈现形式,将基于图像的立体视觉数据转换为类似激光雷达生成的3D点云,通过数据转换切换成最终的视图格式。尽管在实验效果上,视觉还无法与激光雷达媲美,但这种新的低成本方法为视觉方案提供了一种思路。
在那之后的两年前,康奈尔大学等又陆续发表了基本该方法的视觉深度估计、目标识别,3D Packing等论文。有研究者发现,采用其新方法之后,该摄像机在目标检测方面的性能接近激光雷达,且其成本仅为后者的一小部分。以鸟瞰图而不是正视图来分析摄像机捕捉到的图像,可以将目标检测准确率提升 2 倍,从而使立体摄像机成为激光雷达的可行替代方案,且其成本相比后者要低很多。
特斯拉也在做类似研究
马斯克对激光雷达的态度是不言而喻的,他认为依赖激光雷达就像行走依赖拐杖一样。而近日,特斯拉AI高级总监Andrej Karpathy 于今年举行的机器学习大会透露特斯拉也在做一些“伪激光雷达”的研究。

在此过程中,他分享了特斯拉仅用少数几个摄像头即可达到传统激光雷达精度的方法的具体案例。特斯拉不断发展的解决方案中的秘诀不是摄像头本身,而是摄像头所构建的先进处理和神经网络,可以充分理解输入的范围和质量。通过不同方向的摄像头进行拼接,视觉深度估计,再投影到鸟瞰图,作为局部导航地图使用。同时,将画面的每个像素都进行深度估计,就像激光雷达点云一样,形成3D目标检测。
特斯拉基于摄像头的方法便宜得多,并且在硬件方面更容易实现,但是需要极其复杂的算法才能将原始摄像头输入和车辆远程信息处理转换有用的信息。
从根本上讲,计算机可以从一系列连续的静态图像(也称为视频)中识别车道标记,标志和其他车辆。特斯拉将计算机视觉提升到前所未有的水平,不仅分析图像,而且分析图像中的各个像素。

Karpathy说:“我们采用伪激光雷达方法,基本上可以预测每个像素的深度,并且可以投射出像素。” 随时间推移执行此操作可以复制传统激光雷达系统的许多功能,但需要大量的实时处理能力才能使图像解构功能发挥作用。
车辆是实时驾驶的,因此,如果无法即时获得结果,那么拥有可以基于图像进行确定或预测的系统并没有任何好处。值得庆幸的是,特斯拉为其自动驾驶计算机的第三个主要版本构建了自己的硬件,并且专门用于运行特斯拉的代码。

与激光雷达的差距正在缩小
特斯拉所谓的伪激光雷达解决方案正在变得越来越好。Karpathy展示了一系列类似激光雷达的世界3D地图,看起来非常像来自尖端激光雷达解决方案的结果。当然,可视化更有利于人类而不是计算机,因此并不能真正传达特斯拉在计算机视觉方面的进步有多大影响力。Karpathy说:“仅使用视觉技术和伪激光雷达方法,差距很快就会缩小。”
不过,也有专家提出了质疑,基于视觉的方法对图像清晰度有很大的依赖性,对摄像头像素以及光纤强弱影响很大,这可能是目前不好解决的问题。所以,这就要看激光雷达降价的速度更快,还是视觉算法进步的速度更快。
史海拾趣
|
一、安检门原理由晶振产生3.5-4.95M的正弦振荡,由分频器分频为7.8K左右正弦波,经三极管与线圈进行功率放大后输入门板(7区)大线圈进行电磁波发射,由门内1-6区线圈分别进行接收。接收后,将接收到的信号与基准信号进行了比较,发现变化后,改变采 ...… 查看全部问答> |
|
索尼试制了不用电源线即可驱动电视机等电子产品的“无线供电系统”。这种技术通过磁场共振传输电力,可向距离50cm~80cm的电子产品传输60W的电力。供受电设备间的送电效率为80%,加上电源整流电路等,系统整体效率维持在了60%。笔者日前采访了参 ...… 查看全部问答> |
|
用LED共阴极方式写运行无错误 unsigned char code BitTab[]={0x02,0x04,0x08,0x10,0x20,0x40,0x80}; unsigned char code DispTab[]={0x3F,0x06,0x5B,0x4F,0x66,0x6D,0x7D,0x07,0x7F,0x6F}; 把里面的数改为共阳极的数,就有*** error 65: access ...… 查看全部问答> |
|
100件未来式设计方案,是否反映出想象力和现实的矛盾呢?作出你自己的判断吧http://www.webdesignerdepot.com/2009/04/100-amazing-futuristic-design-concepts-w-wish-were-real/… 查看全部问答> |
|
TI研讨会中奖“TMDX5515EZDSP 开发板和工具包 ” C5515 DSP的主要特性与优势: 3 个片上 LDO 分别用于 DSP 内核、USB 以及模拟子系统; SDRAM 与移动 SDRAM 可支持低功耗应用; 包括高速 USB 2.0、I2S、UART、SP ...… 查看全部问答> |
|
求用最小系板和DS18B20来测量温度并在12864液晶上显示 各位玩MSP430的大大们,求助啦~! 想用MSP430最小系统版和DS18B20来测量温度,且在12864LCD液晶上面显现出数据来! 可不可以帮忙写下代码啊! 急用啊! 下面的CX-1A系统版的原理图 小弟感激不尽! [ 本帖最后由 z9 ...… 查看全部问答> |
|
处理一批2.4寸TFT屏,每人限购10PCS,有美女,有送! 2.4寸TFT屏,带触摸屏,ILI9320驱动!引脚定义如下图: 前天 12:21 上传下载附件 (146.79 KB) 屏的图片如下: 前天 12:21 上传下载附件 (73.57 KB) 前天 12:21 上传下载附件 (63.51 KB) 显示效果如下: ...… 查看全部问答> |
|
【视频分享】TMS320C64x+网络课程9 - sRIO(串行RapidIO) 简介:TMS320C64x+网络课程9——sRIO(串行RapidIO),主要介绍sRIO的一些基本信息,如支持特性,memory管理,中断支持,在DSP内部进行传输,BIOS中的支持等。此网络培训针对C64x+,每次一个专题,由DSP高性能部门技术支持工程师为您全程指导,敬请 ...… 查看全部问答> |




