历史上的今天
返回首页

历史上的今天

今天是:2025年03月19日(星期三)

正在发生

2020年03月19日 | 关于波士顿等移动机器人的视觉算法分析

2020-03-19 来源:机器人网

(文章来源:机器人网)

如果对移动机器人视觉算法进行拆解,你就会发现获取物体深度信息、定位导航以及壁障等都是基于不同的视觉算法,本文就带大家聊一聊几种不同但又必不可少的视觉算法组成。

实现定位导航、路径规划以及避障,那么这些过程中需要哪些算法的支持?谈起移动机器人,很多人想到的需求可能是这样的:“嘿,你能不能去那边帮我拿一杯热拿铁过来。”这个听上去对普通人很简单的任务,在机器人的世界里,却充满了各种挑战。为了完成这个任务,机器人首先需要载入周围环境的地图,精确定位自己在地图中的位置,然后根据地图进行路径规划控制自己完成移动。

而在移动的过程中,机器人还需要根据现场环境的三维深度信息,实时的躲避障碍物直至到达最终目标点。在这一连串机器人的思考过程中,可以分解为如下几部分的视觉算法:1.深度信息提取,2.视觉导航,3.视觉避障。后面我们会详细说这些算法,而这些算法的基础,是机器人脑袋上的视觉。

智能手机上的摄像头可以作为机器人的眼睛吗?所有视觉算法的基础说到底来自于机器人脑袋上的视觉传感器,就好比人的眼睛和夜间视力非常好的动物相比,表现出来的感知能力是完全不同的。同样的,一个眼睛的动物对世界的感知能力也要差于两个眼睛的动物。每个人手中的智能手机摄像头其实就可以作为机器人的眼睛,当下非常流行的Pokeman Go游戏就使用了视觉技术来达成AR的效果。

一个智能手机中摄像头模组,其内部包含如下几个重要的组件:镜头,IR filter,CMOS sensor。其中镜头一般由数片镜片组成,经过复杂的设计,现在可以用廉价的树脂材料,做出成像质量非常好的手机摄像头。

CMOS sensor上面会覆盖着叫做Bayer三色滤光阵列的滤色片。每个不同颜色的滤光片,可以通过特定的光波波长,对应CMOS感光器件上就可以在不同位置分别获得不同颜色的光强了。如果CMOS传感器的分辨率是4000x3000,为了得到同样分辨率的RGB彩色图像,就需要用一种叫做demoscing的计算摄像算法,从2绿1蓝1红的2x2网格中解算出2x2的RGB信息。

一般的CMOS感光特性除了选择红绿蓝三色之外,对于光是透明的。因此在光路中加上IR滤光片,是为了去除太阳光线中红外光对CMOS的干扰。加上滤光片后,通常图像的对比度会得到显著的提升。

计算机视觉中还会用到什么传感器?除了RGB相机,计算机视觉中常用的还有其他种类的特殊相机。例如有一种相机的滤光片是只允许通过红外光波段的。因为人眼通常是看不见红外光的,所以可以在相机附近加上主动红外光源,用于测距等应用。

另外,大部分我们用到的camera都是以rolling shutr的形式实现曝光的,为了减少电子器件的成本,曝光通常是一行一行分别进行,这样势必造成物体快速移动时,相机采集到的图像会发生形变。为了避免这种形变对基于立体几何进行计算的视觉算法的影响(例如VSLAM),选用global shutter的相机就显得特别重要了。

深度相机是另一大类视觉算法中需要的传感器,可以分成如下几类:1.TOF传感器(例如Kinect 2代),类似昆虫复眼。成本高,室外可以使用。2.结构光传感器(例如Kinect 1代),三角定位原理,成本中,室外不能用。3.双目视觉(例如 Realsense R200),主动照明或被动照明,IR或可见光皆可。成本低,室外可以使用。
      (责任编辑:fqj)

推荐阅读

史海拾趣

问答坊 | AI 解惑

EPM7128SLC84-15

本帖最后由 paulhyde 于 2014-9-15 09:14 编辑 EPM7128SLC84-15  …

查看全部问答>

at+cipstart="tcp","210.153.49.2","80" ERROR 请问是怎么回事?

AT+CGATT=1 OK AT+CGDCONT=1,\"IP\",\"CMWAP\" OK AT+CGACT=1,1 OK AT+CGPADDR=1 +CGPADDR: 1,\"10.177.14.204\" OK AT+CGDATA=1 CONNECT 115200 ~ }#?}!}!} }6}!}$}%軁\"}&} } } } }\'}\"}(}\"}#}$?&磣~ }#?}!}!} }6}!}$}%軁\"}&} } } ...…

查看全部问答>

求教:Wince如何创建透明窗口?

RT~~~~~请问透明窗口如何创建?…

查看全部问答>

是否有命令解码的芯片,请教?

在做一个MP3时,音频解码芯片可以解码存放在闪存上的mp3音频文件并播放,我想请教一下,是否可以不将命令程序烧录到单片机上,而是向这个mp3一样,将控制硬件的命令程序,做成一个文本文件或是16进制文件,像放到u盘上一样,将程序通过usb接口放到 ...…

查看全部问答>

mc39i 连线问题

我用 mc39i modem 其中31管脚 /pd 发现总是在0.24v--2.24v波动,该管脚为 0v是给modem断电。 我把这个管脚的控制端用6n137 隔离,输入1 断电,输入0 不断电。总是出现  rascs_disconnected ecode 633,上网查为 拨号网络网络由于设备 ...…

查看全部问答>

买ARM9,送单片机开发板!

飞凌嵌入式’全新ARM9学习套件,功能强大的OK2440-IV开发板仅售598元!另加36元获赠一块单片机学习板,希望能帮助大家从零开始学习嵌入式高端技术! http://www.helloarm.com/Samsung/48.htm…

查看全部问答>

有没有研究SIP/G729语音通信的,一起交流一下

有没有研究SIP/G729语音通信的,一起交流一下…

查看全部问答>