历史上的今天
今天是:2024年12月03日(星期二)
2020年12月03日 | 谁会成为未来机器视觉应用领域的王者?
2020-12-03 来源:爱集微
无处不在的机器视觉
无人机越来越聪明了!很多使用者都有这样的感慨。从前操作无人机都要小心翼翼,唯恐突遇障碍物挡道,遭遇炸机之惨祸。现在的无人机则完全可以腾挪躲闪,及时回避飞行路径中的各种障碍物,让很多初学者也可以轻易驾驭。
变聪明的无人机有什么秘技吗?答案就是有了机器视觉技术的加持。通过机器视觉技术,无人机不但能感知障碍物,还能知道自己和障碍物的距离,实现精准的避障和绕障。
机器视觉的概念源自于机器人领域,美国机器人工业协会对其定义为:“通过光学的装置和非接触的传感器自动地接收和处理一个真实物体的图像,以获得所需信息或用于控制机器人运动的装置。”
机器视觉常以完整系统形式出现,通常可划分为光学成像、图像传感器、图像处理、IO和显示等五大模块。这其中,以全局快门Global Shutter (以下简称GS)CMOS传感器为代表的图像传感器推动了机器视觉系统近几年的大发展。

(图片来源于腾讯视频:思特威Global Shutter技术与前沿机器视觉应用视频)
正是有了CMOS图像传感器,机器视觉早已不再是工业自动化领域的专属名词并已经轻松融入了我们的生活当中,因此也有了“消费级机器视觉”这一新兴领域及概念。比如,进入很多家庭的扫地机器人,配备了机器视觉技术,可以彻底清扫卫生死角。小巧便捷的翻译笔,因机器视觉技术,可以读懂多种语言。而工业自动化生产线上,依然使用机器视觉系统自动完成高度精密的自动化制造及对不良产品的检测等。
而随着AI应用的广泛落地,例如扫脸支付、人脸识别门禁/门锁更是以极快的速度渗透到了人们的工作和生活中。连商场里也不乏智能互动电子屏、智能穿衣镜等基于AI及机器视觉的交互类智能视频设备的身影。
总体来看,CMOS图像传感器已借由“消费级机器视觉”的纽带与我们的生活完美契合在了一起。

(图片来源于腾讯视频:思特威Global Shutter技术与前沿机器视觉应用视频)
CMOS传感器的新崛起
CMOS是当今主流的图像传感器技术之一,与之对应的是曾经的霸主CCD图像传感器。
1970年,CCD图像传感器在Bell实验室发明,CMOS图像传感器在NASA的喷气推进实验室JPL制造成功。但是,CCD依靠高量子效率、高灵敏度、低暗电流、高一致性、低噪音等特性,一直成为图像传感器市场的主导,直到90年代末才被CMOS拉下神坛。

与CCD图像传感器相对比,CMOS图像传感器具有低功耗、低操作电压、片上集成功能、性价比高等优势,但是在初期由于相对较差的性能和较大的像素尺寸,并没有得到重视。后来随着工艺制程水平的不断提高,CMOS图像传感器才逐渐开始展现出CCD图像传感器不具有的优势,在图像传感器领域的市场攻城略地。时至今日,手机、相机已经全部沦为CMOS传感器的天下。
不过CMOS图像传感器却丝毫没有止步的意思。进入21世纪后,随着机器视觉在工业自动化、无人机、智能家电中的应用,CMOS图像传感器又迎来了新一轮的发展浪潮。
因为机器视觉的应用特性,CMOS图像传感器面临新的挑战。如果以前只是要求成像细致、色彩鲜艳的话,现在则要求快速捕捉(高帧率),无形变(全局快门)和非可见光下成像(近红外增强技术)。毕竟,这次服务的对象从人换成了机器。
GS的引入是一个重大革新。它使得CMOS传感器同时曝光来撷取不失真的运动物体图像,这对机器视觉的领域有重大意义。
GS的基本原理是传感器可以同时扫描图像的整个区域。在GS传感器中,使用所有像素同时捕获图像。
举例来说,以前的背照式(BSI)传感器均为卷帘快门,因而会在拍摄高速运动的物体时产生“果冻效应”造成物体严重变形,但拥有全局快门的传感器则能够通过让传感器上的单个像素点在同一时间捕捉到光线信号从而有效解决这一问题。
而最早洞察这一趋势的是一家国内的图像传感器设计公司,思特威在2017年就以前瞻性的眼光开始布局其GS技术的研发,并于2018年就发布了全球首款基于BSI像素工艺的商业级30万像素GS CMOS图像传感器——SC031GS,成为率先进入“消费级机器视觉”应用领域的CIS企业先锋。
该产品创造性地将BSI像素设计工艺与GS图像传感器设计巧妙结合在一起,提供信噪比更佳、灵敏度更高与动态范围更大的成像性能,可应用于智能读码器设备、无人机、智能模组(Gesture Recognition/ vSLAM/ Depth Information/ Optical Flow)等诸多图像识别类AI应用领域,而GS CMOS传感器也迎来了无比宽广的发展空间。
战略眼光成就GS传感器新贵
作为图像传感器领域的前沿,GS CMOS传感器的研发成为了业界关注的焦点。尤其是,高分辨率的GS CMOS设计和生产门槛都很高。
可喜的是,以思特威为代表的中国高新CIS企业已经在这个领域占据了先机。就在前不久举行的SPM 2020思特威合作伙伴大会上,思特威创始人兼董事长兼CEO徐辰博士指出,除了在安防应用领域继续保持领先的市场份额外,思特威早在2017年就布局的消费级Global Shutter图像传感器市场今年亦收获佳绩,在消费级机器视觉领域出货量跃居全球首位!面对这样的市场成绩,思特威并未停下对GS技术进阶创新的脚步。在SPM 2020大会上徐辰博士继而发布了思特威2nd Gen SmartGS® 技术,通过提升pixel size来增加感度和暗光效果,提升率可达30%,另一方面采用并行电压域读取,大大提升了最大快门速度,完善对高速运动物体的清晰抓拍。据介绍,该技术基于全新的电容工艺,其读取噪声可降低一倍以上,同时兼具区域 HDR技术,可大大提升特定位置的动态范围,解决了夜间拍摄信号灯成像过曝等问题,可谓大放异彩。而下一代3rd Gen SmartGS® Technology的研发已经在路上,预计将在明年和大家见面。
在尖端GS技术的加持下,思特威今年陆续推出了数款赋能不同机器视觉应用领域的GS产品。如赋能智能驾舱DMS系统的全新130W像素全局快门图像传感器——SC133GS,采用2.7μm像素及1/4″光学尺寸,凭借思特威领先的GS技术优势,可以为DMS系统及时提供无形变、无伪影的高清可识别影像,为系统进行及时精确的判断提供坚实的基础,有效监测驾驶员驾驶状态,保障行车安全。

(图片来源于思特威SC133GS产品发布新闻)
而在智能交通系统(ITS)应用领域,思特威今年亦发布了SC410GS,该产品采用400万的BSI像素结合全局快门技术,可精准捕捉快速运动的物体,成像无尾影、不形变,大大提升了智能交通系统对车牌的精准捕捉及高效识别。而在SPM 2020大会上,思特威也现场展示了SC410GS覆盖2-4车道的ITS实际应用演示影像,博得了来宾的一致肯定。

而后续,思特威还将发布面向ITS应用更高分辨率的SC910GS(即900万BSI与GS技术结合产品)以及在信噪比、高温成像、近红外增强及HDR上全性能升级的SC035HGS(mono/color)产品,赋能更多AI及消费级机器视觉应用终端。

结语
随着硬件方案的不断成熟和运算能力的提升,机器视觉在多个领域应用的广度和深度均在提高。作为核心部件的GS CMOS传感器,在设计和工艺不断改进的条件下,还将继续推动机器视觉的应用在各个领域进一步普及,并为人们的生活带来更多智能与美好。
史海拾趣
|
北京时间10月29日消息,据国外媒体报道,谷歌周三推出了一款免费手机导航应用,该款应用可向用户提供建议路线(turn-by-turn)。谷歌此举被认为可能会向GPS设备制造商发起攻击。 谷歌推出的新应用谷歌地图导航(Google Maps Navigation)是其手机版 ...… 查看全部问答> |
|
在menuconfig中配置: 详细介绍内核配置选项及删改情况 第一部分:全部删除 Code maturity level options ---> 代码成熟等级选项 []Prompt for development and/or incomplete code/drivers 默认情况下是选择的,这将会在设置界面中显示还在开 ...… 查看全部问答> |
|
我的解码思路是这样的,两次进入外部中断以后开启定时器,关闭外部中断,第一次进入定时器中断时间是400us,以后都是800us这样就可以对每一位码位进行两次采样。 控制位一位,系统码位5位,数据码位6位。总共12位。一位采样两次。总共24次,正好 ...… 查看全部问答> |
|
我现在用TCPMP播放视频,当TCPMP正在播放的时候,我拔掉卡,系统会给我一个拔卡事件,之后我关闭TCPMP播放。这样理论是应该是没有问题的,但是实际上操作,却偶尔发现播放器会死掉(系统还没死,只是TCPMP被卡住了)。我对播放进行跟踪,发现是播放器 ...… 查看全部问答> |
|
我在CONFIG.H中设置好 DEFAULT_BOOT_LINE \"secEnd(0,0)host:vxWorks h=192.168.0.1 e=192.168.0.100:ffffff00 u=target pw=target tn=S3C4510\"后! 生成bootrom_uncmp后转化成bootrom.bin,再烧写到boot flash中! 启动后,能ping ...… 查看全部问答> |
|
STM32内部RAMboot问题请教,请版主和大家帮忙看看,谢谢 大家好,刚开始学习STM32f103zet6,对存储器的映射不是太了解。从而产生如下的疑问,请大家帮忙看看。 我将GPIO的demo code download到内部RAM中,程序可以正常运行,但是看memory 窗口0x2000 0000的地址的数据,跟用keil生成 ...… 查看全部问答> |




