历史上的今天
返回首页

历史上的今天

今天是:2024年12月03日(星期二)

正在发生

2020年12月03日 | 谁会成为未来机器视觉应用领域的王者?

2020-12-03 来源:爱集微

无处不在的机器视觉

无人机越来越聪明了!很多使用者都有这样的感慨。从前操作无人机都要小心翼翼,唯恐突遇障碍物挡道,遭遇炸机之惨祸。现在的无人机则完全可以腾挪躲闪,及时回避飞行路径中的各种障碍物,让很多初学者也可以轻易驾驭。

变聪明的无人机有什么秘技吗?答案就是有了机器视觉技术的加持。通过机器视觉技术,无人机不但能感知障碍物,还能知道自己和障碍物的距离,实现精准的避障和绕障。

机器视觉的概念源自于机器人领域,美国机器人工业协会对其定义为:“通过光学的装置和非接触的传感器自动地接收和处理一个真实物体的图像,以获得所需信息或用于控制机器人运动的装置。”

机器视觉常以完整系统形式出现,通常可划分为光学成像、图像传感器、图像处理、IO和显示等五大模块。这其中,以全局快门Global Shutter (以下简称GS)CMOS传感器为代表的图像传感器推动了机器视觉系统近几年的大发展。

(图片来源于腾讯视频:思特威Global Shutter技术与前沿机器视觉应用视频)

正是有了CMOS图像传感器,机器视觉早已不再是工业自动化领域的专属名词并已经轻松融入了我们的生活当中,因此也有了“消费级机器视觉”这一新兴领域及概念。比如,进入很多家庭的扫地机器人,配备了机器视觉技术,可以彻底清扫卫生死角。小巧便捷的翻译笔,因机器视觉技术,可以读懂多种语言。而工业自动化生产线上,依然使用机器视觉系统自动完成高度精密的自动化制造及对不良产品的检测等。

而随着AI应用的广泛落地,例如扫脸支付、人脸识别门禁/门锁更是以极快的速度渗透到了人们的工作和生活中。连商场里也不乏智能互动电子屏、智能穿衣镜等基于AI及机器视觉的交互类智能视频设备的身影。

总体来看,CMOS图像传感器已借由“消费级机器视觉”的纽带与我们的生活完美契合在了一起。

(图片来源于腾讯视频:思特威Global Shutter技术与前沿机器视觉应用视频)

CMOS传感器的新崛起

CMOS是当今主流的图像传感器技术之一,与之对应的是曾经的霸主CCD图像传感器。

1970年,CCD图像传感器在Bell实验室发明,CMOS图像传感器在NASA的喷气推进实验室JPL制造成功。但是,CCD依靠高量子效率、高灵敏度、低暗电流、高一致性、低噪音等特性,一直成为图像传感器市场的主导,直到90年代末才被CMOS拉下神坛。

与CCD图像传感器相对比,CMOS图像传感器具有低功耗、低操作电压、片上集成功能、性价比高等优势,但是在初期由于相对较差的性能和较大的像素尺寸,并没有得到重视。后来随着工艺制程水平的不断提高,CMOS图像传感器才逐渐开始展现出CCD图像传感器不具有的优势,在图像传感器领域的市场攻城略地。时至今日,手机、相机已经全部沦为CMOS传感器的天下。

不过CMOS图像传感器却丝毫没有止步的意思。进入21世纪后,随着机器视觉在工业自动化、无人机、智能家电中的应用,CMOS图像传感器又迎来了新一轮的发展浪潮。

因为机器视觉的应用特性,CMOS图像传感器面临新的挑战。如果以前只是要求成像细致、色彩鲜艳的话,现在则要求快速捕捉(高帧率),无形变(全局快门)和非可见光下成像(近红外增强技术)。毕竟,这次服务的对象从人换成了机器。

GS的引入是一个重大革新。它使得CMOS传感器同时曝光来撷取不失真的运动物体图像,这对机器视觉的领域有重大意义。

GS的基本原理是传感器可以同时扫描图像的整个区域。在GS传感器中,使用所有像素同时捕获图像。

举例来说,以前的背照式(BSI)传感器均为卷帘快门,因而会在拍摄高速运动的物体时产生“果冻效应”造成物体严重变形,但拥有全局快门的传感器则能够通过让传感器上的单个像素点在同一时间捕捉到光线信号从而有效解决这一问题。

而最早洞察这一趋势的是一家国内的图像传感器设计公司,思特威在2017年就以前瞻性的眼光开始布局其GS技术的研发,并于2018年就发布了全球首款基于BSI像素工艺的商业级30万像素GS CMOS图像传感器——SC031GS,成为率先进入“消费级机器视觉”应用领域的CIS企业先锋。

该产品创造性地将BSI像素设计工艺与GS图像传感器设计巧妙结合在一起,提供信噪比更佳、灵敏度更高与动态范围更大的成像性能,可应用于智能读码器设备、无人机、智能模组(Gesture Recognition/ vSLAM/ Depth Information/ Optical Flow)等诸多图像识别类AI应用领域,而GS CMOS传感器也迎来了无比宽广的发展空间。

战略眼光成就GS传感器新贵

作为图像传感器领域的前沿,GS CMOS传感器的研发成为了业界关注的焦点。尤其是,高分辨率的GS CMOS设计和生产门槛都很高。

可喜的是,以思特威为代表的中国高新CIS企业已经在这个领域占据了先机。就在前不久举行的SPM 2020思特威合作伙伴大会上,思特威创始人兼董事长兼CEO徐辰博士指出,除了在安防应用领域继续保持领先的市场份额外,思特威早在2017年就布局的消费级Global Shutter图像传感器市场今年亦收获佳绩,在消费级机器视觉领域出货量跃居全球首位!面对这样的市场成绩,思特威并未停下对GS技术进阶创新的脚步。在SPM 2020大会上徐辰博士继而发布了思特威2nd Gen SmartGS® 技术,通过提升pixel size来增加感度和暗光效果,提升率可达30%,另一方面采用并行电压域读取,大大提升了最大快门速度,完善对高速运动物体的清晰抓拍。据介绍,该技术基于全新的电容工艺,其读取噪声可降低一倍以上,同时兼具区域 HDR技术,可大大提升特定位置的动态范围,解决了夜间拍摄信号灯成像过曝等问题,可谓大放异彩。而下一代3rd Gen SmartGS® Technology的研发已经在路上,预计将在明年和大家见面。

在尖端GS技术的加持下,思特威今年陆续推出了数款赋能不同机器视觉应用领域的GS产品。如赋能智能驾舱DMS系统的全新130W像素全局快门图像传感器——SC133GS,采用2.7μm像素及1/4″光学尺寸,凭借思特威领先的GS技术优势,可以为DMS系统及时提供无形变、无伪影的高清可识别影像,为系统进行及时精确的判断提供坚实的基础,有效监测驾驶员驾驶状态,保障行车安全。

(图片来源于思特威SC133GS产品发布新闻)

而在智能交通系统(ITS)应用领域,思特威今年亦发布了SC410GS,该产品采用400万的BSI像素结合全局快门技术,可精准捕捉快速运动的物体,成像无尾影、不形变,大大提升了智能交通系统对车牌的精准捕捉及高效识别。而在SPM 2020大会上,思特威也现场展示了SC410GS覆盖2-4车道的ITS实际应用演示影像,博得了来宾的一致肯定。

而后续,思特威还将发布面向ITS应用更高分辨率的SC910GS(即900万BSI与GS技术结合产品)以及在信噪比、高温成像、近红外增强及HDR上全性能升级的SC035HGS(mono/color)产品,赋能更多AI及消费级机器视觉应用终端。

结语

随着硬件方案的不断成熟和运算能力的提升,机器视觉在多个领域应用的广度和深度均在提高。作为核心部件的GS CMOS传感器,在设计和工艺不断改进的条件下,还将继续推动机器视觉的应用在各个领域进一步普及,并为人们的生活带来更多智能与美好。


推荐阅读

史海拾趣

ENTRELECUK公司的发展小趣事

在电子行业的早期,ENTRELEC UK以其创新的接触器设计在市场中脱颖而出。随着技术的进步,公司不断研发新产品,如过载继电器和电动机保护开关,这些产品迅速获得了市场的认可。公司通过持续的研发投入,确保产品始终走在行业前沿,为客户提供更安全、更可靠的解决方案。

ENERGIZER公司的发展小趣事

为了配合全球业务的发展,ENERGIZER在亚太地区设立了8个厂房和18个国家的办事处。其中,劲量(中国)有限公司于1992年开始进驻中国,并在1998年在天津设立了生产工厂。这一举措不仅促进了中国与国际间的技术交流与合作,还为中国的电池制造业带来了新的发展机遇。随着中国市场的不断扩大,ENERGIZER在中国的业务也逐渐壮大,成为了中国电池市场的重要参与者。

永丰盈(CST)公司的发展小趣事

作为一家有社会责任感的企业,CST始终关注环境保护和社会公益事业。公司严格执行环保法规,积极推广绿色生产理念,努力减少生产过程中的污染排放。此外,CST还积极参与社会公益活动,为当地的教育、文化等事业做出了积极贡献。这些举措进一步提升了CST的企业形象和社会声誉。

Bias Power公司的发展小趣事

在竞争激烈的电子行业中,Bias Power公司始终坚持质量至上的原则。公司建立了严格的质量控制体系,从原材料采购到生产加工、产品测试等各个环节都进行严格把关。此外,公司还引入了先进的生产设备和技术,确保产品的稳定性和可靠性。

由于公司对产品质量的严格把控,Bias Power公司的产品在市场上享有很高的声誉。许多知名企业都选择与其合作,将其产品应用于关键领域和重要项目中。这种信赖和认可为Bias Power公司的发展提供了有力支持。

CoolerMaster公司的发展小趣事

Cooler Master一直致力于技术创新,不断推出具有颠覆性的产品。例如,其推出的MasterLiquid 360 Ion高性能散热器,配备了壮观的2.1英寸LCD屏幕,可实现无与伦比的定制显示内容。这一产品不仅展现了Cooler Master在散热技术上的领先地位,更体现了其对于用户体验的深刻洞察。此外,公司还借助Atmos系列迈向可持续散热的未来,为行业的发展注入了新的活力。

Barkston Plastics Engineering Ltd.公司的发展小趣事

面对国内市场的饱和,Barkston Plastics Engineering Ltd.开始寻求国际化发展的道路。然而,国际市场环境的复杂性和文化差异给公司带来了诸多挑战。在经历了一系列的市场调研和风险评估后,Barkston成功打入欧洲市场,通过与当地企业的合作,逐步扩大了其国际影响力。这一国际化发展进程不仅为公司带来了更广阔的市场空间,也提升了其在全球电子行业中的地位。

问答坊 | AI 解惑

如何用c开发dsp

关键字:TMS320F24X C DSP :; DSP; C; TMS320F24X…

查看全部问答>

谷歌推免费手机GPS导航系统

北京时间10月29日消息,据国外媒体报道,谷歌周三推出了一款免费手机导航应用,该款应用可向用户提供建议路线(turn-by-turn)。谷歌此举被认为可能会向GPS设备制造商发起攻击。 谷歌推出的新应用谷歌地图导航(Google Maps Navigation)是其手机版 ...…

查看全部问答>

【转】Linux内核裁剪的具体步骤

在menuconfig中配置: 详细介绍内核配置选项及删改情况 第一部分:全部删除 Code maturity level options ---> 代码成熟等级选项 []Prompt for development and/or incomplete code/drivers 默认情况下是选择的,这将会在设置界面中显示还在开 ...…

查看全部问答>

SAA3010红外解码遇到一些地方不是很明白

我的解码思路是这样的,两次进入外部中断以后开启定时器,关闭外部中断,第一次进入定时器中断时间是400us,以后都是800us这样就可以对每一位码位进行两次采样。 控制位一位,系统码位5位,数据码位6位。总共12位。一位采样两次。总共24次,正好 ...…

查看全部问答>

条码打印机资料参考

我公司是北京地区专业提供标签打印机,条码打印机, 条码数据采集器设备和商品仓储管理系统配套方案的专业化公司, 为企业单位在生产流程管理和商品仓储管理实现条码信息化应用, 无线条码数据采集,盘点应用,仓储信息化管理提供专业的产品和解决方案 ...…

查看全部问答>

TCPMP播放的时候拔卡死机的问题

我现在用TCPMP播放视频,当TCPMP正在播放的时候,我拔掉卡,系统会给我一个拔卡事件,之后我关闭TCPMP播放。这样理论是应该是没有问题的,但是实际上操作,却偶尔发现播放器会死掉(系统还没死,只是TCPMP被卡住了)。我对播放进行跟踪,发现是播放器 ...…

查看全部问答>

关于BOOTROM的生成问题?

我在CONFIG.H中设置好 DEFAULT_BOOT_LINE   \"secEnd(0,0)host:vxWorks h=192.168.0.1 e=192.168.0.100:ffffff00 u=target pw=target tn=S3C4510\"后! 生成bootrom_uncmp后转化成bootrom.bin,再烧写到boot flash中! 启动后,能ping ...…

查看全部问答>

还是搞不懂怎么烧写NORFLASH

                                 我用的是STM3210E-EVAL评估板,想把程序中有一些表,数组放到NOR FLSAH中去,实在不知怎么烧进去,请懂的朋友 ...…

查看全部问答>

STM32内部RAMboot问题请教,请版主和大家帮忙看看,谢谢

大家好,刚开始学习STM32f103zet6,对存储器的映射不是太了解。从而产生如下的疑问,请大家帮忙看看。    我将GPIO的demo code download到内部RAM中,程序可以正常运行,但是看memory 窗口0x2000 0000的地址的数据,跟用keil生成 ...…

查看全部问答>