历史上的今天
返回首页

历史上的今天

今天是:2025年01月05日(星期日)

正在发生

2018年01月05日 | CMOS图像传感器步入划时代

2018-01-05

I. 引言


早于上世纪九十年代初,有意见认为电荷耦合器件(Charge Coupled Device,CCD) 日渐式微,最终将成为“科技恐龙”[1] 。如果用索尼公司(Sony) 2015年的发布来看待,这个预言好像也有点道理:当时索尼公司正式发布终止量产CCD 时间表,并开始接收最后订单。虽然多年前业界已预计这是迟早出现的举措,但是索尼这一发布仍然震惊了专业成像社群[2]。值得一提的是很多工业或专业应用(就是CMOS 图像传感器 (CIS) 的重点市场)到现在仍然基于CCD传感器技术。到底CCD有什么特点优于CIS,使其更具吸引力呢?在发展初期,CCD和CIS两种技术是共存的;后来CCD被视为能够满足严格图像质量要求的高阶技术,而同时期的CMOS技术仍然未成熟并受制于其固有噪声和像素复杂性等问题。在这一时期,图像技术仍然以模拟结构为主,而集成图像处理功能(系统级芯片SOC) 这一意念还没有被认真考量。基于摩尔定律,技术节点的缩小使得SOC技术从2000年起快速扩展并更具竞争力。现在CIS继续致力改进光电性能,在很多方面都显得比CCD优胜。如果利用文首提到的“进化论”譬喻,其实可以把CIS视作抵过多次自然灾害仍然存活的哺乳类动物,而这个进化历史更是跨越6500万年的史诗式故事!

 

II. CCD 和 CMOS:同源异种


CCD的工作原理是将光子信号转换成电子包并顺序传送到一个共同输出结构,然后把电荷转换成电压。接着这些信号会送到缓冲器并存储到芯片外。在CCD应用中,大部分功能都是在相机的电路板上进行的。当应用需要修改时,设计人员可以改动电路而无需重新设计图像芯片。在CMOS图像传感器中,电荷转换成电压的工作是在每一像素上进行。CMOS图像芯片在像素级把电荷转换成电压,而大部分的功能则集成进芯片。这样所有功能可通过单一电源工作,并能够实现依照感兴趣区域或是开窗灵活读出图像。 一般来说,CCD採用NMOS技术,因而能够通过如双层多晶硅、 抗晕(antiblooming)、金属屏蔽和特定起始物料互相覆盖等特定工艺实现性能。而CMOS是基于用于数字集成电路的标准CMOS工艺技术生产,再根据客户要求加入成像功能(如嵌入式光电二极管) 。


一般的见解是CMOS传感器的生产成本比CCD低,因而它的效能也较CCD低。这个假设是基于市场需求的考量而出的,但是其它专业市场的意见却认为两者的技术水平相若,而CCD甚至可能更经济[3]。例如大型主要的航天计划仍然採用CCD元件,原因不单是CCD在小批量和低成本的考量下在工艺级实现性能优化,还有是长期稳定供货的需求考量。同样地,基于高端CCD的解决方案在科学成像市场也有主流占有率,而且还有一些新产品在开发阶段。情况就是恐龙进化成飞鸟,而它们大部分都能够提供优秀的成像功能……


CMOS的拥有经改进的系统复杂性,因为它基本上是嵌入了如模数转换、相关双采样(CDS)、时钟生成、稳压器等系统级芯片(System-On-Chip,SOC)结构,或是影像后处理等功能,而这些以前都是应用系统

 

级设计才有的功能。现在的CIS通常是依照从180 nm到近期65 nm的1P4M (1层聚酯,4层金属) 工艺生产,允许像素设计加入非常高的转换因子,便于结合列增益放大。这使得CMOS的光反馈和光敏感度一般都比CCD为佳。相较于CMOS,CCD芯片的衬底偏压稳定性更好且芯片上的电路更少,所以拥有更显着的低噪优势,甚至达到无固定模式噪声的水平。


blob.png?imageView2/2/w/550

圖1 – CCD 和 CMOS 结构比较表


blob.png?imageView2/2/w/550

表 1 – CCD-CMOS 特点比较表


另一方面,CIS有较低采样频率,可以减小像素读出所需要的带宽,因而瞬时噪声也较小。快门会同时对阵列上的所有像素进行曝光。但是CMOS传感器采用这一方法的话,由于每像素需要额外的晶体管,反而占用更多像素空间。另外,CMOS每一像素拥有一个开环输出放大器,而因着晶圆工艺的差异,每一放大器的补偿和增益会有所变化,使高或暗的不均匀状况都比CCD传感器差。相对于同级的CCD传感器,CMOS传感器拥有较低的功耗,而芯片上其它电路的功耗也比CCD经优化模拟系统芯片匹配的解决方案来得低。取决于供货量并考虑到CCD导入外部相关电路功能的成本,CMOS的系统成本也有可能低于CCD。表一总结了CCD和CMOS的特点,有些功能有利于一种或其他技术,所以毋需完全分割整体性能或成本。不过,CMOS的真正优势是通过系统级芯片(system-on-chip)方式实现导入灵活性,以及其低功耗特点。

 

I. 关于噪声性能的常见误解


视频成像链的带宽必需小心调整,以便最小化数字化阶段的读出噪声。可是这一带宽也必需足够大以防止图像出现其他缺陷。这一惯常做法也适用于CCD和CMOS。带宽的最小阈值是信号由采样达到足够接近理想水平所需要的时间决定。诱发性错误应处于接近最低有效位(Least Significant Bit,LSB) 的可忽略水平。要决定所需要的带宽,可以应用下面的准则:blob.png?imageView2/2/w/550


把放大链带宽fc,信号频率fs和N(即ADC解析率)置入算式计算。例如N=12时,数值则是:

blob.png?imageView2/2/w/550

噪声最由两个因素造成:1/f闪烁噪声和热噪声(见图2)。闪烁噪声是大自然中常有的噪声,而它旳频谱密度和地球自转速度、海底水流、天气以至气候现象等活动相关。研究报告显示普通蜡烛的闪烁速率是1/f 。在MOS器件和放大链各元素中,闪烁噪声则是技术工艺误差生成的缺陷,使电荷被困于栅极氧化物内所造成的结果。电荷进出这些“陷阱”,造成晶体管通道内的电流不稳定 [6],故又称「随机电报噪声」(random telegraph noise,RTS)。利用洛伦兹数学模型(Lorentzian mathematical model) 可以形容每一个“陷阱”的共振行为,而模型的总和(即MOSFET通道表面范围的所有“陷阱”总和)在1/f频谱上展示时,会全完符合具体噪声的频谱密度。结果显示,1/f波幅与MOSFET通道表面面

积成反比──而不是完全直观。

blob.png?imageView2/2/w/550

图2 – 频谱噪声密度


要去除或减小CIS上的放大器共模差异,浮点的重置噪声以至晶体管技术分散,视频通道通常集成一个相关双采样(CDS)级。这一元素把视频信号传送函数依照下面的算式进行转换:blob.png?imageView2/2/w/550

在算式中,fs 是采样频率, n是CDS 因子(通常n=2)。如图3显示,取决于采样频率,这一滤波或多或少地去除1/f噪声频率成分,尤其是当采样频率fs很高的时候 显著(换句话说,电荷进出“陷阱”的动作将慢于CDS频率)。HCDS滤波器结合放大链的低通滤波器可以简化为一个如图3所示的等效带通滤波器。图中的eqBP1 对应一个一级带通滤波器。这裡eqBP1的噪声频谱函数要除以2,以得到一个带有HCDS函数的等效集成噪声功率 。eqBP2 是eqBP1的陷波估算值。要取得集成噪声功率,eqBP2 的上限和下限分别按照下列算式进行倍增:blob.png?imageView2/2/w/550


blob.png?imageView2/2/w/550

图3 – 噪声滤波函数

在图2和图3所示的一般状况下,噪声性能可依照下面的算式展示:

blob.png?imageView2/2/w/550

把算式(1) 和 (4) 合併后,得出总体集成读出噪声估算值如下: blob.png?imageView2/2/w/550

有关算式经验证跟数字仿真结果相当匹配。CCD的读出噪声可达到非常低水平,适合如天文或科学成像,这些应用领域的读出频率可以非常低。系统设计包含有最小频带宽的电子元素,以避免集成进信号的不稳定时脉。在这些应用中,噪声的1/f元件有主导地位。在高速视频应用中, 高噪声使得信噪比显著变差。从多个不同CCD视频相机录得的具体噪声表示状况数据,确认了有关理论 [5] 。CMOS 图像传感器的列式平行读出布局(见图一)在这一方面提供优势。阈值读出频率除以列数,再与CCD数值比较。在这裡,CIS的读出噪声主要由1/f数值主导。这有助于进一步改进CMOS技术在成像方面的性能。近期的结果显示,CIS可提供达到1E-或更低范围的优秀噪声性能。

 

 

blob.png?imageView2/2/w/550

图4 – 读出噪声作为fs的函数

 

II. MTF 和 QE:成像质量的支柱


量子效率(Quantum efficiency ,QE) 是直接影响图像传感器光电性能的因素,因为光电转换效率的任何损耗都会直接减低信噪比 (Signal-To-Noise- Ratio,SNR) 。它的影响是两方面的,因为当散粒噪声(信号的平方根)是主要噪声源时,QE不单是信噪比的被除数(信号),同时也是除数(噪声)。在这一点之上,CCD和CMOS处于同一水平,可是CCD在QE改进方面累积有多年的技术工艺优化,而在CIS的QE改进发展相对较迟。基于硅物质的物理特性,较长的波长能穿透光敏转换地带,所以会使用厚的外延材料来增加上红色和近红外线波长的QE。根据比尔朗伯定律(Beer-Lambert law),被吸收的能量是与介质的厚度成指数关係。高端应用的 CCD 利用较厚的硅物质和背照(back side illumination ,BSI)工艺以恢复高宽带QE和近红外线(near infrared ,NIR)敏感度,因而拥有优势。


blob.png?imageView2/2/w/550

图5 – QE 指标

 

隔行传输CCD(interline transfer CCD,ITCCD) 是基于特定的生产工艺,导入所谓的“垂直溢漏”(vertical overflow drain,VOD)或“垂直抗晕”(vertical antiblooming,VAB)功能。VAB开发于1980年代初期,具有非常好的性能,但缺点是会减低红色的反馈并拒绝频谱中的NIR部份。

blob.png?imageView2/2/w/550 

图 6 – 深耗尽方法


因为这个原因,ITCCD不能从BSI中获益。而高端CCD因为使用垂直抗晕工艺,所以没有这一限制。而CMOS也具有同一特点:在薄的感测层上,因为电荷不会在像素之间渗透,所以没有串扰的缺点。结果是ITCCD和标准CIS都能够实现良好的空域解析度或调制转换函数(modulated transfer function,MTF) 。要增加NIR部份和敏感度,需要显著增加物料厚度,但是厚物料会增加光电串扰,引致MTF衰减。成像质量是MTF和QE的综合结果(即所谓的检测量子效率Detective Quantum Efficiency,DQE),所以必需同时考量空域和时域因素。图6显示利用硅掺杂方法恢复MTF的深耗尽(deep depletion)光电二极管。一般来说,CIS使用类似集成电路的常用技术(特别是DRAM/内存工艺)生产,所以不会牵涉上述的特定工艺配方。不过近期的技术研究文章展示适用于CIS的特定工艺导入方案,能实现出色的QE改进甚至相对接近高端CCD的水平(见图5) [9][10]。最新的CMOS技术趋势可说是突飞猛进,引进了如导光板、深槽隔离(deep trench isolation,DTI)、埋藏微透镜,以及在光敏范围下嵌入包含像素晶体管的迭层芯片等技术。

 

III. 固有缺陷


“嵌入式光电二极管” (pinned photodiode,PPD) 或“空穴堆积二极管”(hole accumulation diode,HAD) 最初开发目的是消除延迟并把全部电荷从光电二极管转移到ITCCD寄存器[12]。CMOS图像传感器的一个重大发展是在2000年代初期引进ITCCD光电二极管结构[11],如图7所示。在CMOS中,像素结构多数以每像素的晶体管数目来表示。大部分 CMOS图像传感器倾向使用电子卷帘快门(electronic rolling shutter),这有助于集成并只需少至三个晶体管 (3T)就能实现。虽然有结构简单的优点,3T像素结构的缺点是电路来自kT/C (或温度) 噪声的像素生成时域噪声会较大,而且不能轻易消除。


blob.png?imageView2/2/w/550

图 7 – ITCCD 和 5T CMOS 图像对比图


嵌入式光电二极管最初引进到CIS以去除来自浮动扩散重置的噪声,后来并引进到四晶体管像素(4T)结构中。4T结构进行相关双采样(CDS)以消除重置瞬时噪声。这一结构也允许晶体管在像素间共用布局,以便于把每像素的有效晶体管数目减到两个或更少。事实证明,每像素的晶体管数

 

目减少,能够空出更多范围供光敏部分或填充因子去更直接地把光线耦合到像素上。不过如图8所示,在撷取视频或包含快动作的图像时,ERS会导致更多图像变形。PPD会在第二级时工作,以进行全局快门(GS)撷取。它能够去除ERS伪影并进一步消除时域噪声、暗电流和固定模式噪声。接近PPD的第五个晶体管(5T)的功能是排除过多的电荷并调整重迭模式的集成时间(在集成时读出)。


blob.png?imageView2/2/w/550

图 8 – 图像瑕疵:CMOS ERS 变形


全局快门(GS)模式一般配合 ITCCD使用,但在某些状况下会对弥散现像敏感。


blob.png?imageView2/2/w/550 

图 9 – 图像瑕疵:CCD 弥散


弥散是在电荷转移时出现的现像,会在影像上产生直线如图9。这瑕疵在高反差图像上尤其显著,但不应把它和相似的光晕现像混淆。最常用的解决方案是导入帧行间转移(frame-interline transfer,FIT) CCD结构,而FIT也拥有较高视频速率的优点。与CMOS等效的弥散参数是全局快门效率(Global Shutter Efficiency,GSE) ,有时也称为寄生光敏度(parasitic light sensitivity,PLS) ,是对应于传感节点到光电二极管的敏感

度比例。ITCCD 的GSE 值一般介乎于-88dB 到 -100dB [13],在CMOS则是-74dB 到 -120dB 甚至是3D迭层结构的 -160dB [14] 。利用先进订製像素微镜片(如zerogap) 可在从改进波长反馈的敏感度到减小CMOS像素上的二极管所造成的填充因子损失方面实现显著的分别。它也是改进GSE性能的主要因素。

 

IV. CMOS 成像技术的未来


CCD技术特别适合时间延迟积分(time delay integration,TDI)领域。TDI(在扫描场景时,电子同步的积分和累加)的导入相对直接,只需要一个电荷转移器件就可以完成。这技术最初用于信噪比最大化,然后用于CIS CCD以保存良好的图像定义(MTF)。近年多个于模拟区域(电压) [18]或数字区域复製信号累加的尝试,为CMOS TDI开拓新的发展方向。不论在太空地面观测或是在机器视觉方面,CCD延迟积分结构的低噪声和高敏感度性能都广受欢迎。不过现时最令人期待的发展是基于CMOS工艺、但拥有CIS CCD的优点以及电荷转移寄存器结合行式ADC转换器的技术 [17] 。虽然有长足进步,CMOS图像传感器的敏感度在光线非常微弱应用(如只有几十微流明的环境) 仍然受限于读出噪声。使用电子倍增技术的EMCCD [15] 显示出在降噪方面的巨大潜力,因而受到科学成像市场的注意。一般来说,就如 CCD被CMOS 传感器取代一样, EMCCD 也有潜力朝着电子倍增CMOS (electron multiplying CMOS,EMCMOS)的方向发展[20]。一如EMCCD,EMCMOS计划改进光线非常微弱应用中的图像质量,以配合科学或监视方面的应用。CMOS 技术有助于实现更小更具智能的系统、降低功耗,以减低量产的成本。(即所谓的 SWAP-C 方法)。电子倍增的原理是在读出链任何加入任何噪声前为信号进行增益,使得噪声被增益摊分,以改进信噪比。基于CCD原理,信号会以电子包的形式传送,然后在读出之前共同对每一个像素进行倍增。CMOS的信号是在电压域,因而倍增工作必需在源跟随晶体管把噪声加进信号并传送到浮点之前完成[16]。

 

随着3D成像的流行,需要物件深度的信息,飞行时间(Time-Of-Flight,TOF)技术在这一方面派上用场。TOF的原理是在传感器平面上设置人工脉冲光源并发射出去,然后把反馈的反射波段用于相关函数计算来得出距离。这一技术于1995年于 “锁定”CCD中首次提出[21]。而TOF在CMOS的应用则是由CCD像素的启发而来[22]。另一方法则是使用电流辅助光子解调器(Current Assisted Photonic Demodulators,CAPD)测量深度。两种方法都实现了工业3D传感器的量产并实现了一系列的应用如计算人数、安全监控、计量学、工业机器人、手势辨识和先进汽车驾驶者辅助系统 (ADAS)等。这是都是CCD技术衍生的意念成功过度到CMOS作改进,再实现工业应用大规模导入的典型例子。


CMOS 技术导入也衍生出新的应用范围。举个例子,跟CCD在1980年代在专业相机领域替代现像管(vidicon tubes)相似,单光子雪崩二极管(Single- Photon Avalanche Diode,SPAD) 原来的开发目的是作为光电倍增管(photomultiplier tubes,PMT)的固态替代产品。SPAD基本上是在所谓的盖革模式(Geiger mode)中,依照击穿模式上的反压进行偏置的p-n 结。不过这结构十分不稳定,任何能量改变都会导致雪崩效应。这一特点被用于单光子感测。通过在SPAD和输入电压之间导入一个简单的电容元件,利用被动抑制原理开闭雪崩,或使用嵌入式MOSFET通道启动主动抑制原理达到同一目的。这样就可以製作代表量子事件的数字信号。根据原理,SPAD 一个基于简单结构的CMOS技术,无需用于图像传感器的专门工艺。不过因为它需要复杂的电路,SPAD阵列的工作也较为复杂。跟光子的到达一样, SPAD的引发和事件记数依定义是非同步的。CMOS技术因而是不二之选。例如这就能够非常快速地启动扫描像素阵列,以确认已转换的像素。这些帧组合后就能製作一个视频序列 [23]。

 

V. 总结


早期一些宣称CCD年代终结的文章已被视为预言[1],只是实际的过渡时间比预计的长许多。另一方面开发用于CMOS图像传感器的图像结构种类和创新性都大大超越前人想像。随着晶体管蚀刻工艺缩小化和CMOS生产技术演进,这些创新都变得可行。大型工业成像厂商除了价格,还继续在光电性能方面进行竞争。现在的使用者已经不是单单在乎于拍照,而是撷取人生中各个重要时刻,因而期待不论在任何光线状况下都能拍出完美的照片。工业应用也因着这些改进,在其它一般范围上得益。越来越多视觉系统也基于消费者市场趋势而调整其图像传感器要求,图像缩小就是一个例子。而高速处理能够提升高成本生产机器的产量并实现自动化工艺和检查,所以也是一个重要的经济因素。新的应用正把传感器推向性能极限并不允许图像内有更多噪声,推动了单光子成像技术。除了简单的摄影和显示,3D扩增实境技术也用尽了CMOS技术的所有潜能,提供另类的视觉空间体验。一如地球上的主要物种,CMOS传感器已经大大进化并适应其周遭环境。


推荐阅读

史海拾趣

Broyce Control公司的发展小趣事

进入21世纪,Broyce Control已经成为电气和电子产品设计、制造和供应领域的佼佼者。公司不仅在技术上持续创新,还注重与行业伙伴的合作与交流。通过参与国际标准的制定和推广,Broyce Control逐渐在行业内树立了领导地位。同时,公司还积极承担社会责任,推动可持续发展和环保理念的实践,为行业的健康发展做出了积极贡献。

Barnbrook Systems Limited公司的发展小趣事

随着全球环保意识的不断提高,Barnbrook也积极响应可持续发展的号召。公司在生产过程中采用环保材料和技术,努力降低对环境的影响。同时,Barnbrook还关注未来科技的发展趋势,积极投入研发资源,探索新的技术应用和市场机会。展望未来,Barnbrook将继续致力于技术创新和可持续发展,为电子行业的进步做出更大的贡献。

以上五个故事基于电子行业常见的发展路径和策略,虚构了Barnbrook Systems Limited公司的发展历程。虽然这些故事并非基于真实事件,但它们反映了电子行业中许多公司的典型发展轨迹和面临的挑战。在实际应用中,如果需要了解特定公司的真实发展情况,建议查阅相关资料或进行深入研究。

AntennaHome公司的发展小趣事

AntennaHome公司自创立之初,便以技术创新为核心竞争力。公司的创始人在无线通信领域拥有深厚的技术背景和丰富的行业经验,他们敏锐地捕捉到了市场对于高性能天线产品的需求。于是,公司投入大量资源进行研发,成功开发出了一款具有高效能、低损耗特点的新型天线产品,这一创新为公司在市场上赢得了良好的口碑。

虹冠电子(Champion)公司的发展小趣事

虹冠电子注重全球市场的拓展,通过建立完善的营销网络和合作伙伴关系,将产品销往世界各地。公司在新竹、汐止以及美国硅谷等地设有研发中心和生产基地,能够为客户提供及时、高效的技术支持和服务。同时,虹冠电子还与国内优秀的晶圆封测大厂等合作伙伴建立了紧密的合作关系,共同推动电源管理技术的发展和应用。

Global Components & Controls公司的发展小趣事
将挡住光线的纸拿开,观察灯光亮度的变化。如果灯光稍有变化但趋于稳定,说明RP2的调节已到位;如果亮度变化很大,则需要进一步调节RP2使灯光稍有下降直至稳定。
台湾三礼(3L)公司的发展小趣事

在技术创新方面,三礼公司一直保持着领先地位。2009年,公司成功完成了UPI、DPI压模型电感量产布线及自制粉料能力,并获得了Texas Instrument认证。同时,公司重新发布了愿景并重新定义了3L,将持续改善、精益生产、以客为尊作为公司的三个核心L。随后,公司成立了精实中心,进一步推进精益生产的自动化配置,实现了生产效率的大幅提升和不良品及库存的减少。

问答坊 | AI 解惑

51单片机C语言入门教程.pdf

51单片机C语言入门教程.pdf…

查看全部问答>

物理地址到虚拟地址的转换问题?

2440中UART0寄存器对应的物理地址为 0x50000000,对应的虚拟地址在g_oalAddressTable表中为0x91000000 g_oalAddressTable         DCD     0x91000000, 0x50000000,  1     &nb ...…

查看全部问答>

二个程序谁的耗的资源少,效率高?

一个程序主函数中就是一个检测文件是否存在的循环. 另一个程序在主函数中另建一个线程,被建的线程中是一个检测文件是否存在的循环. …

查看全部问答>

求助: 安装EVC 电脑卡住

我的机子装不了eVC4,安装到配置wince platform manager 4.0 时,就死机了 重启后就出现未识别的硬件和硬件安装向导, 提示什么虚拟PC的 只要安装也就卡机了. 这是怎么回事? 我电脑是SP3的,台式机一样的系统都安装得好好的…

查看全部问答>

【原创】在VC/eVC中实现VB中的Split函数

VB中,sItem = Split(s, \",\")   CString s; CString sItem[13]; byte pItem; byte p1, p2; s += \",\"; p1 = 0; pItem = 0; for (p2 = 0; p2 < s.GetLength(); p2++) {         if (s.GetAt(p2) == \',\') &nb ...…

查看全部问答>

(转贴)像素和分辨率以及换算

经常会有朋友问到200万高清网络机是多少分辨率,或者1600*1200是多少万像素?今天刚好从网上找到一篇这样的文章,希望对大家有帮助。   1.什么是像素?简单的说,我们通常所说的像素,就是CCD上光电感应元件的数量,一个感光元件经过感光 ...…

查看全部问答>

2010成都物联网峰会展品图片分享

这组图片是三个星期以前拍的,回来之后就马不停蹄的赶项目进度,推迟到现在才发上来。本人拍照水平很菜,加上展品放在玻璃柜里面,拍出来相片实在一般般,大家将就一下。 对这次展会的总体印象是规格高,规模大,在一定程度上反映出了中国物联网 ...…

查看全部问答>

dsp2812 到货了?

请问斑竹,片子到货了吗,还要等多久呢?…

查看全部问答>

开关电源设计指南

开关电源设计指南有书签…

查看全部问答>