具有四个通道的滤色器阵列图案的制作方法

专利名称：具有四个通道的滤色器阵列图案的制作方法
技术领域：
本发明涉及从具有色彩通道和全色通道的滤色器阵列图像以改善的空间分辨率产生全彩色图像。
背景技术：
单传感器数码相机采用滤色器阵列(CFA)以便从光敏像素的单个二维阵列俘获全色彩信息。CFA由滤色器阵列组成，所述滤色器过滤由每一像素检测到的光。因此，每一像素接收来自仅一种色彩的光，或在全色或“透明”过滤器的情况下接收来自所有色彩的光。为了从CFA图像再现全彩色图像，必须在每一像素位置产生三种色彩值。这是通过从相邻像素值内插丢失的色彩值来实现的。最佳已知的CFA图案使用如拜耳(Bayer)(第3，971，065号美国专利)描述且在图2中展示的三个色彩通道。拜耳CFA具有三个色彩通道，其实现了全色彩再现能力。然而，所述三个通道的确切谱响应性(“色彩”)表现出折中。为了改善色彩保真度且加宽CFA 可俘获的色彩范围(即，色域)，需要使谱响应性更具选择性(“变窄”)。这具有减少到达像素的总光量且因此降低其对光的敏感性的副作用。因此，像素值变得更容易受到来自非成像源的噪声(例如，热噪声)的影响。对噪声问题的一个解决方案是使CFA谱响应性的选择性降低(“加宽”)以增加到达像素的总光量。然而，这带来的副作用是降低色彩保真度。对此三通道CFA限制的解决方案是采用四通道CFA，其由三个具有“窄”谱敏感性的色彩和一个具有“宽”谱敏感性的色彩构成。“最宽”的此通道将是全色或“透明”的，其将对全光谱敏感。三个“窄带”色彩通道将产生具有较高色彩保真度和较低空间分辨率的图像，而第四“宽带”全色通道将产生具有较低噪声和较高空间分辨率的图像。这些高色彩保真度、低空间分辨率和低噪声、高空间分辨率图像将随后合并为最终的高色彩保真度、低噪声、高空间分辨率图像。为了产生高空间分辨率全色图像，同时维持来自彩色像素的高色彩保真度，CFA内的全色像素的数目和布置以及对应的内插算法必须经适当选择。现有技术中存在着在此方面具有一种或一种以上责任的多种实例。弗莱姆(Frame)(第7012643号美国专利)教示图19中所示的CFA，其在全色⑵像素的9x9正方形内具有仅单个红(R)、绿(G)和蓝(B) 像素。弗莱姆的问题在于所得的色彩空间分辨率太低而无法产生图像中的所有细节，而只产生最低频色彩细节。山上(Yamagami)等人(第5，323，233号美国专利)描述如图20A和图20B中所示的两种CFA图案，其具有相等量的全色和彩色像素，从而避免了弗莱姆的责任。山上等人继续教示使用简单的双线性内插作为用于内插丢失的全色值的手段。仅线性内插方法的使用(例如双线性内插)极大地限制了经内插图像的空间分辨率。例如亚当斯(Adams)等人 (第5，506，619号美国专利)中描述的非线性方法产生较高空间分辨率经内插图像，只要 CFA图案准许其使用既可。图21A说明亚当斯等人使用的图案。在图2中所示的三通道系统中提供高空间频率分辨率的绿(G)像素围绕中心彩色像素在水平与垂直方向上与色彩(C) 像素交替。重要的是应注意，这些彩色像素全都是同一色彩，例如红像素。图21B展示类似图案，其在绿像素的位置中使用全色(P)像素。此时应注意，对于四通道系统，不可能以图 21B中所示的图案在传感器上的所有色彩(R，G，B)像素位置处发生的方式来布置全部四个通道(R，G，B和P)。因此，任一可能的布置将以此方式存在某种折中。关于山上等人，图20A 具有如图21B中布置的绿像素和全色像素，但红像素和蓝像素未如此布置。在图21B之后， 例如图21C中的布置是优选的，但图20A相对于红像素或蓝像素不具有此布置。图20B针对任何彩色像素均不具有图21B或图21C的图案。田中(Tanaka)等人(第4，437，112号美国专利)描述若干CFA图案，其中与本论述最相关的一者是图22。在图22中，青(C)、黄 (Y)、绿(G)和全色(P)像素经布置以使得绿像素由图21C中所示的相邻者围绕。然而，黄和青像素不符合图21B或图21C的图案。田中等人教示的其它图案存在相同的难题。哈密尔顿(Hamilton)等人(第2007/0024879号美国专利申请案)教示大量CFA 图案，其中两者在图23A和图23B中展示。这些图案的责任以及哈密尔顿等人揭示的所有其它图案均不具有图21B和图21C的像素布置。贵屿(Kijima)等人(第2007/0177236号美国专利申请案)描述大量CFA图案， 其中最相关的CFA图案在图M中展示。虽然双行全色像素在垂直方向上提供图21C布置， 但图M中不存在并排全色值的此水平布置。因此，需要一种具有三个窄带色彩通道和一个宽带全色通道的四通道CFA图案， 其具有足够的彩色像素来提供充足的色彩空间分辨率且经布置以便准许对丢失的全色值的有效非线性内插。

发明内容
根据本发明，提供一种用于俘获彩色图像的图像传感器，其包括二维光敏像素阵列，所述光敏像素包含全色像素和具有至少三种不同色彩响应的彩色像素，所述像素以具有至少八个像素且具有至少两行和两列的矩形最小重复单元来布置，其中对于第一色彩响应，具有所述第一色彩响应的所述彩色像素在至少两个方向上与全色像素交替，且对于其它色彩响应中的每一者，存在所述重复图案的仅具有给定色彩响应的彩色像素和全色像素的至少一行、列或对角线。本发明的优点在于改善了图像的色彩空间分辨率而无需相对于传感器内的全色像素增加彩色像素的百分比。本发明的又一优点在于实现了图像中的色彩噪声的减少而无需增加彩色像素的谱带宽且对应地降低图像的色彩保真度。从以下对优选实施例和所附权利要求书的详细描述的审阅且通过参考附图，将更清楚地理解和了解本发明的这些和其它方面、目标、特征和优点。


图1是用于实施本发明的数码相机的框图；图2是现有技术的最小重复单元；图3是本发明优选实施例的最小重复单元；
图4A和图4B是本发明替代实施例的最小重复单元；图5A和图5B是本发明替代实施例的最小重复单元；图6是本发明优选实施例的图像处理链的概述；图7是在内插全色图像值中使用的像素相邻者；图8是在内插全色图像值中使用的像素相邻者；图9A和图9B是在内插全色图像值中使用的像素相邻者；图10是在内插全色图像值中使用的像素相邻者；图IlA和图IlB是在内插全色图像值中使用的像素相邻者；图12A和图12B是在内插全色图像值中使用的像素相邻者；图13是在内插色差值中使用的像素相邻者；图14是在内插色差值中使用的像素相邻者；图15A和图15B是在内插色差值中使用的像素相邻者；图16A和图16B是在内插色差值中使用的像素相邻者；图17是展示本发明优选实施例的融合图像块的详图的框图；图18是展示本发明替代实施例的融合图像块的详图的框图；图19是现有技术的最小重复单元；图20A和图20B是现有技术的最小重复单元；图21A、图21B和图21C是现有技术的用于内插绿图像值和全色图像值的像素相邻者；图22是现有技术的最小重复单元；图23A和图2 是现有技术的最小重复单元；图M是现有技术的最小重复单元；且图25是本发明替代实施例的最小重复单元。
具体实施例方式在以下描述中，将在将普通地实施为软件程序的方面描述本发明的优选实施例。 所属领域的技术人员将容易认识到此软件的均等物也可以硬件来构造。因为图像操纵算法和系统是众所周知的，所以本描述将尤其针对形成根据本发明的系统和方法的部分或与所述系统和方法较直接地协作的算法和系统。此些算法和系统以及用于产生和另外处理其所涉及的图像信号的硬件或软件的其它方面可从此项技术中已知的此些系统、算法、组件和元件中选择。给定如根据本发明在以下材料中描述的系统，未具体展示、本文建议或描述的有用于实施本发明的软件是常规的且在此项技术中的普通技艺的范围内。此外，如本文使用，用于执行本发明方法的计算机程序可存储在计算机可读存储媒体中，计算机可读存储媒体可包含例如磁性存储媒体，例如磁盘(例如硬驱动器或软磁盘)或磁带；光学存储媒体，例如光盘、光带或机器可读条形码；固态电子存储装置，例如随机存取存储器(RAM)或只读存储器(ROM)；或用以存储计算机程序的任一其它物理装置或媒体。因为采用成像装置和用于信号俘获和校正以及用于曝光控制的相关电路的数码相机是众所周知的，所以本描述将尤其针对形成根据本发明的系统和方法的部分或与所述系统和方法较直接地协作的元件。本文未具体展示或描述的元件是选自此项技术中已知的那些元件。将描述的实施例的某些方面是以软件提供。给定根据本发明在以下材料中展示和描述的系统，未具体展示、本文建议或描述的有用于实施本发明的软件是常规的且在此项技术中的普通技艺的范围内。现在转到图1，展示体现本发明的图像俘获装置的框图。在此实例中，将图像俘获装置展示为数码相机。然而，虽然现在将阐释数码相机，但本发明显然也适用于其它类型的图像俘获装置。在所揭示的相机中，来自主题场景10的光输入到成像级11中，在成像级11 处光由透镜12聚焦以在固态滤色器阵列图像传感器20上形成图像。滤色器阵列图像传感器20将入射光转换为用于每一图元(像素)的电信号。优选实施例的滤色器阵列图像传感器20是电荷耦合装置(CXD)型或有源像素传感器(APQ型。(APS装置常常称为CMOS传感器，因为能够在互补金属氧化物半导体工艺中制造APS装置。)也可使用具有二维像素阵列的其它类型的图像传感器，只要其采用本发明的图案即可。用于本发明中的滤色器阵列图像传感器20包括彩色像素和全色像素的二维阵列，在描述图1之后在本说明书中这将变得清楚。到达滤色器阵列图像传感器20的光量由改变光圈的可变光阑块14和包含插入在光径中的一个或一个以上中性密度(ND)滤光器的ND滤光器块13来调节。快门18打开的时间也调节总光级。曝光控制器40响应由亮度传感器块16计量的在场景中可用的光量， 且控制这些调节功能的全部三者。特定相机配置的此描述将是所属领域的技术人员熟悉的，且显然存在许多变化和额外特征。举例来说，可添加自动聚焦系统，或者透镜可为可拆卸和可互换的。将了解，本发明可应用于任一类型的数码相机，其中类似地功能性由替代组件提供。举例来说，数码相机可为相对简单的傻瓜(point-and-shoot)数码相机，其中快门18是相对简单的可移动叶片快门或类似物而不是更复杂的焦平面布置。本发明也可使用包含于例如移动电话和汽车车辆等非相机装置中的成像组件来实践。来自滤色器阵列图像传感器20的模拟信号由模拟信号处理器22处理且施加到模 /数(A/D)转换器M。时序产生器沈产生各种计时信号以选择行和像素，且同步模拟信号处理器22与A/D转换器M的操作。图像传感器级观包含滤色器阵列图像传感器20、模拟信号处理器22、A/D转换器M和时序产生器26。图像传感器级28的组件可为单独制造的集成电路，或其可如CMOS图像传感器的通常做法那样制造为单个集成电路。来自A/D转换器24的数字像素值的所得流存储在与数字信号处理器(DSP) 36相关联的数字信号处理器 (DSP)存储器32中。DSP 36是此实施例中的三个处理器或控制器中的一者，其它的是系统控制器50 和曝光控制器40。虽然相机功能控制在多个控制器和处理器之间的此分割是典型的，但这些控制器或处理器可以各种方式组合而不会影响相机的功能操作和本发明的应用。这些控制器或处理器可包含一个或一个以上数字信号处理器装置、微控制器、可编程逻辑装置或其它数字逻辑电路。虽然已描述此些控制器或处理器的组合，但应了解，可指定一个控制器或处理器执行所有的所需功能。所有这些变型均可执行相同功能且属于本发明的范围内， 且将在需要时使用术语“处理级”来在一个短语内涵盖所有此功能性，如图1中的处理级38 中。
在说明的实施例中，DSP 36根据软件程序来操纵DSP存储器32中的数字图像数据，所述软件程序永久存储在程序存储器M中且复制到DSP存储器32以用于在图像俘获期间执行。DSP 36执行实践图18所示的图像处理所必要的软件。DSP存储器32可为任一类型的随机存取存储器，例如SDRAM。包含用于地址和数据信号的路径的总线30将DSP 36 连接到其相关的DSP存储器32、A/D转换器M和其它相关装置。系统控制器50基于存储在程序存储器M中的软件程序来控制相机的总体操作， 程序存储器M可包含快闪EEPROM或其它非易失性存储器。此存储器也可用以存储图像传感器校准数据、用户设定选择和在相机断电时必须保存的其它数据。系统控制器50通过如下方式控制图像俘获序列引导曝光控制器40如先前所述操作透镜12、ND滤光器块13、可变光阑块14和快门18，引导时序产生器沈操作滤色器阵列图像传感器20和相关联元件， 且引导DSP 36处理俘获的图像数据。在俘获且处理图像之后，存储在DSP存储器32中的最终图像文件经由主机接口 57传送到主机计算机，存储在可装卸存储器卡64或其它存储装置上，且在图像显示器88上为用户显示。系统控制器总线52包含用于地址、数据和控制信号的路径，且将系统控制器50连接到DSP 36、程序存储器M、系统存储器56、主机接口 57、存储器卡接口 60和其它相关装置。主机接口 57提供与个人计算机(PC)或其它主机计算机的高速连接以用于传送图像数据供显示、存储、操纵或打印。此接口可为IEEE1394或USB2.0串行接口或任一其它合适的数字接口。存储器卡64通常是紧密快闪(CF)卡，其插入到存储器卡插座62中且经由存储器卡接口 60连接到系统控制器50。可利用的其它类型的存储装置包含(不限于)PC卡、多媒体卡(MMC)或安全数字(SD)卡。将经处理图像复制到系统存储器56中的显示缓冲器且经由视频编码器80连续读出以产生视频信号。此信号从相机直接输出以供在外部监视器上显示，或由显示器控制器 82处理且在图像显示器88上呈现。此显示器通常是有源矩阵彩色液晶显示器(IXD)，但也使用其它类型的显示器。通过在曝光控制器40和系统控制器50上执行的软件程序的组合来控制用户接口 68，用户接口 68包含取景器显示器70、曝光显示器72、状态显示器76、图像显示器88和用户输入74的任一组合。用户输入74通常包含按钮、摇臂开关、操纵杆、旋转式拨号盘或触摸屏的某种组合。曝光控制器40操作光计量、曝光模式、自动聚焦和其它曝光功能。系统控制器50管理在显示器中的一者或一者以上上，例如在图像显示器88上呈现的图形用户接口(GUI)。GUI通常包含用于做出各种选项选择和用于检查所俘获图像的审阅模式的菜单。曝光控制器40接受选择曝光模式、透镜光圈、曝光时间(快门速度)和曝光指数或ISO感光速率的用户输入，且相应地引导透镜12和快门18以用于后续俘获。采用亮度传感器块16来测量场景的亮度，且提供曝光计功能以供用户在手动设定ISO感光速率、光圈和快门速度时参考。在此情况下，在用户改变一个或一个以上设定时，在取景器显示器 70上呈现的曝光计指示器告知用户图像将过曝或欠曝的程度。在自动曝光模式中，用户改变一个设定且曝光控制器40自动更改另一设定来维持正确曝光，例如对于给定ISO感光速率，当用户减小透镜光圈时，曝光控制器40自动增加曝光时间以维持相同的总体曝光。ISO感光速率是数字静态相机的重要属性。曝光时间、透镜光圈、透镜透射率、场景照明水平和谱分布以及场景反射率决定了数字静态相机的曝光级。当使用不足的曝光获得来自数字静态相机的图像时，通过增加电子或数字增益可大体上维持适当的色调再现， 但所得图像将常常含有不可接受的噪声量。在增加曝光时，增益减小，且因此图像噪声可通常减少到可接受的水平。如果曝光过量增加，那么图像的亮区域中的所得信号可超过图像传感器或相机信号处理的最大信号电平容量。这可造成图像高光部分被剪辑而形成均勻亮区域，或“晕散(bloom)”到图像的周围区域中。因此，重要的是指导用户设定适当的曝光。 ISO感光速率既定充当此指导。为了拍摄者容易理解，数字静态相机的ISO感光速率应与摄影胶片相机的ISO感光速率直接相关。举例来说，如果数字静态相机具有ISO 200的ISO 感光速率，那么相同的曝光时间和光圈对于ISO 200级胶片/处理系统应是适当的。ISO感光速率既定与胶片ISO感光速率协调。然而，在并不确切等效的电子系统与基于胶片的成像系统之间存在差异。数字静态相机可包含可变增益，且可在已俘获图像数据之后提供数字处理，从而使得能够在某一范围的相机曝光中实现色调再现。因此数字静态相机可能具有某一范围的感光速率。将此范围界定为ISO速度纬度。为了防止混淆，将单个值指定为固有ISO感光速率，其中ISO速度纬度上限和下限指示速度范围，也就是说， 包含不同于固有ISO感光速率的有效感光速率的范围。在此情况下，固有ISO速度是根据在数字静态相机的焦平面处提供以产生指定相机输出信号特性的曝光计算的数字值。固有速度通常是针对给定相机系统对于正常场景产生最高图像质量的曝光指数值，其中曝光指数是与提供到图像传感器的曝光成反比的数字值。数码相机的上述描述将是所属领域的技术人员熟悉的。显然此实施例存在可能的且经选择以降低成本、增加特征或改善相机性能的许多变型。以下描述将详细揭示根据本发明的用于俘获图像的此相机的操作。虽然此描述是参考数码相机，但将了解，本发明适用于具有具彩色像素和全色像素的图像传感器的任一类型的图像俘获装置。图1所示的滤色器阵列图像传感器20通常包含在硅衬底上制造的光敏像素的二维阵列，其提供了将每一像素处的传入光转换为测量的电信号的方式。在滤色器阵列图像传感器20暴露于光时，在每一像素处的电子结构内产生且俘获自由电子。在某个时间周期中俘获这些自由电子且随后测量俘获的电子的数目或测量自由电子产生的速率可测量每一像素处的光级。在前一种情况下，累积的电荷移出像素阵列到达例如电荷耦合装置(CCD) 中的电荷/电压测量电路，或者靠近每一像素的区域可含有例如有源像素传感器(APS或 CMOS传感器)中的电荷/电压测量电路。在以下描述中每当做出对图像传感器的一般参考时，将其理解为代表来自图1的滤色器阵列图像传感器20。进一步了解，本说明书中揭示的本发明的图像传感器架构和像素图案的所有实例及其均等物均用于滤色器阵列图像传感器20。在图像传感器的上下文中，像素(“图元”的简称)指代离散光感测区域和与所述光感测区域相关联的电荷移位或电荷测量电路。在数字彩色图像的上下文中，术语像素通常指代图像中具有相关联的色彩值的特定位置。图2是拜耳在第3，971，065号美国专利中描述的众所周知的滤色器阵列图案的最小重复单元。最小重复单元在滤色器阵列传感器20 (图1)的表面上重复，进而在每一像素位置产生红像素、绿像素或蓝像素。滤色器阵列传感器20(图1)以图2的滤色器阵列图案产生的数据可用以用所属领域的技术人员已知的许多方式产生全彩色图像。亚当斯等人在第5，506，619号美国专利中描述一个实例。图3是本发明的优选实施例的最小重复单元。其为4x4正方形像素阵列，其中绿像素与全色像素以及各自在四个方向中的每一方向上(左、右、上和下)具有三个邻近的全色像素的红像素和蓝像素水平且垂直交替。图3的最小重复单元在滤色器阵列传感器20 (图 1)的表面上重复，进而在每一像素位置处产生红像素、绿像素、蓝像素或全色像素。因此， 全色像素在传感器的表面上以棋盘图案布置。彩色像素也在传感器的表面上以棋盘图案布置。图4A展示用于本发明的替代实施例的最小重复单元。其为2x4矩形像素阵列，其中绿像素与全色像素以及与全色像素垂直交替的红像素和蓝像素水平且垂直交替。此布置可经转置而获得图4B的图案，其展示4x2矩阵像素阵列，其中绿像素与全色像素以及与全色像素水平交替的红像素和蓝像素水平且垂直交替。图4A或图4B的最小重复单元在滤色器阵列传感器20(图1)的表面上倾斜，进而在每一像素位置处产生红像素、绿像素、蓝像素或全色像素。因此，全色像素在传感器的表面上以棋盘图案布置。彩色像素也在传感器的表面上以棋盘图案布置。图5A展示本发明的另一替代实施例的4x4最小重复单元。此布置类似于图3所示的布置，不同的是彩色像素在对角线方向上而不是水平且垂直地与全色像素交替。特定来说，可见，红、绿和蓝像素在两个对角线方向上与全色像素对角地交替。(应注意，可通过倾斜最小重复单元以查看像素线如何从最小重复单元的一侧回绕到另一侧，来最佳地视觉化沿着对角线的完整图案。)在此布置中，可见，彩色像素的列与全色像素的列交替。此布置可经转置以获得图5B的图案，其为4x4正方形像素阵列，其中红、绿和蓝像素在两个对角线方向上与全色像素对角地交替。在此情况下，彩色像素的行与全色像素的行交替。图5A或图5B的最小重复单元在滤色器阵列传感器20 (图1)的表面上倾斜，进而在每一像素位置处产生红像素、绿像素、蓝像素或全色像素。因此，全色像素在传感器的表面上以交替的行或列布置。彩色像素也在传感器的表面上以交替的行或列布置。这对于传感器的偶数与奇数行(或列)的增益可能存在小差异的传感器设计可为有利的。在偶数或奇数行上具有给定类型的所有像素可减少在CFA内插过程期间由于交替的增益值而有时产生的假象。除了图3、图4A、图4B、图5A和图5B所示的CFA图案，本发明可针对其它大小和布置的CFA图案进行一般化。在每一情况下，像素将以具有至少八个像素且具有至少两行和两列的矩形最小重复单元来布置，其中对于第一色彩响应，具有第一色彩响应的彩色像素在至少两个方向上与全色像素交替，且对于其它色彩响应中的每一者，存在重复图案的仅具有给定色彩响应的彩色像素和全色像素的至少一行、列或对角线。描述根据本发明的CFA图案的另一方式是像素以具有矩形最小重复单元的重复图案来布置，所述矩形最小重复单元具有至少八个像素且具有至少两行和两列，其中针对至少一个色彩响应的彩色像素在至少两个方向上与全色像素交替，且其中针对其它色彩响应的彩色像素在至少一个方向上与全色像素交替，或在至少两个方向上在彩色像素的两侧具有至少两个邻近的全色像素。图25展示满足这些准则的具有2x8矩形像素阵列的最小重复单元的另一实例。在此情况下，绿像素与全色像素水平且垂直交替，且红像素和蓝像素与全色像素垂直交替，且与左边和右边的三个全色像素水平侧接。满足以上准则的CFA图案的所需特性是每个彩色像素由四个全色像素围绕(水平 /垂直或对角地)的事实。因此，通过周围的全色像素之间的内插，可在彩色像素的位置处容易确定高度准确的经内插全色值。此外，针对至少一个色彩响应的彩色像素在至少两个方向上与全色像素交替。因此，针对至少一个色彩响应(例如，绿)的彩色像素将在规则栅格上布置，从而使得能够容易内插对应的色差。针对其它色彩响应(例如，红和蓝)的彩色像素也将在规则栅格上发生，但重复周期可大于在一个或两个方向上所述一个色彩响应的情况。较大周期将与经内插色差的对应较大的内插误差相关联。然而，这些色彩响应在视觉上不太重要，使得任何假象的可见性将较为无害。图3、图4A、图4B、图5A、图5B和图25中所示的实例CFA图案是红、绿和蓝。所属领域的技术人员将了解，根据本发明也可使用其它类型的彩色像素。举例来说，在本发明的替代实施例中，彩色像素可为青、洋红和黄。在本发明的另一实施例中，彩色像素可为青、黄和绿。在本发明的又一实施例中，彩色像素可为青、洋红、黄和绿。也可使用许多其它类型和组合的彩色像素。图6是根据本发明优选实施例的用于根据从例如图3、图4A、图4B、图5A、图5B或图25中所示最小重复单元的最小重复单元产生的数据产生全色彩输出图像的算法的高级图。图像传感器20(图1)产生滤色器阵列图像100。在滤色器阵列图像100中，每一像素位置是红、绿、蓝或全色像素，如例如图3、图4A、图4B、图5A、图5B或图25中所示最小重复单元的最小重复单元所确定。内插全色图像块102根据滤色器阵列图像100产生经内插全色图像104。产生色差块108根据滤色器阵列图像100和经内插全色图像104产生色差值 110。内插色差图像块112根据色差值110产生经内插色差图像114。产生经内插彩色图像块106根据经内插全色图像104和经内插色差图像114产生经内插彩色图像120。最终，融合图像块118根据经内插全色图像104和经内插彩色图像120产生全色彩输出图像116。现在将更详细描述图6中所示的方法的每一步骤。图7是在内插全色图像块 102(图6)中用来确定在图3所示的CFA图案中的绿像素位置处的经内插全色像素值的像素相邻者的详图。在图7中，(2丄5、(7、(9和(^指代来自滤色器阵列图像100(图6)的绿像素值且PpPyPpPpPpPAJjPPD指代来自滤色器阵列图像100(图6)的全色像素值。为了产生经内插全色值P' 7，执行以下计算。 h = 2 IP6-P81 + α | C5_2C7+C9ν = 2 I P3-Pb I + α | C2_2C7+Cc
Γ π ” P6 +P8 - C5 + 2C7 - C9H = -^——s- + a~5-1——-
2 8
r π ” P,+Pr -C2 +2C7 -CcV = ^——+ α~ -1——￡
2 8P'7 = -^-V + -^-H
h + ν h + v其中α是常数，且h、v、H和V是中间变量。本发明的优选实施例中α的值是零。 在本发明的替代实施例中，α的值是一。所属领域的技术人员将了解，也可使用α的其它值。改变α的值具有的作用是控制在确定经内插全色值P' 7的过程中对彩色像素值加权的程度。内插全色图像块102(图6)在滤色器阵列图像100(图6)中的每一绿像素位置处
10重复这些计算以产生对应的经内插全色值P' 7。图8是在内插全色图像块102 (图6)中用来确定在图3所示的CFA图案中的红像素和蓝像素位置处的经内插全色像素值的像素相邻者的详图。在图8中，CPCpCPCd和Ch 指代来自滤色器阵列图像100(图6)的同一色彩(红或蓝)的彩色像素且P2、P3、P4、P6、P8、 PA、PB、Pc、PE、PjnPe指代来自滤色器阵列图像100(图6)的全色像素。在图8中，在C9W 上方、下方、左边和右边存在三个邻近的全色像素值。为了产生经内插全色值P' 9，执行以下计算。
权利要求
1.一种用于俘获彩色图像的图像传感器，其包括二维光敏像素阵列，所述光敏像素包含全色像素和具有至少三种不同色彩响应的彩色像素，所述像素以具有至少八个像素且具有至少两行和两列的矩形最小重复单元来布置，其中对于第一色彩响应，具有第一色彩响应的所述彩色像素在至少两个方向上与全色像素交替，且对于其它色彩响应中的每一者， 存在所述重复图案的仅具有给定色彩响应的彩色像素和全色像素的至少一行、列或对角线。
2.根据权利要求1所述的图像传感器，其中所述彩色像素是红、绿和蓝像素。
3.根据权利要求2所述的图像传感器，其中所述最小重复单元具有四行和四列，且其中所述最小重复单元的第一行和第三行具有绿、全色、绿、全色的像素序列，所述最小重复单元的第二行具有全色、红、全色、全色的像素序列，且所述最小重复单元的第四行具有全色、全色、全色、蓝的像素序列。
4.根据权利要求1所述的图像传感器，其中所述彩色像素是青、洋红和黄像素。
5.根据权利要求1所述的图像传感器，其中所述最小重复单元具有四行和四列，且其中对于所述重复图案的至少一行、列或对角线，针对每一色彩响应的所述彩色像素与所述全色像素交替。
6.根据权利要求1所述的图像传感器，其中所述最小重复单元的具有第一色彩响应的像素的数目是具有第二色彩响应的像素的数目的至少两倍。
7.根据权利要求6所述的图像传感器，其中所述第一色彩响应是绿，且所述第二色彩响应是红或蓝。
8.根据权利要求1所述的图像传感器，其中所述全色像素以棋盘图案布置。
9.根据权利要求1所述的图像传感器，其中所述全色像素以交替的行或列布置。
10.一种用于俘获彩色图像的图像传感器，其包括二维光敏像素阵列，所述光敏像素包含全色像素和具有至少两种不同色彩响应的彩色像素，所述像素以具有至少八个像素且具有至少两行和两列的矩形最小重复单元来布置，其中至少一个色彩响应的所述彩色像素在至少两个方向上与全色像素交替，且其中对于其它色彩响应中的每一者，针对给定色彩响应的所述彩色像素在至少一个方向上与全色像素交替或在至少两个方向上在所述彩色像素的两侧具有至少两个邻近的全色像素。
全文摘要
本发明揭示一种用于俘获彩色图像的图像传感器，其包括二维光敏像素阵列，所述光敏像素包含全色像素和具有至少三种不同色彩响应的彩色像素，所述像素以具有至少八个像素且具有至少两行和两列的矩形最小重复单元来布置，其中对于第一色彩响应，具有第一色彩响应的所述彩色像素在至少两个方向上与全色像素交替，且对于其它色彩响应中的每一者，存在所述重复图案的仅具有给定色彩响应的彩色像素和全色像素的至少一行、列或对角线。
文档编号H01L27/146GK102461174SQ201080024921
公开日2012年5月16日 申请日期2010年5月21日 优先权日2009年6月5日
发明者姆里秋杰伊·库马尔, 布鲁斯·哈罗德·皮尔曼, 詹姆斯·A·汉密尔顿, 詹姆斯·E·小亚当斯 申请人:全视科技有限公司