图像处理设备和图像处理方法以及摄像设备的制作方法

专利名称：图像处理设备和图像处理方法以及摄像设备的制作方法
技术领域：
本发明涉及一种图像处理设备和方法以及摄像设备，尤其 涉及一种通过使用脸才全测结果来处理图〗象的图像处理设备和方 法，以及摄像设备。
背景技术：
将说明用于数字照相机的传统白平衡增益计算电路的操
作。首先，如在图8中所示，将成像区域划分为每个均包括多个 像素的预定数量的块(m个块)。对于块(l到m)中的每个块，针对 各颜色，相加像素值并对这些像素值求取平均值以计算颜色平 均值(R[i]、 G[i]、 B[i])。然后，例如，通过使用下面的等式(l), 计算出颜色评价值(Cx[i], Cy[i]):
Cx[i] = (R[i] - B[i]) / Y[i] x 1024
Cy[i] = (R[i] + B[i]) - 2G[i] / Y[i] x 1024 (1) Y[i] =R[i]十2G[i] + B[i],其中[i]是各块的索引编号 预先在各种光源下拍摄白色被摄体以计算颜色评价值。因 此，如果图9中示出的白色检测范围301包括针对各块计算出的 颜色评价值，则判断为该块为白色。然后，对判断为白色的块 的像素值进行累加。通过对基于预先在各种光源下拍摄到的白 色被摄体的计算出的颜色评价值进行标绘来获得白色检测范围 301。在图9中，x轴(Cx)的负方向表示当拍摄到高色温被摄体的 白色时的颜色评价值，并且正方向表示当拍才聂到低色温被摄体 的白色时的颜色评价值。在图中，y轴(Cy)表示光源的绿色成分 比率。G成分向负方向增加，这表示该光源是荧光灯。
然后，基于累加所得的像素值(sumR、 sumG、 sumB)，通
过使用下面的等式(2)来计算白平tf系数(WBCo—R、 WBCo—G、 WBCo_B):
WBCo一R = s腿Y x 1024 / s薩R
WBCo_G = s画Y x 1024 / s誰G (2) WBCo一B = s謹Y x 1024 / s飄B 其中，sumY = (sumR + 2 x sumG + sumB) / 4 然而，传统的白平衡系数计算方法具有如下问题。在如太 阳光等光源下，白色评价值分布在图9中的区域A周围，并且肌 肤(皮肤)色分布在区域B周围。在太阳光下的肌肤色评价值分布 在与低颜色光源下的白色评价值的区域几乎类似的区域中。因 此，如果在成像区域中有小的白色部分，并且如图10所示，近 距离拍摄人的图片，则成像区域中的颜色评价值分布在图9的区 域B中。因此，在低色温下将肌肤色误判断为白色，并且将人 的肌肤校正为白色。并且，当分布在表示人的肌肤的颜色区域 周围的彩色散布整个成像区域时，将该彩色误判断为白色，并 且将肌肤校正为白色。
传统上，通过当被摄体照度高时将光源判断为外部光已经 解决了上述问题，并且缩小白色检测范围以防止将肌肤色误判 断为白色。
一般地，荧光灯包括各种光源，如白色分布在区域C周围 的光源和白色分布在区域C以下的光源等。为处理这种光源， 需要扩大白色检测范围。然而，在低照度的高色温荧光灯或中 色温荧光灯下，肌肤色可以分布在黑体轨迹(blackbody locus) 下面的部分(区域C)周围。因此，白色检测范围的扩大导致肌肤 色的误判断，从而导致变白了的肌肤色。
美国专利6,975，759公开了这样一种方法检测脸，当检测 到脸时提取脸的肌肤色，将提取出的肌肤色与基准肌肤色进行
比较，并且基于比较结果来校正白平衡。
然而，该传统白平衡校正值计算方法没有考虑脸检测电路 误检测脸的情况。结果，甚至在脸检测电路误4全测到假的脸区 域时，也可能将假的脸区域校正为适当的肌肤色。因而，不能 获取期望的白平衡校正值。
取决于与处理速度有关的摄像设备的性能，在拍摄期间可 能不可进行脸检测。在这种摄像设备中，即使在拍摄准备阶段 检测到脸，在拍摄期间被摄体的位置也可能偏移。这种情况未 纳入考虑之中。换句话说，即使在拍摄准备期间正确地检测到 脸，最终白平衡校正精确度也可能下降。图ll示出在接通第一
开关SW1之前执行脸检测、并且紧在第二开关SW2接通(接通以 进行实际拍摄)之前被摄体的位置偏移的例子。使用紧在第一开 关S W1接通之前获得的脸检测结果，使得当接通第二开关 SW2(在实际拍4聂时)时难以获取正确的脸颜色评价值，从而导 致白平衡校正精确度下降。

发明内容
本发明涉及一种能够基于脸检测结果来进行更稳定的白平 衡校正的图像处理设备和方法、以及摄像设备。
根据本发明的一个方面， 一种图像处理设备用于处理通过 拍摄所获得的图像的图像信号，所述图像处理设备包括第一 计算单元，用于通过从所述图像检测白色像素来计算第一白平 衡校正值；脸检测单元，用于从所述图像检测脸区域；判断单 元，用于当对由所述脸检测单元检测到的所述脸区域的图像信 号执行基于所述第一白平衡校正值的白平衡校正时，判断校正 后的所述脸区域的图像信号是否存在于在表示肌肤色的第 一颜 色信号区域周围的第二颜色信号区域中；以及第二计算单元，
在于所述第二颜色信号区域中时，基于校正后的所述脸区域的 图像信号与所述第一颜色信号区域之间的关系来计算用于校正 所述图像信号的第二白平衡校正值。
根据本发明的另一个方面，一种图像处理设备用于处理通
过拍摄所获得的图像的图像信号，所述图像处理设备包括白 平衡校正单元，用于校正所述图像信号的白平4軒；脸#全测单元， 用于从所述图像中检测脸区域；第一计算单元，用于基于所述 图像被划分成的并且每个均包括多个像素的块中的、存在于表 示白色的颜色信号区域中的块的图像信号，来计算用于白平衡 校正的第一白平衡校正值；以及第二计算单元，用于当所述脸 检测单元检测到所述脸区域时，对通过基于所述第 一 白平衡校 正值来校正包括在所述脸区域中的块的图像信号的白平衡所获 得的校正后的图像信号中的、存在于表示肌肤色的第 一颜色信 号区域和作为所述第一颜色信号区域的周围区域的第二颜色信 号区域中的所述校正后的图像信号进行相加，并且用于当通过 相加所获得的总和图像信号存在于所述第二颜色信号区域中 时，计算用于校正所述总和图像信号以使其进入所述第一颜色 信号区域的第二白平衡校正值，其中，当计算出所述第二白平 衡校正值时，所述白平衡校正单元通过使用所述第二白平衡校 正值来执行白平銜4交正。
根据本发明的另一个方面， 一种摄像设备包括摄像单元， 用于输出通过拍摄所获得的图像的图像信号；以及上述图像处 理设备。
根据本发明的另一个方面， 一种图像处理方法用于处理通 过拍摄所获得的图像的图像信号，所述图像处理方法包括通 过从所述图像检测白色像素来计算第一白平衡校正值；从所述
图像检测脸区域；当基于所述第 一 白平衡校正值对检测到的所
述脸区域的图像信号执行白平衡校正时，判断校正后的脸区域 的图像信号是否存在于在表示肌肤色的第一颜色信号区域周围
的第二颜色信号区域中；以及当判断为校正后的所述脸区域的 图像信号存在于所述第二颜色信号区域中时，基于校正后的所 述脸区域的图 <象信号和所述第 一颜色信号区域之间的关系来计 算用于校正所述图像信号的第二白平衡校正值。
根据本发明的另一个方面， 一种图像处理方法用于处理通 过拍摄所获得的图像的图像信号，所述图像处理方法包括从 所述图像检测脸区域；基于将所述图像按多个像素划分成的块 中的、存在于表示白色的颜色信号区域中的块的图像信号，来 计算用于白平衡校正的第一白平衡值；当检测到所述脸区域时，
的块的图像信号的白平衡所获得的校正后的图像信号中的、存 在于表示肌肤色的第一颜色信号区域和作为所述第一颜色信号 区域的周围区域的第二颜色信号区域中的所述校正后的图像信 号进行相加，并且当通过相加所获得的总和图像信号存在于所 述第二颜色信号区域中时计算用于校正所述总和图像信号以使 其进入所述第一颜色信号区域的第二白平衡校正值；通过使用 所述第 一 白平衡校正值和所述第二白平衡校正值来对所述图像 信号执行白平衡校正；以及当计算出所述第二白平衡校正值时， 通过使用所述第二白平衡校正值来执行白平衡校正。
根据下面参考附图对典型实施例的详细说明，本发明的其 它特征和方面将显而易见。


包含在说明书中并构成说明书的一部分的附图示出本发明
的典型实施例、特征和方面，并和说明书一起用来解并,本发明 的原理。
图l是示出根据本发明典型实施例的具有脸检测功能的摄 像设备的功能结构的框图。
图2是示出基于才莫才反匹配(template matching)的才莫式识别处
理的流程图。
图3示出才莫寺反匹配概念。
图4是示出根据本发明典型实施例的计算白平#f (WB)校正 值的方法的流程图。
图5是示出根据本发明典型实施例的计算第一WB校正值 的处理的流程图。
图6示出根据本发明典型实施例的判断肌肤(皮肤)色校正 的方法。
图7示出根据本发明典型实施例的第二WB校正值计算的 概念。
图8示出将成像区域划分成预定数量的块的例子。 图9示出白色检测范围。
图10示出照相机近距离拍摄脸作为被摄体的例子。
图11示出在传统白平衡校正方法中很可能出现的问题的例子。
具体实施例方式
下面将参考附图，详细说明本发明的各种典型实施例、特 征和方面。
第一典型实施例
图l是示出作为图像处理设备的例子的、根据本发明典型实 施例的具有脸检测功能的摄像设备的功能结构的框图。
参考图1，图像传感器101包括电荷耦合装置(CCD)或互补 金属氧化物半导体(CMOS),该图像传感器101的表面覆盖有例 如拜尔阵列(Bayer array)的RGB彩色滤波器，从而能进行彩色图 像拍摄。存储器102临时存储从图像传感器101荻得的图像信号。
脸检测单元114基于存储在存储器102中的图像信号来检测 脸区域。已经提出了各种方法作为4企测脸区域的技术。只要可 以获得关于脸的位置和大小的信息，就可以使用任何方法。因 此，这些方法决没有限制本发明。例如，已知^f吏用以神经网络 为代表的学习的方法，以及通过模板匹配来提耳又具有物理形状 的特征的如眼或鼻等部位的方法。其它可用的^支术是一全测如肌
肤(皮肤)色或眼形状等图像特征量并且通过使用统计方法来分 析该图^象特征量的方法(参见日本特开平10-232934和日本特开 2000-48184)。其它当前可用的产品包括通过4吏用小波变换 (wavelet transform)和图像特征量来检测脸的方法以及组合模 才反匹配的方法。
将说明模式识别方法之 一 的模板匹配方法作为脸检测方 法。该模式识别是将观察到的模式与预先定义的概念(类别)中 的 一 个相关的处理。图2是由脸检测单元114执行的才莫式识别处 理的流程图。
首先，在步骤S1中，脸检测单元114从存储器102中读出图 像数据并且预处理该图像数据。在步骤S2，脸检测单元114从 预处理后的图像数据中提取特征部位的模式。脸检测单元114 将提取出的模式与模板(标准模式)相关(模板匹配)。例如，如图 3所示，当提取出特征部位的模式63时，模板61的中心点62位于 提取出的模式63的某个坐标点(i， j)上。然后，脸检测单元114 在模式6 3内偏移中心点6 2的位置时计算模板61和模式6 3的重叠 部分之间的相似性，并且确定相似性变得最大的位置。通过将
模式63与包括如眼或耳等形状的模板61相匹配，脸4全测单元114 可以获得关于眼的位置或脸区域(脸坐标)的信息。
因此，在步骤S3中，脸才企测单元114获得识别才莫式，并且 在步骤S 4中输出所获得的识另']模式以完成该 一莫式识别处理。
返回参考图l,如果才全测到脸，则中央处理单元(CPU) 115 基于从脸检测单元114发送来的信号来计算快门速度Tv和光圈 值A v以获得脸的最佳亮度，并且计算调焦透镜的驱动量以聚焦 在脸上。另一方面，如果没有检测到脸，CPU 115计算快门速 度Tv和光圏值Av以获得整个图像的最佳亮度，并且计算调焦镜 头的驱动量以聚焦存在于预定聚焦区域中的被摄体。将曝光值 (Tv和Av)以及由CPU 115计算出的调焦4竟头的驱动量发送至控 制电i 各113。基于这些4直，控制4竟头、光阑(diaphragm)、和快门 (未示出)以及图像传感器101。
白平衡(WB)控制单元103基于存储在存储器102中的图像 信号和从脸检测单元114获得的脸信息来计算WB校正值。通过 使用计算出的WB校正值，WB控制单元103对存储在存储器102 中的图像信号进行白平衡校正(WB校正)。下面将详细说明WB 控制单元1034吏用的计算WB校正值的方法。
颜色转换矩阵(MTX)电路104通过颜色增益来i文大由WB控 制单元10 3进行W B校正后的图像信号以将其转换成色差信号 R-Y和B-Y,从而可以通过最佳颜色来再现该图像信号。低通滤 波器(LPF)电路105限制色差信号R-Y和B-Y的频带。色度抑制 (chroma-suppress, CSUP)电^各106抑制在 一皮LPF电-各105限制频 带的图像信号中饱和部分的伪色信号。
还将由WB控制单元103进行WB校正后的图像信号输出至 亮度信号(Y)生成电路111以生成亮度信号Y。边缘增强电路112 对所生成的亮度信号Y执行边缘增强。
RGB转换电路107将从CSUP电路106输出的色差信号R-Y 和B - Y以及从边缘增强电路112输出的亮度信号(Y)转换成R G B 信号，然后伽玛校正电路108对信号的灰度进行校正。随后，颜 色亮度转换电路10 9将信号转换成Y U V信号，然后例如通过使 用压缩电路110中的JPEG压缩来压缩该YUV信号从而将其作为 图像信号记录在外部记录介质或内部记录介质上。
参考图4，将说明根据典型实施例的计算WB校正值的方 法。根据典型实施例的计算WB校正值的方法使能获取WB校正 值从而基于脸检测结果来使脸区域最佳。假定脸检测单元114 基于紧在图4的处理之前所获得的图像信号，通过参考例如图2 和3的前述方法已经执行了脸检测处理，并且已经获得了脸检测 结果。通过CPU 115或WB控制单元103可以冲丸行WB4交正值的计 算，或者可以增加专门用于WB校正值计算的装置。
首先，在步骤Sll，例如，WB控制单元103从存储在存储 器102中的图像信号中检测白色像素以计算第一白平衡校正值 (第一WB校正值)。接着将参考图5，详细说明用于计算第一WB 才交正il的方法。
首先，在步骤SIOI， WB控制单元103读出存储在存储器102 中的图像信号，并将图像区域划分为图8中示出的m个块。在步 骤S102, WB控制单元103针对每种颜色将块(l到m)中的每个块 的像素值相加并求取平均值，从而计算颜色平均值(R[i]、 G[i]、 B[iD,然后通过使用下面的等式(l)来计算颜色评价值(Cx[i], Cy[i]):
Cx[i] = (R[i] - B[i]) / Y[i] x 1024
Cy[i] = (R[i] + B[i]) - 2G[i] / Y[i] x 1024 (1) Y[i] = R[i] + 2G[i] + B[i]，其中，[i]是各块的索引编号。 在步骤S103, WB控制单元103判断在步骤S102中计算出的
第i块的颜色评价值(Cx[i], Cy[i])是否包括在图9中示出的预定 白色检测范围301内。通过标绘基于在不同光源下拍摄到的白色 的数据而预先计算出的颜色评价值来获得白色检测范围301 。在 图9中，x坐标(Cx)的负方向表示当拍摄高色温被摄体的白色时 的颜色评价值，并且正方向表示低色温被摄体的白色。在图中， y坐标(Cy)表示光源的绿色成分比率。G成分向负方向增加，这 表示该光源是荧光灯。
如果计算出的颜色评价值(Cx[i], Cy[i])包括在白色检测范 围301内(步骤S103中为"是")，则WB控制单元103判断为该块 是白色。然后，在步骤S104, WB控制单元103对块的颜色平均 值(R[i]、 G[i]、 B[i])进行累加。如果没有包括计算出的颜色评 价值(Cx[i], Cy[i])(步骤S103中为"否")，则WB控制单元103 进入步骤S105而没有进行相加。可以通过下面的等式(3)来表示 步骤S103和S104:
<formula>formula see original document page 15</formula>
在等式(3)中，如果颜色评价值(Cx[i], Cy[i])包括在白色检 测范围301内，则将Sw[i]设置为l,并且如果颜色评价值没有包 括在白色检测范围301内，则将Sw[i]设置为O。以这种方式，基 于在步骤S103中的判断来实际判断是否将颜色平均值(R[i]、 G[i]、 B[i])相加。在步骤S105, WB控制单元103判断是否已经 对所有块执行了前述处理。如果存在还未处理的块(步骤S105 中为"否，，)，则WB控制单元103返回步骤S102以重复该处理。如
果已经处理了所有的块(步骤S105中为"是")，则该处理返回步 骤S106。
在步-骤S106, WB控制单元103通过4吏用下面的等式(4)基于 所获得的颜色评价值的累加值(sumR, sumG， sumB)来计算第一 WB校正值(WBCo1—R, WBCol—G, WBCo1—B):
WBCol—R = s腦Y x 1024 / s應R
WBCol—G = sumY x 1024 / s腿G (4) WBCol—B = s腿Y x 1024 / s誰B 其中，s腿Y = (sumR + 2 x s證G + s画B) / 4 在计算了第一WB校正值之后，在步骤S12, WB控制单元 103判断是否检测到脸。如果没有检测到脸(步骤S12中为"否")， 则在步骤S20中，WB控制单元103确定对WB处理使用在步骤 Sll中计算出的第一WB校正值。然后，该处理结束。
如果检测到脸(步骤S12中为"是")，则在步骤S13中，WB 控制单元103获得脸区域的块。在步骤S14， WB控制单元103获 得在步骤S102中计算出的颜色平均值(R[i]、 G[i]、 B[i])以计算 这些块中的一个的第一WB校正值。
然后，WB控制单元103将在步骤S14中获得的各个颜色平 均值与在步骤Sll中获得的各个相应的第一WB校正值相乘以 计算肌肤色平均值(通过基于第一WB校正值来WB校正脸区域 的颜色平均值所获得的值，即校正后的图像信号)。在步骤S15， W B控制单元10 3判断肌肤色平均值属于肌肤色区域(图6中的区 域(A))、肌肤色校正目标区域(图6中的区域(B))以及肌肤色校正 非目标区域(图6中的区域(C))中的哪个。肌肤色区域(A)对应于 第一颜色信号区域，并且肌肤色校正目标区域(B)对应于作为第 一颜色信号区域的周围区域的第二颜色信号区域。如果肌肤色 平均值在图6中的肌肤色区域(A)(第 一颜色信号区域)或肌肤色
校正目标区域(B)(第二颜色信号区域)中(步骤S15中为"是，，)，
则在步骤S16中，WB控制单元103将肌肤色平均值与此时计算 出的肌肤色平均值的总和相加。如果肌肤色平均值在肌肤色校 正非目标区域(C)中(步骤S15中为"否，，)，则WB控制单元103
预先在如太阳光等白光下拍摄多个肌肤色并且使用统计方法， 可以确定图6中示出的肌肤色区域(A)和月几肤色校正目标区域
(B) 。
例如，当误检测到脸(图6中的成像区域(b))时，或者当完全 偏移了被摄体时，块的肌肤色评价值很可能分布在图6中的肌肤 色校正非目标区域(C)中。当脸区域偏移了时(图6中的成像区域 (c))，脸区域的肌肤色评价值分布在图6中的肌肤色区域(A)或肌 肤色校正目标区域(B)中。因此，仅提取存在于肌肤色区域(A) 或肌肤色才交正目标区域(B)中的块以反映在WB计算处理中。代 替基于在步骤S15中的判断去除存在于肌肤色校正非目标区域
(C) 中的肌肤色评价值，可以执行加4又相加。在这种情况下，将 应用于肌肤色校正非目标区域(C)中肌肤色评价值的权重设置 为比应用于肌肤色区域(A)或肌肤色校正目标区域(B)中肌肤色 评价值的权重小。
在将上述处理执行了与所处理的块的数量相等的次数之后 (即，直到在步骤S17中该处理变为"是，，为止)，WB控制单元 103进入步骤S18。在步骤S18, WB控制单元103判断通过在步 骤S16中的相加所获得的肌肤色平均值的总和(总和图像信号) 是否在肌肤色校正目标区域(B)内。
如果肌肤色平均值的总和在图6中的肌肤色区域(A)中(步 骤S18中为"否，，)，则可以判断为基于第一WB校正值已经适当 地校正了肌肤色。因此，在步骤S20, WB控制单元103确定使
用第一WB校正值。如果肌肤色平均值的总和在肌肤色校正目
标区域(B)中(步骤S18中为"是")，则WB控制单元103判断为
正。因此，在步骤S19中，WB控制单元103计算第二白平衡校 正值(第二 W B校正值)以将肌肤色平均值的总和移动至肌肤色 区域。如果肌肤色平均值的总和在肌肤色校正非目标区域(C) 中(步骤S18中为"否，，)，则在步骤S20中，WB控制单元103确 定检测到的肌肤色评价值不表示人的肌肤，并且确定使用了第 一WB校正值。
图7示出在步骤S19中进行的第二WB校正值计算的概念。 图7示出在某光源下将肌肤色误识别为白色并计算了 一WB校 正值的情况。由于第一WB校正值从适当的WB4交正值向低色温 方向偏移，因此在第一 WB校正之后的"几"夫色向冷色方向偏移。 在这种情况下，月几肤色评价值位于冷色方向，该冷色方向在表 示适当的肌肤色的区域以外。因此，通过应用比第一WB校正 值的大的R增益作为白平衡校正值，可以适当地校正肌肤色。 图7中的虚线箭头表示校正的方向和大小。虚线方向的目标位置 可以是肌肤色区域(A)中的任何位置。在图7中，将肌肤色一佥测 结果和肌肤色区域之间的距离为最短的肌肤色区域的边界位置 设置为目标位置。作为另一例子，可以预先将肌肤色区域(A) 中的一个点定义为月几肤色点，还可将该点确定为目标位置。
根据上述典型实施例，可以减少可能由错误的脸识别或者 拍摄期间被摄体的偏移导致的错误校正或过度校正。因此，根 据脸检测结果可以执行更稳定的白平衡校正。
本发明可应用于包括多个装置(例如，主计算机、接口装置 和照相机头)的系统，或者可应用于设备(例如，数字静止照相 机或数字摄像机)。
还可如下来实现本发明。首先，将存储有用于实现典型实 施例的功能的软件程序代码的存储介质或记录介质供给至系统
或设备。然后，系统的计算机(CPU或MPU)或者设备中的计算 机读出存储在存储介质中的程序代码并且执行该程序代码。在 这种情况下，从存储介质读出的程序代码实现了典型实施例的 功能。
本发明不限于计算机执行读取的程序代码以实现典型实施 例的功能的情况。还可如下实现本发明。基于读出的程序代码 的指令，在计算机中运行的操作系统(OS)执行实际处理的部分 或全部从而实现典型实施例的功能。例如，存^f诸有程序代码的 存储介质可以是例如，软盘、硬盘、只读存储器(ROM)、随 机存取存储器(RAM)、磁带、非易失性存储卡、致密盘 -ROM(CD-ROM)、可记录CD(CD-R)、数字多功能盘(DVD)、 光盘或者磁光盘(MO)。如局域网(LAN)或广域网(WAN)等计算 机网络可以用来供给程序代码。
尽管已经参考典型实施例说明了本发明，但是应该理解， 本发明不限于所公开的典型实施例。所附权利要求书的范围符 合最宽的解释，以包含所有这类修改、等同结构和功能。
权利要求
1. 一种图像处理设备，用于处理通过拍摄所获得的图像的图像信号，所述图像处理设备包括:第一计算单元，用于通过从所述图像检测白色像素来计算第一白平衡校正值；脸检测单元，用于从所述图像检测脸区域；判断单元，用于当对由所述脸检测单元检测到的所述脸区域的图像信号执行基于所述第一白平衡校正值的白平衡校正时，判断校正后的所述脸区域的图像信号是否存在于在表示肌肤色的第一颜色信号区域周围的第二颜色信号区域中；以及第二计算单元，用于当所述判断单元判断为校正后的所述脸区域的图像信号存在于所述第二颜色信号区域中时，基于校正后的所述脸区域的图像信号与所述第一颜色信号区域之间的关系来计算用于校正所述图像信号的第二白平衡校正值。
2. 根据权利要求l所述的图像处理设备，其特征在于，还 包括白平衡校正单元，所述白平衡校正单元用于校正所述图像 的白平#f ，其中，所述白平衡校正单元在所述判断单元判断为校正后 的所述脸区域的图像信号存在于所述第二颜色信号区域中时通 过使用所述第二白平衡校正值来执行白平衡校正，并且在所述 判断单元判断为校正后的所述脸区域的图像信号不存在于所述 第二颜色信号区域中时通过使用所述第一白平衡校正值来执行 白平衡校正。
3. 根据权利要求l所述的图像处理设备，其特征在于，所 述第二计算单元校正所述图像信号，使得校正后的所述脸区域的图像信号位于所述第一颜色信号校正区域中。
4. 根据权利要求l所述的图像处理设备，其特征在于，所 述第 一计算单元针对各预定块来检测所述图像的所述白色像 域的图像信号的判断。
5. —种图像处理设备，用于处理通过拍摄所获得的图像的图像信号，所述图像处理设备包括白平衡校正单元，用于校正所述图像信号的白平衡； 脸检测单元，用于从所述图像中检测脸区域； 第一计算单元，用于基于所述图像被划分成的并且每个均包括多个像素的块中的、存在于表示白色的颜色信号区域中的 块的图像信号，来计算用于白平衡校正的第 一 白平衡校正值； 以及第二计算单元，用于当所述脸检测单元检测到所述脸区域 时，对通过基于所述第一白平衡校正值来校正包括在所述脸区 域中的块的图像信号的白平衡所获得的校正后的图像信号中 的、存在于表示肌肤色的第 一 颜色信号区域和作为所述第 一 颜 色信号区域的周围区域的第二颜色信号区域中的所述校正后的 图像信号进行相加，并且用于当通过相加所获得的总和图像信 号存在于所述第二颜色信号区域中时，计算用于校正所述总和 图像信号以使其进入所述第一颜色信号区域的第二白平衡校正 值，其中，当计算出所述第二白平衡校正值时，所述白平衡校正单元通过使用所述第二白平衡校正值来执行白平衡4交正。
6. 根据权利要求5所述的图像处理设备，其特征在于，所 述第二计算单元将未包括在所述第一颜色信号区域和所述第二颜色信号区域中的所述校正后的图像信号进行相加，并且在对 包括在所述第 一 颜色信号区域中的所述校正后的图像信号、包 括在所述第二颜色信号区域中的所述校正后的图像信号以及未 包括在所述第 一 颜色信号区域和所述第二颜色信号区域中的所 述校正后的图像信号分别赋予不同的权重之后将它们进行相 加，以及其中，赋予未包括在所述第一颜色信号区域和所述第二颜 色信号区域中的所述校正后的图像信号的权重比赋予包括在所 述第一颜色信号区域和所述第二颜色信号区域中的所述校正后 的图像信号的权重低。
7. 根据权利要求5所述的图像处理设备，其特征在于，当 没有计算出所述第二白平衡校正值时，所述白平衡校正单元通 过使用所述第一白平衡校正值来执行白平衡校正。
8. 根据权利要求5所述的图像处理设备，其特征在于，所 述第一计算单元和所述第二计算单元通过使用在所述脸检测单元处理了所述图像之后拍摄所获得的图像的图像信号，来计算所述第一白平衡校正值和所述第二白平衡校正值。
9. 一种摄像设备，包括摄像单元，用于输出通过拍摄所获得的图像的图像信号；以及根据权利要求5所述的图像处理设备。
10. —种图像处理方法，用于处理通过拍摄所获得的图像 的图像信号，所述图像处理方法包括通过从所述图像检测白色像素来计算第 一 白平衡校正值； 从所述图像;险测脸区域；当基于所迷第一白平衡校正值对检测到的所述脸区域的图 像信号执行白平衡校正时，判断校正后的脸区域的图像信号是 否存在于在表示肌肤色的第一颜色信号区域周围的第二颜色信 号区域中；以及当判断为校正后的所述脸区域的图像信号存在于所述第二 颜色信号区域中时，基于校正后的所述脸区域的图像信号和所述第一颜色信号区域之间的关系来计算用于校正所述图像信号 的第二白平衡校正值。
11.一种图像处理方法，用于处理通过拍摄所获得的图像的图像信号，所述图像处理方法包括 从所述图像;险测脸区域；基于将所述图像按多个像素划分成的块中的、存在于表示 白色的颜色信号区域中的块的图像信号，来计算用于白平衡校 正的第一白平衡值；当检测到所述脸区域时，将通过基于所述第 一 白平衡校正 值来校正包括在所述脸区域中的块的图像信号的白平衡所获得 的校正后的图像信号中的、存在于表示肌肤色的第 一颜色信号 区域和作为所述第一颜色信号区域的周围区域的第二颜色信号 区域中的所述校正后的图像信号进行相加，并且当通过相加所 获得的总和图像信号存在于所述第二颜色信号区域中时计算用 于校正所述总和图像信号以使其进入所述第 一 颜色信号区域的 第二白平衡校正值；通过使用所述第一白平衡校正值和所述第二白平衡校正值 来对所述图像信号执行白平衡校正；以及当计算出所述第二白平衡校正值时，通过使用所述第二白 平衡校正值来执行白平衡校正。
全文摘要
本发明涉及一种图像处理设备和图像处理方法以及摄像设备。当对由脸检测单元检测到的脸区域的图像信号执行白平衡校正时，图像处理设备基于通过检测白色像素所获得的第一白平衡校正值来判断校正后的脸区域的图像信号是否存在于在表示肌肤色的第一颜色信号区域周围的第二颜色信号区域。当判断为校正后的脸区域的图像信号存在于第二颜色信号区域中时，图像处理设备基于校正后的脸区域的图像信号与第一颜色信号区域之间的关系来计算用于校正图像信号的第二白平衡校正值。
文档编号H04N9/73GK101389039SQ20081021187
公开日2009年3月18日 申请日期2008年9月11日 优先权日2007年9月11日
发明者高山将浩 申请人:佳能株式会社