图像处理方法、图像处理系统以及显示装置制造方法

图像处理方法、图像处理系统以及显示装置制造方法
【专利摘要】本发明提供一种图像处理方法，该图像处理方法包括将对象图像区分为对象物区域和背景区域的步骤、算出对象物区域的平均颜色的灰度的步骤、通过使用平均颜色的灰度算出对象物区域的反色的灰度的步骤、以及通过使用对象图像的反色的灰度和背景区域的灰度算出处理图像的背景区域的灰度。
【专利说明】图像处理方法、图像处理系统以及显示装置【技术领域】
[0001]本发明涉及一种图像处理方法及一种图像处理系统。
【背景技术】
[0002]从大型显示装置如电视接收机到小型显示装置如移动电话的范围中的各种各样显示装置已在市场上普及。高附加价值的产品被要求且得到开发。近年来，为了显示更具有真实感的图像，已开发出能够显示立体图像的显示装置。
[0003]人将物体识别为立体物体时的生理因素是双眼视差、辐辏、焦点调节、运动视差、物体大小、空间配置、对比度或阴影等。 [0004]显示装置大多采用利用双眼视差的方法作为三维立体图像的显示方法。作为利用双眼视差的方式，例如，有使用用来分离左眼所观察的图像和右眼所观察的图像的专用眼镜的方式。此外，作为不使用专用眼镜的方式，有对显示部追加用来分离左眼所观察的图像和右眼所观察的图像的机构(例如，视差屏障、双凸透镜、或微透镜阵列)并且能够使裸眼观察到立体图像的方式(例如，专利文献I)。
[0005][参考文献]
[0006]专利文献I日本专利申请公开第2005-258013号
【发明内容】

[0007]上述显示方式需要对显示部追加机构(例如，视差屏障)或需要专用眼镜，这导致显示装置的制造成本或耗电量的增加。
[0008]从上述观点来看，本发明的一个方式的目的是提供一种提高全彩色的二维图像的立体效应或深度效应的简便图像处理方法。或者，本发明的一个方式的目的是提供一种提高全彩色的二维图像的立体效应或深度效应的图像处理系统，而不使用特别的机构。
[0009]当图像的对象物和背景之间的色调的差异小时，人识别该图像作为平面图像。与此相反，当图像的对象物和背景之间的色调的差异大时，人识别该图像作为有立体效应或深度效应的图像。
[0010]注意，在本说明书中，图像中的要强调或要使其清晰的物象称为对象物，并且该图像中的除了对象物之外的物象称为背景。
[0011]作为将难以获得立体效应或深度效应的图像变换为容易获得立体效应或深度效应的图像的方法，想到以具有与对象物的平均颜色的色调相反(充分远离)的色调的颜色(反色、转色或补色)显示背景的方法。注意，在本说明书中，对象物的平均颜色(也称为对象物区域的平均颜色)是包含在对象物区域的所有像素的平均颜色。
[0012]注意，在本说明书中，对象图像中的构成对象物的多个像素(像素群)被称为对象物区域，并且，对象图像中的构成背景的多个像素(像素群)被称为背景区域。
[0013]换言之，本发明的一个方式是一种图像处理方法，包括如下步骤:将构成对象图像的所有像素区分为对象物区域和背景区域的第一步骤；算出该对象物区域的平均颜色并根据该平均颜色算出反色的第二步骤；以及对包含在背景区域中的所有像素以一定比例提供该反色的第三步骤。
[0014]本发明的一个方式是一种图像处理方法，包括如下步骤:使用RGB彩色模型将构成由(N+1)灰度表示的对象图像的所有像素区分为对象物区域和背景区域的第一步骤；根据包含在该对象物区域中的所有像素的颜色算出平均颜色(R1, G1, B1),并根据该平均颜色(R1, G1, B1)算出由(N-R1, N-G1, N-B1)表示的反色(R2，G2, B2)的第二步骤；以及对包含在该背景区域中的像素(x，y)的颜色(Rxy，Gxy，Bxy)以一定比例提供该反色(R2，G2，B2)，并算出包含在处理图像的背景区域中的像素(x，y)的颜色(R' xy，G' xy，B' xy)的第三步骤。该第二步骤由算式(I)表不。
[0015](R，xy, G’ xy, B’ xy) = (kRxy+(l-k) R2, kGxy+ (l_k) G2, kBxy+ (l_k) B2)
[0016]其中0〈k〈l (I)
[0017]注意，在本说明书中，通过对对象图像进行根据本发明的一个方式的图像处理而得到的图像被称为处理图像。
[0018]在上述图像处理方法中，算式(I)中的k优选为0.2至0.8，因为该图像处理的效
应提闻。
[0019]在上述图像处理方法中，在该第三步骤之后，优选进行珈马校正、对比度强调、锐化或轮廓强调作为第四步骤。
[0020]通过上述第四步骤，可以使处理图像中的对象物更清晰或更被强调。
[0021]本发明的一个方式是一种包括通过上述图像处理方法形成处理图像的处理部的图像处理系统。该图像处理系统可以还包括显示该处理图像的显示部。该图像处理系统可以还包括储存该处理图像的存储部。
[0022]能够提供一种提高全彩色的二维图像的立体效应或深度效应的简便的图像处理方法。或者，能够提供一种提高全彩色的二维图像的立体效应或深度效应的图像处理系统，而不使用特别的机构。
【专利附图】

【附图说明】
[0023]在附图中:
[0024]图1示出根据本发明的一个方式的图像处理系统；
[0025]图2A及2B示出根据本发明的一个方式的图像处理方法；
[0026]图3示出根据本发明的一个方式的图像处理方法；
[0027]图4A至4D都示出用于根据本发明的一个方式的图像处理方法的图像；
[0028]图5示出根据本发明的一个方式的图像处理方法；
[0029]图6A及6B示出根据本发明的一个方式的图像处理方法；
[0030]图7A-1至7D-2示出实施例1 ;并且[0031 ]图8A至8C示出实施例1。
【具体实施方式】
[0032]参照附图对实施方式及实施例进行详细说明。注意，本发明不局限于以下说明。所属【技术领域】的普通技术人员很容易地理解本发明的方式及详细内容在不脱离本发明的宗旨及其范围的情况下可以被变换为各种各样的形式。因此，本发明不应该被解释为仅局限在以下所示的实施方式及实施例的记载中。注意，在下面说明的发明结构中，在不同的附图中通过相同的附图标记来表示相同的部分或具有相同功能的部分，而不反复其说明。
[0033]实施方式I
[0034]在本实施方式中，参照图1、图2A和2B、图3、图4A至4D以及图6A说明根据本发明的一个方式的图像处理方法及图像处理系统。
[0035]根据本发明的一个方式的图像处理系统包括通过根据本发明的一个方式的图像处理方法能够形成处理图像的处理部。根据本发明的一个方式的图像处理系统的例子包括如下显示装置以及如下存储装置，所述显示装置包括该处理部及显示从该处理部输出的图像数据的显示部，所述存储装置包括该处理部及储存从该处理部输出的图像数据的存储部。在本实施方式中，以图1所示的显示装置100为例子说明根据本发明的一个方式的图像处理系统。
[0036]《显示装置100》
[0037]图1所示的显示装置100包括显示部101及处理部102。
[0038]〈显示部101〉
[0039]显示部101具有显示从处理部102输出的图像数据的功能。显示部101显示二维图像。显示部101显示静态图像或由多个图像构成的动态图像。
[0040]例如，可以使用液晶显示装置、电致发光显示装置、等离子体显示器等作为显示部101。显示部101包括具有多个像素120的像素部121、扫描线驱动电路122及信号线驱动电路123等。
[0041]像素部121包括配置为矩阵状的像素120。各像素120与扫描线125及信号线126电连接。由此，各像素120与扫描线驱动电路122及信号线驱动电路123电连接。
[0042]各像素120的颜色根据从处理部102输入的图像数据而决定。用来选择进行显示的像素120的信号从扫描线驱动电路122输入扫描线125，并且图像数据从信号线驱动电路123输入信号线126。被选择的像素120进行显示。
[0043]〈处理部102〉
[0044]处理部102具有从读取的对象图像中抽出对象物并区分为由构成对象物的像素群构成的对象物区域和由其他像素群构成的背景区域的功能。处理部102还具有对背景区域所包含的像素进行图像处理而形成处理图像的功能。
[0045]处理部102包括运算处理部111、数据存储部112、控制部113、输入侧接口部114以及输出侧接口部115等。
[0046]运算处理部111进行各种运算处理如图像数据的运算处理。例如，运算处理部111包括中央处理器(Central Processing Unit:CPU)、用来进行图像处理的运算电路等。
[0047]数据存储部112包括储存用来在处理部102中进行图像处理的数据的各种存储电路。例如，数据存储部112包括只读存储器(Read Only Memory:R O M)，该只读存储器储存当运算处理部111进行运算处理时使用的计算机程序、用于图像处理的滤波器的数据、以及查找表等；储存运算处理部111所算出的运算结果的随机存取存储器(Random AccessMemory:RAM);储存输入到处理部102的图像数据的存储电路；等等。
[0048]控制部113包括用来控制包含在处理部102中的电路的电路。例如，控制部113包括控制对数据存储部112的数据的写入的写入控制电路以及控制该数据的读出的读出控制电路等。
[0049]输入侧接口部114与外部设备进行信号的交换，以从连接到处理部102的外部设备提取数据10(例如，图像数据)并将该数据10供应给处理部102。该外部设备只要是能够输出图像数据的设备即可。例如，可以使用影像拍摄装置如照相机或再现储存在硬盘、DVD等的存储介质中的图像数据的图像再现装置。
[0050]为了在处理部102中处理图像数据，该图像数据需要是数字数据。例如，当需要在处理部102中处理模拟数据的图像数据时，输入侧接口部114设置有模拟-数字转换器(A/D转换器)即可。
[0051]输出侧接口部115与显示部101进行信号的交换，以对显示部101输出图像数据11。
[0052]例如，为了对显示部101输出模拟图像信号，输出侧接口部115可以设置有数字-模拟转换器(D/A转换器)。
[0053]《图像处理方法》
[0054]说明根据本发明的一个方式的图像处理方法。图2A及2B、图3和图6A是在图1所示的处理部102中执行的图像处理方法的流程图。
[0055]本实施方式中的图像处理方法包括如下步骤:将构成对象图像的所有像素区分为对象物区域和背景区域的第一步骤(图2A中的步骤Al);算出该对象物区域的平均颜色并根据该平均颜色算出反色的第二步骤(图2A中的步骤A2);以及对包含在该背景区域中的所有像素以一定比例提供该反色的第三步骤(图2A中的步骤A3)。
[0056]受到根据本发明的一个方式的图像处理的处理图像的对象物颜色和背景颜色的色调与对象图像远离；因此，当观察者看到该处理图像时，观察者能够在对象物和背景中得到远近感。换言之，该处理图像具有比对象图像更高的立体效应或深度效应。
[0057]〈第一步骤Al:区分为对象物区域和背景区域〉
[0058]首先，将对象图像的像素区分为对象物区域和背景区域。对于将对象图像的像素区分为对象物区域和背景区域的方法没有特别的限制。
[0059]在本发明的一个方式中，求得包括背景的一部分的图像(称为比较图像)与由对象物及背景构成的全彩色二维对象图像之间的差异，将该差异等于或大于阈值(或大于阈值)的区域定义为对象物区域，将该差异低于阈值(或等于或低于阈值)的区域定义为背景区域。该阈值只要是能够区分对象物区域和背景区域的值即可。进行图像处理的人可以使用该人判断为适合于区分对象物区域和背景区域的值作为阈值。
[0060]具体而言，对象图像可以是静态图像如照片或者从构成动态图像的多个帧图像中选择的图像。
[0061]作为比较图像，可以使用以与对象图像相同或大致相同的焦点拍摄但与对象图像不同的图像。在使用多个比较图像的情况下，包含在对象图像中的对象物也可以包含在比较图像中。因此，在对象图像是构成动态图像的多个帧图像中之一而不是静态图像如照片的情况下，比较图像可以为该多个帧图像中之一的上一个或下一个图像。
[0062]接着，具体地说明对象图像和比较图像之间的差异的计算方法。
[0063]参照图3说明本实施方式的第一步骤Al的详细内容(步骤BI至步骤B6)。[0064][步骤B1:对象图像及比较图像的读取]
[0065]在步骤BI中，在处理部102中读取对象图像及比较图像。读取的对象图像及比较图像的数据被写入到数据存储部112中。对象图像及比较图像都可以从外部设备输入处理部102。此外，预先储存在数据存储部112中的图像可以被用作比较图像。
[0066]在本实施方式中，静态图像用作对象图像及比较图像。本实施方式中的对象图像(图4A)是由对象物和背景构成的图像，并且，比较图像(图4B)是仅由该背景构成的图像(以与对象图像相同的焦点取得的只含有背景的对象物，即，不包括对象物的图像)。
[0067]另外，在实施方式2中详细地说明从构成动态图像的多个帧图像中选择对象图像及比较图像的例子。
[0068][步骤B2:总计值及处理计数值的复位]
[0069]在后面的步骤中，算出对象图像中的对象物区域的所有像素的R、G、B的灰度值的总和作为Sum (R)、Sum (G), Sum (B)。此外，算出对象物区域中的像素的总数作为处理计数值counter。在此，当各Sum (R)、Sum (G)、Sum (B)及处理计数值counter不是O时,将它们设定为O。当各Sum (R)、Sum (G)、Sum (B)及处理计数值counter是O时,可以省略该步骤。另外，步骤B2可以在步骤BI之前进行。
[0070][步骤B3:像素(X，y)是否是对象物区域中的像素？]
[0071]在步骤B3中，决定比较图像中的像素(x，y)的颜色要素的灰度值和对象图像中的像素(X，y)的颜色要素的灰度值之间的差异的绝对值是否等于或大于阈值。参照图6A说明步骤B3的详细内容(步骤B3-1至B3-3)。
[0072]像素(X，y)的数据包括用来特定一个颜色的数据。当显示部101具有由R (红)、G (绿)、B (蓝)的三种颜色要素表现一个颜色的结构时，图像数据的最小单位的像素(x，y)的数据包括R、G、B的灰度值。另外，R、G、B之外的颜色可以被用作颜色要素。例如，可以使用黄色(yellow)、青色(cyan)、品红色(magenta)。
[0073]在本实施方式中，像素(X，y)的数据包括R、G、B的三个颜色(颜色要素)的灰度值。
[0074]另外，为了更准确地从对象图像抽出对象物区域，可以在对对象图像或/及比较图像进行图像处理之后形成掩模图像。这种图像处理的例子包括平均化处理、使用水平方向的线形一次微分滤波器的滤波器处理、边缘检测处理以及使用中值滤波器的噪声去除处理等。
[0075][步骤B3-1: Δ R (x, y)、Δ G (x, y)、Δ B (x, y)的计算]
[0076]在步骤B3中，首先算出三个差异值AR (x，y)、AG (x，y)、ΛΒ (x，y)。在此，差异值AR (x，y)是比较图像中的像素(x，y)的R的灰度值和对象图像中的像素(x，y)的R的灰度值之间的差异的绝对值；差异值AG (x，y)是比较图像中的像素(x，y)的G的灰度值和对象图像中的像素(X，y)的G的灰度值之间的差异的绝对值；并且差异值ΛΒ (x, y)是比较图像中的像素(x，y)的B的灰度值和对象图像中的像素(x，y)的B的灰度值之间的差异的绝对值。
[0077][步骤B3-2: a R (x, y)、a G (x, y)、α B (x, y)的决定]
[0078]接着,分别决定差异值AR (X，y)、AG (x, y)、ΔΒ (χ, y)是否等于或大于阈值Rth、Gth、Bth。
[0079]当差异值等于或大于阈值时，将灰度判定值设定为1，当差异值小于阈值时，将灰度判定值设定为O。换言之，当AR (X，y) > Rth时,将红色的灰度判定值Ctli (X，y)设定为1，并且当AR (X，y) <Rth时,将红色的灰度判定值Ctli (χ，y)设定为O。这可同样地应用于绿色、蓝色的灰度判定值。根据差异值AG (x，y)、ΔΒ (x，y)是等于或大于阈值Gth、Bth还是大于Gth、Bth而将灰度判定值ae (χ, y)、α B (x, y)设定为I或O。
[0080]在此，使用两个图像(对象图像和比较图像)的颜色要素的灰度值的变化量决定像素(χ，y)是否是对象物区域中的像素。阈值Rth、Gth、Bth是用来决定像素(χ, y)是包括在对象物区域中还是包括在背景区域中的灰度值的变化量的阈值。可以独立地决定阈值Rth、
[0081][步骤B3-3:差异判定值D (X，y)的决定]
[0082]接着,判断R、G、B的灰度判定值的总和是否等于或大于2。当Ctli (x,y) + a G (χ,y) + a B (x，y)≥2时,将像素(x,y)的差异判定值D (x,y)设定为I,并且当a (x,y) + a G(x, y) + a B (x，y)〈2时，将差异判定值D (x,y)设定为O。
[0083]在此，差异判定值D (x, y)根据R、G、B的灰度判定值的总和是否等于或大于2而决定；但是，差异判定值D (x, y)可以根据R、G、B的灰度判定值的总和是否等于或大于I或者R、G、B的灰度判定值的总和是否等于3而决定。
[0084][步骤B4-1:对象图像中的像素(X，y)为对象物区域中的像素的情况]
[0085]当在步骤B3中差异判定值D (x，y)为I时，该对象图像中的像素(x，y)为对象物区域中的像素。此外，掩模图像中的像素(X，y)显示白色(步骤B4-la)。
[0086]再者，当在步骤B3中差异判定值D (X，y)为I时，对Sum (R)、Sum (G), Sum (B)加上对象图像中的像素(χ，y)的R、G、B的灰度值,并且对处理计数值counter加上I (步骤B4-lb)。通过步骤B4-lb，在步骤B6中可以算出对象物区域的反色。
[0087][步骤B4-2:对象图像中的像素(X，y)为背景区域中的像素的情况]
[0088]当在步骤B3中差异判定值D (x，y)为O时，该对象图像中的像素(x，y)为背景区域中的像素。此外，掩模图像中的像素(X，y)显示黑色。
[0089][步骤B5:是否已经决定所有像素的灰度值的差异？]
[0090]直到算出对象图像中的所有像素的颜色要素的灰度值与比较图像中的像素的颜色要素的灰度值之间的差异的绝对值并决定该差异的绝对值是否等于或大于阈值为止，反复执行步骤B3至B5。
[0091][步骤Be:掩模图像的形成]
[0092]通过决定所有像素的掩模图像的颜色(黑色或白色)，形成图4C所示的掩模图像。图4C所示的掩模图像是由对象物区域(白色显示区域)和背景区域(黑色显示区域)构成的二值图像。通过形成图4C所示的掩模图像，对象图像被区分为对象物区域和背景区域。另外，可以在步骤B6之前进行步骤A2。
[0093]通过上述步骤BI至B6,第一步骤Al结束。
[0094]〈第二步骤A2:对象物区域的平均颜色及反色的计算〉
[0095]接着，算出对象物区域的平均颜色及反色。
[0096]在第二步骤A2中，通过算出在第一步骤Al中被区分为对象物区域的所有像素的平均颜色，来算出对象物区域的平均颜色，并且，根据该平均颜色算出对象物区域的反色。
[0097](平均颜色)[0098]通过进行步骤B4_lb的处理，算出对象图像中的对象物区域的所有像素的R、G、B的灰度值的总和作为Sum (R)、Sum (G), Sum (B)。此外，算出对象物区域中的像素的总数作为处理计数值counter。在步骤A2中，通过用处理计数值counter除Sum (R)、Sum (G)、Sum (B)，算出包含在对象图像中的对象物区域中的所有像素的平均颜色。在此，将对象物区域中的像素的(N+1)灰度中的R、G、B的平均灰度值分别表示为％、GpB1，并且，将平均颜色表不为(R1, G1, B1)ο
[0099]另外，平均颜色可以是包含在对象图像中的对象物区域中的所有像素的R、G、B的灰度值的中值。下面说明该中值的计算方法。
[0100]首先，在步骤M-1b中，储存对象物区域的所有像素的R、G、B的灰度值，并且算出包含在对象物区域中的像素的总数作为处理计数值counter。然后，在步骤A2中，算出处理计数值counter的一半的值M。此外，以升序或降序排列R、G、B的灰度值,并将第M的R、G、B的灰度值分别定义为R1' G1, B”另外，当处理计数值counter为奇数时，第(M+0.5)或第(M-0.5)的值可以为对象物区域的平均颜色。或者，第(M+0.5)或第(M-0.5)的值的平均值可以为对象物区域的平均颜色。
[0101](反色)
[0102]再者，根据对象物区域的平均颜色算出对象物区域的平均颜色的反色。平均颜色(R1, G1, B1)的反色可以由(N-R1, N-G1, N-B1)表示。该颜色被用作反色(R2，G2, B2)。
[0103]另外，如下述实施例1所说明，当在以(N+1)灰度表示的对象图像中包含在对象物区域中的所有像素的平均颜色的对象物的平均颜色(R1, G1, B1)及该对象物的平均颜色(R1,G1, B1)的反色(R2，G2, B2)满足算式(2)、(3)时，通过根据本发明的一个方式的图像处理方法，可以得到立体效应或深度效应特别高的处理图像。
[0104]Δ:_2= I Rj+Gj+Bj- (R2+G2+B2) | (2)
[0105]O < Δ !_2 ^ 2.4Ν (3)
[0106]〈第三步骤A3:对背景区域提供反色〉
[0107]接着，在第二步骤Α2中算出的反色以一定比例提供给包含在背景区域中的所有像素。
[0108]具体而言，在第二步骤Α2中算出的反色使用在第一步骤Al中得到的掩模图像以一定比例提供给背景区域中的像素的像素(x，y)。另外，该反色不提供给对象物区域中的像素的像素(χ，y)。
[0109]参照图2B说明第三步骤A3的详细内容(步骤B7至B10)。
[0110][步骤B7:掩模图像中的像素(x，y)是否显示黑色？]
[0111]在步骤B7中，判断掩模图像中的像素(x，y)是显示黑色还是白色。在掩模图像中的像素(x，y)显示黑色的情况下，进行步骤B8-1，在掩模图像中的像素(x，y)显示白色的情况下，进行步骤B8-2。
[0112][步骤B8-1:掩模图像中的像素(X，y)显示黑色的情况]
[0113]在掩模图像中的像素U，y)显示黑色的情况下(在像素U，y)是背景区域中的像素的情况下)，处理图像中的像素(x，y)的颜色取决于对象图像中的像素(x，y)的颜色及反色。具体而言，处理图像中的背景区域中的像素(x，y)的颜色(R' xy，G' xy，B' xy)可以使用对象图像中的像素(χ，y)的颜色(Rxy，Gxy, Bxy)及反色(R2，G2, B2)由算式(I)表示。[0114](R，xy, G，xy, B，xy) = (kRxy+(l-k) R2, kGxy+ (l_k) G2, kBxy+ (l_k) B2)
[0115]其中0〈k〈l(l)
[0116]特别是，算式(I)中的k优选为0.2至0.8，因为实现图像处理的高效率化。
[0117][步骤B8-2:掩模图像中的像素(X，y)显示白色的情况]
[0118]在掩模图像中的像素(χ，y)显示白色的情况下(在像素(χ，y)是对象物区域中的像素的情况下)，处理图像中的像素(χ，y)的颜色是对象图像中的像素(χ，y)的颜色。
[0119][步骤B9:是否已经决定所有像素的颜色？]
[0120]直到决定处理图像中的所有像素的颜色为止反复进行步骤B7至B9。
[0121][步骤BlO:处理图像的输出]
[0122]通过决定处理图像中的所有像素的颜色，形成图4D所示的处理图像。如上所述，当对对象图像进行根据本发明的一个方式的图像处理时，可以得到处理图像。
[0123]可以对通过根据本发明的一个方式的图像处理方法得到的处理图像进一步进行图像处理。具体而言，在图2B中的步骤BlO之后可以进行该图像处理。
[0124]上述图像处理的例子包括锐化处理如反锐化掩模、强调对比度的对比度转换(对比度强调)、珈马校正或轮廓强调。这种图像处理例如可以使对象物清晰或被强调。
[0125]例如，珈马校正是根据输出图像的设备的珈马值(表示图像的灰度的响应特性的数值)校正图像的灰度的处理。通过珈马校正，显示部可以显示与从处理部输出的处理图像的数据符合的图像。
[0126]对比度转换是改变颜色对比度的处理。通过相对于未进行处理的像素的灰度值改变进行处理之后的像素的灰度值的图表的斜率，来可以改变颜色对比度。为了强调对比度，该图表的斜率可以大于I。例如，在未进行处理的像素的灰度值χ为O至50的情况下，通过进行处理之后的像素的灰度值y为O至100 (y=2x,图表中的斜率=2)的处理I或进行处理之后的像素的灰度值y为O至150 (y=3x,图表中的斜率=3)的处理2，可以增加颜色对比度。特别是，图表中的斜率越大，颜色对比度也越高(处理2使颜色对比度比处理I更大)。
[0127]通过使用根据本发明的一个方式的图像处理方法得到的处理图像的对象物颜色的色调和背景颜色的色调与对象图像相比彼此远离；因此，当观察者看到该处理图像时，观察者能够在对象物和背景中得到远近感。因此，在本发明的一个方式中，可以从对象图像得到具有比该对象图像更高的立体效应或深度效应的处理图像。
[0128]实施方式2
[0129]不同于实施方式I，在本实施方式中，参照图5及图6B说明一种包括如下步骤的图像处理方法:从构成动态图像的多个帧图像选择对象图像及比较图像并将构成对象图像的所有像素区分为对象物区域和背景区域的第一步骤；算出该对象物区域的平均颜色并根据该平均颜色算出反色的第二步骤；以及对包含在该背景区域中的所有像素以一定比例提供该反色的第三步骤。
[0130]在构成动态图像的多个帧图像中，在两个连续的帧图像中有图像变化的部分。在本实施方式中，在帧图像中，将动态变化量等于或大于阈值的图像(或者动态变化量大于阈值的图像)称为对象物，将其他部分的图像称为背景。
[0131 ] 在对象图像是构成动态图像的多个帧图像中之一的情况下，例如，可以使用该对象图像的上一个或下一个帧图像作为比较图像。具体而言，对象图像fa的上一个或下一个帧图像fa_i或fa+i可以为比较图像。比较图像不局限于该对象图像的上一个或下一个帧图像。因此，作为对象图像1的比较图像，可以使用帧图像fa-j或帧图像1+」(j是自然数)。
[0132]在本实施方式中，选择性地使用构成动态图像的多个帧图像作为对象图像及比较图像。在本实施方式中，详细地描述与实施方式I的步骤不同的步骤。具体而言，说明图2A中的第一步骤Al。
[0133]参照图5说明本实施方式中的第一步骤Al的详细内容(步骤Cl至C6)。另外，第二步骤A2及第三步骤A3可以参照实施方式1。
[0134][步骤Cl:对象图像及比较图像的读取]
[0135]在步骤Cl中，在处理部102读取对象图像及比较图像。读取的对象图像及比较图像的数据被写入到数据存储部112中。在本实施方式中，读取三个帧图像(读取比较图像L和fa+i以及对象图像fa)。
[0136][步骤C2:总计值及处理计数值的复位]
[0137]在此，当Sum (R)、Sum (G)、Sum (B)及处理计数值counter都不是O时,将它们设定为O。当Sum (R)、Sum (G)、Sum (B)及处理计数值counter是O时,可以省略该步骤。另外，步骤C2可以在步骤Cl之前进行。
[0138][步骤C3:像素(X，y)是否是对象物区域中的像素？] [0139]在步骤C3中，决定比较图像L中的像素(x，y)的颜色要素的灰度值和对象图像4中的像素(X，y)的颜色要素的灰度值之间的差异的绝对值是否等于或大于阈值。并且，决定比较图像fa+i中的像素(χ，y)的R、G、B和对象图像fa中的像素(χ，y)的R、G、B之间的灰度值的差异的绝对值是否等于或大于阈值。参照图6B说明步骤C3的详细内容。
[0140]在本实施方式中，像素(X，y)的数据包括R、G、B的三个颜色的灰度值。
[0141][步骤CS-1a = AR1 (x, y)^ Δ G1 (x, y)^ Δ B1 (x, y)的计算]
[0142]根据比较图像及对象图像fa算出三个差异值AR1 (X，y)、AG1 (x, y)、AB1(x，y)。在此，差异值AR1 (x, y)是比较图像中的像素(x, y)的R的灰度值和对象图像4中的像素(X，y)的R的灰度值之间的差异的绝对值；差异值AG1 (x, y)是比较图像fa-!中的像素(x，y)的G的灰度值和对象图像fa中的像素(x，y)的G的灰度值之间的差异的绝对值；并且差异值AB1 (x，y)是比较图像fa_i中的像素(x，y)的B的灰度值和对象图像fa中的像素(χ，y)的B的灰度值之间的差异的绝对值。
[0143][步骤C3-2a: a R1 (χ, y)、α G1 (χ, y)、α Β1 (χ, y)的决定]
[0144]接着,分别决定差异值AR1 (x, y), AG1 (x, y), AB1 (x, y)是否等于或大于阈值Rth、Gth、Bth。
[0145]当差异值等于或大于阈值时，将灰度判定值设定为1，当差异值小于阈值时，将灰度判定值设定为O。换言之，当AR1 (x,y) > Rth时,将红色的灰度判定值a K1 (x,y)设定为1，并且当AR1 (x,y) <Rth时,将红色的灰度判定值a K1 (x,y)设定为O。这可同样地应用于绿色、蓝色的灰度判定值。根据差异值AG1 (Xjy)^AB1 (x，y)是等于或大于阈值Gth、Bth还是大于Gth、Bth而将灰度判定值Ctel (χ，y)、α Β1 (χ，y)设定为I或O。
[0146][步骤C3-3a:差异判定值D1 (x, y)的决定]
[0147]接着,判断R、G、B的灰度判定值的总和是否等于或大于2。当α R1 (x, y) + a G1(χ, y)+ α Β1 (χ, y)≥2时,将像素(x,y)的差异判定值D1 (x, y)设定为I,并且当α K1 (x, y)+ α Cl (x, y) + α Bi (X，y)〈2时，将差异判定值D1 (x,y)设定为O。
[0148]在此，差异判定值D1 (x，y)根据R、G、B的灰度判定值的总和是否等于或大于2而决定；但是，差异判定值D1 (x, y)可以根据R、G、B的灰度判定值的总和是否等于或大于I或者R、G、B的灰度判定值的总和是否等于3而决定。
[0149][步骤C3_lb:AR2 (χ, y)^ Δ G2 (x,y)、AB2 (x，y)的计算]
[0150]同样地，根据比较图像fa+1及对象图像4算出三个差异值AR2 (X，y)、AG2 (χ,y)、ΔΒ2 (χ, y)。在此,差异值AR2 (x, y)是比较图像f；+:中的像素(x, y)的R的灰度值和对象图像fa中的像素(X，y)的R的灰度值之间的差异的绝对值；差异值AG2 (x, y)是比较图像f；+:中的像素(χ，y)的G的灰度值和对象图像fa中的像素(χ，y)的G的灰度值之间的差异的绝对值；并且差异值AB2 (x，y)是比较图像fa+i中的像素(x，y)的B的灰度值和对象图像fa中的像素(χ，y)的B的灰度值之间的差异的绝对值。
[0151][步骤C3-2b: a R2 (χ, y)、α G2 (χ, y)、α Β2 (χ, y)的决定]
[0152]接着,分别决定差异值AR2 (x，y)、AG2 (x, y), AB2 (x, y)是否等于或大于阈值Rth、Gth、Bth。然后,将灰度判定值 αΚ2 (x, y)> a G2 (χ, y)> α Β2 (x,y)设定为 I 或 O。
[0153][步骤C3-3b:差异判定值D2 (X，y)的决定]
[0154]接着,判断R、G、B的灰度判定值的总和是否等于或大于2。当α Κ2 (χ, y)+a e2(x, y)+ α Β2 (χ, y)≥2时,将像素(x,y)的差异判定值D2 (x, y)设定为I,并且当α K2 (x, y)+ a G2 (χ, y) + α β2 (χ，y)〈2时，将差异判定值D2 (x,y)设定为O。
[0155][步骤C3-4:差异判定值D1 (X，y)的决定]
[0156]然后,决定差异判定值D1 (乂,7)和02 (x,y)是否都是“I”。在差异判定值D1 (χ,}0和02 (X，y)都是“I”的情况下，进行步骤O1-1 (C4_la)。在差异判定值D1 (1,}0和02(X，y)中的至少一方不是I的情况下，进行步骤C4-2。
[0157][步骤C4-1:对象图像中的像素(X，y)为对象物区域中的像素]
[0158]当在步骤C3-4中差异判定值D1 (义,}0和02 (x,y)都是I (差异判定值D1 (x,y)=1且02 (x,y)=l)时,掩模图像中的像素(x,y)显示白色(步骤C4-la)。另外,可以说该对象图像中的像素(X，y)是对象物区域中的像素。
[0159]再者，当步骤C3-4中差异判定值D1 (x，yWPD2 (x，y)都是“ I”时，对Sum (R)、Sum (G)、Sum (B)加上对象图像中的像素(x，y)的R、G、B的灰度值，并且对处理计数值counter加上I (步骤C4_lb)。通过步骤C4_lb,在步骤C6中可以算出对象物区域的平均颜色及反色。
[0160][步骤C4-2:对象图像中的像素(X，y)为背景区域中的像素的情况]
[0161]当在步骤C3-4中差异判定值D1 (义,}0和02 (χ, y)中的至少一方不是I时(差异判定值D1 (χ, y)=0或/及02 (χ, y) =0),掩模图像中的像素(χ, y)显示黑色。此外,可以说该对象图像中的像素(X，y)是背景区域中的像素。
[0162][步骤C5:是否已经决定所有像素的灰度值的差异？]
[0163]直到算出对象图像中的所有像素的颜色要素的灰度值与比较图像中的像素的颜色要素的灰度值之间的差异的绝对值并决定该差异的绝对值是否是等于或大于阈值为止，反复执行步骤C3至C5。
[0164][步骤C6: 掩模图像的形成][0165]通过决定所有像素中的掩模图像的颜色(黑色或白色)，形成掩模图像。掩模图像是由对象物区域(白色显示区域)和背景区域(黑色显示区域)构成的二值图像。通过形成掩模图像，对象图像被区分为对象物区域和背景区域。另外，可以在步骤C6之前进行第二步骤A2。
[0166]通过步骤Cl至C6,本实施方式的第一步骤Al结束。
[0167]然后，可以进行实施方式I中的第二步骤A2之后的处理。
[0168]如本实施方式所示，通过根据本发明的一个方式的图像处理方法，从构成动态图像的多个帧图像中可以选择对象图像及比较图像。
[0169]实施例1
[0170]在本实施例中，参照图7A-1至7D-2以及图8A至8C说明通过根据本发明的一个方式的图像处理方法形成的处理图像。
[0171]表1示出结构例子I至4的未进行根据本发明的一个方式的图像处理的对象物区域中的图像的平均颜色(R1, G1, B1X反色(R2，G2, B2)及八卜2。
[0172]在本实施例中，平均颜色是包含在对象物区域中的所有像素的256
[0173]灰度中的R、G、B的灰度值的平均值。
[0174][表1]
【权利要求】
1.一种图像处理方法，包括如下步骤: 将对象图像分为对象物区域和背景区域； 算出所述对象物区域的平均颜色的灰度值； 使用所述平均颜色的所述灰度值算出所述对象物区域的反色的灰度值；以及 使用所述反色的所述灰度值及所述对象图像的所述背景区域的灰度值算出处理图像的背景区域的灰度值。
2.根据权利要求1所述的图像处理方法，其中所述对象图像和所述处理图像都是全彩色图像。
3.根据权利要求1所述的图像处理方法，其中所述处理图像的对象物区域的灰度值与所述对象图像的所述对象物区域的所述灰度值相同。
4.根据权利要求1所述的图像处理方法，其中多个像素被分为包括在所述对象物区域中的第一像素和包括在所述背景区域中的第二像素。
5.根据权利要求1所述的图像处理方法，还包括如下步骤:进行珈马校正处理、对比度强调处理、锐化处理或轮廓强调处理。
6.一种图像处理系统，包括:根据权利要求1所述的图像处理方法制造所述处理图像的处理部。
7.一种图像处理方法，包括如下步骤: 将对象图像分为对象物区域和背景区域，其中所述对象图像以(N+1)灰度表示； 算出所述对象物区域的平均颜色的`灰度值，其中(R1, G1, B1)表示所述平均颜色的所述灰度值； 利用算式(R2，G2, B2)= (N-R1, N-G1, N-B1)算出所述对象物区域的反色的灰度值，其中(R2, G2, B2)表示所述反色的所述灰度值；以及 利用算式^?^^^^)= CkRxy+ (l-k)R2，kGxy+ (l-k)G2，kBxy+ (l-k)B2)算出处理图像的背景区域的灰度值，其中(R’ Χ?，G’ xy，B’ xy)表示所述处理图像的所述背景区域的像素(X，y)的灰度值，(Rxy, Gxy, Bxy)表示所述对象图像的所述背景区域的像素U，y)的灰度值，并且0〈k〈l。
8.根据权利要求7所述的图像处理方法，其中Λη表示Iragab1-(r2+g2+b2) I，并且Δ卜2满足0< Δ卜2 ( 2.4N的关系。
9.根据权利要求7所述的图像处理方法，其中k是0.2至0.8。
10.根据权利要求7所述的图像处理方法，其中所述处理图像的对象物区域的像素(X，y)的灰度值与所述对象图像的所述对象物区域的像素(X，y)的所述灰度值相同。
11.根据权利要求7所述的图像处理方法，其中多个像素被分为包括在所述对象物区域中的第一像素和包括在所述背景区域中的第二像素。
12.根据权利要求7所述的图像处理方法，还包括如下步骤:进行珈马校正处理、对比度强调处理、锐化处理或轮廓强调处理。
13.一种图像处理系统，包括:根据权利要求7所述的图像处理方法制造所述处理图像的处理部。
14.一种包括处理部和显示部的显示装置，该处理部包括: 用来将对象图像分为对象物区域和背景区域的单元，其中所述对象图像以(N+1)灰度表不; 用来算出所述对象物区域的平均颜色的灰度值的单元，其中(R1, G1, B1)表示所述平均颜色的所述灰度值； 用来利用算式(R2，G2, B2) = (N-R1, N-G1, N-B1)算出所述对象物区域的反色的灰度值的单元，其中(R2，G2, B2)表示所述反色的所述灰度值；以及
用来利用算式(R’xy，G’xy, B' xy) = (kRxy+ (1-k) R2, kGxy+ (1-k) G2, kBxy+ (l_k)B2)算出处理图像的背景区域的灰度值的单元，其中(R’ xy，G’ xy，B’ xy)表示所述处理图像的所述背景区域的像素(x，y)的灰度值，(Rxy，Gxy，Bxy)表示所述对象图像的所述背景区域的像素(X，y)的灰度值，并且0〈k〈l， 其中，所述显示部包括用来显示所述处理图像的多个像素。
15.根 据权利要求14所述的显示装置，其中Ap2表示IrjgjB1-(r2+g2+b2) |，并且Λ H满足0〈 A1K 2.4Ν的关系。
16.根据权利要求14所述的显示装置，其中k是0.2至0.8。
17.根据权利要求14所述的显示装置，其中所述处理图像的对象物区域的像素(X，y)的灰度值与所述对象图像的所述对象物区域的像素(X，y)的所述灰度值相同。
18.根据权利要求14所述的显示装置，其中多个像素被分为包括在所述对象物区域中的第一像素和包括在所述背景区域中的第二像素。
19.根据权利要求14所述的显示装置，其中所述处理部还包括:用来进行珈马校正处理、对比度强调处理、锐化处理或轮廓强调处理的单元。
【文档编号】H04N9/64GK103650488SQ201280032377
【公开日】2014年3月19日 申请日期:2012年6月18日 优先权日:2011年7月1日
【发明者】田村辉, 濱田俊树 申请人:株式会社半导体能源研究所