专利名称：三维图像处理装置和方法
技术领域：
符合本发明的装置和方法涉及处理三维(3D)图像，更具体地说，涉及用于调整输入3D图像的视差和稳定地显示3D图像的图像处理装置和方法。
背景技术：
常规的三维(3D)显示器利用2D平板显示器和如薄膜型微偏振片、视差屏障和柱面镜之类的工具，通过将具有不同视差的图像投影到用户的左眼和右眼来显示3D图像。这样的3D显示器根据在其上显示的视图的数量可以分为立体3D显示器和多视图3D显示器。立体3D显示器显示具有两个不同视图的图像，多视图3D显示器显示具有多于两个视图的图像。
为了产生3D图像，用包括两个入射镜头的立体摄像机或包括多个入射镜头的多视图摄像机拍摄实像。或者，立体或多视像内容可以用计算机绘图产生。
当利用3D摄像机产生3D图像或当利用计算机绘图产生图像内容时，要考虑人视觉特性。然而，当显示环境不同于产生环境时，例如，当利用多视图摄像机产生的3D图像在立体3D显示器上显示时，或当不同尺寸的显示器用于产生和显示3D图像时，常规的3D显示器不能按预期显示3D图像。
发明内容
本发明的实施例提供这样的图像处理方法和装置，其能够用于控制用多视图摄像机获得的图像的会聚，以使图像用于三维(3D)立体显示器。
本发明的实施例还提供这样的图像处理方法和装置，其通过调整接收和显示3D图像的接收端的图像视差，能够用来增强3D效果和减轻眼睛的疲劳。
本发明的实施例还提供这样的图像处理方法和装置，当接收和显示图像的接收端调整图像视差并且输出视差调整的图像时，其通过防止抖动，能够用于输出稳定的图像。
本发明的实施例还提供这样的图像处理方法和装置，其能够用于缩放和补偿在视差调整处理中切除的图像。
根据本发明的实施例的一方面，提供一种图像处理装置，包括图像划分单元，接收3D图像并且将3D图像划分成左眼图像和右眼图像；视差估算单元，估算左眼图像和右眼图像之间的视差；水平移动确定单元，利用估算的视差确定左眼图像和右眼图像的水平移动值；和水平移动单元，基于确定的水平移动值水平移动左眼图像和右眼图像。
水平移动确定单元可以求估算视差的平均值，并且将平均视差确定为水平移动值，水平移动单元基于水平移动值乘以预定比例常数的一半，水平移动左眼图像和右眼图像。
该装置还可以包括3D立体显示单元，其显示从水平移动单元输出的调整了视差的左眼图像和右眼图像。
根据本发明的实施例的另一方面，提供一种图像处理装置，包括图像划分单元，接收3D图像并将3D图像划分成左眼图像和右眼图像；视差估算单元，估算左眼图像和右眼图像之间的视差；水平移动确定单元，利用估算的视差确定左眼图像和右眼图像的水平移动值；过滤单元，过滤确定的水平移动值；和水平移动单元，基于过滤的水平移动值水平移动左眼图像和右眼图像。
视差估算单元可以估算左眼图像和右眼图像的中间部分之间的视差。过滤单元可以低通过滤水平移动值。
根据本发明的实施例的另一方面，提供一种图像处理装置，包括图像划分单元，接收3D图像并且将3D图像划分成左眼图像和右眼图像；视差估算单元，估算左眼图像和右眼图像之间的视差；水平移动确定单元，利用估算的视差确定左眼图像和右眼图像的水平移动值；水平移动单元，基于确定的水平移动值水平移动左眼图像和右眼图像；和缩放单元，按预定缩放系数垂直和水平地缩放调整了视差的左眼图像和右眼图像，以补偿由于水平移动而切除的调整了视差的左眼图像和右眼图像部分。
缩放系数可以是M/(M-D)，其中M是图像的水平尺寸，D是对应于移动值一半的值，缩放单元去除缩放后的图像由于缩放而变得高于原始图像的高度，使得缩放后的图像与原始图像的尺寸相同。
该装置还可以包括在水平移动确定单元和水平移动单元之间的过滤单元，其中过滤单元低通过滤水平移动值。
根据本发明实施例的另一方面，提供一种图像处理方法包括接收3D图像并且将3D图像划分成左眼图像和右眼图像；估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的水平移动值；基于确定的水平移动值水平移动左眼图像和右眼图像。
根据本发明实施例的另一方面，提供一种图像处理方法包括接收3D图像并且将3D图像划分成左眼图像和右眼图像；估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的水平移动值；过滤确定的水平移动值；和基于过滤的水平移动值水平移动左眼图像和右眼图像。
根据本发明实施例的另一方面，提供一种图像处理方法包括接收3D图像并且将3D图像划分成左眼图像和右眼图像；估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的水平移动值；基于确定的水平移动值水平移动左眼图像和右眼图像；按预定缩放系数垂直和水平地缩放调整了视差的左眼图像和右眼图像，以补偿由于水平移动而切除的调整了视差的左眼图像和右眼图像部分。
通过参照附图详细描述本发明的示例性实施例，上述和其它特征和优点将显而易见，其中图1A-1C表示立体摄像机的类型；图2表示在利用前束式(toed-in)立体摄像机进行拍摄操作时产生的问题；图3表示根据本发明实施例的多视图摄像机的结构；图4表示根据本发明实施例的多视图视频编码的应用；图5A-5C表示根据本发明实施例的、用多视图摄像机拍摄的左眼图像和右眼图像；图6A-6C表示根据本发明的实施例，通过将图5的左眼图像和右眼图像向左和向右移动而产生稳定的立体图像的过程。
图7表示根据本发明实施例的基于块的视差估算(DE)；图8表示根据本发明实施例的、根据图7的DE确定的水平移动值，右眼图像和左眼图像的水平移动；图9A-9D表示在通过如图8所示水平移动右眼和左眼图像调整图像的视差之后，在3D显示器上的图像显示位置的变化；图10是根据本发明实施例的图像处理装置的框图；图11表示根据本发明实施例进行右眼和左眼图像中间部分的视差估算的处理；图12表示根据本发明另一实施例的图像处理装置；图13A-13D表示根据本发明的实施例，通过缩放图像来补偿在视差调整处理中切除的图像的处理；图14表示根据本发明另一实施例的图像处理装置；图15是表示根据本发明另一实施例的图像处理方法的流程图；图16是表示根据本发明另一实施例的图像处理方法的流程图；图17是表示根据本发明又一实施例的图像处理方法的流程图。
具体实施例方式
现在将参照附图更详细地描述本发明，在附图中示出本发明的示例性实施例。然而，本发明可以以不同的形式体现，不应该认为是限于在此阐述的实施例；更确切地说，提供这些实施例，使得该公开完全和彻底，并且将本发明的构思完全传达给本领域的普通技术人员。
现在参照图1和3描述产生实像的摄像机结构。
图1表示立体摄像机的各种类型。图1A表示平行立体摄像机。平行立体摄像机的对准简单。然而，因为平行立体摄像机没有会聚功能，它不能考虑人的视觉特性进行图像的拍摄。因此，拍摄的图像不能用作三维(3D)图像。图1B表述前束式立体摄像机。前束式立体摄像机具有会聚功能，接近地反映人的视觉特性。然而，前束式前束式立体摄像机存在图2所示的问题。
图2表示在利用图1B所示的前束式立体摄像机进行拍摄操作时产生的问题。
当正方形物体21位于图2所示的左边摄像机和右边摄像机的摄像机轴线之间时，通过左边摄像机和右边摄像机分别拍摄的图像23和25变形，如图2所示。图像23和25的这种变形使眼睛疲劳。
图1C表示以防止在图1A和1B分别所示的视差立体摄像机和前束式立体摄像机的缺陷的方式对准的混合立体摄像机。在混合立体摄像机中，透镜单元和电荷耦合器件(CCD)单元可以分别移动。因此，通过调整CCD单元和透镜的位置可以控制会聚。
图3表示根据本发明实施例的多视图摄像机的结构。
拍摄多视像的常规方法使用如图3所示构成的多视图摄像机。在进行的移动图像专家组(MPEG)3D音频视频(3DAV)的标准化处理中，用图3的多视图摄像机拍摄的图像作为标准图像。立体摄像机可以有图1C所示的结构。然而，在多视图视频拍摄的情况下，它实际上不可能控制每个图像的会聚。
图4表示根据本发明实施例的多视图视频编码的应用。
参照图4，从由N个摄像机组成的多视图摄像机输出的图像在多视图编码处理中被压缩，并存储或传输，然后在多视图解码处理中重建。重建的图像可以根据显示装置的应用来显示。即，在2D显示器上显示视图的图像序列。对于3D立体显示器，选择两个图像并且用于在3D立体显示器上显示3D图像。对于3D多图像显示器，至少选择两个视图并且用于在3D多视图显示器上显示3D多视像。当两个图像序列用于在3D立体显示器上显示3D图像时，3D立体显示器存在与图1A所示的平行立体摄像机相同的问题。因此，用多视图摄像机拍摄的图像必须正确地处理，以在3D立体显示器上显示。
图5表示用根据本发明实施例的平行多视图摄像机拍摄的左眼图像和右眼图像。当假定从平行多视图摄像机输出的图像序列选择两个视图并且用于3D立体显示器时，出现图5所示的现象。
图5A表示左眼图像，图5B表示右眼图像。图5C表示在一个平面上在图5B的右眼图像上重叠图5A的左眼图像，以显示它们之间的视差。假定当在左眼图像的相同目标的右侧存在右眼图像的目标时，存在正视差。在这种情况下，在图5C所示的重叠图像内所有目标的图像具有正视差。换言之，可以说由于平行摄像机的特性，不存在会聚点，或会聚点在屏幕外。
当图5C所示的重叠图像显示在3D立体显示器上时，在重叠图像内的所有目标的图像看起来似乎从屏幕中突出。这种视差(即，深度视差)使眼睛疲劳并且降低3D效果。
图6表示根据本发明的实施例，分别通过将图5的左眼图像和右眼图像向左和向右移动，产生稳定立体图像的处理。换言之，图6表示通过调整视差为用户提供稳定的3D图像的图像处理方法。图6A表示图5A的右眼图像向右移动，图6B表示图5B的左眼图像向左移动。图6C表示根据本发明的实施例，在3D立体显示器上图6B的左眼图像与图6A的右眼图像合成。
参照图6C，合成图像的整体视差小于图5C所示的重叠图像。因此，有些目标的图像，例如目标的图像61，具有负视差。换言之，图像61具有负深度，从而看起来似乎陷入屏幕里面。图像64是具有零视差和深度等于屏幕的会聚点。图像62和63的视差是正的。因此，图像62和63看起来似乎从屏幕中突出。
当右眼图像和左眼图像被合成时，如图6C所示，在合成图像内的目标图像比图5C所示的重叠图像具有更多变化的深度。因此，可以提供给用户更稳定和立体的图像。现在，参照图7和8，描述当右眼图像和左眼图像以有规律间隔水平移动时，通过估算输入右眼图像和左眼图像的视差确定水平移动值的方法。
图7表示根据本发明实施例的基于块的视差估算(DE)。
参照图7，左眼图像被分成尺寸相等的N×N块。利用绝对差之和(SAD)或绝对差均值(MAD)，估算与左眼图像的对应块最相似的右眼图像的块。在这种情况下，参考块和估算块之间的距离定义为视差矢量(DV)。通常，DV被赋予参考图像中的每个像素。然而，为了减少需要的计算量，假定在基于块的DE中，块中所有像素的DV大致相同。对每个像素进行DE以获得每个像素的DV，称为基于像素的DE。
在根据本发明实施例确定水平移动值的方法中，对右眼图像和左眼图像进行DE，以获得右眼和左眼图像之间的平均视差。然后，右眼图像和左眼图像的每一个移动半个平均视差。右眼和左眼图像的水平移动值可以是平均视差乘以根据图像特性确定的比例常数。
图8表示根据利用图7所示的DE确定的水平移动值的、右眼图像和左眼图像的水平移动。
在基于块的DE中，当块的视差矢量是dv(x，y)(其中x和y表示块在2D平面中的位置)，平均视差(dv_ave)是所有dv(x，y)的平均数。参照图8，图6中右眼和左眼图像的水平移动距离可以是dv_ave/2或dv_ave乘以比例常数a，例如，a*dv_ave/2。在这种情况下，比例常数a可以通过试验确定。在图8中，左眼图像向右水平移动dv_ave/2或a*dv_ave/2，并且右眼图像向左水平移动dv_ave/2或a*dv_ave/2。
图9表示在通过如图8所示水平移动右眼和左眼图像调整图像的视差之后，在3D显示器上的图像显示位置的变化。
图9A表示重叠利用普通的平行多视图摄像机获得的右眼图像和左眼图像的屏幕。图9B表示立体3D显示器，其上图9A的重叠图像中所有目标看起来似乎从屏幕突出。
图9C表示在屏幕上分别移动dv_ave/2和重叠的左眼图像和右眼图像。图9D表示在立体3D显示器上显示的图9C的重叠图像。参照图9C和9D，目标dv_lr＜0看起来似乎陷入屏幕中，目标dv_lr＝0看起来似乎在屏幕的平面上，目标dv_lr＞0看起来似乎从屏幕中突出。
如上所述，根据本发明的实施例，当基于dv_ave或de_ave*a(其中a是比例常数)调整右眼和左眼图像之间的视差时，产生图像，诸如具有调整了深度的图9C的重叠图像，可以减少眼睛疲劳，同时保持3D效果。
图10是根据本发明实施例的图像处理装置100的框图。参照图10，图像处理装置100包括图像划分单元11、视差估算单元13、水平移动确定单元15、和水平移动确定单元17。
图像划分单元11接收3D图像并将3D图像划分成右眼图像和左眼图像。然后，图像划分单元11将右眼图像和左眼图像传输到视差估算单元13和水平移动单元17。视差估算单元13估算右眼图像和左眼图像之间的视差。在这种情况下，可以使用上述基于块的视差估算或其它方法。
水平移动确定单元15从视差估算单元13接收估算的视差，并确定右眼和左眼图像的水平移动值。详细地说，水平移动确定单元15对估算的视差求平均值，并且将平均视差确定为水平移动值。在对应于水平移动值一半的值乘以预定比例常数之后，水平移动单元17将右眼图像和左眼图像移动所获得的值。当预定比例常数是1时，右眼和左眼图像水平移动对应于右眼和左眼图像之间平均视差一半的值。
水平移动单元17基于对应于确定的水平移动值乘以预定比例常数的一半的值，将左眼图像向右移动，并将右眼图像向左移动，并且输出调整了视差的左眼图像和右眼图像。尽管没有示出，视差调整装置100可以包括3D立体显示单元，以显示从水平移动单元17输出的调整了视差的左眼和右眼图像。
图11表示根据本发明实施例对右眼图像和左眼图像的中间部分进行视差估算的处理。
现在，参照图11描述根据本发明实施例计算用于视差调整的平均视差dv_ave的方法。当某一点的视差矢量大大地大于图像其它点的视差矢量时，基于视差矢量的平均视差dv_ave可能过度受到具有非常大的视差矢量的点影响。特别是，在DE过程中可能找不到右眼图像与左眼图像相同的边缘部分。因此，当边缘部分用于DE时，不能获得合适的平均视差dv_ave。
为此，参照图11，对中间区域进行DE，总体上其导致很少的估算误差。进行DE的区域的尺寸可以用试验确定。然而，在确定合适的平均视差dv_ave之后，如果平均视差dv_ave对于图像序列的每个图像是变化的，那么在调整了视差的图像的图像序列中会出现抖动现象。因此，当观看者观看图像序列时，观看者可能会感觉到好像图像序列在水平地振动。为了避免这种抖动现象，平均视差dv_ave必须保持稳定。
因此，图像处理装置100过滤平均视差dv_ave，以防止随着平均视差dv_ave的突然的变化，右眼图像和左眼图像之间过度的视差调整。在这种情况下，可以使用低通滤波器(LPF)，基于平均视差dv_ave过滤水平移动值。
图12表示根据本发明另一实施例的图像处理装置200。
参照图12，图像处理装置200包括图像划分单元11、视差估算单元13、水平移动确定单元15、过滤单元16和水平移动单元17。除了图10的图像处理装置100提供的功能之外，图12的图像处理装置200具有防止抖动功能。
图像划分单元11接收3D图像并将3D图像划分成右眼图像和左眼图像。然后，图像划分单元11将右眼图像和左眼图像传输到视差估算单元13和水平移动单元17。视差估算单元13估算右眼图像和左眼图像之间的视差。如参照图11所述，视差估算单元13可以对右眼图像和左眼图像的每一个的中间区域进行DE，从而不会估算出右眼图像和左眼图像之间相对过度的视差。
水平移动确定单元15从视差估算单元13接收估算的视差，并确定右眼图像和左眼图像的水平移动值。过滤单元16过滤确定的水平移动值，以防止3D图像之间水平移动值的过度变化。过滤单元16利用LPF过滤水平移动值。
从图像划分单元11接收右眼图像和左眼图像的水平移动单元17，将右眼图像和左眼图像水平地移动过滤水平移动值，并且输出调整了视差的左眼图像和右眼图像。尽管未示出，图像处理装置200可以包括3D立体显示单元，以显示从水平移动单元17输出的调整了视差的左眼图像和右眼图像。
图13表示根据本发明实施例，通过缩放图像来补偿在视差调整处理中切除的图像的处理。
当使用图10或12的图像处理装置时，能够减少眼睛的疲劳，并且增强3D效果。然而，当如图6和8所示调整右眼图像和左眼图像之间的视差时，左眼图像的右边缘部分和右眼图像的左边缘部分有dv_ave/2或a*dv_ave/2的宽度被损失。现在参照图13来描述缩放和重建图像损失部分的方法。
图13A表示原始图像，图13B表示在原始图像的右边缘部分被切除dv_ave的宽度用于视差调整后获得的图像。
为了补偿图13B所示的图像，整个图像按预定系数缩放到其原始尺寸。图13C表示图13B所示的图像缩放后获得的图像。当假定缩放比例常数是b时，该比例常数通过下面的式子给出b＝M/(M-dv_ave)…(1)参照图13C，缩放的图像具有比原始图像高的高度。因此，缩放的图像的垂直边缘部分被切除，以产生图13D所示的重建图像。在图13C所示的图像的总宽度N(b-1)的垂直边缘部分被切除后，产生图13D所示的重建图像。这样，能够重建由于视差调整而被切除的图像。
图14表示根据本发明另一实施例的图像处理装置300。
参照图14，图像处理装置300包括图像划分单元11、视差估算单元13、水平移动确定单元15、水平移动单元17和缩放单元19。除了图10的图像处理装置200提供的功能之外，图14的图像处理装置300具有缩放功能。
图像划分单元11接收3D图像并将3D图像划分成右眼图像和左眼图像。然后，图像划分单元11将右眼图像和左眼图像传输到视差估算单元13和水平移动单元17。视差估算单元13估算右眼图像和左眼图像之间的视差。视差估算单元13可以对右眼图像和左眼图像的每一个的中间区域进行DE，从而能够确定合适的水平移动值。
水平移动确定单元15从视差估算单元13接收估算的视差，并且确定用于右眼图像和左眼图像的水平移动值。从图像划分单元11接收右眼图像和左眼图像的水平移动单元17，将右眼图像和左眼图像水平地移动由水平移动确定单元15确定的水平移动值，并且输出调整了视差的左眼图像和右眼图像。
从水平移动单元17接收调整了视差的右眼图像和左眼图像的缩放单元19，用预定的缩放系数，垂直和水平地缩放所接收的调整了视差的右眼图像和左眼图像，并且补偿在右眼图像和左眼图像水平移动后被切除的右眼图像和左眼图像部分。详细地说，缩放单元19将比原始右眼图像和左眼图像高的缩放后的右眼图像和左眼图像切到它们的原始尺寸，并且输出获得的右眼图像和左眼图像。此外，图像处理装置300可以如图12所示包括在水平移动确定单元15和水平移动单元17之间的过滤单元16，以提供防止抖动功能。
尽管在图14中没有示出，图像处理装置300包括3D立体显示单元，以显示从缩放单元19输出的调整了视差的左眼图像和右眼图像。
图15是表示根据本发明实施例的图像处理方法的流程图。
为了调整3D图像的视差，3D图像被接收并且分成右眼图像和左眼图像(S110)。估算右眼图像和左眼图像之间的视差(S120)。基于估算的视差确定右眼图像和左眼图像的水平移动值(S130)。通过将估算视差求平均值可以确定水平移动值。
基于确定的水平移动值，水平移动右眼图像和左眼图像(S140)。输出调整了视差的右眼图像和左眼图像，并且在3D立体显示器上显示。
图16是表示根据本发明另一实施例的图像处理方法的流程图。
3D图像被接收并且划分成右眼图像和左眼图像(S210)。估算右眼图像和左眼图像之间的视差(S220)。在本发明的实施例中，操作S220可以包括估算右眼图像和左眼图像的中间部分之间的视差，以防止在后续操作中计算出的水平移动值的突然变化。
基于估算的视差确定右眼图像和左眼图像的水平移动值(S230)。过滤水平移动值，以防止已经连续确定的水平移动值过度地变化(S240)。可以利用LPF过滤水平移动值。基于过滤的水平移动值水平移动右眼图像和左眼图像(S250)。然后，输出调整了视差的右眼图像和左眼图像，并且在3D立体显示器上显示。
图17是表示根据本发明另一实施例的图像处理方法的流程图。
3D图像被接收并且被分成右眼图像和左眼图像(S310)。估算右眼图像和左眼图像之间的视差(S320)。基于估算的视差确定右眼图像和左眼图像的水平移动值(S330)。操作S330可以进一步包括过滤水平移动值，以防止水平移动值的过度变化。在这种情况下，可以利用LPF过滤水平移动值。
基于水平移动值水平移动右眼图像和左眼图像，并且输出视差调整的右眼图像和左眼图像(S340)。
按预定缩放系数垂直和水平地缩放调整了视差的右眼图像和左眼图像，并且补偿在右眼图像和左眼图像水平移动后被切除的右眼图像和左眼图像部分。而且，比原始右眼图像和左眼图像高的比例缩放右眼图像左眼图像被垂直地切成它们的原始尺寸(S350)。在3D立体显示器上显示获得的右眼图像和左眼图像。
根据本发明的图像处理方法和装置能够用于控制用多视图摄像机或平行立体摄像机获得的图像的会聚，以使图像用于3D立体显示器。
根据本发明的图像处理方法和装置，通过调整在接收和显示3D图像的接收端的图像视差，能够用于增强3D效果和减少眼睛疲劳。
根据本发明的图像处理方法和装置，当在接收和显示图像的接收端调整图像的视差和输出调整了视差的图像时，通过防止抖动能够用于输出稳定的图像。
根据本发明的图像处理方法和装置能够用于缩放和补偿在视差调整处理中切除的图像。
本发明还能够在计算机可读记录介质上作为计算机可读代码实现。计算机可读记录介质可以是能够存储用计算机系统能读取的数据的任何数据存储装置。例如，计算机可读记录介质包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置和载波(诸如通过互联网的数据传输)。
计算机可读记录介质还可以分布在联网计算机系统上，使得计算机可读代码以分布式存储和执行。
尽管参照本发明的示例性实施例具体图示和描述了本发明，本领域的普通技术人员应该理解，在不脱离本发明下列权利要求限定的精神和范围的前提下，可以就其形式和内容做出各种变化。
权利要求
1.一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理装置，包括视差估算单元，估算左眼图像和右眼图像之间的视差；移动确定单元，利用估算的视差确定左眼图像和右眼图像的移动值；移动单元，基于确定的移动值移动左眼图像和右眼图像。
2.如权利要求1所述的装置，其中移动值是用于水平移动的值，移动单元基于确定的移动值，水平地移动左眼图像和右眼图像。
3.如权利要求2所述的装置，其中移动确定单元求估算视差的平均值，并且将平均视差确定为移动值，移动单元基于移动值乘以预定比例常数的一半，水平移动左眼图像和右眼图像。
4.如权利要求2所述的装置，进一步包括3D立体显示单元，其显示从移动单元输出的、调整了视差的左眼图像和右眼图像。
5.一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理装置，包括视差估算单元，估算左眼图像和右眼图像之间的视差；移动确定单元，利用估算的视差确定左眼图像和右眼图像的移动值；过滤单元，过滤确定的移动值；和移动单元，基于过滤的移动值，移动左眼图像和右眼图像。
6.如权利要求5所述的装置，其中视差估算单元估算左眼图像和右眼图像的中间部分之间的视差。
7.如权利要求5所述的装置，其中移动值是用于水平移动的值，移动单元基于过滤的移动值，水平地移动左眼图像和右眼图像。
8.如权利要求7所述的装置，其中移动确定单元求估算视差的平均值，并且将平均视差确定为移动值，移动单元基于移动值乘以预定比例常数的一半，移动左眼图像和右眼图像。
9.如权利要求7所述的装置，其中过滤单元对移动值低通过滤。
10.如权利要求7所述的装置，还包括3D立体显示单元，其显示从移动单元输出的、调整了视差的左眼图像和右眼图像。
11.一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理装置，包括视差估算单元，估算左眼图像和右眼图像之间的视差；移动确定单元，利用估算的视差确定左眼图像和右眼图像的移动值；移动单元，基于确定的移动值移动左眼图像和右眼图像；缩放单元，用预定的缩放系数缩放调整了视差的左眼图像和右眼图像，以补偿调整了视差的左眼图像和右眼图像由于移动而被切除的部分。
12.如权利要求11所述的装置，其中视差估算单元估算左眼图像和右眼图像的中间部分之间的视差。
13.如权利要求11所述的装置，其中移动值是用于水平移动的值，移动单元基于确定的移动值，水平地移动左眼图像和右眼图像，缩放单元垂直和水平地缩放调整了视差的左眼图像和右眼图像。
14.如权利要求13所述的装置，其中移动确定单元求估算视差的平均值，并且将平均视差确定为移动值，移动单元基于移动值乘以预定比例常数的一半水平，移动左眼图像和右眼图像。
15.如权利要求13所述的装置，其中缩放系数是M/(M-D)，其中M是图像的水平尺寸，D是对应于移动值一半的值，缩放单元去除缩放后的图像由于缩放而变得高于原始图像的高度，使得缩放后的图像与原始图像的尺寸相同。
16.如权利要求13所述的装置，进一步包括连到移动确定单元和移动单元的过滤单元，其中过滤单元对移动值低通过滤。
17.如权利要求13所述的装置，进一步包括3D立体显示单元，其显示从移动单元输出的调整了视差的左眼图像和右眼图像。
18.一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理方法，包括估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的移动值；基于确定的移动值移动左眼图像和右眼图像。
19.如权利要求18所述的方法，其中移动值是用于水平移动的值，基于确定的移动值水平地移动左眼图像和右眼图像。
20.如权利要求19所述的方法，其中移动值的确定包括求估算视差的平均值，并且将平均视差确定为移动值，并且左眼图像和右眼图像的水平移动包括基于移动值乘以预定比例常数的一半移动左眼图像和右眼图像。
21.如权利要求19所述的方法，还包括在3D立体显示器上显示调整了视差的左眼图像和右眼图像。
22.一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理方法，包括估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的移动值；过滤确定的移动值；和基于过滤的移动值移动左眼图像和右眼图像。
23.如权利要求22所述的方法，其中视差的估算包括估算左眼图像和右眼图像的中间部分之间的视差。
24.如权利要求22所述的方法，其中移动值是用于水平移动的值，并且基于过滤的移动值水平移动左眼图像和右眼图像。
25.如权利要求24所述的方法，其中移动值的确定包括求估算视差的平均值，并且将平均视差确定为移动值，并且左眼图像和右眼图像的水平移动包括基于移动值乘以预定比例常数的一半移动左眼图像和右眼图像。
26.如权利要求24所述的方法，其中移动值的过滤包括对移动值低通过滤。
27.如权利要求24所述的方法，还包括在3D立体显示器上显示调整了视差的左眼图像和右眼图像。
28.一种图像处理方法，用于将三维(3D)图像划分成左眼图像和右眼图像，包括估算左眼图像和右眼图像之间的视差；利用估算的视差确定左眼图像和右眼图像的移动值；基于确定的移动值移动左眼图像和右眼图像；用预定的缩放系数缩放调整了视差的左眼图像和右眼图像，以补偿调整了视差的左眼图像和右眼图像由于移动而被切除的部分。
29.如权利要求28所述的方法，其中视差的估算包括估算左眼图像和右眼图像的中间部分之间的视差。
30.如权利要求28所述的方法，其中移动值是用于水平移动的值，基于确定的移动值水平地移动左眼图像和右眼图像，并且垂直和水平地缩放调整了视差的左眼图像和右眼图像。
31.如权利要求30所述的方法，其中移动值的确定包括求估算视差的平均值，并且将平均视差确定为移动值，左眼图像和右眼图像的水平移动包括基于移动值乘以预定比例常数的一半移动左眼图像和右眼图像。
32.如权利要求30所述的方法，其中缩放系数是M/(M-D)，其中M是3D图像的水平尺寸，D是移动值的一半，并且部分图像的补偿包括按缩放系数缩放调整了视差的左眼图像和右眼图像；和去除缩放后的图像由于缩放而高于原始图像的高度，使得缩放后的图像与原始图像的左眼图像和右眼图像的尺寸相同。
33.如权利要求30所述的方法，还包括在左眼图像和右眼图像的水平移动前对移动值低通过滤。
34.如权利要求30所述的方法，还包括在3D立体显示器上显示调整了视差的左眼图像和右眼图像。
35.一种记录程序的计算机可读介质，其中用计算机执行程序时，程序实施权利要求19的方法。
全文摘要
本发明提供一种对被划分成左眼图像和右眼图像的三维(3D)图像使用的图像处理装置和方法。该装置包括视差估算单元，估算左眼图像和右眼图像之间的视差；水平移动确定单元，利用估算的视差确定左眼图像和右眼图像的水平移动值；和水平移动单元，基于确定的水平移动值，水平移动左眼图像和右眼图像。在该方法和装置中，接收和显示3D图像的接收端通过调整3D图像的视差能够增强3D效果和减少眼睛疲劳。
文档编号H04N13/04GK1956554SQ200610163579
公开日2007年5月2日 申请日期2006年9月4日 优先权日2005年9月3日
发明者河泰铉, 瑟奇·舍斯塔克 申请人:三星电子株式会社