图像处理装置、图像处理方法和电子装置制造方法
【专利摘要】本发明涉及能够基于被处理图像来调整视差的图像处理装置、图像处理方法和电子装置。基于与被处理图像相对应的视差的大小的随时间的变化量，执行视差调整以使与所述被处理图像相对应的视差变大，其中所述被处理图像是被处理的移动图像。
【专利说明】图像处理装置、图像处理方法和电子装置
【技术领域】
[0001] 本发明涉及图像处理装置、图像处理方法和电子装置。
【背景技术】
[0002] 能够在显示屏上显示对应于用户左眼的图像（下文中称为"左眼图像"）和对应于 用户右眼的图像（下文中称为"右眼图像"）从而使用户将所显示的图像识别为三维图像的 装置变得越来越普及。上述这类装置能够使用户利用视差（disparity)将所显示的图像识 别为三维图像。
[0003] 当使用户将所显示的图像识别为三维图像时，优选地仅向用户的左眼呈现左眼图 像且仅向用户的右眼呈现右眼图像。如果用户用右眼识别左眼图像且/或用左眼识别右眼 图像，即如果发生了被称为串扰的现象，则三维图像的质量会下降，例如该图像看似重叠图 像或该图像看似模糊。
[0004] 鉴于这种情况，目前正在研究用于降低串扰的技术。日本专利文献JP4440066B公 开的技术就是一种用于降低串扰技术的一个示例。
[0005] 作为一个示例，JP4440066B公开的技术根据显示装置的尺寸调整视差以显示三维 图像。然而，即使使用JP4440066B公开的技术，也不能根据将被显示在显示屏上的图像来 调整视差。
【发明内容】
[0006] 本发明的目的在于提供一种能够基于被处理图像来调整视差的图像处理装置、图 像处理方法、程序和电子装置。
[0007] 本发明的实施例提供了一种图像处理装置，其包括：图像处理单元，其基于与被处 理图像相对应的视差的大小的随时间的变化量，执行视差调整以使与所述被处理图像相对 应的视差变大，其中所述被处理图像是被处理的移动图像。
[0008] 本发明的实施例提供了一种图像处理方法，其包括：基于与被处理图像相对应的 视差的大小的随时间的变化量，执行视差调整以使与所述被处理图像相对应的视差变大， 其中所述被处理图像是被处理的移动图像。
[0009] 本发明的实施例提供一种使计算机执行以下功能的程序：基于与被处理图像相对 应的视差的大小的随时间的变化量，执行视差调整以使与所述被处理图像相对应的视差变 大，其中所述被处理图像是被处理的移动图像。
[0010] 本发明的实施例提供一种电子装置，其包括：图像处理单元，其基于与被处理图像 相对应的视差的大小的随时间的变化量，执行视差调整以使与所述被处理图像相对应的视 差变大，其中所述被处理图像是被处理的移动图像。
[0011] 根据本发明的一个或多个实施例，能够基于被处理图像来调整视差。
【专利附图】
【附图说明】
[0012] 图1是说明本发明的实施例的图像处理方法的处理的示意图。
[0013] 图2是说明本发明的实施例的图像处理方法的处理的示意图。
[0014] 图3是说明本发明的实施例的图像处理方法的处理的示意图。
[0015] 图4是用于说明本实施例的图像处理方法的处理的流程图。
[0016] 图5是说明本发明的实施例的图像处理装置的一个示例构造的框图。
[0017] 图6是说明本发明的实施例的图像处理装置的一个示例硬件构造的示意图。
【具体实施方式】
[0018] 在下文中，将参考附图具体说明本发明的优选实施例。应注意的是，在说明书和附 图中，使用相同的附图标记表示具有大体相同的功能和结构的结构性元件，并省略了这些 结构性元件的重复说明。
[0019] 下面按照下述顺序进行说明。
[0020] 1.本发明的实施例的图像处理方法
[0021] 2.本发明的实施例的图像处理装置
[0022] 3.本发明的实施例的程序
[0023] 1.本发明的实施例的图像处理方法
[0024] 在说明本发明的实施例的图像处理装置的构造之前，首先说明本发明的实施例的 图像处理方法。通过本发明的实施例的图像处理装置执行本实施例的图像处理方法的处理 的方式来说明本实施例的图像处理方法。
[0025] 本实施例的图像处理装置基于与被处理图像（其是被处理的移动图像）相对应的 视差来调整与此被处理图像相对应的视差。作为本实施例的图像处理方法的处理，本实施 例的图像处理装置基于与被处理图像相对应的视差的大小的随时间的变化量进行视差调 整以使被处理图像相对应的视差变大。
[0026] 这里，作为本实施例中的被处理图像的示例，给出了用于表示左眼图像和右眼图 像（左眼图像和右眼图像构成了三维图像）的移动图像（在下文中有时将其称为"立体图 像"）以及根据平面图像（2D图像）人工生成的立体图像。在下文中，将移动图像以及人工 生成的立体图像统称为"立体图像"。
[0027] 而且，在本实施例中，例如，通过与被处理图像中的各个帧相对应的图像（在下文 中将其称为"帧图像"）中的视差量来表示与被处理图像相对应的视差的大小。例如，在本 实施例中，基于各个帧图像中的每个像素的深度（degree of d印th)来计算每个帧图像的 视差量。应注意的是，下面将说明与本实施例的图像处理装置执行的视差量的计算相关的 处理。
[0028] 本实施例的图像处理方法中的处理
[0029] 现在将更详细地说明本实施例的图像处理方法中的处理。
[0030] (1)视差量的计算过程
[0031] 本实施例的图像处理装置基于与各个帧图像中的视差相关的每个像素的深度来 计算每个帧图像的视差量。在下文中，有时也将各个帧图像中的每个像素的深度称为"视差 图"。
[0032] 作为一个示例，本实施例的图像处理装置通过比较用于构成立体图像的左眼图像 和右眼图像中的相应像素来计算每个像素的视差。接着，本实施例的图像处理装置通过将 每个像素的计算视差设定为本实施例中的各个帧图像中的每个像素的深度来执行本实施 例的视差量计算过程。这里，本实施例中的深度对应于视点（viewpoint)之间的距离。
[0033] 应注意的是，对于本实施例的图像处理装置，本实施例的中用于获取各个帧图像 中的每个像素的深度的方法并不限于上述方法。
[0034] 例如，本实施例的图像处理装置可使用能够计算每个像素的视差的任意方法来计 算每个像素的视差。
[0035] 作为另一示例，在本实施例中，图像处理装置也可以使用用于表示与被处理图像 的各个帧图像中的每个像素的视差相对应的视差信息，并将由该视差信息表示的每个像素 的视差设定为各个帧图像中的各个像素的深度。这里，作为示例，在本实施例中，视差信息 可以是被处理图像的元数据，或可以独立于被处理图像的数据。作为示例，在本实施例中， 由视差信息表示的各个帧图像中的每个像素的视差可通过分析被处理图像来进行设定，或 可基于用户操作等来进行设定。例如，在本实施例中，执行图像处理方法的处理之前，在图 像处理装置的外部或内部的装置中产生视差信息。
[0036] 本实施例的图像处理装置例如通过计算视差图（各个帧图像中的深度）的动态范 围来计算每个帧图像中的视差量。
[0037] 作为具体示例，针对每个帧，本实施例的图像处理装置通过执行下面的方程式1 来计算每个帧图像中的视差量。这里，方程式1中的"z(t)"代表帧t的帧图像中的视差量 (其中，t是1以上的整数）。另外，方程式1中的"D(x，y，t)"代表由帧t的帧图像中的坐 标（x，y)表示的像素的深度。通过将帧图像中的任意位置（例如，帧图像的左下角位置或 帧图像的左上角位置）作为原点来表示帧图像中的坐标。
[0038]
【权利要求】
1. 一种图像处理装置，其包括： 图像处理单元，其基于与被处理图像相对应的视差的大小的随时间的变化量，执行视 差调整以使与所述被处理图像相对应的视差变大，其中所述被处理图像是被处理的移动图 像。
2. 根据权利要求1所述的图像处理装置，其中，所述图像处理单元被构造成： 针对与所述被处理图像中的每个帧相对应的每个帧图像，基于与各个所述帧图像中的 视差相关的每个像素的深度，计算用于表示所述帧图像中的视差的大小的视差量； 基于所述视差量的随时间的变化量，执行用于使每个所述帧图像中的所述视差量变大 的调整；且 基于每个所述帧图像中的所调整的所述视差量，调整各个所述帧图像中的每个像素的 深度。
3. 根据权利要求2所述的图像处理装置，其中， 所述图像处理单元被构造成基于每个所述帧图像中的所述视差量和超调函数来增加 每个所述帧图像中的所述视差量，所述超调函数是将每个所述帧图像中的所述视差量作为 输入值的函数，所述超调函数保持前一帧中的所述视差量的变化量，并使每个所述帧图像 中的所述视差量收敛于目标值。
4. 根据权利要求3所述的图像处理装置，其中，所述图像处理单元构造为： 针对每个所述帧图像，计算所述超调函数的输出值与所述超调函数的输入值之间的比 率，且 针对每个所述帧图像，通过将所述帧图像中的每个像素的深度乘以所计算的比率，来 调整各个所述帧图像中的每个像素的深度。
5. 根据权利要求4所述的图像处理装置，其中， 当所述超调函数的输出值小于所述超调函数的输入值时，所述图像处理单元进行操作 以选择性地将所述超调函数的输出值更新为所述超调函数的输入值，且 所述图像处理单元被构造成针对每个所述帧图像计算所述超调函数的已被选择性更 新的输出值与所述超调函数的输入值之间的比率。
6. 根据权利要求2-5中任一项所述的图像处理装置，其中，每个所述帧图像中的所述 视差量是各个所述帧图像中的深度的动态范围。
7. 根据权利要求2-5中任一项所述的图像处理装置，其中，每个所述帧图像中的所述 视差量是各个所述帧图像中的深度的最大值。
8. 根据权利要求2-5中任一项所述的图像处理装置，其中，每个所述帧图像中的所述 视差量是各个所述帧图像中的深度的平均值。
9. 一种图像处理方法，其包括： 基于与被处理图像相对应的视差的大小的随时间的变化量，执行视差调整以使与所述 被处理图像相对应的视差变大，其中所述被处理图像是被处理的移动图像。
10. -种电子装置，其包括前述权利要求1-8中任一项所述的图像处理单元。
【文档编号】G02B27/22GK104104935SQ201410131423
【公开日】2014年10月15日 申请日期:2014年4月2日 优先权日:2013年4月11日
【发明者】土场健太郎, 小森谷阳多 申请人:索尼公司