立体图像合成方法及装置的制造方法
【技术领域】
[0001]本发明是有关于一种图像处理方法以及装置，且特别是有关于一种立体图像合成方法及装置。
【背景技术】
[0002]随着科技的日新月异，电视等大型显示器的显示技术也走向了新的时代，越来越多的显示器制造厂商推出了可以显示立体图像/视频的显示器，使得一般使用者也可在电影院以外的地方体验到立体图像的享受。然而，立体图像对于人眼的图像舒适度一直没有获得太大的解决。这是因为，人眼的焦距与视轴不配称所造成的脑内错乱(vergenceaccommodat1n conflict)。一般而言，为了要避免这样的情况，显示器在设置时则可能将抑制立体场景的场景深度。虽这样的设置可以提高使用者于观看时的舒适度，但立体效果也因此而降低了许多。
【发明内容】
[0003]本发明提供一种立体图像合成方法及装置，可提供更适合人眼观看的立体视频图像。
[0004]本发明的立体图像合成方法包括以下步骤。首先，接收对应于一第一视角的一第一图像以及对应于一第二视角的一第二图像。然后，取得对应于图像内容的一视差图，并且根据视差图判断图像内容中的一零视差区域，其中视差图包括对应于第一图像以及第二图像的多个视差值。接着，对应零视差区域调整视差图为一已位移视差图。并且，根据已位移视差图以及一预设最大范围线性或非线性地调整已位移视差图得到一已调整视差图。再者，根据已调整视差图、第一图像以及第二图像产生多个虚拟视角图像。以及，根据已调整视差图加强虚拟视角图像的一二维深度线索。
[0005]本发明的立体图像合成装置包括:一图像接收单元、一数据处理单元以及一图像输出单元。图像接收单元，接收对应于第一视角的一第一图像以及对应于第二视角的一第二图像。数据处理单元耦接图像接收单元。一图像输出单元。耦接数据处理单元。数据处理单元取得对应于第一图像以及第二图像的一视差图，并且根据视差图判断图像内容中的一零视差区域，其中视差图包括对应于图像内容的多个视差值。数据处理单元对应零视差区域调整视差图为一已位移视差图。数据处理单元根据已位移视差图以及一预设最大范围线性或非线性地调整已位移视差图得到一已调整视差图。数据处理单元根据已调整视差图、第一图像以及第二图像产生多个虚拟视角图像。数据处理单元根据已调整视差图加强虚拟视角图像的一二维深度线索。图像输出单元输出虚拟视角图像。
[0006]基于上述，本发明提供一种立体图像合成方法及装置，可根据人眼的视觉特性调整立体图像中的深度，使得图像的观看者得以在不失去过多立体效果的情况下减少脑内错乱的问题。
[0007]为让本发明的上述特征和优点能更明显易懂，下文特举实施例，并配合附图作详细说明如下。
【附图说明】
[0008]图1为根据本发明一实施例所示出立体图像合成方法的步骤流程图；
[0009]图2为根据本发明一实施例所示出立体图像合成装置的功能方块图；
[0010]图3A为根据本发明一实施例所示出显示器、观看者与根据视差图所显示的物件的关系意图；
[0011]图3B为根据本发明一实施例所示出显示器、观看者与根据已位移视差图所显示的物件的关系示意图；
[0012]图3C为根据本发明一实施例所示出显示器、观看者与根据已调整视差图所显示的物件的关系意图；
[0013]图4A、4B为根据本发明一实施例所示出虚拟视角图像的示意图。
[0014]附图标记说明:
[0015]10:立体图像合成装置；
[0016]110:图像接收单元；
[0017]120:图像处理单元；
[0018]130:图像输出单元；
[0019]300:显示器；
[0020]頂G1、頂G2:图像；
[0021]V1、40、41:虚拟视角图像；
[0022]0B1 ?0B4、0B3’:物件；
[0023]VR:观看者；
[0024]DIS:视差距离；
[0025]d:已位移视差值；
[0026]d’:已调整视差值；
[0027]dmax:已位移视差最大值；
[0028]dmax’:为预设最大视差值；
[0029]dmax":已调整视差最大值；
[0030]dmin:已位移视差最小值；
[0031]dmin’:预设最大视差值；
[0032]dmin":已调整视差最小值；
[0033]S101 ?S106:步骤。
【具体实施方式】
[0034]图1为根据本发明一实施例所示出立体图像合成方法的步骤流程图。请参照图1，首先在步骤S101时，接收对应于第一视角的一第一图像以及对应于第二视角的一第二图像，然后在步骤S102时，取得对应于第一图像以及第二图像的一视差图，并且根据视差图判断一零视差区域，其中视差图包括对应于第一图像以及第二图像的多个视差值。接着在步骤S103时，对应零视差区域调整视差图为一已位移视差图。并且在步骤S104时，根据已位移视差图以及一预设最大范围线性或非线性地调整已位移视差图得到一已调整视差图。再者在步骤S105时，根据已调整视差图、第一图像以及第二图像产生多个虚拟视角图像。以及在步骤S106时，加强虚拟视角图像的二维深度线索。
[0035]图2为根据本发明一实施例所示出立体图像合成装置的功能方块图。请参照图2，立体图像合成装置10包括图像接收单元110、数据处理单元120以及图像输出单元130。图像接收单元110接收对应于第一视角的第一图像IMG1以及对应于第二视角的第二图像IMG0数据处理单元120耦接图像接收单元110。图像输出单元130耦接数据处理单元120。数据处理单元120取得对应于图像内容的视差图DM，并且根据视差图DM判断图像内容中的零视差区域，其中视差图DM包括对应于图像内容的多个视差值。
[0036]数据处理单元120对应零视差区域调整视差图DM为已位移视差图。数据处理单元120根据已位移视差图以及预设最大范围线性或非线性地调整已位移视差图得到已调整视差图。数据处理单元120根据已调整视差图合成第一图像頂G1以及第二图像頂G2或产生多个虚拟视角图像VI。数据处理单元120加强虚拟视角图像VI的二维深度线索。图像输出单元130输出虚拟视角图像VI。
[0037]简单来说，在本发明所提供的立体图像合成方法以及装置中，主要可以分为在图像合成步骤(图1步骤S105)之前的预处理程序(对应于图1步骤S101?S104)以及在图像合成步骤之后的后处理程序(对应于图1步骤S106)。在上述的预处理程序中，主要是将立体图像的视差调整至人眼可舒适的观看的范围。而在上述的后处理程序中，则是在虚拟视角图像合成之后，再根据人眼的特性而对立体图像更进一步的进行处理。以下则将针对各步骤进行详细的说明。
[0038]在本发明中，第一图像IMG1与第二图像IMG2对应于一相同的图像内容(例如特定物体或是特定场景)，分别以第一视角以及第二视角的角度所获取而得到。另外，在本发明中所提及的图像(例如第一图像IMG1以及第二图像IMG2)可为一视频流中的一图框(frame)，例如第一图像IMG1为处于第一视角的一摄影机所拍摄的视频流中的一图框，而第二图像IMG2为处于第二视角的摄影机所拍摄的视频流中的图框。又，第一图像IMG1与第二图像頂G2也可分别为一静态图像，本发明并不限定于此