图像处理装置和图像处理方法
【专利说明】
[0001] 本申请是申请日为2013年1月23日、申请号为201380006508. 6 (PCT/ JP2013/051264)、发明名称为"图像处理装置和图像处理方法"的专利申请的分案申请。
技术领域
[0002] 本技术涉及图像处理装置和图像处理方法；特别是涉及能够通过使用与视差图像 相关的信息来提高视差图像编码效率的图像处理装置和图像处理方法。
【背景技术】
[0003] 近年来，存在对3D图像的关注，并提议了用于生成多视点3D图像的视差图像的编 码方法（例如，参照NPL1)。此外，视差图像是由如下视差值形成的图像：表示与视差图像 相对应的视点的彩色图像的各像素与为基准点的视点的彩色图像的像素在屏幕上的位置 之间沿水平方向的距离的视差值，该视差值与那些像素相对应。
[0004] 另外，为了与高级视频编码（AVC)相比进一步提高编码效率，在已知为高效率视 频编码01EVC)的编码方法的标准化中已经取得了进展，并且在2011年8月起草的时候，作 为草案已经出版了NPL2。
[0005] 引用列表 [0006] 非专利文献
[0007] NPLl:"CallforProposalson3DVideoCodingTechnology"，IOS/IECJTC1/ SC29/WG11，MPEG2011/N12036,瑞士，日内瓦，2011 年 3 月
[0008] NPL2：Thomasffiegand,Woo-jinHan,BenjaminBross,Jens-RainerOhm,Gary J.Sullivian, "WD3:WorkingDraft3ofHigh-EfficiencyVideoCoding"，JCTVC_E603_ d5(第5版），2011年5月20日
【发明内容】
[0009] 技术问题
[0010] 然而，未设计通过使用于视差图像有关的信息来提高视差图像编码效率的编码方 法。
[0011] 本技术是考虑了该情形而做出的，并且本技术能够通过使用与视差图像相关的信 息来提尚视差图像的编码效率。
[0012] 解决方案
[0013] 本技术第一方面的图像处理装置为如下图像处理装置：所述图像处理装置包括： 设定单元，所述设定单元设定在以深度图像作为目标、使用深度加权系数和深度偏差执行 深度加权预测处理时使用的计算的计算精度；深度加权预测单元，所述深度加权预测单元 通过根据由所述设定单元设定的所述计算精度、使用与所述深度图像有关的信息执行关于 所述深度图像的所述深度加权预测处理，来生成深度预测图像；以及编码单元，所述编码单 元通过使用由所述深度加权预测单元生成的所述深度预测图像对所述深度图像进行编码 来生成深度流。
[0014] 本技术的第一方面的图像处理方法与本技术的第一方面的图像处理设备相对应。
[0015] 在本技术的第一方面中，设定在以深度图像作为目标使用深度加权系数和深度偏 差执行深度加权预测处理时使用的计算的计算精度，通过根据由所述设定步骤的处理设定 的所述计算精度使用与所述深度图像有关的信息执行关于所述深度图像的所述深度加权 预测处理来生成深度预测图像，以及通过使用由所述深度加权预测步骤的处理生成的所述 深度预测图像对所述深度图像进行编码来生成深度流。
[0016] 本技术的第二方面的图像处理装置为如下图像处理装置：所述图像处理装置包 括：接收单元，所述接收单元接收深度流和信息，所述深度流是使用通过使用与深度图像相 关的信息校正后的深度预测图像而被编码的，所述信息与所述深度图像相关；解码单元，所 述解码单元通过对由所述接收单元接收到的所述深度流进行解码来生成所述深度图像；设 定单元，所述设定单元设定在以由所述解码单元生成的所述深度图像作为目标、使用深度 加权系数和深度偏差执行深度加权预测处理时使用的计算的计算精度；以及深度加权预测 单元，所述深度加权预测单元通过根据由所述设定单元设定的所述计算精度、使用与由所 述接收单元接收到的所述深度图像有关的信息执行关于所述深度图像的所述深度加权预 测，来生成所述深度预测图像，其中，所述解码单元使用由所述深度加权预测单元生成的所 述深度预测图像，对所述深度流进行解码。
[0017] 本技术的第二方面的图像处理方法与本技术的第二方面的图像处理装置相对应。
[0018] 在本技术的第二方面中，接收深度流和信息，所述深度流是使用通过使用与深度 图像相关的信息校正后的深度预测图像而被编码的，所述信息与所述深度图像相关；通过 对由所述接收步骤的处理接收到的所述深度流进行解码来生成所述深度图像；设定在以由 所述解码步骤的处理生成的所述深度图像作为目标、使用深度加权系数和深度偏差执行深 度加权预测处理时使用的计算的计算精度；以及通过根据由所述设定步骤的处理设定的所 述计算精度、使用与由所述接收步骤的处理接收到的所述深度图像有关的信息执行关于所 述深度图像的所述深度加权预测处理，来生成所述深度预测图像。深度预测图像在对深度 流解码期间使用。
[0019] 发明的有益效果
[0020] 根据本技术的第一方面，可以使用与视差图像相关的信息提高视差图像的编码效 率。
[0021] 另外，根据本技术的第二方面，可以对视差图像的编码数据（其中通过使用与视 差图像相关的彳目息进行编码来提尚编码效率）进行解码。
【附图说明】
[0022] 图1是示出应用本技术的编码装置的一个实施方式的配置示例的框图。
[0023] 图2是说明视点生成彳目息的视差最大值和视差最小值的图不。
[0024] 图3是说明视点生成信息的视差精度参数的图示。
[0025] 图4是说明视点生成信息的摄像机间距离的图示。
[0026] 图5是示出图1的多视点图像编码单元的配置示例的框图。
[0027] 图6是示出编码单元的配置示例的框图。
[0028] 图7是示出编码位流的配置示例的图示。
[0029] 图8是示出图7的PPS的语法的示例的图示。
[0030] 图9是示出片头的语法的示例的图示。
[0031] 图10是示出片头的语法的示例的图示。
[0032] 图11是说明图1的编码装置的编码处理的流程图。
[0033] 图12是详细说明图11的多视点编码处理的流程图。
[0034] 图13是详细说明图12的视差图像编码处理的流程图。
[0035] 图14是详细说明图12的视差图像编码处理的流程图。
[0036] 图15是示出应用本技术的解码装置的一个实施方式的配置示例的框图。
[0037] 图16是示出图15的多视点图像解码单元的配置示例的框图。
[0038] 图17是示出解码单元的配置示例的框图。
[0039] 图18是说明图15的解码装置150的解码处理的流程图。
[0040] 图19是详细说明图18的多视点解码处理的流程图。
[0041] 图20是详细说明图16的视差图像解码处理的流程图。
[0042] 图21是说明在视差图像的校正中使用的信息的递送方法的图示。
[0043] 图22是示出第二递送方法中的编码位流的配置示例的图示。
[0044] 图23是示出第三递送方法中的编码位流的配置示例的图示。
[0045] 图24是示出片编码单元的配置示例的框图。
[0046] 图25是示出编码单元的配置示例的框图。
[0047] 图26是示出校正单元的配置示例的框图。
[0048] 图27是用于说明视差值和沿深度方向的位置的图示。
[0049] 图28是示出经成像的对象之间的位置关系的示例的图示。
[0050] 图29是说明沿深度方向的最大位置和最小位置之间的关系的图示。
[0051] 图30是用于说明经成像的对象之间的位置关系和亮度的图示。
[0052] 图31是用于说明经成像的对象之间的位置关系和亮度的图示。
[0053] 图32是用于说明经成像的对象之间的位置关系和亮度的图示。
[0054] 图33是详细说明视差图像编码处理的流程图。
[0055] 图34是详细说明视差图像编码处理的流程图。
[0056] 图35是用于说明预测图像生成处理的流程图。
[0057] 图36是示出片解码单元的配置示例的框图。
[0058] 图37是示出解码单元的配置示例的框图。
[0059] 图38是示出校正单元的配置示例的框图。
[0060] 图39是详细说明视差图像解码处理的流程图。
[0061] 图40是用于说明预测图像生成处理的流程图。
[0062] 图41是示出计算机的一个实施方式的配置示例的图示。
[0063] 图42是示出应用本技术的电视机装置的示意性配置示例的图示。
[0064] 图43是示出应用本技术的移动电话的示意性配置示例的图示。
[0065] 图44是示出应用本技术的记录和再现装置的示意性配置示例的图示。
[0066] 图45是示出应用本技术的成像装置的示意性配置示例的图示。
【具体实施方式】
[0067]〈一个实施方式〉
[0068][编码装置的一种实施方式的配置示例]
[0069] 图1是应用本技术的编码装置的一种实施方式的配置示例的框图。
[0070] 图1的编码装置50被配置有多视点彩色图像成像单元51、多视点彩色图像校正 单元52、多视点视差图像生成单元53、视点生成信息生