解码多视图视频的视频解码装置和方法
【技术领域】
[0001] 本发明设及一种视频编译技术，并且更加具体地，设及3D视频图像编译技术。
【背景技术】
[0002] 近年来，对高分辨率和高质量视频的需要已经在各种应用领域中增长。然而，视频 数据的分辨率和质量变得越来越高，视频数据的量变得越来越大。
[0003] 因此，当使用诸如现有的有线或者无线宽带线传输数据或者视频数据被存储在现 有的存储介质中时，传输成本及其存储成本增加。高效率的视频压缩技术能够被使用W有 效地传输、存储和再现高分辨率和高质量的视频数据。
[0004] 另一方面，通过处理高分辨率/大容量视频的能力的实现，使用3D视频的数字广播 服务已经作为下一代广播服务引起注意。3D视频能够使用多视图信道提供真实感和沉浸 感。
[0005] 3D视频能够在诸如自由视点视频(FW)、自由视点TV(FTV)、3DTV、监视W及家庭娱 乐的各种领域中使用。
[0006] 不同于单个视图视频，使用多视图的3D视频在具有相同的图片顺序计数POC的视 图之间具有高的相关性。因为W多个邻近的相机拍摄相同的场景，即，除视差和微小的照度 (illumination)差异之外，多个视图、多视图视频具有几乎相同的信息，并且因此不同视图 在其间具有高的相关性。
[0007] 因此，在不同视图之间的相关性能够被考虑用于编码/解码多视图视频，并且能够 获得对于编码和/或解码当前视图的需求的信息。例如，能够参考在不同视图中的块来预测 或者解码在当前视图中要解码的块。
【发明内容】
[000引技术问题
[0009] 本发明提供一种用于使用信息和邻近块的深度来更加有效率地推导视差向量的 方法和装置。
[0010] 本发明旨在调节能够减少复杂性并且增加编译效率的视差向量的存储单元。
[0011] 本发明进一步提供一种用于通过使用视差向量有效率地预测运动向量增加编译 效率的方法和装置。
[0012]技术方案
[0013]本发明的实施例提供一种视频解码装置，该视频解码装置用于解码多视图视频， 该装置包括:赌解码单元，该赌解码单元被配置成通过赌解码比特流推导对于解码当前块 所要求的视频信息；存储器，该存储器被配置成存储被参考W解码当前块的图片;预测单 元，该预测单元被配置成通过使用视频信息基于相同视图中的当前块的邻近块来推导第一 视差向量，通过使用第一视差向量和参考视图深度来推导第二视差向量，使用在第一视差 向量和第二视差向量之间的差来推导第=视差向量，W及通过使用第一视差向量、第二视 差向量、W及第=视差向量中的一个来推导当前块的预测采样；W及滤波器单元，该滤波器 单元被配置成使用预测采样将滤波应用于已经被重建的当前图片。
[0014]本发明的另一实施例提供一种用于解码多视图视频的视频解码方法，该方法包 括:通过赌解码比特流来推导对于解码当前块所要求的视频信息;通过使用视频信息基于 相同视图中的当前块的邻近块来推导第一视差向量;通过使用第一视差向量和参考视图深 度来推导第二视差向量，W及使用在第一视差向量和第二视差向量之间的差来推导第=视 差向量;通过使用第一视差向量、第二视差向量、W及第=视差向量中的一个来推导当前块 的预测采样；W及使用预测采样将滤波应用于已经被重建的当前图片。
[001引有益效果
[0016] 根据本发明，使用信息和邻近块的深度能够有效率地推导视差向量。
[0017] 根据本发明，视差向量的存储单元能够被重新调节W及编译过程的复杂性能够被 减少并且编译效率能够被增加。
[0018] 根据本发明，通过使用视差向量有效率地预测运动向量能够增加多视图视频的编 译效率。
【附图说明】
[0019] 图1是示意性地图示3D视频的编码和解码过程的框图。
[0020] 图2是示意性地图示视频编码设备的配置的框图。
[0021 ]图3是示意性地图示视频解码设备的配置的框图。
[0022] 图4是用于示意性地视图间编译的图。
[0023] 图5示意性地图示使用深度图的多视图编译方法。
[0024] 图6是示意性地图示DV-MCP块的图。
[0025] 图7是示意性地图示当前块的邻近块的示例的图。
[0026] 图8是示意性地图示使用深度校正从邻近块推导的视差向量的过程的图。
[0027] 图9示意性地图示使用DV-MCP块捜索NBDV的方法的图。
[00%]图10是示意性地图示可W被用于预测运动向量的邻近块的示例的图。
[0029] 图11是示意性地图示当前块的时间邻近块的图。
[0030] 图12是示意性地图示根据本发明的配置MVP列表的示例的图。
[0031] 图13是示意性地图示根据本发明的配置MVP列表的另一示例的图。
[0032] 图14是示意性地图示根据本发明的配置MVP列表的另一示例的图。
[0033] 图15是示意性地图示根据本发明的配置MVP列表的另一示例的图。
[0034] 图16是示意性地图示根据本发明的用于推导MVP列表的方法的另一示例的图。
[0035] 图17是示意性地图示根据本发明的配置MVP列表的另一示例的图。
[0036] 图18是示意性地图示根据本发明的解码设备的操作的图。
【具体实施方式】
[0037] 如在此处使用的，术语"像素"或者"图像元素"意指组成单个图像的最小单元。术 语"采样"可W用作表示特定的像素的值的术语。在运一点上，采样可W指示照度分量的像 素值和/或色度分量的像素值。
[0038] 如在此处使用的，术语"单元"意指用于图像处理和/或在图像中特定的位置的基 本单元。单元与诸如"块"、"区域"等等的术语可W互换地使用。通常地，MXN块指的是WM列 和N行排列的采样或者变换系数的集合。
[0039] 在下文中，将参考附图详细地描述本发明的实施例。
[0040] 图1是示意性地描述3D视频的编码和解码过程的图。
[0041 ]参考图1，3D视频编码器编码视频图片和深度图和相机参数W作为比特流输出。
[0042] 可W通过相对于相应视频图片（纹理图片）的像素在相机和主题之间的距离信息 (深度信息）组成深度图。例如，深度图可W是通过根据比特深度标准化深度信息获得的图 片。在运种情况下，可W通过在没有色度表达的情况下记录的深度信息构成深度图。
[0043] 通常，因为距主题的距离和视差相互成反比例，所W可W通过使用相机参数从深 度图的深度信息中推导指示在视图之间的相关性的视差信息。
[0044] 包括深度图和相机信息W及常规的彩色图片，即，视频图片（纹理图片）的比特流 可W通过网络或者存储介质被发送给解码器。
[0045] 解码器接收比特流W重建视频。当3D视频解码器用作解码器时，3D视频解码器可 W从比特流解码视频图片W及深度图和相机参数。可W基于经解码的视频图片、深度图和 相机参数合成对于多视图显示所要求的视图。在运种情况下，当使用的显示器是立体显示 器时，可W通过使用在重建的多视图之中的两个图片显示3D图片。
[0046] 当使用立体视频解码器时，立体视频解码器可W从比特流中重建两个图片W在两 个眼睛入射。立体显示器可W通过使用视图差异或者在左眼入射的左图片和在右眼入射的 右图片之间的视差显示3D图片。当多视图显示器与立体视频解码器一起使用时，可W通过 基于两个经重建的图片产生其他视图显示多视图。
[0047] 当使用2D解码器时，2D图片被重建W通过2D显示器输出该图片。2D显示器被使用， 但是当3D视频解码器或者立体视频解码器用作解码器时，重建的图片中的一个可W通过2D 显示器输出。
[0048] 在图1的配置中，视图合成可W通过解码器或者显示器来执行。此外，解码器和显 示器可W是一个装置或者单独的装置。
[0049] 在图1中，为了容易描述，描述3D视频解码器、立体视频解码器，和2D视频解码器是 分开的解码器，但是一个解码装置可W执行所有的3D视频解码、立体视频解码和2D视频解 码。此外，3D视频解码装置可W执行3D视频解码，立体视频解码装置可W执行立体视频解 码，并且2D视频解码装置可W执行2D视频解码。此外，多视图显示器可W输出2D视频或者立 体视频。
[0050] 图2是示意地描述视频编码装置的配置的图。参考图2,视频编码装置200包括图片 分离单元205、预测单元210、减法单元215、变换单元220、量化单元225、重排单元 (reordering unit)230、赌编码单元235、去量化单元240、反变换单元245、加法单元250、滤 波器单元255和存储器260。
[0051] 图片分离单元205可W将输入图片分离为至少一个处理单元块。在运种情况下，处 理单元块可W是编译单元块、预测单元块或者变换单元块。可W根据四叉树(quad tree)结 构从最大编译单元块分离作为编译的单元块的编译单元块。作为从编译单元块分割的块的 预测单元块可W是采样预测的单元块。在运种情况下，该预测单元块可W被划分为子块。作 为编译单元块的变换单元块可W根据四叉树结构分离，并且可W是推导变换系数的单元 块，或者从变换系数推导残留信号的单元块。
[0052] 如在此处所使用的，为了说明的方便起见，编译单元块被称为编译块或者编译单 元(CU)。预测单元块被称为预测块或者预测单元(PU)。变换单元块被称为变换块或者变换 单元(TU)。
[0053] 预测块或者预测单元可W意指块状的特定区域或者一批预测采样。此外，变换块 或者变换单元可W意指块状的特定区域或者一批变换系数或者残留采样。
[0054] 预测单元210可W执行用于处理目标块(在下文中，被称为当前块)的预测，并且产 生包括用于当前块的预测采样的预测块。由预测单元210执行的预测的单元可W是编译块、 变换块或者预测块。
[0055] 该预测单元210可W决定是否内部预测适用于当前块，或者是否中间预测适用于 当前块。
[0056] 在内部预测的情况下，预测单元210可W基于在当前块属于的图片（在下文中，当 前图片）中的邻近块像素推导用于当前块的预测采样。在运种情况下，预测单元210可W(i) 基于当前块的邻近参考采样的平均值或者插补推导预测采样，或者（ii)相对于在当前块的 邻近块之中的预测目标像素基于存在于特定方向的参考采样推导预测采样。为了容易描 述，（i)的情形称为非定向模式，并且(ii)的情形称为定向模式。该预测单元210可W通过使 用适用于邻近块的预测模式决定适用于当前块的预测模式。
[0057] 在中间预测的情况下，预测单元210可W基于由在并置图片（col located picture)上的运动向量指定的采样推导用于当前块的预测采样。预测单元10适用跳过模式 (skip mode)、合并模式和MVP模式的任何一个W推导用于当前块的预测采样。在跳过模式