视频信号处理方法和设备的制造方法_2

文档序号:8927359阅读:来源:国知局
]
[0041] 在公式1中,E表示纹理数据的复杂度,C表示重建的纹理数据,并且N表示在将对 其计算复杂度的纹理数据区中像素的数目。参考公式1,纹理数据的复杂度可W使用在对应 于点(X,y)的纹理数据和对应于点(X-1,y)的纹理数据之间的差值,W及在对应于点(X, y)的纹理数据和对应于点(x+l,y)的纹理数据之间的差值计算。此外,可W对于纹理图片 和纹理块的每个计算复杂度,并且量化参数可W使用该复杂度推导出,如由公式2表示的。 [00创[公式引
[0043]
[0044]参考公式2,用于深度块的量化参数可W基于纹理图片的复杂度对纹理块的复杂 度的比确定。在公式2中,a和P可W是由解码器推导出的可变整数,或者可W是在解码 器中预先确定的整数。
[0045] 内部预测单元130可W使用在当前的纹理图片中重建的纹理数据执行内部预测。 特别地,当前块的采样可W使用当前块的内部预测模式和当前块的邻近采样预测。在该里, 当前块的内部预测模式可W使用候选模式列表推导出,该将参考图4至7详细描述。此外, 内部预测可与对于纹理图片相同的方式对于深度图片执行。例如,用于纹理图片的内 部预测的编译信息可W同样地用于深度图片。用于内部预测的编译信息可W包括内部预测 模式和内部预测的分割信息。
[0046]环内滤波单元140可W将环内滤波适用于每个编码块W便减小块失真。滤波器可W平滑块的边缘W便改善解码的图片的质量。滤波的纹理图片或者深度图片可W输出或者 存储在解码图片缓存单元150中W用作参考图片。当纹理数据和深度数据被使用相同的环 内滤波器编译的时候,由于纹理数据和深度数据具有不同的特征,编译效率可能降低。因 此,可W限定用于深度数据的单独的环内滤波器。将给出作为基于区域的自适应环路滤波 和=角形环路滤波能够有效地编码深度数据的环内滤波方法的描述。
[0047]在基于区域的自适应环路滤波的情况下,其可W基于深度块的变化确定是否适用 基于区域的自适应环路滤波。深度块的变化可W限定为在深度块中的最大像素值和最小像 素值之间的差值。通过将深度块的变化与预先确定的阔值比较能够确定是否适用滤波。例 如,当深度块的变化大于或等于预先确定的阔值的时候,其指的是在深度块中的最大像素 值和最小像素值之间的差值大,可W确定适用基于区域的自适应环路滤波。相反地,当深度 块的变化小于预先确定的阔值的时候,可W确定不适用基于区域的自适应环路滤波。当根 据比较结果适用基于区域的自适应环路滤波的时候,可W通过将预先确定的权重适用于邻 近像素值推导出滤波的深度块的像素值。在该里,预先确定的权重可W基于在当前滤波的 像素和邻近像素之间的位置差异,和/或在当前滤波的像素值和邻近像素值之间的差值确 定。邻近像素值可W指的是在包括在深度块中的像素值之中除当前滤波的像素值W外的像 素值的一个。
[0048]根据本发明的S角形环路滤波类似于基于区域的自适应环路滤波,但是,不同于 基于区域的自适应环路滤波,因为前者另外考虑纹理数据。特别地,=角形环路滤波可W提 取邻近像素的深度数据,其满足W下的=个条件。
[0049] 条件 1. |p-q|《。1
[0050]条件2.ID(P)-D (q)I《。2
[0051]条件3. lAKp)-V(q)I《。3
[0化2] 条件1将在深度块中的当前像素P和邻近像素q之间的位置差异与预先确定的参 数比较,条件2将在当前像素P的深度数据和邻近像素q的深度数据之间的差值与预先确 定的参数比较,W及条件3将在当前像素P的纹理数据和邻近像素q的纹理数据之间的差 值与预先确定的参数比较。
[0化3]=角形环路滤波可W提取满足=个条件的邻近像素,并且滤波具有邻近像素的深 度数据的中间值或者平均值的当前像素P。
[0化4] 解码图片缓存单元150可W存储或者开放先前编译的纹理图片或者深度图片W 便执行中间预测。为了在解码图片缓存单元150存储先前编译的纹理图片或者深度图片或 者开放该图片,可W使用frame_num和每个图片的图片顺序计数(POC)。此外,由于先前编 译的图片包括对应于不同于在深度编译时当前的深度图片的视点的视点的深度图片,所W 可W使用用于识别深度图片视点的视点识别信息,W便将对应于不同的视点的深度图片用 作参考图片。解码图片缓存器单元150可W使用自适应的存储管理控制操作方法和滑动窗 口方法管理参考图片W便更加灵活地实现中间预测。该允许参考图片存储器和非参考图片 存储器合并成一个存储器W便实现小的存储器的有效管理。在深度编译时,深度图片可W 被标记W与在解码图片缓存单元中的纹理图片区别,并且在标记过程期间可W使用用于识 别每个深度图片的信息。
[0055] 中间预测单元160可W使用存储在解码的图片缓存器单元150中的参考图片和运 动信息执行当前块的运动补偿。在本说明书中,从广义来说,运动信息可W包括运动矢量和 参考索引信息。此外,中间预测单元160可W执行用于运动补偿的时间中间预测。时间中 间预测可W指的是使用参考图片和当前纹理块的运动信息的中间预测,其对应于与当前纹 理块相同的视点,同时对应于不同于当前纹理块的时间周期。在通过多个相机获得的多视 图图像的情况下,除了时间中间预测之外,还可W执行视图间中间预测。视图间中间预测可 W指的是使用对应于不同于当前纹理块的视点的参考图片和当前纹理块的运动信息的中 间预测。为了方便起见,用于视图间预测的运动信息称为视图间运动矢量和视图间参考索 引信息。因此,在本说明书中运动信息可W灵活地解释为包括视图间运动矢量和视图间参 考索引信息的信息。
[0056]图2是根据本发明适用于其的一个实施例的视频解码器适用于其的广播接收机 的方框图。
[0057] 根据当前的实施例的广播接收机接收陆地广播信号W再现图像。广播接收机可W 使用接收的深度相关的信息产生=维内容。广播接收机包括调谐器200、解调器/信道解码 器202、传输多路分解器204、解组器206、音频解码器208、视频解码器210、PSI/PSIP处理 器214、3D擅染器216、格式器220和显示器222。
[0化引调谐器200选择在经由天线(未示出)输入的多个广播信号之中由用户调谐的信 道的广播信号,并且输出选择的广播信号。解调器/信道解码器202解调来自调谐器200的 广播信号,并且对解调的信号执行纠错解码W输出传输流TS。传输多路分解器204多路分 解传输流,W便将传输流划分为视频阳S和音频PES,并且提取PSI/PSIP信息。解组器206 对视频PES和音频PES解组W恢复视频ES和音频ES。音频解码器208通过解码音频ES 输出音频比特流。该音频比特流由数字模拟转换器(未示出)转换为模拟音频信号,由放 大器(未示出)放大,并且然后经由扬声器(未示出)输出。视频解码器210解码视频ES W恢复原始图像。音频解码器208和视频解码器210的解码过程可W基于由PSI/PSIP处 理器214确认的分组ID(PID)执行。在解码过程期间,视频解码器210可W提取深度信息。 此外,视频解码器210可W提取对产生虚拟相机视图的图像说来必需的附加信息,例如,相 机信息,或者用于估计由前面的目标隐藏的闭塞的信息(例如,几何信息,诸如目标轮廓、 目标透明度信息和颜色信息),并且将附加信息提供给3D擅染器216。但是,深度信息和/ 或附加信息在本发明的其它的实施例中可W通过传输多路分解器204相互分离。
[0059]PSI/PSIP处理器214从传输多路分解器204接收PSI/PSIP信息,解析PSI/PSIP 信息,并且在存储器(未示出)或者寄存器中存储解析的PSI/PSIP信息,W便允许基于存 储的信息广播。3D擅染器216可W在虚拟的相机位置上,使用恢复的图像、深度信息、附加 信息和相机参数产生颜色信息、深度信息等等。
[0060] 此外,3D擅染器216在虚拟的相机位置上,通过使用恢复的图像和关于恢复的图 像的深度信息,执行3D扭曲产生虚拟的图像。虽然3D擅染器116在当前的实施例中被配 置为与视频解码器210分离的块,但该仅仅是一个示例,并且3D擅染器216可W包括在视 频解码器210中。
[0061] 格式器220
当前第2页1 2 3 4 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1