处理视频信号的方法和装置制造方法
【专利摘要】按照本发明的用于处理视频信号的方法包括在考虑到在当前纹理块的视图间运动矢量候选者之中的优先级的情况下，从视图间运动矢量候选者之一推导当前纹理块的视图间运动矢量，以及使用推导的视图间运动矢量执行用于当前纹理块的视图间间预测。本发明使能在各种视图间运动矢量候选者之中更加精确的视图间运动矢量预测，并且因此，减少被发送的残留数据量，从而改善编译效率。
【专利说明】处理视频信号的方法和装置
【技术领域】
[0001] 本发明涉及一种用于处理视频信号的方法和装置。
【背景技术】
[0002] 压缩指的是用于经由通信线路发送数字信息，或者以适用于存储介质的形式存储 数字信息的信号处理技术。压缩的对象包括音频、视频和文字信息。具体地，压缩图像的技 术被称作视频压缩。多视图视频具有空间冗余、时间冗余和视图间冗余的特征。
【发明内容】
[0003] 技术问题
[0004] 本发明的一个目的是改善视频信号编译效率。
[0005] 本发明基于空间/时间邻近块的视图间运动矢量和视差矢量中的至少一个来推 导当前纹理块的视图间运动矢量。
[0006] 本发明在考虑到包括空间/时间邻近块和视差矢量中的至少一个的候选者的优 先级的情况下推导视图间运动矢量。
[0007] 按照本发明的空间邻近块包括当前纹理块的左下邻近块、左邻近块、右上邻近块、 上邻近块和左上邻近块中的至少一个，以及空间视图间运动矢量是通过在考虑到空间邻近 块的优先级的情况下搜索用于按照视图间间预测（inter-viewinter-prediction)编译的 块的空间邻近块获得的。
[0008] 按照本发明的时间邻近块包括并置块、邻近于并置块的邻近块和包括并置块的编 译块中的至少一个，以及时间视图间运动矢量是通过在考虑到时间邻近块的优先级的情况 下搜索用于按照视图间间预测编译的块的时间邻近块获得的。
[0009] 本发明使用视差矢量图来获得当前图片的视差矢量，以及同时地，使用视差矢量 偏移来改变在视差矢量图中存储的视差矢量。
[0010] 本发明设置视图间运动矢量候选者的固定的优先级，以及按照固定的优先级从视 图间运动矢量候选者推导当前纹理块的视图间运动矢量。
[0011] 本发明将在空间/时间邻近块之中按照时间间预测编译的块的视图间运动矢量 以及按照视图间间预测编译的块的视图间运动矢量作为候选者使用。
[0012] 本发明定义多个优先级表，以及基于优先级表索引有选择地使用优先级表。
[0013] 本发明基于先前编译的块的状态变量来确定当前编译的块的视图间运动矢量候 选者的优先级。
[0014] 本发明可以通过使用视图间运动矢量执行视图间间预测，使用在视图之间的相关 性来改善视频数据预测精度。此外，精确的视图间运动矢量能够通过有选择地使用空间/ 时间邻近块的视图间运动矢量或者视差矢量作为视图间运动矢量推导出，以便改善视图间 间预测精度，以及编译效率能够通过减小发送的残留数据量来提高。此外，甚至在空间/时 间邻近块之中按照时间间预测编译的块以及按照视图间间预测编译的块的情况下，与参考 视图运动矢量相对应的视图间运动矢量被用作候选者，从而预测精确的视图间运动矢量。 另外，确定用于多个视图间运动矢量候选者的优先级，并且按照视图间间预测编译的块被 按照该优先级顺序地搜索，从而降低推导视图间运动矢量过程的复杂度。
【专利附图】
【附图说明】
[0015] 图1是按照本发明适用于其的实施例的视频解码器的框图。
[0016] 图2图示按照本发明适用于其的实施例的运动矢量列表发生器710的配置。
[0017] 图3是图示按照本发明适用于其的实施例来确定空间运动矢量的过程的流程图。
[0018] 图4图示按照本发明适用于其的实施例的示范性的空间邻近块。
[0019] 图5图示按照本发明适用于其的实施例的示范性的时间邻近块。
[0020] 图6图示按照本发明适用于其的实施例的当编译块用作时间邻近块时，在包含并 置块的编译块中包括的块的优先级。
[0021] 图7是图示按照本发明适用于其的实施例的用于使用深度数据来推导当前纹理 块的视差矢量的方法的流程图。
[0022] 图8是图示按照本发明适用于其的实施例的更新用于在当前图片中间预测块的 视差矢量图的过程的流程图。
[0023] 图9是图示按照本发明适用于其的实施例的基于预先确定的优先级从按照视图 间间预测编译的邻近块推导视图间运动矢量的方法的流程图。
[0024] 图10是图示按照本发明适用于其的实施例的基于预先确定的优先级从按照时间 间预测编译的邻近块和按照视图间间预测编译的邻近块推导视图间运动矢量的方法的流 程图。
[0025] 图11是图示按照本发明适用于其的实施例的在考虑到由空间邻近块使用的视图 间运动矢量的频率的情况下选择优先级表的方法的流程图。
[0026] 图12是图示按照本发明适用于其的实施例的在考虑到空间邻近块的视图间运动 矢量类型的情况下选择优先级表的方法的流程图。
[0027] 图13是图示按照本发明适用于其的实施例的使用状态变量来确定优先级的方法 的流程图
【具体实施方式】
[0028] 为了实现本发明的目的，提供了一种用于处理视频信号的方法，包括：在考虑到视 图间运动矢量候选者的优先级的情况下，从当前纹理块的视图间运动矢量候选者之一推导 当前纹理块的视图间运动矢量；以及使用推导的视图间运动矢量执行用于当前纹理块的视 图间间预测。
[0029] 按照本发明，空间邻近块的视图间运动矢量可以具有比时间邻近块的视图间运动 矢量的优先级更高的优先级，以及时间邻近块的视图间运动矢量可以具有比视差矢量的优 先级更高的优先级。
[0030] 按照本发明，该方法可以进一步包括：检测按照用于具有最高优先级的空间邻近 块的视图间间预测编译的块；当存在按照视图间间预测编译的块时，从空间邻近块的视图 间运动矢量推导当前纹理块的视图间运动矢量；以及当不存在按照视图间间预测编译的块 时，检测按照用于具有下一个最高优先级的时间邻近块的视图间间预测编译的块。
[0031] 按照本发明，空间邻近块可以包括当前纹理块的左下邻近块、左邻近块、右上邻近 块、上邻近块和左上邻近块中的至少一个。
[0032] 按照本发明，按照视图间间预测编译的块可以基于空间邻近块的优先级来被检 测，其中空间邻近块具有以左下邻近块、左邻近块、右上邻近块、上邻近块和左上邻近块的 递减顺序的优先级。
[0033] 按照本发明，时间邻近块可以包括并置块、邻近于并置块的块以及包括并置块的 编译块中的至少一个。
[0034] 按照本发明，按照视图间间预测编译的块可以基于时间邻近块的优先级来被检 测，其中时间邻近块具有以并置块、邻近于并置块的块以及包括并置块的编译块的递减顺 序的优先级。
[0035] 用于本发明的模式
[0036] 压缩或者解码多视图视频信号数据的技术考虑空间冗余、时间冗余和视图间冗 余。在多视图图像的情况下，在两个或更多个视点处捕获的多视图纹理图像可以被编译以 便产生三维图像。此外，与多视图纹理图像相对应的深度数据可以根据需要被编译。深度数 据可以在考虑到空间冗余、时间冗余或者视图间冗余的情况下被压缩。深度数据是有关在 照相机和相应的像素之间距离的信息。在本说明书中，深度数据可以灵活地解释为深度相 关信息，诸如深度信息、深度图像、深度图片、深度序列和深度比特流。此外，在本说明书中， 编译可以包括编码和解码概念这两者，并且可以在本发明的技术精神和技术范围中灵活地 解释。
[0037] 图1是按照本发明适用于其的实施例的视频解码器的框图。
[0038] 参考图1，视频解码器可以包括NAC分析单元100、熵解码单元200、逆量化/逆变 换单元300、内预测单元（intra-predictionunit) 400、环内滤波器单元500、解码的图片 缓存单兀600和间预测单兀（inter-predictionunit) 700。NAL分析单兀100可以接收包 括多视图纹理数据的比特流。此外，当深度数据是为纹理数据编译所需要时，NAL分析单元 100可以进一步接收包括编码的深度数据的比特流。输入纹理数据和深度数据可以作为一 个比特流发送，或者作为单独的比特流发送。NAL分析单元100可以在NAL基础上执行分析 以便解码输入的比特流。当输入的比特流是多视图相关数据（例如，3维视频）时，输入的 比特流可以进一步包括照相机参数。照相机参数可以包括本征照相机参数和非本征照相机 参数，并且本征照相机参数可以包括焦距、长宽比、主点等，以及非本征照相机参数可以包 括在全球坐标系统中的照相机位置信息等。
[0039] 熵解码单元200可以经由熵解码来提取量化的变换系数、用于纹理图片预测的编 译信息等。逆量化/逆变换单元300可以通过将量化参数适用于量化的变换系数来获得变 换系数，以及通过逆变换该变换系数来解码纹理数据或者深度数据。在这里，该解码的纹理 数据或者深度数据按照预测可以包括残留数据。此外，用于深度块的量化参数可以在考虑 到纹理数据的复杂度的情况下被设置。例如，当与深度块相对应的纹理块具有高的复杂度 时，可以设置低的量化参数，以及当该纹理块具有低的复杂度时，可以设置高的量化参数。 该纹理块的复杂度可以基于在重建的纹理图片中在邻近像素之间的差分值来确定，如由公 式1表示的。
[0040][公式 1]
【权利要求】
1. 一种用于处理视频信号的方法，包括： 在考虑到视图间运动矢量候选者的优先级的情况下，从当前纹理块的视图间运动矢量 候选者之一推导当前纹理块的视图间运动矢量；以及 使用推导的视图间运动矢量来执行用于所述当前纹理块的视图间间预测， 其中，所述视图间运动矢量候选者包括空间邻近块的视图间运动矢量、时间邻近块的 视图间运动矢量和视差矢量中的至少一个。
2. 根据权利要求1所述的方法，其中，所述空间邻近块的视图间运动矢量具有比所述 时间邻近块的视图间运动矢量的优先级更高的优先级，以及所述时间邻近块的视图间运动 矢量具有比所述视差矢量的优先级更高的优先级。
3. 根据权利要求2所述的方法，进一步包括： 检测按照用于具有最高优先级的空间邻近块的视图间间预测编译的块； 当存在按照视图间间预测编译的块时，从空间邻近块的视图间运动矢量推导所述当前 纹理块的视图间运动矢量；以及 当不存在按照视图间间预测编译的块时，检测按照用于具有下一个最高优先级的时间 邻近块的视图间间预测编译的块。
4. 根据权利要求3所述的方法，其中，所述空间邻近块包括当前纹理块的左下邻近块、 左邻近块、右上邻近块、上邻近块和左上邻近块中的至少一个。
5. 根据权利要求4所述的方法，其中，按照视图间间预测编译的块基于所述空间邻近 块的优先级被检测，其中所述空间邻近块具有以左下邻近块、左邻近块、右上邻近块、上邻 近块和左上邻近块的递减顺序的优先级。
6. 根据权利要求3所述的方法，其中，时间邻近块包括并置块、邻近于所述并置块的块 和包括所述并置块的编译块中的至少一个。
7. 根据权利要求6所述的方法，其中，按照视图间间预测编译的块基于时间邻近块的 优先级被检测，其中所述时间邻近块具有以并置块、邻近于并置块的块和包括并置块的编 译块的递减顺序的优先级。
8. -种用于处理视频信号的装置，包括： 间预测单元，所述间预测单元用于在考虑到视图间运动矢量候选者的优先级的情况 下，从当前纹理块的视图间运动矢量候选者之一推导当前纹理块的视图间运动矢量，以及 使用推导的视图间运动矢量执行用于当前纹理块的视图间间预测， 其中，所述视图间运动矢量候选者包括空间邻近块的视图间运动矢量、时间邻近块的 视图间运动矢量和视差矢量中的至少一个。
9. 根据权利要求8所述的装置，其中，所述空间邻近块的视图间运动矢量具有比所述 时间邻近块的视图间运动矢量的优先级更高的优先级，以及所述时间邻近块的视图间运动 矢量具有比所述视差矢量的优先级更高的优先级。
10. 根据权利要求9所述的装置，其中，所述间预测单元检测按照用于具有最高优先 级的空间邻近块的视图间间预测编译的块，当存在按照视图间间预测编译的块时，从空间 邻近块的视图间运动矢量推导当前纹理块的视图间运动矢量，以及当不存在按照视图间间 预测编译的块时，检测按照用于具有下一个最高优先级的时间邻近块视图间间预测编译的 块。
11. 根据权利要求10所述的装置，其中，所述空间邻近块包括当前纹理块的左下邻近 块、左邻近块、右上邻近块、上邻近块和左上邻近块中的至少一个。
12. 根据权利要求11所述的装置，其中所述间预测单元基于所述空间邻近块的优先级 来检测按照视图间间预测编译的块，其中所述空间邻近块具有以左下邻近块、左邻近块、右 上邻近块、上邻近块和左上邻近块的递减顺序的优先级。
13. 根据权利要求10所述的装置，其中，所述时间邻近块包括并置块、邻近于所述并置 块的块和包括所述并置块的编译块中的至少一个。
14. 根据权利要求13所述的装置，其中所述间预测单元基于所述时间邻近块的优先级 来检测按照视图间间预测编译的块，其中所述时间邻近块具有以所述并置块、邻近于所述 并置块的块和包括所述并置块的编译块的递减顺序的优先级。
【文档编号】H04N19/597GK104365102SQ201380030515
【公开日】2015年2月18日 申请日期:2013年5月9日 优先权日:2012年5月10日
【发明者】成宰源, 芮世薰, 具文模, 许镇, 金兑燮, 郑志旭, 孙银庸 申请人:Lg 电子株式会社