三维视频编码的视图间候选推导的方法及其装置的制造方法
【专利说明】H维视频编码的视图间候选推导的方法及其装置
[000。【交叉引用】
[0002] 本发明主张申请于2013年4月10日，序列号为61/810, 383,标题为"Additional Inter-view Candidate for 3Dand Multi-view Video Coding"的美国临时专利申请的优 先权。将此美国临时专利申请W参考的方式并入本文中。 【技术领域】
[0003] 本发明设及视频编码。特别地，本发明设及=维/多视图视频编码中用于运动向 量/视差向量或运动向量预测/视差向量预测的视图间候选推导。 【【背景技术】】
[0004] S维灯虹ee-dimensional，W下简称为3D)电视技术是近年来的技术发展趋势， 其试图给观看者带来轰动的观看体验（viewingexperience)。多视图视频是一种用来捕 获并呈现3D视频的技术。多视图视频通常是通过由多个相机同时捕获一个场景来创建，其 中，多个相机被合适地定位W使每个相机从一个视角（viewpoint)来捕获该场景。具有大 量与视图相关联的视频序列的多视图视频表示了巨量的数据（massiveamountdata)。因 此，多视图视频将需要大量的存储空间来存储和/或需要高的带宽来传送。因此，在本领域 中，多视图视频编码技术被开发出来W减少所需要的存储空间W及传送带宽。一个直接方 法可W简单地应用于现有的视频编码技术，使每个单个视图视频序列独立且忽视不同视图 中的任何关联。运样的直接的技术将导致低下的编码性能。为了提高多视图视频编码效率， 多视图视频编码总是利用视图间冗余。两个视图之间的视差是由两个相关相机的位置W及 角度而导致。
[0005] 为了减少视图间冗余，视差补偿预测（dispa;rit5f-compensatedprediction,DCP) 可W作为运动补偿预测（motion-compensatedprediction，MCP)的取代。如图I所示，MCP 是指用于不同访问单元（accessunit)中的相同视图的已编码图片的图片间预测，而DCP 是指用于相同访问单元中其它视图的已编码图片的图片间预测。3D/多视图数据包括纹理 (texture)图片（110)W及深度图（12〇)。MCP被应用于时间方向（temporaldirection) (即，图I中的水平方向）的纹理图片或深度图。DCP被用于视图方向（目P，图I中的垂直 方向）的纹理图片或深度图。用于DCP的向量被称为视差向量（disparityvector,DV)， DV是模拟用于MCP的运动向量（motionvector,MV)。
[0006] 基于3D视频编码标准的高效视频编码（Hi曲EfficiencyVideoCoding,肥VC) (命名为3D-HEVC)是肥VC的扩展（高效视频编码），3D-HEVC被开发出来W用于编码/解 码3D视频。视图中的一个被称作基础视图或独立视图。基础视图的编码独立于其它的视 图W及深度数据。此外，基础视图使用现有的肥VC视频编码器来编码。
[0007] 于3D-HEVC中，混合的基于块的运动补偿的类DCT值CT-Iike)转换编码架构仍然 被使用。用于压缩的基础单元被称为编码单元（codingunit,CU),其为2化2N的方块，且 每个CU可W被递归地（recursively)分为四个更小的CU,直到达到预定义的最小的大小为 止。每个CU包括一个或多个预测单元（predictionunit,PU)。PU的大小可W是2化2N、 2化N、化2N、或化N。当支持非对称运动分区（asymmetricmotionpartition,AMP)时，PU 大小还可为2化nU、2化nD、nLx2N[^及nRx2N。
[0008] 于 3D-HEVC中，基于运动向量竞争（motionvectorcompetition,MVC)的 方案也用于从给定的候选集（或候选列表）中选择运动向量预测子（motionvector predictor,MVP)/视差向量预测子（disparityvectorpredicto;r，DVP)。有S种帖间预测 (inter-prediction)模式，包括：帖间（Inter)、跳过、W及合并。帖间模式对被传送的运动 向量/视差向量（MV/DV)执行运动向量预测/视差向量预测，而跳过W及合并模式利用推 导方法从候选列表中选择MV或DV，W获取运动信息。候选列表包括来自当前图片中空间 相邻块的候选，时间对应图片（temporalcollocatedpicture)被表示于切片标头（slice header)中的时间相邻块，或视图间参考图片中的对应块。运些候选是根据竞争顺序被安排 于候选列表中，列表中的一个候选被选择为MV/DV或MVP/DVP。当PU于跳过或合并模式中 被编码时，除了所选择的候选的索引外，不传送任何运动信息。在PU被编码于跳过模式的 情况下，残差信号也被省略。
[0009] 对于HTM-4. 0 (基于测试模型版本4. 0的3D-HEVC)的帖间模式，高级运动向量预 测（AdvancedMotionVectorPrediction,AMVP)方案被用于在AMVP候选集中选择运动向 量预测子。对于合并W及跳过模式，合并方案用于在合并候选集中选择MVP。基于码率失真 最佳化（rate-distortionoptimization,畑0)决定，编码器于给定的MVP/DVP候选集中选 择一个最终的MVP/DVPW用于帖间、跳过、或合并模式，并且传送所选择的MVP/DVP的索引 到解码器。所选择的MVP/DVP可W根据时间距离或视图距离来线性缩放。
[0010] 对于深度编码的帖间模式，参考图片索引是显式地传送到解码器。接着，MVP/DVP 于候选集中被选择W用于给定的参考图片索引。如图2所示，HTM-4. 0中用于帖间模式的 MVP/DVP候选集包括两个空间MVP/DVP、一个视图间候选、W及一个时间MVP/DVP。一个空间 MVP/DVP候选是从B0、B1W及B2中选择，且其它的空间MVP/DVP候选是从AOW及Al中选 择。时间MVP/DVP候选是从右下方块化ottom-ri曲tblock,TBR)中选择。如果TBR不可 用，则使用中屯、块（centerblock，TCT)。时间块TBRW及TCT位于时间参考图片中。MVP/ DVP候选集的大小固定为2还是3,是取决于视图间候选是否被包含在内。
[0011] 在3D-HEVC中，如果一个特定块是使用合并模式编码，合并索引被发出W指示合 并候选集中的哪一个MVP/DVP候选被用于待合并的块。为了遵循运动信息共用的本质，每 个合并的PU重用MV、预测方向、W及所选择的候选的参考图片索引。对于时间合并候选，参 考图片索引被设置为零，且MV根据POC距离被缩放。如图2所示，合并候选集包括五个空 间合并候选，一个视图间候选，一个视差候选，一个VSP候选，W及一个时间合并候选。合并 候选集的大小固定为6。时间候选是基于时间配置块的TBR。如果TBR不可用，则时间配置 块的TCT被使用。于3D-HEVC中用于纹理编码的候选集将于下文所示：
[001引视图间候选
[0013] -Al
[0014] -Bl
[0015] -BO
[0016] -AO
[0017] -视差候选
[0018] -B2
[001引 -VSP候选
[0020] -时间候选。
[0021] 根据上文所示的竞争顺序（即，从从视图间候选到时间候选）逐一地将候选插入 候选列表。当合并候选列表中的候选的总数达到6 (移除冗余候选）时，将不会再插入额外 的候选。
[0022] 对于合并模式W及跳过模式，如果候选列表可W导致更好的MV/DV或MVP/DVP，于 合并模式或跳过模式中，更多的块可W被编码。因此，提高了编码效率。因此，希望开发出 一种可W提高编码效率的合并候选列表。 【
【发明内容】
】
[0023] 本发明掲露了使用候选列表的3D/多视图编码的方法及装置，其中，候选列表 包括用于合并模式、跳过模式、或基于帖间模式的高级运动向量预测（