色度子采样格式的块分割方法和装置制造方法

色度子采样格式的块分割方法和装置制造方法
【专利摘要】本发明揭示一种用于具有YUV422或YUV444格式视频的视频数据处理方法和装置。在一个实施方式中，对于具有YUV422格式的2Nx2N亮度编码单元，变换处理分割对应于2Nx2N的亮度编码单元和Nx2N的色度编码单元的残差数据为正方形亮度和色度变换单元。通过对亮度编码单元和色度编码单元应用预测处理，产生与亮度和色度编码单元相关的残差数据。变换处理不依赖于与预测处理相关的预测区块尺寸和预测模式。在另一实施方式中，预测处理分割编码单元为两个预测区块。应用变换处理于对应于色度编码单元的色度残差数据，以形成一个或多个色度变换单元，其中变换处理依赖于编码的尺寸、预测区块尺寸、或编码单元尺寸和预测区块尺寸。
【专利说明】色度子采样格式的块分割方法和装置
[0001] 交叉引用
[0002] 本发明主张在2012年04月12日提出的申请号为61/623, 162、标题为"A new big CU coding method for video coding in HEVC"的美国临时专利申请的优先权；主 张在2012年09月26日提出的申请号为61/705, 829、标题为"Coding, prediction and transform block structure for video compression in YUV422format，'的美国临时 专利申请的优先权；以及主张在2012年10月31日提出的申请号为61/720, 414、标题为 "Coding, prediction and transform block structure for YUV 422format，'的美国临时 专利申请的优先权。因此在全文中合并参考这些美国临时专利申请案。

【技术领域】
[0003] 本发明是有关于视频编码系统，特别是有关于一种具有YUV422/444子采样 (subsampling)格式的视频编码区块、预测区块和变换区块的块结构的方法和装置。

【背景技术】
[0004] 运动补偿是一种在视频序列中采用时间冗余（temporal redundancy)的有效的 中贞间编码（inter-frame coding)技术。运动补偿巾贞间编码已广泛用于各种国际视频编码 标准。在各种编码标准中采用的运动估计通常为基于区块的技术，在此技术中确定每一个 宏块（macroblock)或相似区块配置的运动信息（例如，编码模式和运动向量）。此外，也 自适应地应用巾贞内编码（intra-coding)，在巾贞内编码中处理图片不需要参考其他图片。中贞 间预测（inter-predicted)或巾贞内预测（intra-predicted)残差通常通过变换、量化或熵 编码等进一步处理来产生已压缩的视频比特流。在编码过程中，提出了编码伪影（coding artifact)，特别是在量化过程中。为了减轻编码伪影，对重建的视频应用额外的处理过程 以提高在新的编码系统中的图片质量。通常在环内操作（in-loop operation)中配置额外 的处理过程，以使得编码器和解码器得到相同的参考图片以获得改善的系统性能。
[0005] 图1A为基于使用自适应帧间/帧内预测的高效率视频编码（High Efficiency Video Coding, HEVC)的视频编码器的系统方框图。对于巾贞间预测来说，运动估计/运动补 偿112用于基于自其他图片的视频数据来提供预测数据。开关114选择帧内预测110的数 据或帧间预测的数据并且已选择的预测数据被提供至加法器116,以形成预测误差，也称为 残差。然后，通过变换118以及紧接着的量化120来处理预测误差。然后通过熵编码器122 来编码已变换和已量化的残差，以形成对应于已压缩视频数据的视频比特流。然后，将与变 换系数相关的比特流和边信息（side information)(例如，运动、模式以及与图像区域相关 的其他信息）一起封装。也可以熵编码边信息以降低需要的带宽。如图1A所示，相应地， 与边信息相关的数据被提供至熵编码器122。当使用帧内预测模式时，在编码器端也要重 建参考图片。因此，通过逆量化124和逆变换126来处理已变换和已量化的残差，以恢复残 差。然后，将残差在重建128处与预测数据136相加，以重建视频数据。已重建的视频数据 可以存储于参考图片缓冲器134中并用于其他帧的预测。
[0006] 如图1A所示，输入视频数据在编码系统中接受一系列的处理。由于这一系列的处 理，来自重建128的重建视频数据可以遭受各种损伤（impairments)。相应地，为改善视频 质量，在将已重建的视频数据存储于参考图片缓冲器134之前，将各种环内处理应用于已 重建的视频数据。在开发的HEVC标准中，已开发解区块滤波器130和采样自适应偏移131， 来提高图片质量。环内滤波器信息可以包含于比特流中，以使得解码器可以适当地恢复需 要的信息。因此，来自采样自适应偏移的环内滤波器信息被提供至熵编码器122,以便纳入 比特流中。在图1A中，首先对重建的视频应用解区块滤波器130,然后对已解区块滤波处理 的视频应用采样自适应偏移131。
[0007] 与图1A中编码器对应的解码器如图1B所示。通过视频解码器142解码视频比特 流，来恢复已变换和已量化的残差、采样自适应偏移/ALF信息和其他系统信息。在解码器 侧，仅执行运动补偿113,而不是运动估计/运动补偿。解码处理相似于在编码器侧的重建 环（reconstruction loop)。已重建的已变换和已量化的残差、米样自适应偏移/ALF信息 和其他系统信息用于重建视频数据。通过解区块滤波器130和采样自适应偏移131来处理 已重建的视频，以产生最终提高的已解码视频。
[0008] 在HEVC系统中，通过灵活的区块（flexible block)(称为编码单元（coding unit，⑶)）代替H. 264/AVC的固定尺寸的宏块。在编码单元中的像素共享相同的编码参数， 以改善编码效率。编码单元可以开始于一个最大编码单元（largest⑶，IXU，也称为在HEVC 中的编码树单元（coded tree unit, CTU))。然后利用四叉树（quadtree)来分割初始编码 单元。通常，编码系统利用率失真优化（Rate-Distortion Optimization, RD0)来确定编码 单元是否被进一步分割。在通过四叉树分割编码单元之后，除非编码单元达到预先指定的 最小编码单元尺寸，可以利用四叉树进一步分割由此产生的编码单元。相应地，图片的四叉 树分割的集合形成可变尺寸编码单元，并且该集合组成分割地图（partition map)以用于 处理输入图像的编码器。分割地图被传送至解码器，以使得可以执行相应地解码处理。在 HEVC中，亮度分量（S卩，Y)的CTU尺寸可以达到64x64。编码单元尺寸通常称为2Nx2N。当 通过四叉树分割编码单元时，将产生四个NxN编码单元。
[0009] 除编码单元的概念之外，预测单元的概念也被引入HEVC中。一旦完成编码单元 层次树（hierarchical tree)的分割，根据预测类型和预测单元分割，每一个叶编码单元 (leaf CU)被进一步分割为预测单元。在HEVC中帧间/帧内预测处理应用于预测单元。对 于每一个2Nx2N叶编码单元，选择分割尺寸来分割编码单元。当选择帧间模式时，2Nx2N预 测单元可以被分割为2Nx2N、2NxN、或Nx2N的预测单元。当2Nx2N预测单元为帧内编码时， 预测单元可以被分割为一个2Nx2N或四个NxN。
[0010] 在HEVC标准中，完成编码配置（coding profile)，也称为主配置（Main Profile)， 并且主配置仅支持YUV420色度子米样（chroma subsampling)格式中的彩色视频（color video)。彩色视频包括多个颜色分量，并且亮度和色度形式的颜色分量通常用于视频编码 领域中。在各种颜色分量格式中，YUV或YCrCb通常用于视频编码。YUV色度子采样格式对 亮度分量（即，Y)应用全采样以及对色度分量（即，Cr或Cb)应用2:1水平子采样和2:1 垂直子采样。图2为与YUV420、YUV422和YUV444色度子采样格式相关的采样格式的示例。 如区块210所示的颜色采样区域（4像素 x2行）用于YUV420色度子采样。对应的Y分量 的全采样如区块211所示。对于每一个色度分量（S卩，Cr或Cb)，仅形成两个采样，如区块 212所示的4x2颜色像素区域中的阴影区域1和阴影区域2所示。尽管YUV420格式广泛用 于一般消费者应用，但是在一些维护消费者权益（pro-consumer)和专业的应用中，期望较 高的颜色保真度（fidelity)并使用YUV422和YUV444格式。对于区块220所示的4x2颜色 像素区域的YUV422色度子采样，Y分量221的采样与之前描述的YUV420色度子采样的对应 的Y分量的采样相同。然而，对于色度分量，子采样形成2x2子采样模式（pattern) 222。对 于区块230所示的4x2颜色像素区域的YUV444色度子采样，Y分量231的采样与之前的采 样相同。然而，对于色度分量，利用全采样（即，1:1子采样）来形成4x2子采样模式232。 色度分量的采样位置可以与亮度采样对齐。然而，色度分量的采样位置也可以与亮度采样 水平地、垂直地、或水平和垂直地存在偏移。
[0011] 在HEVC主配置中，四叉树分割应用于变换区块，其中将变换过程应用于每一个编 码单元并将编码单元尺寸作为初始变换单元尺寸。每一个变换单元可以通过四叉树分割。 图3为变换单元的四叉树分割的示意图。区块310对应于最大编码树区块的四叉树分割， 其中每一个正方形对应于一个叶编码单元。变换处理应用于与通过粗线区块312指示的编 码单元相关的残差。CTB可以为64x64、32x32、16xl6或8x8。初始变换单元320对应于选 择的编码单元（即，区块312)的残差。初始变换单元320通过四叉树来分割，以形成下一 级的变换单元330。变换单元330可以通过四叉树进一步分割，以形成变换单元340。HEVC 的变换尺寸可以为32x32、16xl6、8x8或4x4。当使用YUV422或YUV444格式时，需要用于 所有这些色度子采样格式的视频编码工具和方案。举例来说，H. 264/MPEG-4高级视频编码 标准包括命名为保真度范围扩展（Fidelity Range Extensions, FRExt)的配置，该配置可 以通过支持增加像素比特深度和较高的分辨率颜色格式（例如，YUV422和YUV444色度子 采样）而具有较高质量的视频编码。因此，需要开发编码工具，例如，用于与HEVC编码系统 的YUV422和YUV444色度子采样格式相关的编码单元、预测单元和变换单元的结构和分割 方法。


【发明内容】

[0012] 本发明揭示一种在视频编码系统中处理视频数据的方法和装置。其中，视频数据 使用YUV422或YUV444色度子采样模式。在本发明的一个实施方式中，对于YUV422视频数 据的2Nx2N的亮度编码单元和Nx2N的色度编码单元，变换处理分割对应于2Nx2N的亮度 编码单元和Nx2N的色度编码单元的残差数据为正方形亮度变换单元和正方形色度变换单 元。通过对亮度编码单元和色度编码单元应用预测处理，产生与亮度和色度编码单元相关 的残差数据。变换处理不依赖于与预测处理相关的预测区块尺寸和预测模式。对于2Nx2N 亮度编码单元，〇级亮度变换单元尺寸为2Nx2N以及色度变换单元尺寸为NxN。0级2Nx2N 亮度变换单元被分割为四个1级NxN亮度变换单元。1级NxN亮度变换单元可以进一步被 分割为四个2级（N/2)x(N/2)亮度变换单元。0级NxN色度变换单元可与1级色度变换单 元相同（即，尺寸为NxN)。1级NxN色度编码单元可被进一步分割为四个2级（N/2)x(N/2) 色度变换单元。可选地，〇级NxN色度变换单元可被进一步分割为四个1级（N/2)x(N/2)色 度变换单元。1级（N/2)x(N/2)色度变换单元可被进一步分割为四个2级（N/4)x(N/4)色 度变换单元。
[0013] 在另一个实施方式中，对于YUV422视频数据的2Nx2N的亮度编码单元和Nx2N的 色度编码单元，预测处理垂直或水平地分割编码单元为两个区块（即，两个预测单元）。变 换处理分割对应于亮度预测单元的残差数据为一个或多个亮度变换单元，以及变换处理分 割对应于色度预测单元的残差数据为一个或多个色度变换单元。通过对亮度编码单元和色 度编码单元应用预测处理，产生与亮度编码单元和色度编码单元相关的残差数据。变换处 理依赖于编码单元尺寸和与预测处理相关的预测区块尺寸，或依赖于编码单元尺寸或与预 测处理相关的预测模式，其中编码单元尺寸与亮度编码单元、色度编码单元、或亮度编码单 元和色度编码单元相关。对于2Nx2N亮度编码单元，当与亮度编码单元的预测处理相关的 预测分割模式对应于2NxN、2NxnU、2NxnD、Nx2N、nLx2N或nRx2N时，变换处理强制0级亮度 变换单元分割为更小的1级亮度变换单元。其中，通过利用预测分割模式的亮度编码单元 的预测处理，产生与亮度预测单元相关的0级亮度变换单元。当亮度编码单元的预测分割 模式对应于2NxN、2NxnU或2NxnD时，1级亮度变换单元尺寸为2Nx (N/2)以及1级色度变换 单元尺寸为NxN。1级亮度变换单元可以被分割为四个具有尺寸为Nx(N/4)的2级亮度变 换单元，以及1级色度变换单元被分割为四个具有尺寸为（N/2)x(N/2)或Nx(N/4)的2级 色度变换单元。当亮度编码单元的预测分割模式对应于Nx2N、nLx2N或nRx2N时，1级亮度 变换单元尺寸为2Nx(N/2)以及1级色度变换单元尺寸为NxN。1级亮度变换单元可被进一 步分割为具有尺寸为（N/4)xN的2级亮度变换单元，以及1级色度变换单元可被进一步分 割为具有尺寸为（N/4)xN的2级色度变换单元。
[0014] 在又一实施方式中，当亮度编码单元的预测分割模式对应于2NxnU或2NxnD时，变 换处理强制0级亮度变换单元分割为具有尺寸为2Nx(N/2)的1级亮度变换单元，并强制0 级色度变换单元分割为具有尺寸为Nx(N/4)的1级色度变换单元。其中，通过利用预测分 割模式的亮度编码单元的预测处理，产生与亮度预测单元相关的〇级亮度变换单元。1级亮 度变换单元可被分割为四个具有尺寸为Nx(N/4)的2级亮度变换单元，以及1级色度变换 单元可以被分割为四个具有尺寸为（N/2)x(N/8)或（N/4)x(N/4)的2级色度变换单元。当 亮度编码单元的预测分割模式对应于nLx2N或nRx2N时，变换处理强制0级亮度变换单元 分割为具有尺寸为（N/2) x2N的1级亮度变换单元，并强制0级色度变换单元分割为具有尺 寸为（N/4)xN的1级色度变换单元。其中，通过利用预测分割模式的亮度编码单元的预测 处理，来产生与亮度预测单元相关的0级亮度变换单元。1级亮度变换单元被分割为具有 尺寸为Nx(N/4)的2级亮度变换单元，以及1级色度变换单元被分割为具有尺寸为（N/2) x(N/8)或（N/4)x(N/4)的2级色度变换单元。
[0015] 用于指示是否分割亮度变换单元的第一标志和用于指示是否分割色度变换单元 的第二标志可以包括于已压缩的视频数据中。其中，独立地确定第一标志和第二标志。在 另一实施方式中，一个标志用于指示是否分割亮度和色度变换单元，该亮度和色度变换单 元覆盖亮度和色度平面（plane)投影的相同区域。

【专利附图】

【附图说明】
[0016] 图1A为与HEVC编码系统相关的自适应帧间/帧内视频编码器的示意图。
[0017] 图1B为与HEVC编码系统相关的自适应帧间/帧内视频解码器的示意图。
[0018] 图2为用于YUV420、YUV422和YUV444色度子采样格式的采样模式的示意图。
[0019] 图3为编码单元的四叉树分割的示意图，其中通过利用残差四叉树的变换过程处 理与一个叶编码单元相关的残差数据。
[0020] 图4为根据本发明实施方式的YUV422色度子采样格式的编码单元分割和变换过 程的示意图，其中所有变换单元为正方形。
[0021] 图5为根据本发明实施方式的YUV422色度子采样格式的编码单元分割和变换过 程的示意图，其中所有变换单元为正方形。
[0022] 图6为根据本发明实施方式的YUV422色度子采样格式的编码单元分割、预测过程 和变换过程的示意图，其中编码单元被垂直分割为两个相等的预测单元。
[0023] 图7为根据本发明实施方式的YUV422色度子采样格式的编码单元分割、预测过程 和变换过程的示意图，其中编码单元被水平分割为两个相等的预测单元。
[0024] 图8为根据本发明实施方式的YUV422色度子采样格式的编码单元分割、预测过程 和变换过程的示意图，其中编码单元被垂直分割为两个不对称的预测单元。
[0025] 图9为根据本发明实施方式的YUV422色度子采样格式的编码单元分割、预测过程 和变换过程的示意图，其中编码单元被水平分割为两个不对称的预测单元。
[0026] 图10为包括本发明实施方式的编码单元分割、预测过程和变换过程的视频编码 系统的示范性流程图。
[0027] 图11为包括本发明实施方式的编码单元分割、预测过程和变换过程的视频编码 系统的另一示范性流程图。

【具体实施方式】
[0028] 在HEVC中，引入编码单元、预测单元以及变换单元以改善压缩效率。在HEVC中， 变换处理依赖于编码单元尺寸。YUV420格式的编码单元-变换单元之间的关系如表1所 示。在HEVC中，允许最大变换的单元尺寸为32x32。因此，当编码单元尺寸为64x64时，不 存在〇级变换单元。另一方面，允许的最小变换单元尺寸为4x4。因此，不存在4x4色度编 码单元的2级变换单元。
[0029] 表 1
[0030]

【权利要求】
1. 一种在视频编码系统中处理视频数据的方法，其特征在于，该视频数据使用YUV422 或YUV444色度子采样模式，该在视频编码系统中处理视频数据的方法包括： 接收与具有尺寸为2Nx2N的亮度编码单元相关的视频数据，其中N为正整数； 接收与具有尺寸为Nx2N或2Nx2N尺寸的色度编码单元相关的视频数据，其中该色度编 码单元对应于与该亮度编码单元相关的相同像素区域； 通过对与该亮度编码单元相关的视频数据应用预测处理，来产生对应于该亮度编码单 元的亮度残差数据； 通过对与该色度编码单元相关的视频数据应用预测处理，来产生对应于该色度编码单 元的色度残差数据； 对该亮度残差数据应用变换处理，以形成一个或多个亮度变换单元，该亮度残差数据 对应于该亮度编码单元； 对该色度残差数据应用变换处理，以形成一个或多个色度变换单元，该色度残差数据 对应于该色度编码单元，其中该变换处理不依赖于与该预测处理相关的预测区块尺寸或预 测模式，并限制该色度变换单元的形状为正方形； 通过应用两维变换至对应于每一个亮度变换单元的亮度残差数据，以产生每一个亮度 变换单元的亮度变换系数；以及 通过应用两维变换至对应于每一个色度变换单元的色度残差数据，以产生每一个色度 变换单元的色度变换系数。
2. 根据权利要求1所述的在视频编码系统中处理视频数据的方法，其特征在于，使 用YUV444色度子采样模式的该视频数据的该色度编码单元的变换处理形成具有尺寸为 2Nx2N的0级色度变换单元；其中利用四叉树将在当前级的每一个色度编码单元分割为下 一级的4个更小的正方形色度变换单元。
3. 根据权利要求1所述的在视频编码系统中处理视频数据的方法，其特征在于，该色 度变换单元尺寸依赖于该亮度编码单元尺寸、该色度编码单元尺寸、或该亮度编码单元尺 寸和该色度编码单元尺寸。
4. 根据权利要求1所述的在视频编码系统中处理视频数据的方法，其特征在于，0级亮 度变换单元尺寸为2Nx2N，以及0级色度变换单元尺寸为NxN。
5. 根据权利要求4所述的在视频编码系统中处理视频数据的方法，其特征在于，1级亮 度变换单元尺寸为NxN，以及1级色度变换单元尺寸为NxN或（N/2)x(N/2)。
6. 根据权利要求5所述的在视频编码系统中处理视频数据的方法，其特征在于，利用 四叉树将该1级亮度变换单元或该1级色度变换单元分割为四个更小的正方形变换单元， 直到达到预定的最小变换单元尺寸为止。
7. 根据权利要求6所述的在视频编码系统中处理视频数据的方法，其特征在于，该预 定的最小变换单元尺寸为4x4。
8. 根据权利要求1所述的在视频编码系统中处理视频数据的方法，其特征在于，指示 是否分割该亮度变换单元和该色度变换单元的标志包括于已压缩的视频数据中。
9. 一种在视频编码系统中处理视频数据的方法，其特征在于，该视频数据使用YUV422 色度子采样模式，该在视频编码系统中处理视频数据的方法包括： 接收与具有尺寸为2Nx2N的亮度编码单元相关的视频数据，其中N为正整数； 接收与具有尺寸为Nx2N尺寸的色度编码单元相关的视频数据，其中该色度编码单元 对应于与该亮度编码单元相关的相同像素区域； 通过对与该亮度编码单元相关的该视频数据应用预测处理，来产生对应于该亮度编码 单元的亮度残差数据； 通过对与该色度编码单元相关的该视频数据应用预测处理，来产生对应于该色度编码 单元的色度残差数据； 对该亮度残差数据应用变换处理，以形成一个或多个亮度变换单元，该亮度残差数据 对应于该亮度编码单元； 对该色度残差数据应用变换处理，以形成一个或多个色度变换单元，该色度残差数据 对应于该色度编码单元，其中该变换处理依赖于编码单元尺寸和与该预测处理相关的预测 区块尺寸、或依赖于编码单元尺寸和与该预测处理相关的预测模式，其中该编码单元尺寸 于该亮度编码单元、该色度编码单元、或该亮度编码单元和该色度编码单元相关； 通过应用第一两维变换至对应于每一个亮度变换单元的亮度残差数据，以产生每一个 亮度变换单元的亮度变换系数；以及 通过应用第二两维变换至对应于每一个色度变换单元的色度残差数据，以产生每一个 色度变换单元的色度变换系数。
10. 根据权利要求9所述的在视频编码系统中处理视频数据的方法，其特征在于，对于 通过预测处理产生的正方形色度预测单元，对该色度残差数据应用变换处理，以产生一个 或多个第一正方形或矩形色度变换单元，该色度残差数据对应于该正方形色度预测单元； 以及对于通过预测处理产生的矩形色度预测单元，对该色度残差数据应用该变换处理，以 产生一个或多个第二正方形或矩形色度变换单元，该色度残差数据对应于该矩形色度预测 单元。
11. 根据权利要求9所述的在视频编码系统中处理视频数据的方法，其特征在于，当与 该亮度编码单元的预测处理相关的预测分割模式对应于2NxN、2NxnU、2NxnD、Nx2N、nLx2N 或nRx2N时，该变换处理强制0级亮度变换单元分割为更小的1级亮度变换单元；其中，通 过利用该预测分割模式的该亮度编码单元的该预测处理，产生与亮度预测单元相关的〇级 亮度变换单元。
12. 根据权利要求11所述的在视频编码系统中处理视频数据的方法，其特征在于，当 该亮度编码单元的预测分割模式对应于2NxN、2NxnU或2NxnD时，1级亮度变换单元尺寸为 2Nx(N/2)，以及1级色度变换单元尺寸为NxN。
13. 根据权利要求12所述的在视频编码系统中处理视频数据的方法，其特征在于，该1 级亮度变换单元被分割为具有尺寸为Nx(N/4)的四个2级亮度变换单元，以及该1级色度 变换单元被分割为具有尺寸为（N/2)x(N/2)或Nx(N/4)的四个2级色度变换单元。
14. 根据权利要求11所述的在视频编码系统中处理视频数据的方法，其特征在于，当 该亮度编码单元的预测分割模式对应于Nx2N、nLx2N或nRx2N时，1级亮度变换单元尺寸为 2Nx(N/2)，以及1级色度变换单元尺寸为NxN。
15. 根据权利要求14所述的在视频编码系统中处理视频数据的方法，其特征在于，1级 亮度变换单元被分割为四个具有尺寸为（N/4)xN的2级亮度变换单元，以及1级色度变换 单元被分割为四个具有尺寸为（N/4)xN的2级色度变换单元。
16. 根据权利要求9所述的在视频编码系统中处理视频数据的方法，其特征在于，当该 亮度编码单元的预测分割模式对应于2NxnU或2NxnD时，该变换处理强制0级亮度变换单 元分割为具有尺寸为2Nx (N/2)的1级亮度变换单元，并强制0级色度变换单元分割为具有 尺寸为Nx(N/4)的1级色度变换单元；其中，通过利用该预测分割模式的该亮度编码单元的 该预测处理，产生与亮度预测单元相关的〇级亮度变换单元。
17. 根据权利要求16所述的在视频编码系统中处理视频数据的方法，其特征在于，1级 亮度变换单元被分割为四个具有尺寸为Nx(N/4)的2级亮度变换单元，以及1级色度变换 单元被分割为四个具有尺寸为（N/2)x(N/8)或（N/4)x(N/4)的2级色度变换单元。
18. 根据权利要求9所述的在视频编码系统中处理视频数据的方法，其特征在于，当该 亮度编码单元的预测分割模式对应于nLx2N或nRx2N时，该变换处理强制0级亮度变换单 元分割为具有尺寸为（N/2) x2N的1级亮度变换单元，并强制0级色度变换单元分割为具有 尺寸为（N/4) xN的1级色度变换单元；其中，通过利用该预测分割模式的该亮度编码单元的 该预测处理，产生与亮度预测单元相关的〇级亮度变换单元。
19. 一种在视频编码系统中处理视频数据的装置，其特征在于，该视频数据使用 YUV422或YUV444色度子采样模式，该在视频编码系统中处理视频数据的装置包括： 用于接收与具有尺寸为2Nx2N的亮度编码单元相关的视频数据的装置，其中N为正整 数； 用于接收与具有尺寸为Nx2N或2Nx2N尺寸的色度编码单元相关的视频数据的装置，其 中该色度编码单元对应于与该亮度编码单元相关的相同像素区域； 用于通过对与该亮度编码单元相关的该视频数据应用预测处理来产生对应于该亮度 编码单元的亮度残差数据的装置； 用于通过对与该色度编码单元相关的该视频数据应用预测处理来产生对应于该色度 编码单元的色度残差数据的装置； 用于对该亮度残差数据应用变换处理以形成一个或多个亮度变换单元的装置，该亮度 残差数据对应于该亮度编码单元； 用于对该色度残差数据应用变换处理以形成一个或多个色度变换单元的装置，该色度 残差数据对应于该色度编码单元；其中该变换处理不依赖于与该预测处理相关的预测区块 尺寸或预测模式，以及限制该色度变换单元的形状为正方形； 用于通过应用两维变换至对应于每一个亮度变换单元的亮度残差数据以产生每一个 亮度变换单元的亮度变换系数的装置； 用于通过应用两维变换至对应于每一个色度变换单元的色度残差数据以产生每一个 色度变换单元的色度变换系数的装置。
20. -种在视频解码器中的视频数据区块的处理方法，其特征在于，该视频数据使用 YUV422或YUV444色度子采样模式，该在视频解码器中的视频数据区块的处理方法包括： 接收与具有尺寸为2Nx2N的亮度编码单元相关的每一个亮度变换单元的亮度变换系 数，其中N为正整数； 接收与具有尺寸为Nx2N或2Nx2N的色度编码单元相关的每一个色度变换单元的色度 变换系数，其中该色度编码单元对应于与该亮度编码单元相关的相同像素区域； 通过对每一个亮度变换单元的该亮度变换系数应用逆两维变换，来产生每一个亮度变 换单元的亮度残差区块，其中所有的亮度变换单元为正方形； 通过对每一个色度变换单元的该色度变换系数应用逆两维变换，来产生每一个色度变 换单元的亮度残差区块，其中所有的色度变换单元为正方形； 自于该色度编码单元相关的该色度变换单元的色度残差区块产生与该色度编码单元 相关的色度残差区块；以及 对与该色度编码单元相关的该色度残差区块应用预测处理，以重建与该色度编码单元 相关的该视频数据；其中，与该色度编码单元相关的该色度变换单元不依赖于与该预测处 理相关的预测区块尺寸和预测模式。
【文档编号】H04N19/176GK104221376SQ201380017887
【公开日】2014年12月17日 申请日期:2013年4月12日 优先权日:2012年4月12日
【发明者】刘杉, 雷少民 申请人:联发科技（新加坡）私人有限公司