用于对视频进行解码的方法和设备以及用于对视频进行编码的方法和设备与流程

文档序号:26195401发布日期:2021-08-06 18:49阅读:141来源:国知局
用于对视频进行解码的方法和设备以及用于对视频进行编码的方法和设备与流程

本公开涉及一种视频解码方法和视频解码设备,更具体地,涉及一种图像编码方法和设备以及图像解码方法和设备,其中,当配置当前块的合并候选列表时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且基于合并候选列表对当前块执行预测。



背景技术:

图像数据由编解码器根据预定的数据压缩标准(例如,运动图像专家组(mpeg)标准)被编码,然后以比特流的形式被存储在记录介质中或通过通信信道被发送。

随着能够再现和存储高分辨率或高清晰度图像内容的硬件的开发和供应,针对用于有效地对高分辨率图像内容或高清晰度图像内容进行编码或解码的编解码器的需求日益增加。编码图像内容可通过被解码来再现。近来,执行了用于有效地压缩这种高分辨率图像内容或高清晰度图像内容的方法。例如,提出了通过对将通过随机方法编码的图像进行划分或渲染数据的处理来有效地实现图像压缩技术的方法。

作为用于渲染数据的技术中的一种,通常,当预测模式为合并模式时,在空间上与当前块相邻的空间候选、在时间上与当前块相邻的时间候选和零运动矢量候选被包括在合并候选列表中。



技术实现要素:

技术问题

在视频编码和解码过程中,提出了一种用于进行以下操作的方法和设备:当配置当前块的合并候选列表时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,以及基于合并候选列表对当前块执行预测。

问题的解决方案

为了解决技术问题,本公开可提供一种视频解码方法,包括:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量;当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选;通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表;并且基于所述合并候选列表对所述当前块执行预测。

为了解决技术问题,本公开可提供一种视频解码设备,包括:存储器;以及至少一个处理器,连接到所述存储器,其中,所述至少一个处理器被配置为:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1且小于预定的最大合并候选数量,当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表,以及基于所述合并候选列表对所述当前块执行预测。

为了解决技术问题,本公开可提供一种视频编码方法,包括:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量;当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选;通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表;并且基于所述合并候选列表对所述当前块执行预测。

为了解决技术问题,本公开可提供一种视频编码设备,包括:存储器;以及至少一个处理器,连接到所述存储器,其中,所述至少一个处理器被配置为:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1且小于预定的最大合并候选数量,当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表,以及基于所述合并候选列表对所述当前块执行预测。

本公开的有益效果

在视频编码和解码过程中,当当前块的合并候选列表被配置时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且基于合并候选列表对当前块执行预测,使得可有效地改进针对当前块的预测。也就是说,当满足特定条件时,可通过使用合并候选列表的第一候选和第二候选来确定一个附加候选,并且可将所确定的附加候选添加到合并候选列表,使得可快速且高效地配置合并候选列表。

附图说明

图1示出根据实施例的图像解码设备的示意性框图。

图2示出根据实施例的图像解码方法的流程图。

图3示出根据实施例的由图像解码设备执行的通过对当前编码单元进行划分来确定至少一个编码单元的处理。

图4示出根据实施例的由图像解码设备执行的通过对非正方形编码单元进行划分来确定至少一个编码单元的处理。

图5示出根据实施例的由图像解码设备执行的基于块形状信息和划分形状模式信息中的至少一种信息对编码单元进行划分的处理。

图6示出根据实施例的由图像解码设备执行的从奇数个编码单元中确定预定编码单元的方法。

图7示出根据实施例的当图像解码设备通过对当前编码单元进行划分来确定多个编码单元时对所述多个编码单元进行处理的顺序。

图8示出根据实施例的由图像解码设备执行的当不能按预定顺序对编码单元进行处理时确定当前编码单元将被划分为奇数个编码单元的处理。

图9示出根据实施例的由图像解码设备执行的通过对第一编码单元进行划分来确定至少一个编码单元的处理。

图10示出根据实施例的当在图像解码设备对第一编码单元进行划分时确定的具有非正方形形状的第二编码单元满足预定条件时第二编码单元可划分为的形状受到限制。

图11示出根据实施例的由图像解码设备执行的当划分形状模式信息指示正方形编码单元不被划分为四个正方形编码单元时对正方形编码单元进行划分的处理。

图12示出根据实施例的可依据对编码单元进行划分的处理来改变多个编码单元之间的处理顺序。

图13示出根据实施例的当编码单元被递归地划分使得多个编码单元被确定时随着编码单元的形状和尺寸改变而确定编码单元的深度的处理。

图14示出根据实施例的基于编码单元的形状和尺寸可确定的深度以及用于区分编码单元的部分索引(pid)。

图15示出根据实施例的基于包括在画面中的多个预定数据单元确定多个编码单元。

图16示出根据实施例的用作用于确定包括在画面中的参考编码单元的确定顺序的单位的处理块。

图17是根据实施例的视频编码设备的框图。

图18是示出根据实施例的视频编码方法的流程图。

图19示出根据实施例的视频解码设备的框图。

图20示出根据实施例的视频解码方法的流程图。

图21是用于描述配置当前块的合并候选列表的过程的示图。

图22是用于描述当前块的合并候选列表的空间候选的示图。

图23是用于描述当前块的合并候选列表的基于历史的运动矢量候选列表的示图。

图24a是用于描述根据另一实施例的成对平均候选的示图,图24b是用于描述根据另一实施例的在成对平均候选配置处理时添加零运动矢量候选的方法的示图,以及图24c是用于描述根据另一实施例的在成对平均候选配置处理时添加一半大小的合并候选的方法的示图。

具体实施方式

最佳实施方式

根据本公开实施例的视频解码方法可包括:当当前块的合并候选列表被配置时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量;当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选;通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表;并且基于所述合并候选列表对所述当前块执行预测。

根据实施例,所述附加合并候选可以是第一合并候选和第二合并候选的平均值。

根据实施例,第一合并候选和第二合并候选可各自包括以下候选中的至少一个:在空间上与所述当前块相邻的空间候选、在时间上与所述当前块相邻的时间候选以及基于历史的运动矢量候选列表中所包括的运动矢量候选,其中,所述基于历史的运动矢量候选列表包括在所述当前块之前以合并模式编码的块的多条运动信息。

根据实施例,与所述当前块在空间上相邻的空间候选可包括与所述当前块相邻的左侧相邻块、上方相邻块、左下方相邻块、右上方相邻块和左上方相邻块中的至少一个。

根据实施例,在所述附加合并候选被添加到所述合并候选列表之后,当包括在所述合并候选列表中的合并候选的数量小于所述预定的最大合并候选数量时,可将零运动矢量添加到所述合并候选列表。

根据本公开实施例的视频编码方法可包括:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量;当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选;通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表;并且基于所述合并候选列表对所述当前块执行预测。

根据实施例,所述附加合并候选可以是第一合并候选和第二合并候选的平均值。

根据实施例,第一合并候选和第二合并候选可各自包括以下候选中的至少一个:在空间上与所述当前块相邻的空间候选、在时间上与所述当前块相邻的时间候选以及基于历史的运动矢量候选列表中所包括的运动矢量候选,其中,所述基于历史的运动矢量候选列表包括在所述当前块之前以合并模式编码的块的多条运动信息。

根据实施例,与所述当前块在空间上相邻的空间候选可包括与所述当前块相邻的左侧相邻块、上方相邻块、左下方相邻块、右上方相邻块和左上方相邻块中的至少一个。

根据实施例,在所述附加合并候选被添加到合并候选列表之后,当包括在所述合并候选列表中的合并候选的数量小于所述预定的最大合并候选数量时,可将零运动矢量添加到所述合并候选列表。

根据本公开实施例的视频解码设备可包括:存储器;以及至少一个处理器,连接到所述存储器,其中,所述至少一个处理器被配置为:当当前块的合并候选列表被配置时,确定包括在所述合并候选列表中的合并候选的数量是否大于1且小于预定的最大合并候选数量,当包括在所述合并候选列表中的合并候选的数量大于1且小于所述预定的最大合并候选数量时,通过使用所述当前块的所述合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,通过将确定的所述附加合并候选添加到所述合并候选列表来配置所述合并候选列表,以及基于所述合并候选列表对所述当前块执行预测。

根据实施例,所述附加合并候选可以是第一合并候选和第二合并候选的平均值。

根据实施例,第一合并候选和第二合并候选可各自包括以下候选中的至少一个:在空间上与所述当前块相邻的空间候选、在时间上与所述当前块相邻的时间候选以及基于历史的运动矢量候选列表中所包括的运动矢量候选,其中,所述基于历史的运动矢量候选列表包括在所述当前块之前以合并模式编码的块的多条运动信息。

根据实施例,与所述当前块在空间上相邻的空间候选可包括与所述当前块相邻的左侧相邻块、上方相邻块、左下方相邻块、右上方相邻块和左上方相邻块中的至少一个。

根据实施例,在所述附加合并候选被添加到所述合并候选列表之后,当包括在所述合并候选列表中的合并候选的数量小于所述预定的最大合并候选数量时,可将零运动矢量添加到所述合并候选列表。

本公开的实施方式

通过参照实施例和附图,可更容易地理解实施例的优点和特征以及实现其的方法。在这方面,本公开可具有不同的形式,并且不应被解释为限于这里所阐述的实施例。相反,提供这些实施例使得本公开将是彻底和完整的,并且将向本领域普通技术人员充分传达本公开的构思。

将简要定义说明书中使用的术语,并且将详细描述实施例。

本说明书中使用的包括描述性术语或技术术语的所有术语应被解释为具有对本领域普通技术人员显而易见的含义。然而,根据本领域普通技术人员的意图、先例或新技术的出现,这些术语可具有不同的含义。此外,一些术语可由申请人来任意选择,并且在这种情况下,将在本公开的具体描述中详细描述所选术语的含义。因此,本公开中使用的术语不应仅基于它们的名称来解释,而是必须基于术语的含义以及整个说明书中的描述来定义。

在以下说明书中,除非上下文另有明确说明,否则单数形式包括复数形式。

当部件“包括”或“包含”元件时,除非存在与其相反的特定描述,否则该部件还可包括其他元件,而不排除其他元件。

在以下描述中,诸如“单元”的术语指示软件组件或硬件组件,并且“单元”执行某些功能。然而,“单元”不限于软件或硬件。“单元”可形成在可寻址存储介质中,或者可形成为操作一个或更多个处理器。因此,例如,术语“单元”可指诸如软件组件、面向对象的软件组件、类组件和任务组件的组件,并且可包括进程、函数、属性、过程、子例程、程序代码段、驱动程序、固件、微代码、电路、数据、数据库、数据结构、表、数组和变量。由组件和“单元”提供的功能可与较少数量的组件和“单元”相关联,或者可被划分为另外的组件和“单元”。

根据本公开的实施例,“单元”可包括处理器和存储器。术语“处理器”应被广义地解释为包括通用处理器、中央处理器(cpu)、微处理器、数字信号处理器(dsp)、控制器、微控制器、状态机等。在一些环境下,“处理器”可指专用半导体(asic)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)等。术语“处理器”可指处理装置的组合,诸如例如dsp和微处理器的组合、多个微处理器的组合、一个或更多个微处理器结合dsp核的组合、或者任何其他这样的配置的组合。

术语“存储器”应被广义地解释为包括能够存储电子信息的任何电子组件。术语“存储器”可指各种类型的处理器可读介质,诸如随机存取存储器(ram)、只读存储器(rom)、非易失性随机存取存储器(nvram)、可编程只读存储器(prom)、擦除可编程只读存储器(eprom)、电可擦除prom(eeprom)、闪存、磁或光数据存储装置、寄存器等。当处理器可从存储器读取信息并且/或者向存储器写入信息时,存储器可认为处于与处理器的电子通信状态。集成在处理器中的存储器处于与处理器的电子通信状态。

在下文中,“图像”可以是诸如视频的静止图像的静态图像,或者可以是诸如运动图像的动态图像,即视频本身。

在下文中,“样点”表示被分配给图像的采样位置的数据,即,将被处理的数据。例如,空间域中的图像的像素值和变换域上的变换系数可以是样点。包括至少一个这样的样点的单元可被定义为块。

此外,在本说明书中,“当前块”可表示将被编码或解码的当前图像的最大编码单元、编码单元、预测单元或变换单元的块。

在下文中,现在将参照附图更全面地描述本公开,以使本领域普通技术人员能够没有任何困难地执行本实施例。此外,为了清楚地描述本公开,将在附图中省略与描述无关的部分。

在下文中,将参照图1至图16描述根据实施例的图像编码设备、图像解码设备、图像编码方法和图像解码方法。参照图3至16,将描述根据实施例的确定图像的数据单元的方法,参照图17至23,将描述根据实施例的视频编码/解码方法,其中,编码/解码方法涉及:当配置当前块的合并候选列表时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且基于合并候选列表对当前块执行预测,并且参照图24a到24c,将描述根据另一实施例的将成对平均候选添加到合并候选列表的方法。

在下文中,将参照图1和图2描述根据本公开的实施例的用于基于各种形状的编码单元自适应地选择上下文模型的方法和设备。

图1示出根据实施例的图像解码设备的示意性框图。

图像解码设备100可包括接收器110和解码器120。接收器110和解码器120可包括至少一个处理器。此外,接收器110和解码器120可包括存储将由至少一个处理器执行的指令的存储器。

接收器110可接收比特流。比特流包括由下面描述的图像编码设备2200编码的图像的信息。此外,比特流可以是从图像编码设备2200发送的。图像编码设备2200和图像解码设备100可经由有线或无线地连接,并且接收器110可经由有线或无线地接收比特流。接收器110可从存储介质(诸如,光学介质或硬盘)接收比特流。解码器120可基于从接收的比特流获得的信息来重建图像。解码器120可从比特流获得用于重建图像的语法元素。解码器120可基于语法元素重建图像。

将参照图2详细描述图像解码设备100的操作。

图2示出根据实施例的图像解码方法的流程图。

根据本公开的实施例,接收器110接收比特流。

图像解码设备100从比特流获得与编码单元的划分形状模式相应的二进制位串(操作210)。图像解码设备100确定编码单元的划分规则(操作220)。此外,基于与划分形状模式相应的二进制位串和划分规则中的至少一个,图像解码设备100将编码单元划分为多个编码单元(操作230)。根据编码单元的宽度与高度的比例,图像解码设备100可确定编码单元的尺寸的可允许的第一范围,以便确定划分规则。根据编码单元的划分形状模式,图像解码设备100可确定编码单元的尺寸的可允许的第二范围,以便确定划分规则。

在下文中,将根据本公开的实施例详细描述对编码单元的划分。

首先,一个画面可被划分为一个或更多个条带或者一个或更多个并行块。一个条带或一个并行块可以是一个或更多个最大编码单元(编码树单元(ctu))的序列。与最大编码单元(ctu)相比,在概念上存在最大编码块(编码树块(ctb))。

最大编码块(ctb)表示包括n×n个样点(其中,n为整数)的n×n块。每个颜色分量可被划分为一个或更多个最大编码块。

当画面具有三个样点阵列(针对y分量、cr分量和cb分量的样点阵列)时,最大编码单元(ctu)包括亮度样点的最大编码块、色度样点的两个相应最大编码块以及用于对亮度样点和色度样点进行编码的语法结构。当画面是单色画面时,最大编码单元包括单色样点的最大编码块和用于对单色样点进行编码的语法结构。当画面是在根据颜色分量分开的颜色平面中被编码的画面时,最大编码单元包括用于对画面和画面的样点进行编码的语法结构。

一个最大编码块(ctb)可被划分为包括m×n个样点(m和n为整数)的m×n编码块。

当画面具有针对y分量、cr分量和cb分量的样点阵列时,编码单元(cu)包括亮度样点的编码块、色度样点的两个相应的编码块以及用于对亮度样点和色度样点进行编码的语法结构。当画面是单色画面时,编码单元包括单色样点的编码块和用于对单色样点进行编码的语法结构。当画面是在根据颜色分量分开的颜色平面中被编码的画面时,编码单元包括用于对画面和画面的样点进行编码的语法结构。

如上所述,在概念上将最大编码块和最大编码单元彼此区分开,并且在概念上将编码块和编码单元彼此区分开。也就是说,(最大)编码单元表示包括包含相应样点的(最大)编码块和与(最大)编码块相应的语法结构的数据结构。然而,因为本领域的普通技术人员理解(最大)编码单元或(最大)编码块表示包括预定数量的样点的预定尺寸的块,所以除非另有描述,否则在以下说明书中提及最大编码块和最大编码单元或者编码块和编码单元无需进行区分。

图像可被划分为最大编码单元(ctu)。每个最大编码单元的尺寸可基于从比特流获得的信息被确定。每个最大编码单元的形状可以是同一尺寸的正方形形状。然而,实施例不限于此。

例如,可从比特流获得关于亮度编码块的最大尺寸的信息。例如,由关于亮度编码块的最大尺寸的信息指示的亮度编码块的最大尺寸可以是4×4、8×8、16×16、32×32、64×64、128×128和256×256中的一个。

例如,可从比特流获得关于亮度块尺寸差和可被划分为两个的亮度编码块的最大尺寸的信息。关于亮度块尺寸差的信息可表示亮度最大编码单元与可被划分为两个的最大亮度编码块之间的尺寸差。因此,当从比特流获得的关于可被划分为两个的亮度编码块的最大尺寸的信息和关于亮度块尺寸差的信息彼此组合时,可确定亮度最大编码单元的尺寸。可通过使用亮度最大编码单元的尺寸确定色度最大编码单元的尺寸。例如,当y:cb:cr比率根据颜色格式为4:2:0时,色度块的尺寸可以是亮度块的尺寸的一半,并且色度最大编码单元的尺寸可以是亮度最大编码单元的尺寸的一半。

根据实施例,因为从比特流获得了关于可二划分的亮度编码块的最大尺寸的信息,所以可变化地确定可二划分的亮度编码块的最大尺寸。相反地,可三划分的亮度编码块的最大尺寸可被固定。例如,i画面中的可三划分的亮度编码块的最大尺寸可以是32×32,并且p画面或b画面中的可三划分的亮度编码块的最大尺寸可以是64×64。

此外,可基于从比特流获得的划分形状模式信息将最大编码单元分层地划分为编码单元。可从比特流获得指示是否执行四划分的信息、指示是否执行多划分的信息、划分方向信息和划分类型信息中的至少一个信息作为划分形状模式信息。

例如,指示是否执行四划分的信息可指示当前编码单元是否被四划分(quad_split)。

在当前编码单元不被四划分时,指示是否执行多划分的信息可指示当前编码单元是不再被划分(no_split)还是被二/三划分。

在当前编码单元被二划分或者三划分时,划分方向信息指示当前编码单元沿水平方向和垂直方向中的一个方向被划分。

在当前编码单元沿水平方向或垂直方向被划分时,划分类型信息指示当前编码单元被二划分或三划分。

可根据划分方向信息和划分类型信息确定当前编码单元的划分模式。可将在当前编码单元沿水平方向被二划分时的划分模式确定为二水平划分模式(split_bt_hor),可将在当前编码单元沿水平方向被三划分时的划分模式确定为三水平划分模式(split_tt_hor),可将在当前编码单元沿垂直方向被二划分时的划分模式确定为二垂直划分模式(split_bt_ver),并且可将在当前编码单元沿垂直方向被三划分时的划分模式确定为三垂直划分模式(split_tt_ver)。

图像解码设备100可从比特流获得来自一个二进制位串的划分形状模式信息。由图像解码设备100接收的比特流的形式可包括固定长度的二进制码、一元码、截断一元码、预定二进制码等。二进制位串是二进制数的信息。二进制位串可包括至少一个比特。图像解码设备100可基于划分规则获得与二进制位串相应的划分形状模式信息。图像解码设备100可基于一个二进制位串确定是否对编码单元进行四划分、是否不对编码单元进行划分、划分方向以及划分类型。

编码单元可小于最大编码单元或者与最大编码单元相同。例如,因为最大编码单元是具有最大尺寸的编码单元,所以最大编码单元是编码单元中的一个。当关于最大编码单元的划分形状模式信息指示不执行划分时,在最大编码单元中确定的编码单元具有与最大编码单元的尺寸相同的尺寸。当关于最大编码单元的划分形状模式信息指示执行划分时,最大编码单元可被划分为编码单元。此外,当关于编码单元的划分形状模式信息指示执行划分时,编码单元可被划分为更小的编码单元。然而,图像的划分不限于此,并且可不将最大编码单元与编码单元区分开。将参照图3至图16详细描述对编码单元的划分。

此外,用于预测的一个或更多个预测块可从编码单元被确定。预测块可与编码单元相同或小于编码单元。此外,用于变换的一个或更多个变换块可从编码单元被确定。变换块可与编码单元相同或小于编码单元。

变换块和预测块的形状和尺寸可彼此不相关。

在另一实施例中,可通过将编码单元用作预测单元来执行预测。此外,可通过将编码单元用作变换块来执行变换。

将参照图3至图16详细描述对编码单元的划分。本公开的当前块和相邻块可指示最大编码单元、编码单元、预测块和变换块中的一个。此外,当前编码单元的当前块是当前被解码或被编码的块或者当前正被划分的块。相邻块可以是在当前块之前重建的块。相邻块可在空间上或时间上与当前块相邻。相邻块可位于当前块的左下方、左侧、左上方、上方、右上方、右侧和右下方之一。

图3示出根据实施例的由图像解码设备执行的通过对当前编码单元进行划分确定至少一个编码单元的处理。

块形状可包括4n×4n、4n×2n、2n×4n、4n×n、n×4n、32n×n、n×32n、16n×n、n×16n、8n×n或n×8n。这里,n可以是正整数。块形状信息是指示编码单元的形状、方向、宽度与高度的比例或尺寸中的至少一个的信息。

编码单元的形状可包括正方形和非正方形。当编码单元的宽度长度和高度长度相同时(即,当编码单元的块形状为4n×4n时),图像解码设备100可将编码单元的块形状信息确定为正方形。图像解码设备100可将编码单元的形状确定为非正方形。

当编码单元的宽度和高度彼此不同时(即,当编码单元的块形状为4n×2n、2n×4n、4n×n、n×4n、32n×n、n×32n、16n×n、n×16n、8n×n或n×8n时),图像解码设备100可将编码单元的块形状信息确定为非正方形形状。当编码单元的形状是非正方形时,图像解码设备100可将编码单元的块形状信息中的宽度与高度的比例确定为1:2、2:1、1:4、4:1、1:8、8:1、1:16、16:1、1:32和32:1中的至少一个。此外,图像解码设备100可基于编码单元的宽度长度和高度长度来确定编码单元是沿水平方向还是沿垂直方向。此外,图像解码设备100可基于编码单元的宽度长度、高度长度或面积中的至少一个来确定编码单元的尺寸。

根据实施例,图像解码设备100可通过使用块形状信息来确定编码单元的形状,并且可通过使用划分形状模式信息来确定编码单元的划分方法。也就是说,可基于由图像解码设备100使用的块形状信息所指示的块形状来确定由划分形状模式信息指示的编码单元划分方法。

图像解码设备100可从比特流获得划分形状模式信息。然而,实施例不限于此,并且图像解码设备100和图像编码设备2200可基于块形状信息来确定预先约定的划分形状模式信息。图像解码设备100可确定针对最大编码单元或最小编码单元的预先约定的划分形状模式信息。例如,图像解码设备100可将针对最大编码单元的划分形状模式信息确定为四划分。此外,图像解码设备100可将关于最小编码单元的划分形状模式信息确定为“不执行划分”。具体地,图像解码设备100可将最大编码单元的尺寸确定为256×256。图像解码设备100可将预先约定的划分形状模式信息确定为四划分。四划分是将编码单元的宽度和高度均二等分的划分形状模式。图像解码设备100可基于划分形状模式信息从256×256尺寸的最大编码单元获得128×128尺寸的编码单元。此外,图像解码设备100可将最小编码单元的尺寸确定为4×4。图像解码设备100可获得针对最小编码单元的指示“不执行划分”的划分形状模式信息。

根据实施例,图像解码设备100可使用指示当前编码单元具有正方形形状的块形状信息。例如,图像解码设备100可基于划分形状模式信息确定是否对正方形编码单元进行划分,是否对正方形编码单元进行垂直划分,是否对正方形编码单元进行水平划分,或者是否将正方形编码单元划分为四个编码单元。参照图3,在当前编码单元300的块形状信息指示正方形形状时,解码器120可基于指示不执行划分的划分形状模式信息确定不对与当前编码单元300具有相同尺寸的编码单元310a进行划分,或者可确定基于指示预定划分方法的划分形状模式信息而划分出的编码单元310b、310c、310d、310e或310f。

参照图3,根据实施例,图像解码设备100可基于指示沿垂直方向执行划分的划分形状模式信息,确定通过沿垂直方向对当前编码单元300进行划分而获得的两个编码单元310b。图像解码设备100可基于指示沿水平方向执行划分的划分形状模式信息,确定通过沿水平方向对当前编码单元300进行划分而获得的两个编码单元310c。图像解码设备100可基于指示沿垂直方向和水平方向执行划分的划分形状模式信息,确定通过沿垂直方向和水平方向对当前编码单元300进行划分而获得的四个编码单元310d。根据实施例,图像解码设备100可基于指示沿垂直方向执行三划分的划分形状模式信息,确定通过沿垂直方向对当前编码单元300进行划分而获得的三个编码单元310e。图像解码设备100可基于指示沿水平方向执行三划分的划分形状模式信息,确定通过沿水平方向对当前编码单元300进行划分而获得的三个编码单元310f。然而,正方形编码单元的划分方法不限于上述方法,并且划分形状模式信息可指示各种方法。下面将关于各种实施例详细描述对正方形编码单元进行划分的预定划分方法。

图4示出根据实施例的由图像解码设备执行的通过对非正方形编码单元进行划分来确定至少一个编码单元的处理。

根据实施例,图像解码设备100可使用指示当前编码单元具有非正方形形状的块形状信息。基于划分形状模式信息,图像解码设备100可确定是不对非正方形的当前编码单元进行划分还是通过使用预定划分方法对非正方形的当前编码单元进行划分。参照图4,在当前编码单元400或450的块形状信息指示非正方形形状时,图像解码设备100可基于指示不执行划分的划分形状模式信息确定与当前编码单元400或450具有相同尺寸的编码单元410或编码单元460,或者可确定基于指示预定划分方法的划分形状模式信息而划分出的编码单元420a和420b、430a至430c、470a和470b、或者480a至480c。下面将关于各种实施例详细描述对非正方形编码单元进行划分的预定划分方法。

根据实施例,图像解码设备100可通过使用划分形状模式信息确定编码单元的划分方法,并且在这种情况下,划分形状模式信息可指示通过对编码单元进行划分产生的一个或更多个编码单元的数量。参照图4,当划分形状模式信息指示将当前编码单元400或450划分为两个编码单元时,图像解码设备100可通过基于划分形状模式信息对当前编码单元400或450进行划分来确定包括在当前编码单元400或450中的两个编码单元420a和420b或者470a和470b。

根据实施例,当图像解码设备100基于划分形状模式信息对非正方形的当前编码单元400或450进行划分时,图像解码设备100可考虑非正方形的当前编码单元400或450的长边的位置以对当前编码单元进行划分。例如,图像解码设备100可通过考虑当前编码单元400或450的形状沿对当前编码单元400或450的长边进行划分的方向来对当前编码单元400或450进行划分来确定多个编码单元。

根据实施例,当划分形状模式信息指示将编码单元划分(三划分)为奇数个块时,图像解码设备100可确定包括在当前编码单元400或450中的奇数个编码单元。例如,当划分形状模式信息指示将当前编码单元400或450划分为三个编码单元时,图像解码设备100可将当前编码单元400或450划分为三个编码单元430a、430b和430c或者480a、480b和480c。

根据实施例,当前编码单元400或450的宽度与高度的比例可以是4:1或1:4。当宽度与高度的比例为4:1时,因为宽度长度长于高度长度,所以块形状信息可指示水平方向。当宽度与高度的比例为1:4时,因为宽度长度短于高度长度,所以块形状信息可指示垂直方向。图像解码设备100可基于划分形状模式信息来确定将当前编码单元划分为奇数个块。此外,图像解码设备100可基于当前编码单元400或450的块形状信息确定当前编码单元400或450的划分方向。例如,在当前编码单元400沿垂直方向时,图像解码设备100可通过沿水平方向对当前编码单元400进行划分来确定编码单元430a、编码单元430b编码单元430c。此外,在当前编码单元450沿水平方向时,图像解码设备100可通过沿垂直方向对当前编码单元450进行划分来确定编码单元480a、编码单元480b编码单元480c。

根据实施例,图像解码设备100可确定包括在当前编码单元400或450中的奇数个编码单元,并且并非所有确定的编码单元都可具有相同的尺寸。例如,确定的奇数个编码单元430a、430b和430c或者480a、480b和480c中的预定的编码单元430b或编码单元480b可具有与其他编码单元430a和430c或者480a和480c的尺寸不同的尺寸。也就是说,可通过对当前编码单元400或450进行划分而确定的编码单元可具有多种尺寸,并且在某些情况下,奇数个编码单元430a、430b和430c或者480a、480b和480c中的全部编码单元可具有不同的尺寸。

根据实施例,当划分形状模式信息指示将编码单元划分为奇数个块时,图像解码设备100可确定包括在当前编码单元400或450中的奇数个编码单元,并且此外,可对通过对当前编码单元400或450进行划分而产生的奇数个编码单元中的至少一个编码单元施加预定限制。参照图4,图像解码设备100可将关于编码单元430b或编码单元480b的解码处理设置为与其他编码单元430a和430c或者480a和480c的解码处理不同,其中,编码单元430b或编码单元480b位于在对当前编码单元400或450进行划分时产生的三个编码单元430a、430b和430c或者480a、480b和480c中的中心位置处。例如,不同于其他编码单元430a和430c或者480a和480c,图像解码设备100可限制中心位置处的编码单元430b或编码单元480b不再被划分或仅被划分预定次数。

图5示出根据实施例的由图像解码设备执行的基于块形状信息和划分形状模式信息中的至少一个信息对编码单元进行划分的处理。

根据实施例,图像解码设备100可基于块形状信息和划分形状模式信息中的至少一个信息确定将正方形的第一编码单元500划分为编码单元或不对正方形的第一编码单元500进行划分。根据实施例,当划分形状模式信息指示沿水平方向对第一编码单元500进行划分时,图像解码设备100可通过沿水平方向对第一编码单元500进行划分来确定第二编码单元510。根据实施例使用的第一编码单元、第二编码单元和第三编码单元是用于理解对编码单元进行划分之前和对编码单元进行划分之后的关系的术语。例如,可通过对第一编码单元进行划分来确定第二编码单元,并且可通过对第二编码单元进行划分来确定第三编码单元。将理解的是,第一编码单元、第二编码单元和第三编码单元的关系遵循以上描述。

根据实施例,图像解码设备100可基于划分形状模式信息,确定将确定的第二编码单元510划分为编码单元或不对确定的第二编码单元510进行划分。参照图5,图像解码设备100可基于划分形状模式信息将通过对第一编码单元500进行划分而确定的非正方形的第二编码单元510划分为一个或更多个第三编码单元520a、520b、520c和520d,或者可不对非正方形的第二编码单元510进行划分。图像解码设备100可获得划分形状模式信息,并且可通过基于获得的划分形状模式信息对第一编码单元500进行划分来获得多个各种形状的第二编码单元(例如,510),并且可基于划分形状模式信息通过使用第一编码单元500的划分方法来对第二编码单元510进行划分。根据实施例,当基于第一编码单元500的划分形状模式信息将第一编码单元500划分为第二编码单元510时,也可基于第二编码单元510的划分形状模式信息将第二编码单元510划分为第三编码单元(520a或者520b、520c和520d)。也就是说,可基于每个编码单元的划分形状模式信息递归地对编码单元进行划分。因此,可通过对非正方形编码单元进行划分来确定正方形编码单元,并且可通过对正方形编码单元进行递归划分来确定非正方形编码单元。

参照图5,通过对非正方形的第二编码单元510进行划分而确定的奇数个第三编码单元520b、520c和520d中的预定编码单元(例如,位于中心位置处的编码单元、或正方形编码单元)可被递归地划分。根据实施例,可沿水平方向将奇数个第三编码单元520b、520c和520d中的正方形的第三编码单元520b划分为多个第四编码单元。可将所述多个第四编码单元530a、530b、530c和530d中的非正方形的第四编码单元530b或530d再划分为多个编码单元。例如,可将非正方形的第四编码单元530b或530d再划分为奇数个编码单元。下面将关于各种实施例描述可被用于对编码单元进行递归划分的方法。

根据实施例,图像解码设备100可基于划分形状模式信息将第三编码单元520a或者520b、520c和520d中的每一个划分为编码单元。此外,图像解码设备100可基于划分形状模式信息确定不对第二编码单元510进行划分。根据实施例,图像解码设备100可将非正方形的第二编码单元510划分为奇数个第三编码单元520b、520c和520d。图像解码设备100可对奇数个第三编码单元520b、520c和520d中的预定的第三编码单元施加预定的限制。例如,图像解码设备100可将奇数个第三编码单元520b、520c和520d中的中心位置处的第三编码单元520c限制为不再被划分或者被划分可设置的次数。

参照图5,图像解码设备100可将包括在非正方形的第二编码单元510中的奇数个第三编码单元520b、520c和520d中的中心位置处的第三编码单元520c限制为不再被划分,限制为通过使用预定的划分方法被划分(例如,仅被划分为四个编码单元或通过使用第二编码单元510的划分方法被划分),或者限制为仅被划分预定次数(例如,仅被划分n次(其中,n>0))。然而,对中心位置处的第三编码单元520c的限制不限于上述示例,并且可包括用于与其他第三编码单元520b和520d不同地对在中心位置处的第三编码单元520c进行解码的各种限制。

根据实施例,图像解码设备100可从当前编码单元中的预定位置获得用于对当前编码单元进行划分的划分形状模式信息。

图6示出根据实施例的由图像解码设备执行的从奇数个编码单元中确定预定编码单元的方法。

参照图6,可从包括在当前编码单元600或650中的多个样点中的预定位置的样点(例如,中心位置的样点640或690)获得当前编码单元600或650的划分形状模式信息。然而,当前编码单元600中的可获得至少一条划分形状模式信息的预定位置不限于图6中的中心位置,并且可包括在当前编码单元600中包括的各种位置(例如,上方、下方、左侧、右侧、左上方、左下方、右上方、右下方位置等)。图像解码设备100可从预定位置获得划分形状模式信息并且可确定将当前编码单元划分为各种形状和各种尺寸的编码单元或不对当前编码单元进行划分。

根据实施例,在当前编码单元被划分为预定数量的编码单元时,图像解码设备100可选择编码单元中的一个编码单元。如下将关于各种实施例描述的,各种方法可被用于选择多个编码单元中的一个编码单元。

根据实施例,图像解码设备100可将当前编码单元划分为多个编码单元,并且可确定预定位置处的编码单元。

根据实施例,图像解码设备100可使用指示奇数个编码单元的位置的信息来确定奇数个编码单元中的中心位置处的编码单元。参照图6,图像解码设备100可通过对当前编码单元600或当前编码单元650进行划分来确定奇数个编码单元620a、620b和620c或者奇数个编码单元660a、660b和660c。图像解码设备100可通过使用关于奇数个编码单元620a、620b和620c或者奇数个编码单元660a、660b和660c的位置的信息来确定中间编码单元620b或中间编码单元660b。例如,图像解码设备100可通过基于指示包括在编码单元620a、620b和620c中的预定样点的位置的信息确定编码单元620a、620b和620c的位置来确定中心位置的编码单元620b。详细地讲,图像解码设备100可通过基于指示编码单元620a、620b和620c的左上样点630a、630b和630c的位置的信息确定编码单元620a、620b和620c的位置来确定中心位置处的编码单元620b。

根据实施例,指示分别包括在编码单元620a、620b和620c中的左上样点630a、630b和630c的位置的信息可包括关于编码单元620a、620b和620c在画面中的位置或坐标的信息。根据实施例,指示分别包括在编码单元620a、620b和620c中的左上样点630a、630b和630c的位置的信息可包括指示在当前编码单元600中包括的编码单元620a、620b和620c的宽度或高度的信息,并且宽度或高度可与指示编码单元620a、620b和620c在画面中的坐标之间的差的信息相应。也就是说,图像解码设备100可通过直接使用关于编码单元620a、620b和620c在画面中的位置或坐标的信息或者通过使用关于与坐标之间的差值相应的编码单元的宽度或高度的信息,来确定中心位置处的编码单元620b。

根据实施例,指示上方编码单元620a的左上样点630a的位置的信息可包括坐标(xa,ya),指示中心编码单元620b的左上样点630b的位置的信息可包括坐标(xb,yb),指示下方编码单元620c的左上样点630c的位置的信息可包括坐标(xc,yc)。图像解码设备100可通过使用分别包括在编码单元620a、620b和620c中的左上样点630a、630b和630c的坐标来确定中间编码单元620b。例如,当将左上样点630a、630b和630c的坐标按照升序或降序排序时,可将包括中心位置处的样点630b的坐标(xb,yb)的编码单元620b确定为通过对当前编码单元600进行划分而确定的编码单元620a、620b和620c中的中心位置处的编码单元。然而,指示左上样点630a、630b和630c的位置的坐标可包括指示在画面中的绝对位置的坐标,或者可使用指示中间编码单元620b的左上样点630b相对于上方编码单元620a的左上样点630a的位置的相对位置的坐标(dxb,dyb)以及指示下方编码单元620c的左上样点630c相对于上方编码单元620a的左上样点630a的位置的相对位置的坐标(dxc,dyc)。通过将包括在编码单元中的样点的坐标用作指示样点的位置的信息来确定预定位置处的编码单元的方法不限于上述方法,并且可包括能够使用样点的坐标的各种算术方法。

根据实施例,图像解码设备100可将当前编码单元600划分为多个编码单元620a、620b和620c,并且可基于预定标准选择编码单元620a、620b和620c中的一个编码单元。例如,图像解码设备100可从编码单元620a、620b和620c中选择具有与其他编码单元的尺寸不同的尺寸的编码单元620b。

根据实施例,图像解码设备100可通过使用作为指示上方编码单元620a的左上样点630a的位置的信息的坐标(xa,ya)、作为指示中间编码单元620b的左上样点630b的位置的信息的坐标(xb,yb)和作为指示下方编码单元620c的左上样点630c的位置的信息的坐标(xc,yc)来确定编码单元620a、620b和620c中的每个的宽度或高度。图像解码设备100可通过使用指示编码单元620a、620b和620c的位置的坐标(xa,ya)、(xb,yb)和(xc,yc)来确定编码单元620a、620b和620c的各个尺寸。根据实施例,图像解码设备100可将上方编码单元620a的宽度确定为当前编码单元600的宽度。图像解码设备100可将上方编码单元620a的高度确定为yb-ya。根据实施例,图像解码设备100可将中间编码单元620b的宽度确定为当前编码单元600的宽度。图像解码设备100可将中间编码单元620b的高度确定为yc-yb。根据实施例,图像解码设备100可通过使用当前编码单元600的宽度或高度或者上方编码单元620a和中间编码单元620b的宽度或高度来确定下方编码单元620c的宽度或高度。图像解码设备100可基于确定的编码单元620a、620b和620c的宽度和高度来确定具有与其他编码单元的尺寸不同的尺寸的编码单元。参照图6,图像解码设备100可将具有与上方编码单元620a和下方编码单元620c的尺寸不同的尺寸的中间编码单元620b确定为预定位置的编码单元。然而,上述由图像解码设备100执行的确定具有与其他编码单元的尺寸不同的尺寸的编码单元的方法仅与通过使用基于样点的坐标确定的编码单元的尺寸来确定预定位置处的编码单元的示例相应,并且因此,可使用通过将基于预定样点的坐标确定的编码单元的尺寸进行比较来确定预定位置处的编码单元的各种方法。

图像解码设备100可通过使用作为指示左侧编码单元660a的左上样点670a的位置的信息的坐标(xd,yd)、作为指示中间编码单元660b的左上样点670b的位置的信息的坐标(xe,ye)和作为指示右侧编码单元660c的左上样点670c的位置的信息的坐标(xf,yf)来确定编码单元660a、660b和660c中的每一个编码单元的宽度或高度。图像解码设备100可通过使用指示编码单元660a、660b和660c的位置的坐标(xd,yd)、(xe,ye)和(xf,yf)来确定编码单元660a、660b和660c的各个尺寸。

根据实施例,图像解码设备100可将左侧编码单元660a的宽度确定为xe-xd。图像解码设备100可将左侧编码单元660a的高度确定为当前编码单元650的高度。根据实施例,图像解码设备100可将中间编码单元660b的宽度确定为xf-xe。图像解码设备100可将中间编码单元660b的高度确定为当前编码单元650的高度。根据实施例,图像解码设备100可通过使用当前编码单元650的宽度或高度或者左侧编码单元660a和中间编码单元660b的宽度或高度来确定右侧编码单元660c的宽度或高度。图像解码设备100可基于确定的编码单元660a、编码单元660b和编码单元660c的宽度和高度来确定具有与其他编码单元的尺寸不同的尺寸的编码单元。参照图6,图像解码设备100可将具有与左侧编码单元660a和右侧编码单元660c的尺寸不同的尺寸的中间编码单元660b确定为预定位置的编码单元。然而,上述由图像解码设备100执行的确定具有与其他编码单元的尺寸不同的尺寸的编码单元的方法仅与通过使用基于样点的坐标确定的编码单元的尺寸来确定预定位置处的编码单元的示例相应,并且因此,可使用通过将基于预定样点的坐标确定的编码单元的尺寸进行比较来确定预定位置处的编码单元的各种方法。

然而,确定编码单元的位置所考虑的样点的位置不限于上述左上方位置,并且可使用关于包括在编码单元中的样点的任意位置的信息。

根据实施例,图像解码设备100可考虑当前编码单元的形状,从通过对当前编码单元进行划分而确定的奇数个编码单元中选择预定位置处的编码单元。例如,在当前编码单元具有宽度长于高度的非正方形形状时,图像解码设备100可确定在水平方向上的预定位置处的编码单元。也就是说,图像解码设备100可确定在水平方向上的不同位置处的编码单元中的一个编码单元并且可对该编码单元施加限制。在当前编码单元具有高度长于宽度的非正方形形状时,图像解码设备100可确定在垂直方向上的预定位置处的编码单元。也就是说,图像解码设备100可确定在垂直方向上的不同位置处的编码单元中的一个编码单元并且对该编码单元施加限制。

根据实施例,图像解码设备100可使用指示偶数个编码单元的各个位置的信息,以确定偶数个编码单元中的预定位置处的编码单元。图像解码设备100可通过对当前编码单元进行划分(二划分)来确定偶数个编码单元,并且可通过使用关于偶数个编码单元的位置的信息来确定预定位置处的编码单元。与其相关的操作可与已经在上面关于图6详细描述的确定奇数个编码单元中的预定位置(例如,中心位置)处的编码单元的操作相应,并且因此这里不提供其详细描述。

根据实施例,当将非正方形的当前编码单元划分为多个编码单元时,可在划分操作中使用关于预定位置处的编码单元的预定信息来确定多个编码单元中的预定位置处的编码单元。例如,图像解码设备100可在划分操作中使用存储在中间编码单元中包括的样点中的块形状信息和划分形状模式信息中的至少一个信息来确定通过对当前编码单元进行划分而确定的多个编码单元中的中心位置处的编码单元。

参照图6,图像解码设备100可基于划分形状模式信息将当前编码单元600划分为多个编码单元620a、620b和620c,并且可确定多个编码单元620a、620b和620c中的中心位置处的编码单元620b。此外,图像解码设备100可考虑获得划分形状模式信息的位置来确定中心位置处的编码单元620b。也就是说,可从当前编码单元600的中心位置处的样点640获得当前编码单元600的划分形状模式信息,并且当基于划分形状模式信息将当前编码单元600划分为多个编码单元620a、620b和620c时,可将包括样点640的编码单元620b确定为中心位置处的编码单元。然而,用于确定中心位置处的编码单元的信息不限于划分形状模式信息,并且可将各种类型的信息用于确定中心位置处的编码单元。

根据实施例,可从包括在将被确定的编码单元中的预定样点获得用于识别预定位置处的编码单元的预定信息。参照图6,图像解码设备100可使用从当前编码单元600中的预定位置处的样点(例如,当前编码单元600的中心位置处的样点)获得的划分形状模式信息来确定通过对当前编码单元600进行划分而确定的多个编码单元620a、620b和620c中的预定位置处的编码单元(例如,划分出的多个编码单元中的中心位置处的编码单元)。也就是说,图像解码设备100可通过考虑当前编码单元600的块形状来确定预定位置处的样点,可从通过对当前编码单元600进行划分而确定的多个编码单元620a、620b和620c中确定包括可获得预定信息(例如,划分形状模式信息)的样点的编码单元620b,并且可对编码单元620b施加预定限制。参照图6,根据实施例,在解码操作中,图像解码设备100可将当前编码单元600的中心位置处的样点640确定为可获得预定信息的样点,并且可对包括样点640的编码单元620b施加预定限制。然而,可获得预定信息的样点的位置不限于上述位置,并且可包括在将被确定用于限制的编码单元620b中包括的样点的任意位置。

根据实施例,可基于当前编码单元600的形状确定可获得预定信息的样点的位置。根据实施例,块形状信息可指示当前编码单元是具有正方形形状还是具有非正方形形状,并且可基于该形状确定可获得预定信息的样点的位置。例如,图像解码设备100可通过使用关于当前编码单元的宽度的信息和关于当前编码单元的高度的信息中的至少一个信息,将位于用于将当前编码单元的宽度和高度中的至少一个对半划分的边界上的样点确定为可获得预定信息的样点。作为另一示例,在当前编码单元的块形状信息指示非正方形形状时,图像解码设备100可将与用于将当前编码单元的长边对半划分的边界相邻的样点中的一个样点确定为可获得预定信息的样点。

根据实施例,在当前编码单元被划分为多个编码单元时,图像解码设备100可使用划分形状模式信息来确定多个编码单元中的预定位置处的编码单元。根据实施例,图像解码设备100可从编码单元中的预定位置处的样点获得划分形状模式信息,并且可通过使用从所述多个编码单元中的每个编码单元中的预定位置的样点获得的划分形状模式信息对通过对当前编码单元进行划分而产生的多个编码单元进行划分。也就是说,可基于从每个编码单元中的预定位置处的样点获得的划分形状模式信息对编码单元进行递归划分。上面已经关于图5描述了对编码单元进行递归划分的操作,并且因此这里将不提供其详细描述。

根据实施例,图像解码设备100可通过对当前编码单元进行划分来确定一个或更多个编码单元,并且可基于预定块(例如,当前编码单元)确定对一个或更多个编码单元进行解码的顺序。

图7示出根据实施例的当图像解码设备通过对当前编码单元进行划分来确定多个编码单元时对所述多个编码单元进行处理的顺序。

根据实施例,基于划分形状模式信息,图像解码设备100可通过沿垂直方向对第一编码单元700进行划分来确定第二编码单元710a和710b,可通过沿水平方向对第一编码单元700进行划分来确定第二编码单元730a和730b,或者可通过沿垂直方向和水平方向对第一编码单元700进行划分来确定第二编码单元750a、750b、750c和750d。

参照图7,图像解码设备100可确定按照水平方向顺序710c对通过沿垂直方向对第一编码单元700进行划分而确定的第二编码单元710a和710b进行处理。图像解码设备100可确定按照垂直方向顺序730c对通过沿水平方向对第一编码单元700进行划分而确定的第二编码单元730a和730b进行处理。图像解码设备100可确定根据预定顺序(例如,光栅扫描顺序或z字形扫描顺750e)对通过沿垂直方向和水平方向对第一编码单元700进行划分而确定的第二编码单元750a、750b、750c和750d,其中,预定顺序是对一行中的编码单元进行处理并然后对下一行中的编码单元进行处理。

根据实施例,图像解码设备100可对编码单元进行递归划分。参照图7,图像解码设备100可通过对第一编码单元700进行划分来确定多个编码单元710a和710b、730a和730b或者750a、750b、750c和750d,并且对确定的多个编码单元710a、710b、730a、730b、750a、750b、750c和750d中的每一个进行递归划分。多个编码单元710a和710b、730a和730b或者750a、750b、750c和750d的划分方法可相应于第一编码单元700的划分方法。因此,多个编码单元710a和710b、730a和730b或者750a、750b、750c和750d中的每一个可被独立地划分为多个编码单元。参照图7,图像解码设备100可通过沿垂直方向对第一编码单元700进行划分来确定第二编码单元710a和710b,并且可确定对第二编码单元710a和710b中的每一个进行独立划分或者不对第二编码单元710a和710b中的每一个进行划分。

根据实施例,图像解码设备100可通过沿水平方向对左侧第二编码单元710a进行划分来确定第三编码单元720a和720b,并且可不对右侧第二编码单元710b进行划分。

根据实施例,可基于对编码单元进行划分的操作确定编码单元的处理顺序。换句话说,可基于紧接在被划分之前的编码单元的处理顺序来确定划分出的编码单元的处理顺序。图像解码设备100可独立于右侧第二编码单元710b来确定通过对左侧第二编码单元710a进行划分而确定的第三编码单元720a和720b的处理顺序。因为通过沿水平方向对左侧第二编码单元710a进行划分来确定第三编码单元720a和720b,所以可按照垂直方向顺序720c对第三编码单元720a和720b进行处理。因为左侧第二编码单元710a和右侧第二编码单元710b按照水平方向顺序710c被处理,所以可在按照垂直方向顺序720c对左侧第二编码单元710a中包括的第三编码单元720a和720b进行处理之后对右侧第二编码单元710b进行处理。基于被划分之前的编码单元来确定编码单元的处理顺序的操作不限于上述示例,并且可将各种方法用于按照预定顺序独立地处理被划分并被确定为各种形状的编码单元。

图8示出根据实施例的由图像解码设备执行的当不可按照预定顺序对编码单元进行处理时确定当前编码单元将被划分为奇数个编码单元的处理。

根据实施例,图像解码设备100可基于获得的划分形状模式信息确定当前编码单元被划分为奇数个编码单元。参照图8,正方形的第一编码单元800可被划分为非正方形的第二编码单元810a和810b,第二编码单元810a和810b可被独立地划分为第三编码单元820a和820b以及820c、820d和820e。根据实施例,图像解码设备100可通过沿水平方向对左侧第二编码单元810a进行划分来确定多个第三编码单元820a和820b,并且可将右侧第二编码单元810b划分为奇数个第三编码单元820c、820d和820e。

根据实施例,图像解码设备100可通过确定是否可按照预定顺序对第三编码单元820a和820b以及820c、820d和820e进行处理,来确定是否将任意编码单元划分为奇数个编码单元。参照图8,图像解码设备100可通过对第一编码单元800进行递归划分来确定第三编码单元820a和820b以及820c、820d和820e。图像解码设备100可基于块形状信息和划分形状模式中的至少一个确定以下编码单元中的任意一个是否被划分为奇数个编码单元:第一编码单元800、第二编码单元810a和810b、或者第三编码单元820a和820b、以及820c、820d和820e。例如,第二编码单元810a和810b中的位于右侧的编码单元可被划分为奇数个第三编码单元820c、820d和820e。包括在第一编码单元800中的多个编码单元的处理顺序可以是预定顺序(例如,z字形扫描顺序830),并且图像解码设备100可确定通过将右侧第二编码单元810b划分为奇数个编码单元而确定的第三编码单元820c、820d和820e是否满足用于按照预定顺序进行处理的条件。

根据实施例,图像解码设备100可确定包括在第一编码单元800中的第三编码单元820a和820b以及820c、820d和820e是否满足用于按照预定顺序进行处理的条件,并且所述条件与第二编码单元810a和810b的宽度和高度中的至少一个是否将沿着第三编码单元820a和820b以及820c、820d和820e的边界被对半划分相关。例如,当非正方形形状的左侧第二编码单元810a的高度被对半划分时确定的第三编码单元820a和820b可满足所述条件。因为当将右侧第二编码单元810b划分为三个编码单元时确定的第三编码单元820c、820d和820e的边界不能将右侧第二编码单元810b的宽度或高度对半划分,所以可确定第三编码单元820c、820d和820e不满足所述条件。当如上所述不满足所述条件时,图像解码设备100可确定扫描顺序不连续,并且可基于确定结果确定右侧第二编码单元810b将被划分为奇数个编码单元。根据实施例,当编码单元被划分为奇数个编码单元时,图像解码设备100可对划分出的编码单元中的预定位置处的编码单元施加预定限制,上面已经关于各种实施例描述了所述限制或所述预定位置,因此这里将不提供其详细描述。

图9示出根据实施例的由图像解码设备执行的通过对第一编码单元进行划分来确定至少一个编码单元的处理。

根据实施例,图像解码设备100可基于通过接收器110获得的划分形状模式信息对第一编码单元900进行划分。正方形的第一编码单元900可被划分为四个正方形编码单元,或者可被划分为多个非正方形编码单元。例如,参照图9,当第一编码单元900具有正方形形状并且划分形状模式信息指示将第一编码单元900划分为非正方形编码单元时,图像解码设备100可将第一编码单元900划分为多个非正方形编码单元。详细地讲,当划分形状模式信息指示通过沿水平方向或垂直方向对第一编码单元900进行划分来确定奇数个编码单元时,图像解码设备100可将正方形的第一编码单元900划分为奇数个编码单元(例如,通过沿垂直方向对正方形的第一编码单元900进行划分而确定的第二编码单元910a、910b和910c或者通过沿水平方向对正方形的第一编码单元900进行划分而确定的第二编码单元920a、920b和920c)。

根据实施例,图像解码设备100可确定包括在第一编码单元900中的第二编码单元910a、910b、910c、920a、920b和920c是否满足用于按照预定顺序进行处理的条件,并且所述条件与第一编码单元900的宽度和高度中的至少一个是否将沿着第二编码单元910a、910b、910c、920a、920b和920c的边界被对半划分相关。参照图9,因为通过沿垂直方向对正方形的第一编码单元900进行划分而确定的第二编码单元910a、910b和910c的边界不将第一编码单元900的宽度对半划分,所以可确定第一编码单元900不满足用于按照预定顺序进行处理的条件。此外,因为通过沿水平方向对正方形的第一编码单元900进行划分而确定的第二编码单元920a、920b和920c的边界不将第一编码单元900的高度对半划分,所以可确定第一编码单元900不满足用于按照预定顺序进行处理的条件。当如上所述不满足所述条件时,图像解码设备100可决定扫描顺序不连续,并且可基于决定结果确定第一编码单元900被划分为奇数个编码单元。根据实施例,当编码单元被划分为奇数个编码单元时,图像解码设备100可对划分出的编码单元中的预定位置处的编码单元施加预定限制。上面已经关于各种实施例描述了所述限制或所述预定位置,因此这里将不提供其详细描述。

根据实施例,图像解码设备100可通过对第一编码单元进行划分来确定各种形状的编码单元。

参照图9,图像解码设备100可将正方形的第一编码单元900或非正方形的第一编码单元930或950划分为各种形状的编码单元。

图10示出根据实施例的当在图像解码设备对第一编码单元进行划分时确定的具有非正方形形状的第二编码单元满足预定条件时可将第二编码单元划分为的形状受到限制。

根据实施例,图像解码设备100可基于由接收器110获得的划分形状模式信息确定将正方形的第一编码单元1000划分为非正方形的第二编码单元1010a和1010b、或者1020a和1020b。第二编码单元1010a和1010b或者1020a和1020b可被独立地划分。像这样,基于第二编码单元1010a和1010b或者1020a和1020b中的每一个的划分形状模式信息,图像解码设备100可确定将第二编码单元1010a和1010b、或者1020a和1020b中的每一个划分为多个编码单元或不对第二编码单元1010a和1010b、或者1020a和1020b中的每一个进行划分。根据实施例,图像解码设备100可通过沿水平方向对通过沿垂直方向对第一编码单元1000进行划分而确定的非正方形的左侧第二编码单元1010a进行划分,来确定第三编码单元1012a和1012b。然而,当左侧第二编码单元1010a沿水平方向被划分时,图像解码设备100可限制右侧第二编码单元1010b不沿左侧第二编码单元1010a被划分的水平方向被划分。当通过沿同一方向对右侧第二编码单元1010b进行划分来确定第三编码单元1014a和1014b时,因为左侧第二编码单元1010a和右侧第二编码单元1010b沿水平方向被独立地划分,所以可确定第三编码单元1012a和1012b、或者1014a和1014b。然而,这种情况与图像解码设备100基于划分形状模式信息将第一编码单元1000划分为四个正方形的第二编码单元1030a、1030b、1030c和1030d的情况作用相同,并且在图像解码方面可能是低效的。

根据实施例,图像解码设备100可通过沿垂直方向对通过沿水平方向对第一编码单元1000进行划分而确定的非正方形的第二编码单元1020a或1020b进行划分,来确定第三编码单元1022a和1022b、或者1024a和1024b。然而,当第二编码单元(例如,上方第二编码单元1020a)沿垂直方向被划分时,出于上述原因,图像解码设备100可限制另一第二编码单元(例如,下方第二编码单元1020b)不沿上方第二编码单元1020a被划分的垂直方向被划分。

图11示出根据实施例的由图像解码设备执行的当划分形状模式信息指示正方形编码单元不被划分为四个正方形编码单元时对正方形编码单元进行划分的处理。

根据实施例,图像解码设备100可通过基于划分形状模式信息对第一编码单元1100进行划分来确定第二编码单元1110a和1110b、或者1120a和1120b等。划分形状模式信息可包括关于对编码单元进行划分的各种方法的信息,但关于各种划分方法的信息可不包括用于将编码单元划分为四个正方形编码单元的信息。根据这样的划分形状模式信息,图像解码设备100可不将正方形的第一编码单元1100划分为四个正方形的第二编码单元1130a、1130b、1130c和1130d。图像解码设备100可基于划分形状模式信息确定非正方形的第二编码单元1110a和1110b、或者1120a和1120b等。

根据实施例,图像解码设备100可对非正方形的第二编码单元1110a和1110b、或者1120a和1120b等进行独立划分。第二编码单元1110a和1110b、或者1120a和1120b等中的每一个可按照预定顺序被递归地划分,并且此划分方法可与基于划分形状模式信息对第一编码单元1100进行划分的方法相应。

例如,图像解码设备100可通过沿水平方向对左侧第二编码单元1110a进行划分来确定正方形的第三编码单元1112a和1112b,并且可通过沿水平方向对右侧第二编码单元1110b进行划分来确定正方形的第三编码单元1114a和1114b。此外,图像解码设备100可通过沿水平方向对左侧第二编码单元1110a和右侧第二编码单元1110b两者进行划分来确定正方形的第三编码单元1116a、1116b、1116c和1116d。在这种情况下,可确定与从第一编码单元1100划分出的四个正方形的第二编码单元1130a、1130b、1130c和1130d具有相同形状的编码单元。

作为另一示例,图像解码设备100可通过沿垂直方向对上方第二编码单元1120a进行划分来确定正方形的第三编码单元1122a和1122b,并且可通过沿垂直方向对下方第二编码单元1120b进行划分来确定正方形的第三编码单元1124a和1124b。此外,图像解码设备100可通过沿垂直方向对上方第二编码单元1120a和下方第二编码单元1120b两者进行划分来确定正方形的第三编码单元1126a、1126b、1126c和1126d。在这种情况下,可确定与从第一编码单元1100划分出的四个正方形的第二编码单元1130a、1130b、1130c和1130d具有相同形状的编码单元。

图12示出根据实施例的可根据对编码单元进行划分的处理改变多个编码单元之间的处理顺序。

根据实施例,图像解码设备100可基于划分形状模式信息对第一编码单元1200进行划分。当块形状指示正方形形状并且划分形状模式信息指示沿水平方向和垂直方向中的至少一个方向对第一编码单元1200进行划分时,图像解码设备100可通过对第一编码单元1200进行划分来确定第二编码单元1210a和1210b、或者1220a和1220b。参照图12,通过仅沿水平方向或垂直方向对第一编码单元1200进行划分而确定的非正方形的第二编码单元1210a和1210b、或者1220a和1220b可基于每个编码单元的划分形状模式信息被独立地划分。例如,图像解码设备100可通过沿水平方向对通过沿垂直方向对第一编码单元1200进行划分而产生的第二编码单元1210a和1210b进行划分来确定第三编码单元1216a、1216b、1216c和1216d,并且可通过沿垂直方向对通过沿水平方向对第一编码单元1200进行划分而产生的第二编码单元1220a和1220b进行划分来确定第三编码单元1226a、1226b、1226c和1226d。

上面已经关于图11描述了对第二编码单元1210a和1210b、或者1220a和1220b进行划分的操作,因此这里将不提供其详细描述。

根据实施例,图像解码设备100可按照预定顺序对编码单元进行处理。

上面已经关于图7描述了按照预定顺序对编码单元进行处理的操作,因此这里将不提供其详细描述。参照图12,图像解码设备100可通过对正方形的第一编码单元1200进行划分来确定四个正方形的第三编码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d。根据实施例,图像解码设备100可基于第一编码单元1200被划分的划分形状来确定第三编码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d的处理顺序。

根据实施例,图像解码设备100可通过沿水平方向对通过沿垂直方向对第一编码单元1200进行划分而产生的第二编码单元1210a和1210b进行划分来确定第三编码单元1216a、1216b、1216c和1216d,并且可按照如下处理顺序1217对第三编码单元1216a、1216b、1216c和1216d进行处理:首先在垂直方向上对包括在左侧第二编码单元1210a中的第三编码单元1216a和1216c进行处理,并且然后在垂直方向上对包括在右侧第二编码单元1210b中的第三编码单元1216b和1216d进行处理。

根据实施例,图像解码设备100可通过沿垂直方向对通过沿水平方向对第一编码单元1200进行划分而产生的第二编码单元1220a和1220b进行划分来确定第三编码单元1226a、1226b、1226c和1226d,并且可按照如下处理顺序1227对第三编码单元1226a、1226b、1226c和1226d进行处理:首先在水平方向上对包括在上方第二编码单元1220a中的第三编码单元1226a和1226b进行处理,并且然后在水平方向上对包括在下方第二编码单元1220b中的第三编码单元1226c和1226d进行处理。

参照图12,可通过分别对第二编码单元1210a和1210b以及1220a和1220b进行划分来确定正方形的第三编码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d。尽管通过沿垂直方向对第一编码单元1200进行划分而确定的第二编码单元1210a和1210b与通过沿水平方向对第一编码单元1200进行划分而确定的第二编码单元1220a和1220b不同,但是从第二编码单元1210a和1210b以及第二编码单元1220a和1220b划分出的第三编码单元1216a、1216b、1216c和1216d以及1226a、1226b、1226c和1226d最终示出与从第一编码单元1200划分出的相同形状的编码单元。像这样,通过基于划分形状模式信息以不同的方式对编码单元进行递归划分,即使最终将编码单元确定为相同的形状,图像解码设备100也可按照不同顺序对多个编码单元进行处理。

图13示出根据实施例的当对编码单元进行递归划分使得多个编码单元被确定时随着编码单元的形状和尺寸改变来确定编码单元的深度的处理。

根据实施例,图像解码设备100可基于预定标准来确定编码单元的深度。例如,预定标准可以是编码单元的长边的长度。当编码单元在被划分之前的长边的长度是划分出的当前编码单元的长边的长度的2n(n>0)倍时,图像解码设备100可确定当前编码单元的深度比被划分之前的编码单元的深度增大了n。在下面的描述中,具有增大的深度的编码单元被表示为更深深度的编码单元。

参照图13,根据实施例,图像解码设备100可通过基于指示正方形形状的块形状信息(例如,块形状信息可被表示为“0:square”)对正方形的第一编码单元1300进行划分来确定更深深度的第二编码单元1302和第三编码单元1304。假设正方形的第一编码单元1300的尺寸是2n×2n,通过将第一编码单元1300的宽度和高度划分为1/2所确定的第二编码单元1302可具有n×n的尺寸。此外,通过将第二编码单元1302的宽度和高度划分为1/2所确定的第三编码单元1304可具有n/2×n/2的尺寸。在这种情况下,第三编码单元1304的宽度和高度是第一编码单元1300的宽度和高度的1/4。当第一编码单元1300的深度为d时,宽度和高度是第一编码单元1300的宽度和高度的1/2的第二编码单元1302的深度可以是d+1,并且宽度和高度是第一编码单元1300的宽度和高度的1/4的第三编码单元1304的深度可以是d+2。

根据实施例,图像解码设备100可通过基于指示非正方形形状的块形状信息(例如,块形状信息可被表示为指示高度长于宽度的非正方形形状的“1:ns_ver”,或者可被表示为指示宽度长于高度的非正方形形状的“2:ns_hor”)对非正方形的第一编码单元1310或1320进行划分来确定更深深度的第二编码单元1312或1322以及第三编码单元1314或1324。

图像解码设备100可通过对尺寸为n×2n的第一编码单元1310的宽度和高度中的至少一个进行划分来确定第二编码单元1302、1312或1322。也就是说,图像解码设备100可通过沿水平方向对第一编码单元1310进行划分来确定尺寸为n×n的第二编码单元1302或尺寸为n×n/2的第二编码单元1322,或者可通过沿水平方向和垂直方向对第一编码单元1310进行划分来确定尺寸为n/2×n的第二编码单元1312。

根据实施例,图像解码设备100可通过对尺寸为2n×n的第一编码单元1320的宽度和高度中的至少一个进行划分来确定第二编码单元1302、1312或1322。也就是说,图像解码设备100可通过沿垂直方向对第一编码单元1320进行划分来确定尺寸为n×n的第二编码单元1302或尺寸为n/2×n的第二编码单元1312,或者可通过沿水平方向和垂直方向对第一编码单元1320进行划分来确定尺寸为n×n/2的第二编码单元1322。

根据实施例,图像解码设备100可通过对尺寸为n×n的第二编码单元1302的宽度和高度中的至少一个进行划分来确定第三编码单元1304、1314或1324。也就是说,图像解码设备100可通过沿垂直方向和水平方向对第二编码单元1302进行划分来确定尺寸为n/2×n/2的第三编码单元1304、尺寸为n/4×n/2的第三编码单元1314或尺寸为n/2×n/4的第三编码单元1324。

根据实施例,图像解码设备100可通过对尺寸为n/2×n的第二编码单元1312的宽度和高度中的至少一个进行划分来确定第三编码单元1304、1314或1324。也就是说,图像解码设备100可通过沿水平方向对第二编码单元1312进行划分来确定尺寸为n/2×n/2的第三编码单元1304或尺寸为n/2×n/4的第三编码单元1324,或者可通过沿垂直方向和水平方向对第二编码单元1312进行划分来确定尺寸为n/4×n/2的第三编码单元1314。

根据实施例,图像解码设备100可通过对尺寸为n×n/2的第二编码单元1322的宽度和高度中的至少一个进行划分来确定第三编码单元1304、1314或1324。也就是说,图像解码设备100可通过沿垂直方向对第二编码单元1322进行划分来确定尺寸为n/2×n/2的第三编码单元1304或尺寸为n/4×n/2的第三编码单元1314,或者可通过沿垂直方向和水平方向对第二编码单元1322进行划分来确定尺寸为n/2×n/4的第三编码单元1324。

根据实施例,图像解码设备100可沿水平方向或垂直方向对正方形编码单元1300、1302或1304进行划分。例如,图像解码设备100可通过沿垂直方向对尺寸为2n×2n的第一编码单元1300进行划分来确定尺寸为n×2n的第一编码单元1310,或者可通过沿水平方向对第一编码单元1300进行划分来确定尺寸为2n×n的第一编码单元1320。根据实施例,当基于编码单元的最长边的长度确定深度时,通过沿水平方向或垂直方向对尺寸为2n×2n的第一编码单元1300进行划分而确定的编码单元的深度可与第一编码单元1300的深度相同。

根据实施例,第三编码单元1314或1324的宽度和高度可以是第一编码单元1310或1320的宽度和高度的1/4。当第一编码单元1310或1320的深度为d时,宽度和高度是第一编码单元1310或1320的宽度和高度的1/2的第二编码单元1312或1322的深度可以是d+1,宽度和高度是第一编码单元1310或1320的宽度和高度的1/4的第三编码单元1314或1324的深度可以是d+2。

图14示出根据实施例的基于编码单元的形状和尺寸可确定的深度以及用于区分编码单元的部分索引(pid)。

根据实施例,图像解码设备100可通过对正方形的第一编码单元1400进行划分来确定各种形状的第二编码单元。参照图14,图像解码设备100可通过基于划分形状模式信息沿垂直方向和水平方向中的至少一个方向对第一编码单元1400进行划分来确定第二编码单元1402a和1402b、1404a和1404b、以及1406a、1406b、1406c和1406d。也就是说,图像解码设备100可基于第一编码单元1400的划分形状模式信息来确定第二编码单元1402a和1402b、1404a和1404b、以及1406a、1406b、1406c和1406d。

根据实施例,基于正方形的第一编码单元1400的划分形状模式信息所确定的第二编码单元1402a和1402b、第二编码单元1404a和1404b以及第二编码单元1406a、1406b、1406c和1406d的深度可基于它们的长边的长度被确定。例如,因为正方形的第一编码单元1400的边的长度等于非正方形的第二编码单元1402a和1402b以及1404a和1404b的长边的长度,所以第一编码单元1400和非正方形的第二编码单元1402a和1402b以及1404a和1404b可具有相同的深度(例如,d)。然而,当图像解码设备100基于划分形状模式信息将第一编码单元1400划分为四个正方形的第二编码单元1406a、1406b、1406c和1406d时,因为正方形的第二编码单元1406a、1406b、1406c和1406d的边的长度是第一编码单元1400的边的长度的1/2,所以第二编码单元1406a、1406b、1406c和1406d的深度可以是比第一编码单元1400的深度d深了1的d+1。

根据实施例,图像解码设备100可通过基于划分形状模式信息沿水平方向对高度长于宽度的第一编码单元1410进行划分来确定多个第二编码单元1412a和1412b以及1414a、1414b和1414c。根据实施例,图像解码设备100可通过基于划分形状模式信息沿垂直方向对宽度长于高度的第一编码单元1420进行划分来确定多个第二编码单元1422a和1422b以及1424a、1424b和1424c。

根据实施例,基于非正方形的第一编码单元1410或1420的划分形状模式信息所确定的第二编码单元1412a和1412b以及第二编码单元1414a、1414b和1414c,或者第二编码单元1422a和1422b以及第二编码单元1424a、1424b和1424c的深度可基于它们的长边的长度被确定。例如,因为正方形的第二编码单元1412a和1412b的边的长度是具有高度长于宽度的非正方形形状的第一编码单元1410的长边的长度的1/2,所以正方形的第二编码单元1412a和1412b的深度是比非正方形的第一编码单元1410的深度d深了1的d+1。

此外,图像解码设备100可基于划分形状模式信息将非正方形的第一编码单元1410划分为奇数个第二编码单元1414a、1414b和1414c。奇数个第二编码单元1414a、1414b和1414c可包括非正方形的第二编码单元1414a和1414c以及正方形的第二编码单元1414b。在这种情况下,因为非正方形的第二编码单元1414a和1414c的长边的长度以及正方形的第二编码单元1414b的边的长度是第一编码单元1410的长边的长度的1/2,所以第二编码单元1414a、1414b和1414c的深度可以是比非正方形的第一编码单元1410的深度d深了1的d+1。图像解码设备100可通过使用上述确定从第一编码单元1410划分出的编码单元的深度的方法来确定从具有宽度长于高度的非正方形形状的第一编码单元1420划分出的编码单元的深度。

根据实施例,当划分出的奇数个编码单元不具有相等的尺寸时,图像解码设备100可基于编码单元之间的尺寸比例来确定用于识别划分出的编码单元的pid。参照图14,划分出的奇数个编码单元1414a、1414b和1414c中的中心位置的编码单元1414b的宽度可等于其他编码单元1414a和1414c的宽度并且其高度可以是其他编码单元1414a和1414c的高度的两倍。也就是说,在这种情况下,中心位置处的编码单元1414b可包括两个其他编码单元1414a或1414c。因此,当中心位置处的编码单元1414b的pid基于扫描顺序为1时,位置与编码单元1414b相邻的编码单元1414c的pid可增加2并且因此可以是3。也就是说,可能存在pid值不连续。根据实施例,图像解码设备100可基于用于识别划分出的编码单元的pid中是否存在不连续来确定划分出的奇数个编码单元是否不具有相等的尺寸。

根据实施例,图像解码设备100可基于用于识别通过对当前编码单元进行划分而确定的多个编码单元的pid值来确定是否使用特定划分方法。参照图14,图像解码设备100可通过对具有高度长于宽度的矩形形状的第一编码单元1410进行划分来确定偶数个编码单元1412a和1412b或奇数个编码单元1414a、1414b和1414c。图像解码设备100可使用指示各个编码单元的pid以便识别所述各个编码单元。根据实施例,可从每个编码单元的预定位置的样点(例如,左上样点)获得pid。

根据实施例,图像解码设备100可通过使用用于区分编码单元的pid来确定划分出的编码单元中的预定位置处的编码单元。根据实施例,当具有高度长于宽度的矩形形状的第一编码单元1410的划分形状模式信息指示将编码单元划分为三个编码单元时,图像解码设备100可将第一编码单元1410划分为三个编码单元1414a、1414b和1414c。图像解码设备100可将pid分配给三个编码单元1414a、1414b和1414c中的每一个。图像解码设备100可将划分出的奇数个编码单元的pid进行比较,以确定划分出的奇数个编码单元中的中心位置处的编码单元。图像解码设备100可将具有与编码单元的pid中的中间值相应的pid的编码单元1414b确定为通过对第一编码单元1410进行划分所确定的编码单元中的中心位置处的编码单元。根据实施例,当划分出的编码单元不具有相等的尺寸时,图像解码设备100可基于编码单元之间的尺寸比例确定用于区分划分出的编码单元的pid。参照图14,通过对第一编码单元1410进行划分而产生的编码单元1414b的宽度可等于其他编码单元1414a和1414c的宽度,并且编码单元1414b的高度可以是其他编码单元1414a和1414c的高度的两倍。在这种情况下,当中心位置处的编码单元1414b的pid是1时,位置与编码单元1414b相邻的编码单元1414c的pid可增加2并且因此可以是3。当如上所述pid未均匀地增大时,图像解码设备100可确定编码单元被划分为包括尺寸与其他编码单元的尺寸不同的编码单元的多个编码单元。根据实施例,当划分形状模式信息指示将编码单元划分为奇数个编码单元时,图像解码设备100可按照奇数个编码单元中的预定位置的编码单元(例如,中心位置的编码单元)具有与其他编码单元的尺寸不同的尺寸这样的方式来对当前编码单元进行划分。在这种情况下,图像解码设备100可通过使用编码单元的pid来确定具有不同尺寸的中心位置的编码单元。然而,预定位置的编码单元的pid以及尺寸或位置不限于上述示例,并且可使用编码单元的各种pid以及各种位置和尺寸。

根据实施例,图像解码设备100可使用预定数据单元,其中,在所述预定数据单元中,编码单元开始被递归地划分。

图15示出根据实施例的基于包括在画面中的多个预定数据单元来确定多个编码单元。

根据实施例,预定数据单元可被定义为通过使用划分形状模式信息开始对编码单元进行递归划分的数据单元。也就是说,预定数据单元可与用于确定从当前画面划分出的多个编码单元的最高深度的编码单元相应。在下面的描述中,为了便于解释,预定数据单元被称为参考数据单元。

根据实施例,参考数据单元可具有预定尺寸和预定形状。根据实施例,参考编码单元可包括m×n个样点。这里,m和n可彼此相等,并且可以是被表示为2的幂的整数。也就是说,参考数据单元可具有正方形形状或非正方形形状,并且可被划分为整数个编码单元。

根据实施例,图像解码设备100可将当前画面划分为多个参考数据单元。根据实施例,图像解码设备100可通过使用每个参考数据单元的划分形状模式信息来对从当前画面划分出的多个参考数据单元进行划分。对参考数据单元进行划分的操作可与使用四叉树结构的划分操作相应。

根据实施例,图像解码设备100可预先确定包括在当前画面中的参考数据单元所允许的最小尺寸。因此,图像解码设备100可确定尺寸等于或大于最小尺寸的各种参考数据单元,并且可参考确定的参考数据单元通过使用划分形状模式信息来确定一个或更多个编码单元。

参照图15,图像解码设备100可使用正方形的参考编码单元1500或非正方形的参考编码单元1502。根据实施例,可基于能够包括一个或更多个参考编码单元的各种数据单元(例如,序列、画面、条带、条带片段、并行块、并行块组、最大编码单元等)来确定参考编码单元的形状和尺寸。

根据实施例,图像解码设备100的接收器110可从比特流获得针对各种数据单元中的每个数据单元的参考编码单元形状信息和参考编码单元尺寸信息中的至少一个。上面已经关于图3的对当前编码单元300进行划分的操作描述了将正方形的参考编码单元1500划分为一个或更多个编码单元的操作,并且上面已经关于图4的对当前编码单元400或450进行划分的操作描述了将非正方形的参考编码单元1502划分为一个或更多个编码单元的操作。因此,这里将不提供其详细描述。

根据实施例,图像解码设备100可根据先前基于预定条件确定的一些数据单元,使用用于识别参考编码单元的尺寸和形状的pid来确定参考编码单元的尺寸和形状。也就是说,接收器110可从比特流仅获得用于识别针对每个条带、条带片段、并行块、并行块组或最大编码单元的参考编码单元的尺寸和形状的pid,其中,所述每个条带、条带片段或最大编码单元是各种数据单元(例如,序列、画面、条带、条带片段、并行块、并行块组、最大编码单元等)中的满足预定条件的数据单元(例如,尺寸等于或小于条带的数据单元)。图像解码设备100可通过使用pid确定针对满足预定条件的每个数据单元的参考数据单元的尺寸和形状。当根据具有相对小尺寸的每个数据单元从比特流获得并使用参考编码单元形状信息和参考编码单元尺寸信息时,使用比特流的效率可能不高,因此,仅pid可被获得并被使用,而不是直接获得参考编码单元形状信息和参考编码单元尺寸信息。在这种情况下,可预先确定与用于识别参考编码单元的尺寸和形状的pid相应的参考编码单元的尺寸和形状中的至少一个。也就是说,图像解码设备100可通过基于pid选择参考编码单元的尺寸和形状中的被预先确定的至少一个,来确定包括在用作用于获得pid的单元的数据单元中的参考编码单元的尺寸和形状中的至少一个。

根据实施例,图像解码设备100可使用包括在最大编码单元中的一个或更多个参考编码单元。也就是说,从画面划分出的最大编码单元可包括一个或更多个参考编码单元,并且可通过对每个参考编码单元进行递归划分来确定编码单元。根据实施例,最大编码单元的宽度和高度中的至少一个可以是参考编码单元的宽度和高度中的至少一个的整数倍。根据实施例,可通过基于四叉树结构将最大编码单元划分n次来获得参考编码单元的尺寸。也就是说,根据各种实施例,图像解码设备100可通过基于四叉树结构将最大编码单元划分n次来确定参考编码单元,并且可基于块形状信息和划分形状模式信息中的至少一个来对参考编码单元进行划分。

图16示出根据实施例的用作用于确定包括在画面中的参考编码单元的确定顺序的单位的处理块。

根据实施例,图像解码设备100可确定从画面划分出的一个或更多个处理块。处理块是从画面划分出的包括一个或更多个参考编码单元的数据单元,并且在处理块中包括的一个或更多个参考编码单元可根据特定顺序被确定。也就是说,在每个处理块中确定的一个或更多个参考编码单元的确定顺序可与各种类型的用于确定参考编码单元的顺序中的一种顺序相应,并且可根据处理块变化。针对每个处理块确定的参考编码单元的确定顺序可以是各种顺序(例如,光栅扫描顺序、z字形扫描、n字形扫描、右上对角扫描、水平扫描和垂直扫描)中的一个,但不限于以上提及的扫描顺序。

根据实施例,图像解码设备100可获得处理块尺寸信息并且可确定包括在画面中的一个或更多个处理块的尺寸。图像解码设备100可从比特流获得处理块尺寸信息并且可确定包括在画面中的一个或更多个处理块的尺寸。处理块的尺寸可以是由处理块尺寸信息指示的数据单元的预定尺寸。

根据实施例,图像解码设备100的接收器110可根据每个特定数据单元从比特流获得处理块尺寸信息。例如,可按照诸如图像、序列、画面、条带条带片段、并行块、或并行块组的数据单元从比特流获得处理块尺寸信息。也就是说,接收器110可根据各种数据单元中的每个数据单元从比特流获得处理块尺寸信息,并且图像解码设备100可通过使用获得的处理块尺寸信息确定从画面划分出的一个或更多个处理块的尺寸。处理块的尺寸可以是参考编码单元的尺寸的整数倍。

根据实施例,图像解码设备100可确定包括在画面1600中的处理块1602和1612的尺寸。例如,图像解码设备100可基于从比特流获得的处理块尺寸信息来确定处理块的尺寸。参照图16,根据实施例,图像解码设备100可将处理块1602和1612的宽度确定为参考编码单元的宽度的四倍,并且可将处理块1602和1612的高度确定为参考编码单元的高度的四倍。图像解码设备100可确定一个或更多个处理块中的一个或更多个参考编码单元的确定顺序。

根据实施例,图像解码设备100可基于处理块的尺寸确定包括在画面1600中的处理块1602和1612,并且可确定处理块1602和1612中的一个或更多个参考编码单元的确定顺序。根据实施例,确定参考编码单元的操作可包括确定参考编码单元的尺寸。

根据实施例,图像解码设备100可从比特流获得包括在一个或更多个处理块中的一个或更多个参考编码单元的确定顺序信息,并且可基于获得的确定顺序信息来确定针对一个或更多个参考编码单元的确定顺序。确定顺序信息可被定义为用于确定处理块中的参考编码单元的顺序或方向。也就是说,可针对每个处理块独立地确定参考编码单元的确定顺序。

根据实施例,图像解码设备100可根据每个特定数据单元从比特流获得参考编码单元的确定顺序信息。例如,接收器110可根据每个数据单元(诸如图像、序列、画面、条带、条带片段、并行块、并行块组或处理块)从比特流获得参考编码单元的确定顺序信息。因为参考编码单元的确定顺序信息指示用于确定处理块中的参考编码单元的顺序,所以可针对包括整数个处理块的每个特定数据单元获得确定顺序信息。

根据实施例,图像解码设备100可基于确定的确定顺序来确定一个或更多个参考编码单元。

根据实施例,接收器110可从比特流获得基准编码单元的确定顺序信息作为与处理块1602和1612相关的信息,并且图像解码设备100可确定包括在处理块1602和1612中的一个或更多个基准编码单元的确定顺序,并基于该确定顺序确定包括在画面1600中的一个或更多个基准编码单元。参照图16,图像解码设备100可分别确定处理块1602和1612中的一个或更多个基准编码单元的确定顺序1604和1614。例如,当针对每个处理块获得基准编码单元的确定顺序信息时,可针对处理块1602和1612获得基准编码单元的不同类型的确定顺序信息。当处理块1602中的参考编码单元的确定顺序1604是光栅扫描顺序时,可根据光栅扫描顺序确定处理块1602中包括的参考编码单元。相反,当另一处理块1612中的基准编码单元的确定顺序1614是后向光栅扫描顺序时,可根据后向光栅扫描顺序来确定处理块1612中所包括的基准编码单元。

根据实施例,图像解码设备100可对所确定的一个或更多个基准编码单元进行解码。图像解码设备100可基于如上所述确定的基准编码单元对图像进行解码。对基准编码单元进行解码的方法可包括各种图像解码方法。

根据实施例,图像解码设备100可从比特流获得指示当前编码单元的形状的块形状信息或指示当前编码单元的划分方法的划分形状模式信息,并且可使用所获得的信息。分割形状模式信息可被包括在与各种数据单元相关的比特流中。例如,图像解码设备100可使用包括在序列参数集、画面参数集、视频参数集、条带头、条带段头、图块头或图块组头中的划分形状模式信息。此外,图像解码设备100可根据每个最大编码单元、每个基准编码单元或每个处理块从比特流获得与块形状信息或划分形状模式信息相对应的语法元素,并且可使用所获得的语法元素。

在下文中,将详细描述根据本公开的实施例的确定划分规则的方法。

图像解码设备100可确定图像的划分规则。可在图像解码设备100与图像编码设备2200之间预先确定划分规则。图像解码设备100可基于从比特流获得的信息确定图像的划分规则。图像解码设备100可基于从序列参数集、画面参数集、视频参数集、条带头、条带片段头、并行块头、并行块组头中的至少一个获得的信息确定划分规则。图像解码设备100可根据帧、条带、并行块、时间层、最大编码单元或编码单元来不同地确定划分规则。

图像解码设备100可基于编码单元的块形状确定划分规则。块形状可包括编码单元的尺寸、形状、宽度与高度的比例以及方向。图像编码设备2200和图像解码设备100可预先确定基于编码单元的块形状来确定划分规则。然而,实施例不限于此。图像解码设备100可基于从图像编码设备2200接收的比特流获得的信息来确定划分规则。

编码单元的形状可包括正方形和非正方形。当编码单元的宽度长度与高度长度相同时,图像解码设备100可将编码单元的形状确定为正方形。此外,当编码单元的宽度长度与高度长度不相同时,图像解码设备100可将编码单元的形状确定为非正方形。

编码单元的尺寸可包括诸如4×4、8×4、4×8、8×8、16×4、16×8至256×256的各种尺寸。可基于编码单元的长边长度、短边长度或者面积来对编码单元的尺寸进行分类。图像解码设备100可将相同的划分规则应用于被分类为同一组的编码单元。例如,图像解码设备100可将长边为相同长度的编码单元分类为相同尺寸的编码单元。此外,图像解码设备100可将相同的划分规则应用于长边为相同长度的编码单元。

编码单元的宽度与高度的比例可包括1:2、2:1、1:4、4:1、1:8、8:1、1:16、16:1、32:1、1:32等。此外,编码单元的方向可包括水平方向和垂直方向。水平方向可指示编码单元的宽度长度长于编码单元的高度长度的情况。垂直方向可指示编码单元的宽度长度短于编码单元的高度长度的情况。

图像解码设备100可基于编码单元的尺寸来适应性地确定划分规则。图像解码设备100可基于编码单元的尺寸来不同地确定可允许的划分形状模式。例如,图像解码设备100可基于编码单元的尺寸来确定是否允许进行划分。图像解码设备100可根据编码单元的尺寸来确定划分方向。图像解码设备100可根据编码单元的尺寸来确定可允许的划分类型。

基于编码单元的尺寸确定的划分规则可以是在图像编码设备2200与图像解码设备100之间预先确定的划分规则。此外,图像解码设备100可基于从比特流获得的信息确定划分规则。

图像解码设备100可基于编码单元的位置来适应性地确定划分规则。图像解码设备100可基于编码单元在图像中的位置来适应性地确定划分规则。

此外,图像解码设备100可确定划分规则使得经由不同的划分路径而产生的编码单元不具有相同的块形状。然而,实施例不限于此,并且经由不同的划分路径而产生的编码单元具有不同的解码处理顺序。因为以上参照图12描述了解码处理顺序,因此将不再提供其细节。

在下文中,参照图17至20,现在将描述视频编码方法和设备或者视频解码方法和设备,其中,当当前块的合并候选列表被配置时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且基于合并候选列表对当前块执行预测。

图17是根据实施例的视频编码设备的框图。

根据实施例的视频编码设备1700可包括存储器1710和连接到存储器1710的至少一个处理器1720。根据实施例的视频编码设备1700的操作可由各个处理器来执行或者在中央处理器的控制下执行。此外,视频编码设备1700的存储器1710可存储从外部源接收的数据和由处理器生成的数据,例如,关于通过使用合并候选列表的第一候选和第二候选确定的附加合并候选的信息。

当当前块的合并候选列表被配置时,视频编码设备1700的处理器1720可确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,可通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,可将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且可基于合并候选列表对当前块执行预测。

在下文中,现在将参照图18描述由视频编码设备1700所执行的视频编码方法的具体操作,视频编码方法涉及:当当前块的合并候选列表被配置时,确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置所述合并候选列表,并且基于合并候选列表对当前块执行预测。

图18是示出根据实施例的视频编码方法的流程图。

参照图18,在操作s1810,当当前块的合并候选列表被配置时,视频编码设备1700可确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量。

在操作s1830,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,视频编码设备1700可通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选。

根据实施例,附加合并候选可以是第一合并候选和第二合并候选的平均值。在本说明书中,附加合并候选被确定为1对预定合并候选的平均值,并且因此可被表达为术语“成对平均候选”。

根据实施例,第一合并候选和第二合并候选可各自包括在空间上与当前块相邻的空间候选、在时间上与当前块相邻的时间候选以及包括在基于历史的运动矢量候选列表中的运动矢量候选中的至少一个,其中,基于历史的运动矢量候选列表包括在当前块之前以合并模式编码的块的多条运动信息。下面将参照图21至图23描述配置合并候选列表的方法。

根据实施例,与当前块在空间上相邻的空间候选可包括与当前块邻近的左侧相邻块、上方相邻块、左下方相邻块、右上方相邻块和左上方相邻块中的至少一个。

在操作s1850,视频编码设备1700可通过将所确定的附加合并候选添加到合并候选列表来配置合并候选列表。

根据实施例,在附加合并候选被添加到合并候选列表之后,当包括在合并候选列表中的合并候选的数量小于预定最大合并候选数量时,可将零运动矢量添加到合并候选列表。

在操作s1870,视频编码设备1700可基于合并候选列表对当前块执行预测。

根据实施例,视频编码设备1700可从合并候选列表的合并候选中确定针对当前块的最佳合并候选,并且可通过使用所确定的最佳合并候选对当前块执行预测。可通过计算针对当前块的率失真成本来确定最佳合并候选,并且可编码和用信号传送关于最佳合并候选的信息。

图19和图20示出根据实施例的视频解码设备的框图和根据实施例的视频解码方法的流程图,其分别对应于上述视频编码设备和视频编码方法。

图19示出根据实施例的视频解码设备的框图。

根据实施例的视频解码设备1900可包括存储器1910和连接到存储器1910的至少一个处理器1920。根据实施例的视频解码设备1900的操作可由各个处理器来执行或在中央处理器的控制下执行。此外,视频解码设备1900的存储器1910可存储从外部源接收的数据和由处理器生成的数据,例如,关于通过使用合并候选列表的第一候选和第二候选确定的附加合并候选的信息。

当当前块的合并候选列表被配置时,视频解码设备1900的处理器1920可确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,可通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,可将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,并且可基于合并候选列表对当前块执行预测。

在下文中,现在将参照图20描述由视频解码设备1900执行的视频解码方法的具体操作,视频解码方法涉及:当当前块的合并候选列表被配置时,确定包括在合并候选列表中的合并候选的数量是否大于1且小于预定的最大合并候选数量,当包括在合并候选列表中的合并候选的数量大于1且小于预定的最大合并候选数量时,通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选,将所确定的附加合并候选添加到合并候选列表以配置合并候选列表,以及基于合并候选列表对当前块执行预测。

图20示出根据实施例的视频解码方法的流程图。

参照图20,在操作s2010,当当前块的合并候选列表被配置时,视频解码设备1900可确定包括在合并候选列表中的合并候选的数量是否大于1并且小于预定的最大合并候选数量。

在操作s2030,当包括在合并候选列表中的合并候选的数量大于1并且小于预定的最大合并候选数量时,视频解码设备1900可通过使用当前块的合并候选列表的第一合并候选和第二合并候选来确定附加合并候选。

根据实施例,附加合并候选可以是第一合并候选和第二合并候选的平均值。

根据实施例,第一合并候选和第二合并候选可各自包括在空间上与当前块相邻的空间候选、在时间上与当前块相邻的时间候选以及包括在基于历史的运动矢量候选列表中的运动矢量候选中的至少一个,其中,基于历史的运动矢量候选列表包括在当前块之前以合并模式编码的块的多条运动信息。

根据实施例,与当前块在空间上相邻的空间候选可包括与当前块相邻的左侧相邻块、上方相邻块、左下方相邻块、右上方相邻块和左上方相邻块中的至少一个。

在操作s2050,视频解码设备1900可通过将所确定的附加合并候选添加到合并候选列表来配置合并候选列表。

根据实施例,在将附加合并候选添加到合并候选列表之后,当包括在合并候选列表中的合并候选的数量小于预定的最大合并候选数量时,可将零运动矢量添加到合并候选列表。

在操作s2070,视频解码设备1900可基于合并候选列表对当前块执行预测。

根据实施例,视频解码设备1900可通过使用从比特流获得的关于最佳合并候选的信息,从合并候选列表中确定当前块的最佳合并候选,并且可通过使用所确定的最佳合并候选对当前块执行预测。

图21是用于描述配置当前块的合并候选列表的过程的示图。

“合并模式”是指从当前块的相邻块推导参考方向、参考画面索引和运动矢量预测因子的技术,并且在合并模式中,通过使用运动矢量预测因子和运动矢量差来计算运动矢量值。

参照图21,为了配置当前块的合并候选列表,可首先扫描指示在空间上与当前块相邻的相邻块的运动信息的空间候选,并且可将扫描的空间候选添加到合并候选列表。对于空间候选,可顺序地扫描位于当前块周围的5个块的位置。下面将参照图22描述通过扫描5个块的位置来确定空间候选的方法。

当完成对空间候选的配置时,对在时间上与当前块相邻的时间候选的配置进行处理。为了确定时间候选,由于预测性能而首先扫描位于当前块的同位块(collocatedblock)的右下端的块,并且当位于右下端的块的运动信息不存在时,扫描位于同位块的中心的块。可将扫描的时间候选添加到合并候选列表。

当完成对时间候选的配置时,可扫描存储在基于历史的运动矢量候选列表中的基于历史的运动矢量候选。详细地讲,当存储在合并候选列表中的候选的数量小于通过从最大合并候选数量减去1而获得的值,并且存储在基于历史的运动矢量候选列表中的候选的数量大于0时,可搜索存储在基于历史的运动矢量候选列表中的基于历史的运动矢量候选。基于历史的运动矢量候选列表对应于作为基于历史的运动矢量候选存储的多条运动信息,其中,所述多条运动信息与在当前块之前以合并模式编码的块或在当前块之前被重建的块相关。下文将参照图23描述通过使用基于历史的运动矢量候选列表确定运动矢量候选的方法。

在通过使用基于历史的运动矢量候选列表完全配置了合并候选列表之后,可执行对附加合并候选的配置。详细地讲,当存储在当前块的合并候选列表中的候选的数量小于预定的最大合并候选数量并且大于1时,可通过使用存储在当前块的合并候选列表中的第一候选和第二候选来确定附加合并候选。附加合并候选可以是第一候选与第二候选的平均值。附加合并候选被确定为1对预定合并候选的平均值,并且因此可被表达为术语“成对平均候选”。

在执行对空间候选、时间候选和存储在基于历史的运动矢量候选列表中的候选的扫描之后,将在确定成对平均候选时所使用的第一候选和第二候选存储在合并候选列表中,并且因此,第一候选和第二候选中的每一个可以是空间候选、时间候选和存储在基于历史的运动矢量候选列表中的候选中的一个。

当所确定的成对平均候选不与存储在合并候选列表中的合并候选重叠时,可将所确定的成对平均候选添加到合并候选列表,当所确定的成对平均候选与存储在合并候选列表中的合并候选重叠时,可以不将所确定的成对平均候选添加到合并候选列表。

当包括当前块的条带的类型指示单向时,将成对平均候选确定为第一候选与第二候选的平均值。具体地讲,可将第一候选和第二候选的l0运动矢量的平均值确定为当前块的l0运动矢量,可将当前块的l1参考索引设置为不可用(-1),并且可将当前块的l1预测设置为不可用。

当包括当前块的条带的类型指示双向时,确定是否可从参考画面列表l0或参考画面列表l1推导第一候选和第二候选中的每一个的预测。

详细地讲,当可从参考画面列表l0预测第一候选和第二候选两者时,可将当前块的l0参考索引设置为第一候选的l0参考索引,可将当前块的l0预测设置为可用,并且可将第一候选的l0运动矢量和第二候选的l0运动矢量的平均值确定为当前块的l0运动矢量。也就是说,第一候选的l0运动矢量和第二候选的l0运动矢量的平均值可被确定为当前块的l0成对平均候选。

当可从参考画面列表l1预测第一候选和第二候选两者时,可将当前块的l1参考索引设置为第一候选的l1参考索引,可将当前块的l1预测设置为可用,并且可将第一候选的l1运动矢量和第二候选的l1运动矢量的平均值确定为当前块的l1运动矢量。也就是说,第一候选的l1运动矢量和第二候选的l1运动矢量的平均值可被确定为当前块的l1成对平均候选。

当可从参考画面列表l0预测第一候选并且无法从参考画面列表l0预测第二候选时,可将当前块的l0参考索引和l0运动矢量设置为第一候选的l0参考索引和l0运动矢量,并且可将当前块的l0预测设置为可用。也就是说,第一候选的l0运动矢量可被确定为当前块的l0成对平均候选。

当可从参考画面列表l0预测第二候选并且无法从参考画面列表l0预测第一候选时,可将当前块的l0参考索引和l0运动矢量设置为第二候选的l0参考索引和l0运动矢量,并且可将当前块的l0预测设置为可用。也就是说,第二候选的l0运动矢量可被确定为当前块的l0成对平均候选。

当可从参考画面列表l1预测第一候选并且无法从参考画面列表l1预测第二候选时,可将当前块的l1参考索引和l1运动矢量设置为第一候选的l1参考索引和l1运动矢量,并且可将当前块的l1预测设置为可用。也就是说,第一候选的l1运动矢量可被确定为当前块的l1成对平均候选。

当可从参考画面列表l1预测第二候选并且无法从参考画面列表l1预测第一候选时,可将当前块的l1参考索引和l1运动矢量设置为第二候选的l1参考索引和l1运动矢量,并且可将当前块的l1预测设置为可用。也就是说,第二候选的l1运动矢量可被确定为当前块的l1成对平均候选。

当无法从参考画面列表l0预测第一候选及第二候选两者时,可将当前块的l0参考索引设置为不可用(-1),可将当前块的l0预测设置为不可用,并且可将当前块的l0运动矢量设置为(0,0)。也就是说,可以不执行对当前块的l0方向预测。

当无法从参考画面列表l1预测第一候选和第二候选两者时,可将当前块的l1参考索引设置为不可用(-1),可将当前块的l1预测设置为不可用,并且可将当前块的l1运动矢量设置为(0,0)。也就是说,可以不执行对当前块的l1方向预测。

在完成对合并候选列表的成对平均候选配置之后,当包括在合并候选列表中的合并候选的数量小于预定的最大合并候选数量时,可将零运动矢量候选添加到合并候选列表。

当合并候选列表的合并候选的数量等于预定的最大合并候选数量时,不再执行配置合并候选列表的前述处理。

图22是用于描述当前块的合并候选列表的空间候选的示图。

参照图22,按照当前块2200的上方相邻块b1、当前块2200的左侧相邻块a1、当前块2200的右上方相邻块b0、当前块2200的左下方相邻块a0和当前块2200的左上方相邻块b2的顺序执行对当前块2200的空间候选的扫描处理。

根据所述顺序,扫描当前块2200的相邻块,确定相邻块的信息是否可用,当相邻块的信息可用时,将相邻块的信息作为合并候选存储在合并候选列表中,并且当相邻块的信息不可用时,不将相邻块的信息存储在合并候选列表中。当扫描结束时,确定下一顺序的相邻块的信息是否可用,当相邻块的信息可用时,将相邻块的信息作为合并候选存储在合并候选列表中,并且当相邻块的信息不可用时,不将相邻块的信息存储在合并候选列表中。当完成对当前块周围的5个位置处的相邻块的扫描时,执行在时间上与当前块相邻的时间候选的扫描。

图23是用于描述当前块的合并候选列表的基于历史的运动矢量候选列表的示图。

在基于历史的运动矢量预测(hmvp)中,将先前编码的块或先前重建的块的多条运动信息存储为hmvp候选。更详细地讲,提取存储hmvp候选的查找表(即,hmvp列表),并且基于hmvp列表的hmvp候选来编码或重建块。

参照图23,在存储在hmvp查找表中的n个hmvp候选中,最新存储的hmvp候选的索引为0,并且最早存储的hmvp候选的索引为n-1,并且根据查找表序列顺序,对从索引为n-1的hmvp到索引为0的hmvp进行扫描。

此外,当更新hmvp列表并且因此向其添加新的hmvp候选时,可移除存储在hmvp列表中的候选中的最早存储的hmvp0的运动信息。也就是说,根据先进先出(fifo)逻辑来更新hmvp列表。

根据实施例,多条最新存储的运动信息可以是与存储在一般合并列表中的多条运动信息相等的运动信息的重复。在此情况下,可修改hmvp查找表使用方案,使得可以不使用多条最新存储的运动信息,并且可仅使用直到第m最新存储的运动信息为止。

图24a是用于描述根据另一实施例的成对平均候选的示图,图24b是用于描述根据另一实施例的在成对平均候选配置处理时添加零运动矢量候选的方法的示图,并且图24c是用于描述根据另一实施例的在成对平均候选配置处理时添加一半大小的合并候选的方法的示图。

参照图24a,可添加预定组合的成对平均候选。详细地,存储在priority_list0和priority_list1中的0、1、2、3指示存储在合并候选列表中的合并候选的索引,0指示存储在合并候选列表中的第一候选,1指示存储在合并候选列表中的第二候选,2指示存储在合并候选列表中的第三候选,3指示存储在合并候选列表中的第四候选,指示分别包括索引对的正方形区域的1至6是指成对平均候选的组合的顺序。例如,根据成对平均候选的第一组合方案,当priority_list0中的第一候选0和priority_list1中的第二候选1可用时,可将作为两个候选的平均值的结果的成对平均候选添加到合并候选列表。此外,根据成对平均候选的第五组合方案,当在priority_list0中的第二候选1和在priority_list1中第四候选3可用时,可将作为两个候选的平均值的结果的成对平均候选添加到合并候选列表。如果可能,可继续针对6个候选的计算,并且可将其结果添加到合并候选列表。

在一般合并候选列表中,将具有最低优先级的零运动矢量候选添加到合并候选列表,但图24b示出在成对平均候选配置处理时添加零运动矢量的方法。参照图24b,可将零运动矢量插入到分别指示确定成对平均候选的对的正方形区域之间的间隙中,并且1至5指示可插入零运动矢量的5个位置。可将零运动矢量插入位置1至5中的至少一个位置中,并且还可将多个零运动矢量插入位置1至5中。与成对平均候选的情况相比,还可提高使用零运动矢量候选的情况下的效率。

根据另一实施例,可通过对合并候选和零运动矢量进行共同平均来确定新运动矢量候选。运动矢量候选的大小是现有候选的大小的一半。也可将与预添加到合并候选列表的候选相比具有一半大小的运动矢量添加到合并候选列表。例如,在成对平均合并候选配置处理开始之前,可将与三个候选相比具有一半大小的候选添加到合并候选列表,根据配置空间候选和时间候选的处理存储所述三个候选。此外,可通过对成对平均候选和零运动矢量进行共同平均来添加与成对平均候选相比具有一半大小的候选。

参照图24c,可在成对平均候选配置处理时添加一半大小的合并候选。在图24c中,在分别指示成对平均候选对的正方形区域的前部和后部中标记的1至7是指可插入一半大小的合并候选的位置。详细地讲,可将一半大小的合并候选插入到位置1至7中的至少一个位置中,并且当多个一半大小的合并候选可用时,可将一半大小的合并候选插入到多个位置中或者可将一半大小的合并候选分别插入到位置中。

根据另一实施例,在成对平均候选配置处理中,可通过减少为前三对而不是图24a的6对来通过使用三对来配置成对平均候选。此外,可通过使用前两对来配置成对平均候选。此外,可通过使用第一对来配置成对平均候选。此外,可通过使用另一对(例如,第二候选和第三候选,而不是第一对)来配置成对平均候选。

当前画面参考(cpr)或帧内块复制(ibc)是指将当前部分重建帧用作一个参考画面的技术。在这种情况下,当前画面的编码单元可具有指示其帧的运动矢量。因为与一般帧间预测相比,不同地实施将当前画面用作参考画面,所以当应用ibc时,即,当至少一个参考帧为当前帧时,不推荐使用成对平均候选。因此,当应用cpr或ibc时,成对平均候选不被用作合并候选。

已经参考本公开的实施例具体示出和描述了本公开。在这方面,本领域普通技术人员将理解的是,在不脱离本公开的范围的情况下,可在其中进行形式和细节上的各种改变。因此,实施例应仅在描述性意义上考虑,而不是出于限制的目的。本公开的范围不是由本公开的详细描述限定,而是由所附权利要求限定,并且范围内的所有差异将被解释为包括在本公开中。

另外,本公开的上述实施例可被编写为在计算机上可执行的程序,并且可在通过使用计算机可读记录介质执行程序的通用数字计算机中来实现。计算机可读记录介质的示例包括磁存储介质(例如,rom、软盘、硬盘等)、光记录介质(例如,cd-rom或dvd)等。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1