局部双树的调色板模式的制作方法

本专利文档涉及图片和视频的编码和解码技术。

背景技术：

1、在互联网和其他数字通信网络中，数字视频占用了最大的带宽。随着能够接收和显示视频的连接用户设备数量的增加，预计数字视频使用的带宽需求将继续增长。

技术实现思路

1、本文档公开了能够由视频编码器和解码器用于使用调色板模式进行视频处理的技术，在调色板模式中，代表性样点值的调色板用于视频的表示。

2、根据本公开的一方面，提供了一种处理视频数据的方法，包括：对于视频的第一视频块与所述视频的比特流之间的转换，确定第一预测模式被应用于所述第一视频块；维护预测器调色板表；在所述第一预测模式中，基于所述预测器调色板表构建包括用于所述第一视频块的一个或多个调色板预测器的第一调色板；以及基于所述第一预测模式执行所述转换，其中，在所述第一预测模式中，所述第一视频块的重构样点由代表性颜色值集合表示，所述代表性颜色值集合包括以下中的至少一种1)从所述第一调色板推导的调色板预测器，2)逸出样点，或者3)所述比特流中包括的调色板信息，其中，所述第一调色板中的最大条目数基于所述第一视频块的树类型。

3、根据本公开的另一方面，提供了一种用于处理视频数据的设备，包括处理器和其上具有指令的非瞬态存储器，其中所述指令在由所述处理器执行时使所述处理器：对于视频的第一视频块与所述视频的比特流之间的转换，确定第一预测模式被应用于所述第一视频块；维护预测器调色板表；在所述第一预测模式中，基于所述预测器调色板表构建包括用于所述第一视频块的一个或多个调色板预测器的第一调色板；以及基于所述第一预测模式执行所述转换，其中，在所述第一预测模式中，所述第一视频块的重构样点由代表性颜色值集合表示，所述代表性颜色值集合包括以下中的至少一种1)从所述第一调色板推导的调色板预测器，2)逸出样点，或者3)所述比特流中包括的调色板信息，其中，所述第一调色板中的最大条目数基于所述第一视频块的树类型。

4、根据本公开的另一方面，提供了一种非暂时性计算机可读存储介质，其中存储有指令，所述指令使得处理器：对于视频的第一视频块与所述视频的比特流之间的转换，确定第一预测模式被应用于所述第一视频块；维护预测器调色板表；在所述第一预测模式中，基于所述预测器调色板表构建包括用于所述第一视频块的一个或多个调色板预测器的第一调色板；以及基于所述第一预测模式执行所述转换，其中，在所述第一预测模式中，所述第一视频块的重构样点由代表性颜色值集合表示，所述代表性颜色值集合包括以下中的至少一种1)从所述第一调色板推导的调色板预测器，2)逸出样点，或者3)所述比特流中包括的调色板信息，其中，所述第一调色板中的最大条目数基于所述第一视频块的树类型。

5、根据本公开的另一方面，提供了一种存储由视频处理设备执行的方法生成的视频比特流的非暂时性计算机可读记录介质，其中所述方法包括：对于视频的第一视频块，确定第一预测模式被应用于所述第一视频块；维护预测器调色板表；在所述第一预测模式中，基于所述预测器调色板表构建包括用于所述第一视频块的一个或多个调色板预测器的第一调色板；以及基于所述第一预测模式生成所述视频的比特流，其中，在所述第一预测模式中，所述第一视频块的重构样点由代表性颜色值集合表示，所述代表性颜色值集合包括以下中的至少一种1)从所述第一调色板推导的调色板预测器，2)逸出样点，或者3)所述比特流中包括的调色板信息，其中，所述第一调色板中的最大条目数基于所述第一视频块的树类型。

6、根据本公开的另一方面，提供了一种存储视频的比特流的方法，包括：对于视频的第一视频块，确定第一预测模式被应用于所述第一视频块；维护预测器调色板表；在所述第一预测模式中，基于所述预测器调色板表构建包括用于所述第一视频块的一个或多个调色板预测器的第一调色板；基于所述第一预测模式生成所述视频的比特流；以及将所述比特流存储在非暂时性计算机可读记录介质中，其中，在所述第一预测模式中，所述第一视频块的重构样点由代表性颜色值集合表示，所述代表性颜色值集合包括以下中的至少一种1)从所述第一调色板推导的调色板预测器，2)逸出样点，或者3)所述比特流中包括的调色板信息，其中，所述第一调色板中的最大条目数基于所述第一视频块的树类型。

7、在一个示例方面，公开了一种视频处理方法。该方法包括使用调色板模式执行视频的视频块和该视频的比特流之间的转换，在调色板模式中，使用代表性颜色值的调色板来表示该视频块的样点。基于局部双树是否被应用于视频块确定该视频块的调色板的尺寸。

8、在另一示例方面，公开了一种视频处理方法。该方法包括使用调色板模式在视频的视频块和该视频的比特流之间执行转换，在调色板模式中，使用代表性颜色值的调色板来表示该视频块的样点。该视频块的调色板预测器的尺寸基于局部双树是否被应用于该视频块。

9、在另一示例方面，公开了一种视频处理方法。该方法包括使用调色板模式执行视频的视频块和该视频的比特流之间的转换，在调色板模式中，使用代表性颜色值的调色板来表示该视频块的样点。比特流符合规则，该各种指定使用至少受最大允许值或最小允许值约束的量化参数在比特流中编解码逸出样点的值。

10、在另一示例方面，公开了一种视频处理方法。该方法包括根据格式规则执行视频的块和该视频的比特流之间的转换，该格式规则指定在比特流的自适应参数集中是否存在与色度编码工具相关联的参数是基于自适应参数集中的控制标志。

11、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的块和该视频的比特流之间的转换。该比特流符合格式规则，该格式规则指定在视频是单色的或者视频的颜色分量被单独处理的情况下，在比特流的图片标头中省略与量化参数相关联的语法元素。

12、在另一示例方面，公开了一种视频处理方法。该方法包括根据规则执行视频的视频块和该视频的比特流之间的转换，该规则指定，对于该转换，使用代表性颜色值的调色板来表示该视频块的样点的调色板模式和在残差域中执行颜色空间转换的自适应颜色变换模式被互斥地启用。

13、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的比特流之间的转换。其中在残差域中执行颜色空间转换的自适应颜色变换模式被应用于该视频块的残差块，而不管残差块的颜色空间。

14、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的比特流之间的转换。使用变换跳过残差编解码工具对该视频块进行编解码，其中使用上下文编解码过程或旁路编解码过程对视频块的变换跳过编解码的残差系数进行编解码。在转该换期间，在旁路编解码过程的开始或结束时，将操作应用于指定视频块中允许的剩余上下文编码的二进制数的数量的变量。

15、在另一示例方面，公开了一种视频处理方法。该方法包括使用变换跳过残差编解码过程来执行视频的视频块和该视频的比特流之间的转换。在该转换期间，将操作应用于指示语法元素是否属于特定扫描阶段的变量。

16、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的比特流之间的转换。在该转换期间，指示系数级的符号的语法元素是使用旁路编解码过程还是上下文编解码过程进行编解码基于扫描阶段的索引，在该扫描阶段中，视频块的区域中的一个或多个系数的相同语法元素按次序被编解码。

17、在另一示例方面，公开了一种视频处理方法。该方法包括使用变换跳过残差编解码过程来执行视频的视频块和该视频的比特流之间的转换。在该转换期间，指示系数级的符号的语法元素是使用旁路编解码过程还是上下文编解码过程进行编解码基于语法元素是否在与另一语法元素相同的扫描阶段中被信令通知。

18、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的编解码表示之间的转换，其中，调色板模式被用于该视频块的编解码表示，其中，使用代表性颜色值的调色板来表示该视频块的样点；并且其中，使用逸出符和使用量化参数量化的值对调色板之外的样点进行编解码，该量化参数在由规则确定的最小允许值和最大允许值之间的范围内。

19、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的编解码表示之间的转换，其中，调色板模式被用于该视频块的编解码表示，其中，使用代表性颜色值的调色板来表示该视频块的样点；并且其中，调色板的尺寸取决于关于局部双树是否用于视频块和编解码表示之间的转换的规则。

20、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频块和该视频的编解码表示之间的转换，其中，调色板模式被用于该视频块的编解码表示，其中，使用代表性颜色值的调色板来表示该视频块的样点；并且其中，调色板预测器的尺寸取决于关于局部双树是否用于视频块和编解码表示之间的转换的规则。

21、在另一示例方面，公开了一种视频处理方法。该方法包括，对于视频的视频区域的视频块和该视频的编解码表示之间的转换，基于编解码条件确定标识视频的色度分量的去方块偏移的语法元素是否被包括在视频区域级的编解码表示中；并且基于该确定来执行转换；其中，去方块偏移被用于选择性地启用对该视频块的去方块操作。

22、在另一示例方面，公开了一种视频处理方法。该方法包括，对于视频的视频区域的视频块和该视频的编解码表示之间的转换，基于编解码条件确定标识色度编解码工具的使用的语法元素是否被包括在视频区域级的编解码表示中；并且基于该确定来执行转换；其中，去方块偏移被用于选择性地启用对该视频块的去方块操作。

23、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频区域的视频块和该视频的编解码表示之间的转换，其中，编解码表示符合格式；其中，该格式指定指示视频的色度分量的去方块偏移的第一标志是否被包括在编解码表示中是基于指示色度分量的量化参数偏移的第二标志是否被包括在编解码表示中。

24、在另一示例方面，公开了一种视频处理方法。该方法包括执行视频的视频区域的视频块和该视频的编解码表示之间的转换，其中，编解码表示符合格式规则；其中，该格式规则指定该编解码表示中的语法元素控制指示一个或多个色度编解码工具的适用性的一个或多个参数是否被包括在视频区域或视频块级的编解码表示中。

25、在又一示例方面，公开了一种视频编码器装置。该视频编码器包括被配置为实现上述方法的处理器。

26、在又一示例方面，公开了一种视频解码器装置。该视频解码器包括被配置为实现上述方法的处理器。

27、在又一示例方面，公开了一种其上存储有代码的计算机可读介质。该代码以处理器可执行代码的形式实现本文描述的方法之一。

28、这些以及其他特征将在本文档中描述。