发送信号通知神经网络环路后滤波器信息的方法和设备与流程

本公开涉及视频编码，并且更具体地涉及用于发送信号通知编码视频的神经网络后置滤波器参数信息的系统和方法。

背景技术：

1、数字视频功能可以结合到各种设备中，包括数字电视、笔记本电脑或台式电脑、平板电脑、数字录音设备、数字媒体播放器、视频游戏设备、蜂窝电话(包括所谓的智能电话)、医学成像设备等。可以根据视频编码标准对数字视频进行编码。视频编码标准定义了封装编码视频数据的兼容比特流的格式。合规比特流是可以由视频解码设备接收和解码以生成重构视频数据的数据结构。视频编码标准可以结合视频压缩技术。视频编码标准的示例包括iso/iec mpeg-4visual和itu-t h.264(也被称为iso/iec mpeg-4avc)和高效视频编码(hevc)。hevc在2016年12月的itu-t h.265建议书的高效视频编码(hevc)中有所描述，该文献以引用方式并入本文，并且在本文中被称为itu-t h.265。正在考虑对itu-t h.265进行扩展和改进以开发下一代视频编码标准。例如，itu-t视频编码专家组(vceg)和iso/iec活动图像专家组(mpeg)(被统称为联合视频研究组(jvet))具有标准化压缩能力显著超过当前hevc标准的视频编码技术。以引用方式并入本文的联合探索模型7(jem 7)、联合探索测试模型7(jem 7)的算法描述、iso/iec jtc1/sc29/wg11文档：jvet-g1001(2017年7月，意大利，都灵)描述了由jvet在联合测试模型研究下的编码特征，该技术是超越itu-t h.265功能的潜在增强视频编码技术。应当指出的是，jem 7的编码特征在jem参考软件中实现。如本文所用，术语jem可以集体指在jem 7中的算法以及jem参考软件的具体实施。此外，响应于由vceg和mpeg联合发布的“joint call for proposals on video compression withcapabilities beyond hevc”，在2018年4月16日至20日于加利福尼亚州圣地亚哥(sandiego,ca)举行的iso/iec jtc1/sc29/wg11第10次会议上，各个小组提出了对视频编码工具的多种描述。根据对视频编码工具的多种描述，视频编码规范的最终初始草案文本在2018年4月16日至20日于加利福尼亚州圣地亚哥举行的iso/iec jtc1/sc29/wg11第10次会议中的“versatile video coding(draft 1)”即文档jvet-j1001-v2中有所描述，该文档以引用方式并入本文并且被称为jvet-j1001。vceg和mpeg的视频编码标准的开发被称为通用视频编码(vvc)项目。2020年10月7日至16日举行的iso/iec jtc1/sc29/wg11第20次会议中的“versatile video coding(draft 10)”(电话会议，文档jvet-t2001-v2，其以引用方式并入本文，并且称为jvet-t2001)表示对应于vvc项目的视频编码规范的草稿文本的当前迭代。

2、视频压缩技术能够减少存储和传输视频数据的数据需求。视频压缩技术可以通过利用视频序列中固有的冗余来减少数据需求。视频压缩技术可将视频序列再分成连续较小的部分(即，视频序列内的一组图片、一组图片内的图片、图片内的区域、区域内的子区域等)。可以使用帧内预测编码技术(例如，图片内的空间预测技术)和帧间预测技术(即图片间的技术(时间))来生成待编码的单位视频数据与视频数据的参考单元之间的差值。该差值可以被称为残差数据。残差数据可以被编码为量化变换系数。语法元素可以涉及残差数据和参考编码单元(例如，帧内预测模式索引和运动信息)。可以对残差数据和语法元素进行熵编码。熵编码的残差数据和语法元素可以包括在形成兼容比特流的数据结构中。

技术实现思路

1、一般来讲，本公开描述了用于对视频数据进行编码的各种技术。具体地，本公开描述了用于发送信号通知编码视频数据的神经网络后置滤波器参数信息的技术。应当指出的是，尽管本公开的技术是相对于itu-t h.264、itu-t h.265、jem和jvet-t2001描述的，但本公开的技术可普遍应用于视频编码。例如，除了包括在itu-t h.265、jem和jvet-t2001中的那些技术，本文所述的编码技术可并入视频编码系统(包括基于未来视频编码标准的视频编码系统)，包括视频块结构、帧内预测技术、帧间预测技术、变换技术、滤波技术和/或其他熵编码技术。因此，对itu-t h.264、itu-t h.265、jem和/或jvet-t2001的参考是出于描述性目的，并且不应被解释为限制本文所述技术的范围。此外，应当指出的是，将文献以引用方式并入本文是出于描述性目的，并且不应被解释为限制或产生关于本文所用术语的歧义。例如，在某个并入的参考文献中提供的对某个术语的定义不同于另一个并入的参考文献和/或如本文所用的该术语的情况下，则该术语应以广泛地包括每个相应定义的方式和/或以包括替代方案中每个特定定义的方式来解释。

2、在一个示例中，一种编码视频数据的方法包括发送信号通知神经网络后置滤波器特性消息以及发送信号通知语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

3、在一个示例中，一种设备包括一个或多个处理器，该一个或多个处理器被配置为发送信号通知神经网络后置滤波器特性消息以及发送信号通知语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

4、在一个示例中，一种非暂态计算机可读存储介质包括存储于其上的指令，这些指令在被执行时使得设备的一个或多个处理器发送信号通知神经网络后置滤波器特性消息以及发送信号通知语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

5、在一个示例中，一种设备包括：用于发送信号通知神经网络后置滤波器特性消息的装置；和用于发送信号通知语法元素的装置，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

6、在一个示例中，一种解码视频数据的方法包括：接收神经网络后置滤波器特性消息；解析语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

7、在一个示例中，一种设备包括一个或多个处理器，该一个或多个处理器被配置为接收神经网络后置滤波器特性消息、解析语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

8、在一个示例中，一种非暂态计算机可读存储媒体包含存储于其上的指令，这些指令在执行时使得设备的一个或多个处理器：接收神经网络后置滤波器特性消息；解析语法元素，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

9、在一个示例中，一种设备包括：用于接收神经网络后置滤波器特性消息的装置；和用于解析语法元素的装置，该语法元素指定由后处理滤波器在用作该后处理滤波器的输入的连续图片之间生成的内插图片的数量。

10、在以下附图和描述中阐述了一个或多个示例的细节。根据描述和附图以及权利要求书，其他特征、对象和优点将显而易见。