使 用参考的残差预测当前残差时，用于当前区块的预测因子（predictor)是从参考区块、背 景参考区块W及北京当前区块中确定的。
[0022] 背景图像可从解码的图像中选择或者从一组解码的图像中产生。用于背景的残差 预测的本发明可使用任何的已知技术来产生背景图像。
[0023] 根据本发明的一个实施例的自适应背景残差预测的流程显示在下列伪代码中：
[0024] 对于矩阵中的每个像素
[00巧]
【主权项】
1. 一种视频编码或解码方法，使用自适应背景残差预测，该方法包括： 在当前图像中接收相应于当前编码区块的输入数据； 将该当前编码区块分割为一或多个编码子区块； 根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块W用于该当前 编码区块的当前子区块； 定位背景图像中的背景参考子区块W用于该参考子区块，其中，该背景参考子区块是 该参考子区块在该背景图像中的第一个共位位置区块；W及 根据选择决定而选择第一预测因子或第二预测因子W编码或解码该当前子区块，其 中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块和该背景 图像推导的。
2. 如权利要求1所述的方法，其特征在于，该背景图像是根据一或多个解码的图像产 生的。
3. 如权利要求1所述的方法，其特征在于，该选择决定是根据该参考子区块和该背景 参考子区块推导的。
4. 如权利要求3所述的方法，其特征在于，推导该参考子区块与该背景参考子区块之 间的绝对差值的和值或平均方差，如果该绝对差值的和值或该平均方差大于阔值，选择该 第一预测因子；且如果该绝对差值的和值或该平均方差小于该阔值，选择该第二预测因子。
5. 如权利要求3所述的方法，其特征在于，推导该参考子区块与该背景参考子区块之 间的多个绝对差值，如果超过阔值的该多个绝对差值的数目大于选择的数目，则选择该第 一预测因子，否则，选择该第二预测因子，W及，其中该选择的数目对应于于非负整数。
6. 如权利要求1所述的方法，其特征在于，W标志指示该选择决定。
7. 如权利要求1所述的方法，其特征在于，该方法更包括，在编码器端包括语法元素或 在解码器端解析语法元素，其中，该语法元素指示是否致能该自适应背景残差预测。
8. 如权利要求7所述的方法，其特征在于，在视频比特流的图像级别或片头级别包括 该语法元素W控制分别用于图像或片的该自适应背景残差预测的选择。
9. 如权利要求7所述的方法，其特征在于，在用于该当前编码区块的编码数据中包括 该语法元素W控制用于该当前编码区块的该自适应背景残差预测的选择。
10. 如权利要求9所述的方法，其特征在于，如果该当前编码区块使用合并模式或跳过 模式进行编码，对于该当前编码区块跳过该在该编码器端包括该语法元素和在该解码器端 解析该语法元素。
11. 如权利要求9所述的方法，其特征在于，如果该当前编码区块使用小于该当前编码 区块的多个预测单元进行预测，对于该当前编码区块跳过该在该编码器端包括该语法元素 和在该解码器端解析该语法元素。
12. 如权利要求9所述的方法，其特征在于，如果该当前编码区块的宽度或高度等于或 小于选择的尺寸，对于该当前编码区块跳过该在该编码器端包括该语法元素和在该解码器 端解析该语法元素，其中，该选择的尺寸定义于正整数。
13. 如权利要求12所述的的方法，其特征在于，该选择的尺寸为8或16。
14. 如权利要求1述的方法，其特征在于，该当前子区块的宽度为从1至图像宽度，且该 当前子区块的高度为从1至图像高度。
15. 如权利要求1所述的方法，其特征在于，该第二预测因子对应于该参考子区块、该 背景参考子区块及该背景图像中的背景当前子区块的线性组合，其中，该背景当前子区块 是该当前子区块在该背景图像中的第二个共位位置区块。
16. 如权利要求15所述的方法，其特征在于，将该第二预测因子设置为参考残差和该 背景当前子区块的和值，且其中，该参考残差是从该参考子区块中减去该背景参考子区块 推导的。
17. 如权利要求1所述的方法，其特征在于，在图像域或背景残差域中推导相应于该当 前编码区块的该运动矢量，其中，使用该当前图像和该参考图像W推导用于该图像域的该 运动矢量，且使用当前背景残差数据和参考背景残差数据W推导用于该背景残差域的该运 动矢量，该当前背景残差数据是该当前图像与该背景图像之间的第一个差值数据，且该参 考背景残差数据是该参考图像与该背景图像之间的第二个差值数据。
18. -种视频编码或解码装置，该装置使用自适应背景残差预测，且该装置包括： 在当前图像中接收相应于当前编码区块的输入数据的电路； 将该当前编码区块分割为一或多个编码子区块的电路； 根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块W用于该当前 编码区块的当前子区块的电路； 定位背景图像中的背景参考子区块W用于该参考子区块的电路，其中，该背景参考子 区块是该参考子区块在该背景图像中的第一个共位位置区块；W及 根据选择决定而选择第一预测因子或第二预测因子W编码或解码该当前子区块的区 块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块和该 背景图像推导的。
19. 一种视频编码或解码方法，使用自适应背景残差预测，该方法包括： 在当前图像中接收相应于当前编码区块的输入数据； 将该当前编码区块分割为一或多个编码子区块； 根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块W用于该当前 编码区块的当前子区块； 定位背景图像中的背景参考子区块W用于该参考子区块，其中，该背景参考子区块是 该参考子区块在该背景图像中的第一个共位位置区块； 定位该背景图像中的背景当前子区块，其中，该背景当前子区块是该当前子区块在该 背景图像中的第二个共位位置区块； 根据该参考子区块、该背景参考子区块W及该背景当前子区块计算用于该当前子区块 的预测因子；W及 使用该预测因子编码或解码该当前子区块。
20. 如权利要求19所述的方法，其特征在于，在编码器端包括语法元素或在解码器端 解析语法元素，其中，该语法元素指示是否致能该自适应背景残差预测。
21. 如权利要求19所述的方法，其特征在于，将该预测因子设置为参考残差和该背景 当前子区块的和值，且其中，该参考残差是从该参考子区块中减去该背景参考子区块推导 的。
22. 如权利要求19所述的方法，其特征在于，在图像域或背景残差域中推导相应于该 当前编码区块的该运动矢量，其中，使用该当前图像和该参考图像w推导用于该图像域的 该运动矢量，且使用当前背景残差数据和参考背景残差数据W推导用于该背景残差域的该 运动矢量，该当前背景残差数据是该当前图像与该背景图像之间的第一个差值数据，且该 参考背景残差数据是该参考图像与该背景图像之间的第二个差值数据。
【专利摘要】本发明提供一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：在当前图像中接收相应于当前编码区块的输入数据；将该当前编码区块分割为一或多个编码子区块；根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；定位背景图像中的背景参考子区块以用于该参考子区块，以及根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块和该背景图像推导的。本发明提供的视频编码或解码方法可有效地适用于图像中包括混合前景和背景的区块的情形，提高编解码效率。
【IPC分类】H04N19-56, H04N19-57, H04N19-59
【公开号】CN104717511
【申请号】CN201410652880
【发明人】张贤国, 张凯, 安基程
【申请人】联发科技（新加坡）私人有限公司
【公开日】2015年6月17日
【申请日】2014年11月17日