用于移动端的视频解码方法、系统、存储介质及电子设备与流程

文档序号:25731034发布日期:2021-07-02 21:19阅读:来源:国知局

技术特征:

1.一种用于移动端的视频解码方法,其特征在于,包括:

获取视频并进行hevc解码,得到多个编码块;

依据所述编码块的类型对所述编码块分别进行优化处理,得到优化后的编码块;其中,所述优化处理包括:超分处理、双立方拉伸处理,或复制参考帧的超分数据;

将所述优化后的编码块整合成多条帧数据,对所述帧数据进行环路滤波处理并播放。

2.根据权利要求1所述的用于移动端的视频解码方法,其特征在于,依据所述编码块的类型对所述编码块分别进行优化处理编码块的方法包括:

判断所述编码块的类型,所述类型包括帧间块、帧内块和skip块;

若所述编码块的类型为帧间块,则利用超分模型对所述编码块进行超分处理;

若所述编码块的类型为帧内块,则进一步判断所述编码块的量化参数qp;若量化参数qp不小于30则对所述编码块进行双立方拉伸处理,若量化参数qp小于30,则利用超分模型对所述编码块进行超分处理;

若所述编码块的类型为skip块,则复制参考帧的超分数据。

3.根据权利要求2所述的用于移动端的视频解码方法,其特征在于,依据所述编码块的类型对所述编码块分别进行优化处理时,对于有残差的编码块,需要对所述残差进行对应的超分比例放大。

4.根据权利要求2所述的用于移动端的视频解码方法,其特征在于,所述超分模型对所述编码块进行超分处理的方法包括:

s1、利用卷积运算获取所述编码块的特征数据,标记为原始特征数据;

s2、对所述特征数据按1:(m-1)进行通道拆分,将1/m通道的特征数据提取出来并标记为超分特征数据;

s3、判断所述超分特征数据的数量是否等于m-1;若不等于m-1,则执行步骤s4;若等于m-1,则执行步骤s5;

s4、将s2中剩余的(m-1)/m通道的特征数据利用卷积运算放大到原通道大小,并执行步骤s2;

s5、将s2最后一次运算剩余的(m-1)/m通道的特征数据利用卷积运算压缩到1/m通道大小,并标记为超分特征数据;

s6、将所有的超分特征数据进行数据融合,并利用卷积运算恢复到一个通道中,得到所述编码块超分处理后的特征数据。

5.根据权利要求4所述的用于移动端的视频解码方法,其特征在于,所述超分模型对所述编码块进行超分处理的方法还包括:

将所述编码块超分处理后的特征数据与所述原始特征数据进行残差相加,得到优化后的编码块。

6.根据权利要求4或5所述的用于移动端的视频解码方法,其特征在于,超分模型的训练方法包括:

处理样本数据,得到训练数据;

对所述训练数据进行下采样处理,并将所述下采样处理后的训练数据输入超分模型;

对超分模型输出的训练数据进行上采样处理;

将所述上采样处理后的训练数据输入原始训练数据中,并进行归一化处理。

7.根据权利要求6所述的用于移动端的视频解码方法,其特征在于,处理样本数据以得到训练数据的方法包括包括:

从样本图像中读取图像数据,并将所述图像数据分为多个通道,在任一通道中随机截取子图片数据作为所述样本数据;

将所述样本数据依次进行随机化处理和归一化处理,得到所述训练数据。

8.一种用于移动端的视频解码系统,其特征在于,包括解码模块,优化模块和整合模块,其中:

所述解码模块用于对视频进行hevc解码,得到多个编码块;

所述优化模块用于依据所述编码块的类型对所述编码块分别进行优化处理,得到优化后的帧数据,所述优化处理包括:超分处理、双立方拉伸处理,或复制参考帧的超分数据;

所述整合模块用于将所述优化后的编码块整合成多条帧数据,对所述帧数据进行环路滤波处理并播放。

9.一种计算机可读存储介质,其特征在于,具有存储在其上的计算机可读程序指令,所述计算机可读程序指令用于执行权利要求1至7中任一项所述的用于移动端的视频解码方法。

10.一种电子设备,其特征在于,所述电子设备包括:

至少一个处理器;以及,

与所述至少一个处理器通信连接的存储器;其中,

所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7中任一项所述的用于移动端的视频解码方法。


技术总结
本发明公开用于移动端的视频解码方法、系统、存储介质及电子设备,其中该方法包括:获取视频并进行HEVC解码,得到多个编码块;依据所述编码块的类型对所述编码块分别进行优化处理,得到优化后的帧数据;对所述优化后的帧数据进行环路滤波处理并播放。该系统实现上述用于移动端的视频解码的方法,从超分模型和解码两个方面减少视频的超分计算量,实现了在移动端实时超分视频,从而提升用户的观看体验。

技术研发人员:张澍勇;郭瑞强;邓在雄
受保护的技术使用者:北京四达时代软件技术股份有限公司
技术研发日:2021.03.02
技术公布日:2021.07.02
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1