一种基于Conv2Former和对比学习的视频质量评价方法及装置

文档序号:37544126发布日期:2024-04-08 13:46阅读:来源:国知局

技术特征:

1.一种基于conv2former和对比学习的视频质量评价方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,所述视频质量评价模型包括特征提取部分和质量分数预测模块;所述特征提取部分包括空间特征提取模块和时序信息处理模块;

3.根据权利要求2所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,所述空间特征提取模块为conv2former主干网络;

4.根据权利要求2所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,所述时序信息处理模块为attention-lstm模型;

5.根据权利要求1所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,所述训练好的视频质量评价模型的获取方法包括:

6.根据权利要求5所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,获取用于模型预训练的视频集的方法包括:

7.根据权利要求5所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,将用于模型预训练的视频集输入到视频质量评价模型中,使用对比学习的方式来对视频质量评价模型的特征提取部分进行自监督预训进行自监督预训练,包括:

8.根据权利要求1所述的基于conv2former和对比学习的视频质量评价方法,其特征在于,所述方法还包括:

9.一种基于conv2former和对比学习的视频质量评价装置,其特征在于,所述装置包括:

10.一种基于conv2former和对比学习的视频质量评价装置,其特征在于,包括处理器及存储介质;


技术总结
本发明公开了一种基于Conv2Former和对比学习的视频质量评价方法及装置,该方法利用Conv2Former作为空间特征提取模块并结合特征金字塔技术,对视频帧进行空间特征提取。再利用Attention‑LSTM模型,处理视频的时序信息,以捕捉视频帧之间的时间关系。最后,通过一个MLP层将时序特征映射为最终的视频质量评分。为了解决数据不足问题,采用对比学习进行预训练,利用未标记的数据来学习更具有判别性的特征表示,从而提升模型性能和泛化能力。本发明提出的深度学习模型能够在保持较高的计算效率的同时提取空间特征,并实现视频质量评价的准确和自动化,特别是通过对比学习进行预训练,为解决视频质量评价中标记数据不足的问题提供了一种可靠的解决方案。

技术研发人员:王思拓,于莉
受保护的技术使用者:南京信息工程大学
技术研发日:
技术公布日:2024/4/7
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1