图像增强方法、装置、计算机设备及计算机可读存储介质与流程

本申请涉及图像处理，特别是涉及一种图像增强方法、装置、计算机设备及计算机可读存储介质。

背景技术：

1、随着图像处理技术的发展，出现了新视角合成技术，通过对已有图像的分析和处理，获得额外的视角信息，从而合成一个全景或者新的视角。新视角合成技术的应用非常广泛，比如，在虚拟现实和增强现实中，用于提供更加真实的观感和交互体验。

2、传统的新视角合成技术中，在处理图像细节和纹理时，容易产生退化现象，如图像模糊、锯齿和失真等，导致新视角合成的图像质量不高。

技术实现思路

1、基于此，有必要针对上述技术问题，提供一种提高图像质量的图像增强方法、装置、计算机设备、计算机可读存储介质以及计算机程序产品，能够实现。

2、第一方面，本申请提供了一种图像增强方法，包括：

3、获取新视角图像；新视角图像是根据初始视角图像进行新视角合成得到的新视角下的图像；

4、根据新视角图像和初始视角图像之间的差异确定第一光流信号；

5、基于第一光流信号，将新视角图像的新视角特征和初始视角图像的初始视角特征进行融合，得到目标融合特征；

6、根据目标融合特征进行图像重建，得到新视角下的目标图像。

7、第二方面，本申请提供了一种图像增强装置，包括：

8、获取模块，用于获取新视角图像；新视角图像是根据初始视角图像进行新视角合成得到的新视角下的图像；

9、确定模块，用于根据新视角图像和初始视角图像之间的差异确定第一光流信号；

10、融合模块，用于基于第一光流信号，将新视角图像的新视角特征和初始视角图像的初始视角特征进行融合，得到目标融合特征；

11、重建模块，用于根据目标融合特征进行图像重建，得到新视角下的目标图像。

12、第三方面，本申请提供了一种计算机设备，计算机设备包括存储器和处理器，存储器存储有计算机程序，处理器执行该计算机程序时实现上述的方法中的步骤。

13、第四方面，本申请提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的方法中的步骤。

14、第五方面，本申请提供了一种计算机程序产品，计算机程序产品包括计算机程序，该计算机程序被处理器执行时实现本上述的方法中的步骤。

15、上述图像增强方法、装置、计算机设备、计算机可读存储介质及计算机程序产品，获取新视角图像；新视角图像是根据初始视角图像进行新视角合成得到的新视角下的图像；根据新视角图像和初始视角图像之间的差异确定第一光流信号，第一光流信号反映了由初始视角图像到新视角图像的像素运动情况，第一光流信号能够在新视角特征和初始视角特征的融合过程中提供准确的监督方向；进而基于第一光流信号，将新视角图像的新视角特征和初始视角图像的初始视角特征进行融合，得到目标融合特征；根据目标融合特征进行图像重建，能够得到相较于新视角图像质量更高的新视角下的目标图像，提高了图像质量。

技术特征：

1.一种图像增强方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述根据所述目标融合特征进行图像重建，得到所述新视角下的目标图像，包括：

4.根据权利要求2所述的方法，其特征在于，所述基于所述第一光流信号对所述当前层级的目标融合特征和上一层级的初始视角特征进行融合，得到上一层级的目标融合特征，包括：

5.根据权利要求1所述的方法，其特征在于，所述根据所述新视角图像和所述初始视角图像之间的差异确定第一光流信号，包括：

6.根据权利要求1至5任一项所述的方法，其特征在于，所述目标图像是将所述新视角图像和所述初始视角图像作为多视角图像聚合器的输入得到的输出；所述多视角图像聚合器的训练步骤包括：

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

8.根据权利要求7所述的方法，其特征在于，所述对目标视角帧进行初阶退化，得到初阶退化图像包括以下至少一种处理：

9.根据权利要求7所述的方法，其特征在于，所述目标退化图像是将初阶退化图像作为深度退化模拟器的输入得到的输出；

10.一种图像增强装置，其特征在于，包括：

11.一种计算机设备，所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至9中任一项所述的方法的步骤。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至9中任一项所述的方法的步骤。

技术总结
本申请涉及一种图像增强方法、装置、计算机设备及计算机可读存储介质。方法包括：获取新视角图像；新视角图像是根据初始视角图像进行新视角合成得到的新视角下的图像；根据新视角图像和初始视角图像之间的差异确定第一光流信号；基于第一光流信号，将新视角图像的新视角特征和初始视角图像的初始视角特征进行融合，得到目标融合特征；根据目标融合特征进行图像重建，得到新视角下的目标图像。采用本申请，能够提高图像质量。

技术研发人员：周昆,李文博,蒋念娟,吕江波,沈小勇
受保护的技术使用者：深圳思谋信息科技有限公司
技术研发日：
技术公布日：2024/1/15