全景图像处理方法、装置、设备、介质和产品与流程

本申请涉及机器学习，特别是涉及一种全景图像处理方法、装置、设备、介质和产品。

背景技术：

1、随着科技的飞速发展，拍摄设备的移动性越来越强，用户使用拍摄设备随时随地进行全景图像拍摄也越来越常见。

2、为实现更好的拍摄效果，相关技术中，经常需要在拍摄得到的全景图像/视频中，对局部区域的图像内容进行处理，生成新的全景图像。

3、因此，如何进行局部区域的全景图像内容处理成为亟待解决的技术问题。

技术实现思路

1、基于此，有必要针对上述技术问题，提供一种能够对局部区域的图像内容进行处理的全景图像处理方法、装置、设备、介质和产品。

2、第一方面，本申请提供了一种全景图像处理方法，该方法包括：

3、响应于目标全景图像的内容处理指令，标记目标全景图像的显著性区域；

4、获取内容重生元素；

5、基于内容重生元素，对显著性区域进行内容重生成，得到目标全景图像内容处理后的图像。

6、在其中一个实施例中，该方法还包括：

7、确认显著性区域的中心位置；

8、将显著性区域的中心位置确定为视角中心，展示目标全景图像。

9、在其中一个实施例中，该方法还包括：

10、对目标全景图像进行平面化处理，获取平面图像；

11、确认显著性区域的中心位置；

12、将显著性区域的中心位置确定为视角中心，展示平面图像。

13、在其中一个实施例中，标记目标全景图像的显著性区域，包括：

14、获取目标全景图像中各显著性区域的类别、置信度以及面积值；

15、将各显著性区域的类别、置信度以及面积值，展示在对应的显著性区域。

16、在其中一个实施例中，在将各显著性区域的类别、置信度以及面积值，展示在对应的显著性区域之前，该方法还包括：

17、根据各显著性区域的类别、置信度以及面积值，得到各显著性区域的显著性量化值；

18、将目标全景图像中显著性量化值不满足预设显著性量化阈值的显著性区域进行剔除。

19、在其中一个实施例中，标记目标全景图像的显著性区域，包括：

20、获取各显著性区域的权重参数；

21、基于权重参数，展示符合预设权重范围内的显著性区域。

22、在其中一个实施例中，获取内容重生元素，包括：

23、对于任一显著性区域，展示显著性区域的关联提示词；

24、响应于提示词确认指令，从关联提示词中确定内容重生元素。

25、在其中一个实施例中，展示显著性区域的关联提示词，包括：

26、获取显著性区域的类别；

27、根据显著性区域的类别，生成显著性区域的关联提示词；

28、将显著性区域的关联提示词进行展示。

29、在其中一个实施例中，获取内容重生元素，包括：

30、对于任一显著性区域，展示显著性区域的关联提示图像；

31、响应于提示图像确认指令，从关联提示图像中确定内容重生元素。

32、在其中一个实施例中，基于内容重生元素，对显著性区域进行内容重生成，得到目标全景图像内容处理后的图像，包括：

33、对于任一显著性区域，根据内容重生元素，生成显著性替换区域；

34、将显著性区域替换为显著性替换区域，得到显著性修复图像；

35、根据显著性修复图像，获取目标全景图像内容处理后的图像。

36、在其中一个实施例中，在将显著性区域替换为显著性替换区域之前，方法还包括：

37、检测是否存在显著性替换区域的预览指令；

38、若存在，则根据预览指令，将显著性区域和显著性替换区域进行展示。

39、在其中一个实施例中，根据显著性修复图像，获取目标全景图像内容处理后的图像，包括：

40、获取显著性修复图像中显著性替换区域的中心点；

41、根据显著性替换区域的中心点，对显著性修复图像中显著性替换区域进行反投影处理，获取目标全景图像内容处理后的图像。

42、在其中一个实施例中，在获取内容重生元素之前，该方法还包括：

43、获取目标全景图像中各显著性区域的显著性区域检测框；

44、根据显著性区域检测框的中心点，对各显著性区域进行投影处理。

45、第二方面，本申请还提供了一种全景图像处理装置，包括：

46、指令响应模块，用于响应于目标全景图像的内容处理指令，标记目标全景图像的显著性区域；

47、元素获取模块，用于获取内容重生元素；

48、内容生成模块，用于基于内容重生元素，对显著性区域进行内容重生成，得到目标全景图像内容处理后的图像。

49、第三方面，本申请还提供了一种计算机设备，包括存储器和处理器，该存储器存储有计算机程序，该处理器执行计算机程序时实现上述第一方面中任一项实施例中的方法的步骤。

50、第四方面，本申请还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述第一方面中任一项实施例中的方法的步骤。

51、第五方面，本申请还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述第一方面中任一项实施例中的方法的步骤。

52、上述全景图像处理方法、装置、设备、介质和产品，响应于目标全景图像的内容处理指令，标记目标全景图像的显著性区域，然后获取内容重生元素，并基于内容重生元素，对显著性区域进行内容重生成，得到目标全景图像内容处理后的图像。该方法中，在获取目标全景图像的显著性区域的基础上，根据内容重生元素，对显著性区域进行内容重生成，相当于在对目标全景图像进行处理的过程中，保持目标全景图像中除显著性区域之外的区域不变，对显著性区域进行局部处理，这样对目标全景图像的局部区域进行处理之后得到的图像，也就是目标全景图像内容处理后的图像。

技术特征：

1.一种全景图像处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

4.根据权利要求1-3任一项所述的方法，其特征在于，所述标记所述目标全景图像的显著性区域，包括：

5.根据权利要求4所述的方法，其特征在于，在所述将各所述显著性区域的类别、所述置信度以及所述面积值，展示在对应的显著性区域之前，所述方法还包括：

6.根据权利要求1-3任一项所述的方法，其特征在于，所述标记所述目标全景图像的显著性区域，包括：

7.根据权利要求1-3任一项所述的方法，其特征在于，所述获取内容重生元素，包括：

8.根据权利要求6所述的方法，其特征在于，所述展示所述显著性区域的关联提示词，包括：

9.根据权利要求1-3任一项所述的方法，其特征在于，所述获取内容重生元素，包括：

10.根据权利要求1所述的方法，其特征在于，所述基于所述内容重生元素，对所述显著性区域进行内容重生成，得到所述目标全景图像内容处理后的图像，包括：

11.根据权利要求10所述的方法，其特征在于，在所述将所述显著性区域替换为所述显著性替换区域之前，所述方法还包括：

12.根据权利要求10所述的方法，其特征在于，所述根据所述显著性修复图像，获取所述目标全景图像内容处理后的图像，包括：

13.根据权利要求1所述的方法，其特征在于，在获取内容重生元素之前，所述方法还包括：

14.一种全景图像处理装置，其特征在于，所述装置包括：

15.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至13中任一项所述的方法的步骤。

16.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至13中任一项所述的方法的步骤。

17.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至13中任一项所述的方法的步骤。

技术总结
本申请涉及一种全景图像处理方法、装置、设备、介质和产品。该方法包括：响应于目标全景图像的内容处理指令，标记目标全景图像的显著性区域，然后获取内容重生元素，并基于内容重生元素，对显著性区域进行内容重生成，得到目标全景图像内容处理后的图像。采用该方法能够对局部区域的图像内容进行处理。

技术研发人员：龙良曲,任宁啸
受保护的技术使用者：影石创新科技股份有限公司
技术研发日：
技术公布日：2024/3/21