一种虚拟延时视频的交互拍摄方法、装置、设备及介质与流程

本发明涉及虚拟现实，特别涉及一种虚拟延时视频的交互拍摄方法、装置、设备及计算机可读存储介质。

背景技术：

1、随着三维重建和虚拟现实等技术的发展，虚拟场景内进行的娱乐和教育等虚拟应用日渐受到人们的关注。虚拟延时摄影可以在虚拟场景内自动生成延时视频(即虚拟延时视频)，在虚拟场景内具有艺术创作和娱乐等潜在应用。

2、现有技术中，通常是根据已有的延时视频学习其动态变化，基于学习到的动态变化将给定图像动画化，合成延时视频；例如，使用光流或长短期记忆网络等技术对时间信息进行建模，然后基于生成网络(如生成对抗网络)预测未来帧；然而，这些现有方案主要针对真实场景的视频合成，面对复杂多变的虚拟场景，视频合成可能会出现时间不一致和保真度低等问题。因此，如何提供一种适用于虚拟场景的虚拟延时视频的交互拍摄方案，使用户能够根据自身需求，便捷地配置完成虚拟场景内的延时摄影，生成高质量的虚拟延时视频，提高用户体验，是现今急需解决的问题。

技术实现思路

1、本发明的目的是提供一种虚拟延时视频的交互拍摄方法、装置、设备及计算机可读存储介质，以实现虚拟场景内符合用户需求的自动延时摄影，生成高质量的虚拟延时视频，提升用户体验。

2、为解决上述技术问题，本发明提供一种虚拟延时视频的交互拍摄方法，包括：

3、获取待拍摄虚拟场景；其中，所述待拍摄虚拟场景为场景内容随时间变化的三维场景；

4、根据虚拟延时摄影交互界面触发的拍摄指令，确定所述待拍摄虚拟场景的延时摄影参数；其中，所述延时摄影参数包括拍摄选景参数、相机运动参数和拍摄时间参数，所述拍摄选景参数包括拍摄位置和拍摄角度，所述拍摄时间参数包括拍摄时间范围和拍摄时间间隔，所述虚拟延时摄影交互界面包括用于调整所述拍摄选景参数、所述相机运动参数和/或所述拍摄时间参数的参数调整区域；

5、根据所述延时摄影参数，在所述待拍摄虚拟场景内进行延时摄影，生成虚拟延时视频。

6、在一些实施例中，所述获取待拍摄虚拟场景，包括：

7、根据所述虚拟延时摄影交互界面触发的场景选择指令，从预设动态虚拟场景中确定所述待拍摄虚拟场景；其中，所述虚拟延时摄影交互界面包括用于选择所述预设动态虚拟场景的场景选择区域。

8、在一些实施例中，所述获取待拍摄虚拟场景，包括：

9、根据所述虚拟延时摄影交互界面触发的场景新建指令，获取所述场景新建指令对应的静态虚拟场景的三维模型；

10、利用三维引擎，对所述静态虚拟场景的三维模型进行处理，生成所述待拍摄虚拟场景。

11、在一些实施例中，所述利用三维引擎，对所述静态虚拟场景的三维模型进行处理，生成所述待拍摄虚拟场景，包括：

12、利用所述三维引擎，对所述静态虚拟场景的三维模型进行场景渲染，并加入动态元素，生成所述待拍摄虚拟场景；其中，所述动态元素包括人物元素、交通元素、天气元素和/或灯光元素。

13、在一些实施例中，根据所述虚拟延时摄影交互界面触发的场景新建指令，获取所述场景新建指令对应的静态虚拟场景的三维模型，包括：

14、获取所述场景新建指令对应的真实场景图像；

15、根据所述真实场景图像，生成所述静态虚拟场景的三维模型。

16、在一些实施例中，所述获取待拍摄虚拟场景，包括：

17、根据所述虚拟延时摄影交互界面触发的场景展示指令，切换显示预设场景展示子界面，以在所述预设场景展示子界面显示各预设动态虚拟场景的预览内容；

18、根据所述预设场景展示子界面触发的场景选择指令，从所述预设动态虚拟场景中确定所述待拍摄虚拟场景。

19、在一些实施例中，所述根据所述虚拟延时摄影交互界面触发的场景展示指令，切换显示预设场景展示子界面之后，还包括：

20、根据所述预设场景展示子界面触发的预设场景新建指令，获取所述预设场景新建指令对应的静态虚拟场景的三维模型；

21、利用三维引擎，对所述静态虚拟场景的三维模型进行处理，生成所述预设场景新建指令对应的预设动态虚拟场景。

22、在一些实施例中，所述根据所述延时摄影参数，在所述待拍摄虚拟场景内进行延时摄影，生成虚拟延时视频，包括：

23、生成所述待拍摄虚拟场景内所述延时摄影参数对应的虚拟图像序列；

24、根据所述虚拟图像序列，生成虚拟延时视频。

25、在一些实施例中，所述根据所述虚拟图像序列，生成虚拟延时视频，包括：

26、对所述虚拟图像序列中各虚拟图像的曝光进行平滑处理，得到处理后虚拟图像序列；

27、对所述处理后虚拟图像序列进行合成，生成虚拟延时视频。

28、在一些实施例中，所述对所述虚拟图像序列中各虚拟图像的曝光进行平滑处理，得到处理后虚拟图像序列，包括：

29、对所述虚拟图像序列中各虚拟图像的曝光进行直方图均衡化操作，得到所述处理后虚拟图像序列。

30、在一些实施例中，所述生成所述待拍摄虚拟场景内所述延时摄影参数对应的虚拟图像序列，包括：

31、利用三维引擎的虚拟相机，按照所述延时摄影参数对所述待拍摄虚拟场景进行渲染，生成所述虚拟图像序列。

32、在一些实施例中，所述根据虚拟延时摄影交互界面触发的拍摄指令，确定所述待拍摄虚拟场景的延时摄影参数，包括：

33、在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像；其中，所述自定义参数包括拍摄选景自定义参数、相机运动自定义参数和/或拍摄时间自定义参数；

34、在所述虚拟延时摄影交互界面触发所述拍摄指令后，根据所述自定义参数，确定所述延时摄影参数。

35、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

36、获取所述待拍摄虚拟场景对应的延时摄影计算最优参数，并将所述延时摄影计算最优参数确定为初始的自定义参数；其中，所述延时摄影计算最优参数为利用图像美学评价模型、视频美学评价模型和延时美学评价模型计算得到的摄影参数，所述延时美学评价模型包括基于光流的第一延时美学评价模型和基于亮度和色彩的第二延时美学评价模型，所述延时摄影计算最优参数包括拍摄选景最优参数、相机运动最优参数和拍摄时间最优参数；

37、在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述初始的自定义参数对应的场景图像，并在所述参数调整区域显示所述初始的自定义参数。

38、在一些实施例中，所述获取所述待拍摄虚拟场景对应的延时摄影计算最优参数，并将所述延时摄影计算最优参数确定为初始的自定义参数之前，还包括：

39、根据所述虚拟延时摄影交互界面触发的操作模式展示指令，切换显示操作模式选择子界面，以在所述操作模式选择子界面显示各预设操作模式；其中，所述预设操作模式包括自动操作模式、半自动操作模式和自定义操作模式；

40、根据所述操作模式选择子界面触发的操作模式选择指令，从所述预设操作模式中确定目标操作模式；

41、若所述目标操作模式为所述自动操作模式，则获取所述延时摄影计算最优参数，并将所述延时摄影计算最优参数确定为所述延时摄影参数，执行所述根据所述延时摄影参数，在所述待拍摄虚拟场景内进行延时摄影，生成虚拟延时视频的步骤；

42、若所述目标操作模式为所述半自动操作模式，则执行所述获取所述待拍摄虚拟场景对应的延时摄影计算最优参数，并将所述延时摄影计算最优参数确定为初始的自定义参数的步骤；

43、若所述目标操作模式为所述自定义操作模式，则获取所述待拍摄虚拟场景对应的预设初始参数，并将所述预设初始参数确定为初始的自定义参数，执行所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述初始的自定义参数对应的场景图像，并在所述参数调整区域显示所述初始的自定义参数的步骤；其中，所述预设初始参数包括预设初始拍摄选景参数、预设初始相机运动参数和预设初始拍摄时间参数。

44、在一些实施例中，所述获取所述待拍摄虚拟场景对应的延时摄影计算最优参数，包括：

45、利用所述图像美学评价模型，获取所述拍摄选景最优参数；

46、根据所述拍摄选景最优参数和视频美学评价模型，获取所述相机运动最优参数；

47、根据所述拍摄选景最优参数、所述相机运动最优参数和所述延时美学评价模型，获取所述拍摄时间最优参数。

48、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

49、根据键盘设备触发的移动指令，调整所述拍摄选景自定义参数中的拍摄位置；其中，所述移动指令包括向前移动指令、向后移动指令、向左移动指令和/或向右移动指令；

50、在所述虚拟延时摄影交互界面更新显示所述待拍摄虚拟场景内调整后的拍摄位置对应的场景图像，并在所述参数调整区域内的拍摄位置坐标显示区域显示调整后的拍摄位置。

51、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

52、根据键盘设备触发的移动指令，调整所述拍摄选景自定义参数中的拍摄位置；其中，所述移动指令包括向前移动指令、向后移动指令、向左移动指令和/或向右移动指令；

53、根据调整后的拍摄位置，利用图像美学评价模型、视频美学评价模型和延时美学评价模型，计算所述调整后的拍摄位置对应的延时摄影调整最优参数；其中，所述延时美学评价模型包括基于光流的第一延时美学评价模型和基于亮度和色彩的第二延时美学评价模型，所述延时摄影调整最优参数包括拍摄选景调整最优参数、相机运动调整最优参数和拍摄时间调整最优参数，所述拍摄选景调整最优参数中的拍摄位置为所述调整后的拍摄位置；

54、利用所述延时摄影调整最优参数，调整所述自定义参数；

55、在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内调整后的自定义参数对应的场景图像，并在所述参数调整区域显示调整后的自定义参数。

56、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

57、根据所述虚拟延时摄影交互界面触发的拍摄角度调整指令，调整所述拍摄选景自定义参数中的拍摄角度；其中，所述参数调整区域包括拍摄角度调整区域，所述拍摄角度调整区域包括偏航角滑动调节条和俯仰角滑动调节条；

58、在所述虚拟延时摄影交互界面更新显示所述待拍摄虚拟场景内调整后的拍摄角度对应的场景图像，并在所述拍摄角度调整区域显示调整后的拍摄角度。

59、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

60、根据所述虚拟延时摄影交互界面触发的运动轨迹选择指令，从可选拍摄轨迹中确定所述相机运动自定义参数；其中，所述参数调整区域包括用于选择所述可选拍摄轨迹的拍摄轨迹选择区域；

61、在所述虚拟延时摄影交互界面显示所述相机运动自定义参数对应的轨迹示意框。

62、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

63、根据所述虚拟延时摄影交互界面触发的时间范围调整指令，调整所述拍摄时间自定义参数中的拍摄时间范围的起始时间或终止时间；其中，所述参数调整区域包括时间范围调整区域，所述时间范围调整区域包括起始时间滑动调节条和终止时间滑动调节条；

64、在所述虚拟延时摄影交互界面更新显示所述待拍摄虚拟场景内调整后的拍摄时间范围的起始时间或终止时间对应的场景图像，并在所述时间范围调整区域显示调整后的拍摄时间范围。

65、在一些实施例中，所述在所述虚拟延时摄影交互界面显示所述待拍摄虚拟场景内所述参数调整区域的自定义参数对应的场景图像，包括：

66、根据所述虚拟延时摄影交互界面触发的动态元素调整指令，调整所述待拍摄虚拟场景的可调整动态元素；其中，所述虚拟延时摄影交互界面包括用于调整所述可调整动态元素的动态元素调整区域，所述可调整动态元素包括天气元素中的云元素和/或雾元素，所述动态元素调整区域包括各所述可调整动态元素各自对应的数量调节条和/或运动速度调节条；

67、在所述虚拟延时摄影交互界面更新显示调整后的待拍摄虚拟场景内的所述自定义参数对应的场景图像。

68、本发明还提供了一种虚拟延时视频的交互拍摄装置，包括：

69、场景获取模块，用于获取待拍摄虚拟场景；其中，所述待拍摄虚拟场景为场景内容随时间变化的三维场景；

70、参数确定模块，用于根据虚拟延时摄影交互界面触发的拍摄指令，确定所述待拍摄虚拟场景的延时摄影参数；其中，所述延时摄影参数包括拍摄选景参数、相机运动参数和拍摄时间参数，所述拍摄选景参数包括拍摄位置和拍摄角度，所述拍摄时间参数包括拍摄时间范围和拍摄时间间隔，所述虚拟延时摄影交互界面包括用于调整所述拍摄选景参数、所述相机运动参数和/或所述拍摄时间参数的参数调整区域；

71、延时拍摄模块，用于根据所述延时摄影参数，在所述待拍摄虚拟场景内进行延时摄影，生成虚拟延时视频。

72、本发明还提供了一种虚拟延时视频的交互拍摄设备，包括：

73、存储器，用于存储计算机程序；

74、处理器，用于执行所述计算机程序时实现如上述所述的虚拟延时视频的交互拍摄方法的步骤。

75、本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述的虚拟延时视频的交互拍摄方法的步骤。

76、本发明所提供的一种虚拟延时视频的交互拍摄方法，包括：获取待拍摄虚拟场景；其中，待拍摄虚拟场景为场景内容随时间变化的三维场景；根据虚拟延时摄影交互界面触发的拍摄指令，确定待拍摄虚拟场景的延时摄影参数；其中，延时摄影参数包括拍摄选景参数、相机运动参数和拍摄时间参数，拍摄选景参数包括拍摄位置和拍摄角度，拍摄时间参数包括拍摄时间范围和拍摄时间间隔，虚拟延时摄影交互界面包括用于调整拍摄选景参数、相机运动参数和/或拍摄时间参数的参数调整区域；根据延时摄影参数，在待拍摄虚拟场景内进行延时摄影，生成虚拟延时视频；

77、可见，本发明通过延时摄影参数的设置，根据真实延时摄影的特点对虚拟延时摄影过程进行参数化，进而能够生成动态的待拍摄虚拟场景内延时摄影参数对应的虚拟延时视频，实现虚拟场景内高质量的延时视频的自动生成，从而能够对真实环境中的延时摄影进行仿真测试，指导现实世界中的延时摄影，节约时间和经济成本；并且通过虚拟延时摄影交互界面内参数调整区域的设置，使用户能够根据自身的偏好和审美，便捷地配置调整延时摄影参数，方便用户生成个性化的虚拟延时视频，提升了用户体验。此外，本发明还提供了一种虚拟延时视频的交互拍摄装置、设备及计算机可读存储介质，同样具有上述有益效果。