视频生成方法、装置、介质及设备与流程

文档序号:37337701发布日期:2024-03-18 18:04阅读:8来源:国知局
视频生成方法、装置、介质及设备与流程

本公开涉及计算机,具体地,涉及一种视频生成方法、装置、介质及设备。


背景技术:

1、视频的创作和分享日益成为多用户间进行交互的一种新方式。如用户可以在虚拟场景中利用其中的虚拟角色和场景环境进行剧情视频创造,可以复现小说或者影视中的名场面,也可以生成原创视频剧情。

2、相关技术中,在虚拟场景中进行视频生成时,主要是用户通过虚拟角色在虚拟场景中进行扮演互动并进行视频录制而获得视频素材,之后通过视频编辑处理对视频素材进行编辑而获得相应的视频。


技术实现思路

1、提供该
技术实现要素:
部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。

2、第一方面,本公开提供一种视频生成方法,所述方法包括:

3、接收视频描述文本,根据所述视频描述文本生成目标文本,其中,所述目标文本中包含至少一个子文本,每一所述子文本对应一个虚拟场景,所述子文本中包含所述虚拟场景中的虚拟角色以及所述虚拟角色对应的交互文本;

4、基于所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令,并基于各个子文本对应的控制指令生成所述目标文本对应的控制指令序列;

5、控制所述虚拟角色执行所述控制指令序列中的控制指令,并通过虚拟相机对所述虚拟角色执行所述控制指令所得的画面进行录制,获得所述视频描述文本对应的目标视频。

6、第二方面,本公开提供一种视频生成装置,所述装置包括:

7、第一生成模块,用于接收视频描述文本,根据所述视频描述文本生成目标文本,其中,所述目标文本中包含至少一个子文本,每一所述子文本对应一个虚拟场景,所述子文本中包含所述虚拟场景中的虚拟角色以及所述虚拟角色对应的交互文本;

8、第二生成模块,用于基于所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令,并基于各个子文本对应的控制指令生成所述目标文本对应的控制指令序列;

9、处理模块,用于控制所述虚拟角色执行所述控制指令序列中的控制指令,并通过虚拟相机对所述虚拟角色执行所述控制指令所得的画面进行录制,获得所述视频描述文本对应的目标视频。

10、第三方面,本公开提供一种计算机可读介质,其上存储有计算机程序,该程序被处理装置执行时实现第一方面所述方法的步骤。

11、第四方面,本公开提供一种电子设备,包括:

12、存储装置,其上存储有计算机程序;

13、处理装置,用于执行所述存储装置中的所述计算机程序,以实现第一方面所述方法的步骤。

14、在上述技术方案中,可以基于视频描述文本中的内容描述,自动对其进行文本扩写和分析,以获得其对应的目标文本。之后能够基于该目标文本生成虚拟角色的控制指令,从而能够控制虚拟角色执行控制指令以使得该虚拟角色按照交互文本指示的交互内容进行剧情演绎,同时结合虚拟相机进行录制而获得驱动虚拟角色对视频描述文本对应的内容进行演绎的目标视频。由此,可以有效降低视频生成的复杂度,简化用户操作,大大降低视频生成过程对用户的技术要求。并且无需用户进行剧本撰写、素材操作和录制以及视频编辑和后处理等复杂的流程,有效降低人工工作量,另外,可以有效提高视频生成的自动化水平和效率。

15、本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。



技术特征:

1.一种视频生成方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述视频描述文本生成目标文本,包括:

3.根据权利要求2所述的方法,其特征在于,所述大纲文本具有顺序标识;所述方法还包括:

4.根据权利要求2所述的方法,其特征在于,所述大纲文本中还包含所述虚拟场景中的虚拟角色的角色描述信息;

5.根据权利要求2所述的方法,其特征在于,所述大纲文本中还包含所述虚拟场景中的虚拟角色的角色描述信息;

6.根据权利要求1所述的方法,其特征在于,在所述基于所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令之前,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述基于所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令,包括:

8.根据权利要求7所述的方法,其特征在于,所述根据所述交互对象和所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令,包括:

9.根据权利要求1所述的方法,其特征在于,在所述控制所述虚拟角色执行所述控制指令序列中的控制指令之前,所述方法还包括:

10.根据权利要求9所述的方法,其特征在于,所述确定所述控制指令对应的运镜方式,包括:

11.根据权利要求1所述的方法,其特征在于,所述方法还包括:

12.一种视频生成装置,其特征在于,所述装置包括:

13.一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理装置执行时实现权利要求1-11中任一项所述方法的步骤。

14.一种电子设备,其特征在于,包括:


技术总结
本公开涉及一种视频生成方法、装置、介质及设备,方法包括:接收视频描述文本,根据所述视频描述文本生成目标文本,其中,所述目标文本中包含至少一个子文本,每一所述子文本对应一个虚拟场景,所述子文本中包含所述虚拟场景中的虚拟角色以及所述虚拟角色对应的交互文本;基于所述子文本中的交互文本,生成所述子文本中的虚拟角色对应的控制指令,并基于各个子文本对应的控制指令生成所述目标文本对应的控制指令序列;控制所述虚拟角色执行所述控制指令序列中的控制指令,并通过虚拟相机对所述虚拟角色执行所述控制指令所得的画面进行录制,获得所述视频描述文本对应的目标视频。

技术研发人员:周启贤,何婉婷,姚灿杰,许豪明,钟黎,张静珩
受保护的技术使用者:北京字跳网络技术有限公司
技术研发日:
技术公布日:2024/3/17
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1