一种动作生成方法、训练方法以及装置与流程

文档序号:36229743发布日期:2023-11-30 19:19阅读:来源:国知局

技术特征:

1.一种动作生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述从所述输入运动数据中的多种维度提取特征,得到运动特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述分别从时间维度与空间维度从上一次迭代输出的运动特征中提取特征,得到当前次迭代的时间特征和空间特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述对所述当前次迭代的时间特征和空间特征进行融合,得到当前次迭代输出的运动特征,包括:

5.根据权利要求1-4中任一项所述的方法,其特征在于,所述根据所述运动特征确定至少一个生成动作,包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述运动特征确定所述数字人的关节位置、关节旋转信息以及关节相位,包括:

7.根据权利要求6所述的方法,其特征在于,所述根据所述运动特征确定所述关节相位,包括:

8.根据权利要求1-7中任一项所述的方法,其特征在于,所述至少一个生成动作包括衔接动作、填充动作或者预测动作中的至少一种,所述衔接动作包括在所述多个动作之间进行过度的动作,所述填充动作包括在所述多个动作中填充的动作,所述预测动作包括在所述数字人在执行所述多个动作之后执行的动作。

9.一种动作生成方法,其特征在于,包括:

10.根据权利要求9所述的方法,其特征在于,所述根据所述运动特征确定所述数字人的关节位置、关节旋转信息以及关节相位,包括:

11.根据权利要求9所述的方法,其特征在于,所述根据所述运动特征确定所述关节相位,包括:

12.根据权利要求9-11中任一项所述的方法,其特征在于,所述至少一个生成动作包括衔接动作、填充动作或者预测动作中的至少一种,所述衔接动作包括在所述多个动作之间进行过度的动作,所述填充动作包括在所述多个动作中填充的动作,所述预测动作包括在所述数字人在执行所述多个动作之后执行的动作。

13.一种训练方法,其特征在于,包括:

14.一种动作生成装置,其特征在于,包括:

15.根据权利要求14所述的装置,其特征在于,

16.根据权利要求15所述的装置,其特征在于,所述特征提取模块,具体用于:

17.根据权利要求16所述的装置,其特征在于,

18.根据权利要求14-17中任一项所述的装置,其特征在于,所述生成模块,具体用于:

19.根据权利要求18所述的装置,其特征在于,所述生成模块,具体用于:

20.根据权利要求19所述的装置,其特征在于,

21.根据权利要求14-20中任一项所述的装置,其特征在于,所述至少一个生成动作包括衔接动作、填充动作或者预测动作中的至少一种,所述衔接动作包括在所述多个动作之间进行过度的动作,所述填充动作包括在所述多个动作中填充的动作,所述预测动作包括在所述懂做人在执行所述多个动作之后执行的动作。

22.一种动作生成装置,其特征在于,包括:

23.根据权利要求22所述的装置,其特征在于,所述生成模块,具体用于:

24.根据权利要求23所述的装置,其特征在于,

25.根据权利要求22-24中任一项所述的装置,其特征在于,所述至少一个生成动作包括衔接动作、填充动作或者预测动作中的至少一种,所述衔接动作包括在所述多个动作之间进行过度的动作,所述填充动作包括在所述多个动作中填充的动作,所述预测动作包括在所述数字人在执行所述多个动作之后执行的动作。

26.一种训练装置,其特征在于,包括:

27.一种动作生成装置,其特征在于,包括处理器,所述处理器和存储器耦合,所述存储器存储有程序,当所述存储器存储的程序指令被所述处理器执行时实现权利要求1至8或者9-12中任一项所述的方法。

28.一种计算机可读存储介质,包括程序,当其被处理单元所执行时,执行如权利要求1至8或者9-12中任一项所述的方法。

29.一种动作生成装置,其特征在于,包括处理单元和通信接口,所述处理单元通过所述通信接口获取程序指令,当所述程序指令被所述处理单元执行时实现权利要求1至8或者9-12中任一项所述的方法。

30.一种计算机程序产品,包括计算机程序/指令,其特征在于,所述计算机程序/指令被处理器执行时实现如权利要求1至8或者9-12中任一项所述方法的步骤。


技术总结
本申请提供一种动作生成方法、训练方法以及装置,用于在计算机视觉领域生成更符合运动规律的动作,从而提高用户对于数字人的表述观感。包括:首先,获取输入运动数据,输入运动数据包括表示数字人进行运动的多个动作的数据;随后,从输入运动数据中的多种维度提取特征,得到运动特征,该多种维度可以包括时间维度与空间维度,从而提取到可以描述多个动作的时空关联性的特征;随后生成动作根据运动特征得到输出运动数据,输出运动数据包括表示数字人进行运动的多个动作以及至少一个生成动作的数据。

技术研发人员:郝磊,张镇嵩,吴小飞,张子霄,朱凯强,许松岑,刘健庄
受保护的技术使用者:华为技术有限公司
技术研发日:
技术公布日:2024/1/16
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1