人脸重建方法及装置、计算机可读存储介质、终端与流程

文档序号:35295574发布日期:2023-09-01 21:03阅读:来源:国知局

技术特征:

1.一种人脸重建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,对所述人脸特征矩阵以及所述深度图特征矩阵进行拼接处理,包括:

3.根据权利要求2所述的方法,其特征在于,所述预设位置为所述深度图特征矩阵中最后一个深度特征编码的后一位置。

4.根据权利要求1所述的方法,其特征在于,基于所述优化形状矩阵和所述优化表情矩阵,对初始化纹理矩阵和初始化光照控制矩阵进行迭代优化,以确定优化纹理矩阵和优化光照控制矩阵,包括:

5.根据权利要求4所述的方法,其特征在于,每次迭代中,基于下述过程确定当前次迭代后所述第一损失函数的函数值:

6.根据权利要求4或5所述的方法,其特征在于,所述第一损失函数采用下述公式表示:

7.根据权利要求4所述的方法,基于所述优化形状矩阵和优化表情矩阵,确定待渲染人脸模型,包括:

8.根据权利要求7所述的方法,其特征在于,采用下述公式,确定所述待渲染人脸模型:

9.根据权利要求4所述的方法,其特征在于,根据所述原始人脸图像和所述待渲染人脸模型,确定仿射变换矩阵,包括:

10.根据权利要求4或9所述的方法,其特征在于,在确定所述仿射变换矩阵之后,以及在基于所述待渲染人脸模型和所述仿射变换矩阵,构建第一损失函数之前,所述方法还包括:

11.根据权利要求1所述的方法,其特征在于,在将所述融合特征矩阵输入预测模型之前,所述方法还包括:

12.根据权利要求11所述的方法,其特征在于,每次迭代中,基于下述过程确定当前次迭代后所述第三损失函数的函数值:

13.根据权利要求11或12所述的方法,其特征在于,

14.根据权利要求1所述的方法,其特征在于,在确定优化纹理矩阵和优化光照控制矩阵之后,所述方法还包括:

15.一种人脸重建装置,其特征在于,包括:

16.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器运行时执行权利要求1至14任一项所述人脸重建方法的步骤。

17.一种终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机程序,其特征在于,所述处理器运行所述计算机程序时执行权利要求1至14任一项所述人脸重建方法的步骤。


技术总结
一种人脸重建方法及装置、计算机可读存储介质、终端,所述方法包括:分别对原始人脸图像及其深度图像进行特征提取,得到人脸特征矩阵以及深度图特征矩阵;对所述人脸特征矩阵以及所述深度图特征矩阵进行拼接处理,得到融合特征矩阵;将所述融合特征矩阵输入预测模型,得到优化形状矩阵和优化表情矩阵;基于所述优化形状矩阵和所述优化表情矩阵,对初始化纹理矩阵和初始化光照控制矩阵进行迭代优化,以确定优化纹理矩阵和优化光照控制矩阵。采用上述方案有助于改进人脸重建的效果。

技术研发人员:虞钉钉,徐清,王晓梅,沈伟林,沈旭立,曹培
受保护的技术使用者:华院计算技术(上海)股份有限公司
技术研发日:
技术公布日:2024/1/14
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1