虚拟形象的生成方法、装置、设备及存储介质与流程

文档序号:32351525发布日期:2022-11-26 13:29阅读:来源:国知局

技术特征:
1.一种虚拟形象的生成方法,其特征在于,包括:确定待处理图像中目标人物的人脸形状特征和表情特征;基于所述人脸形状特征和所述表情特征,优化预设的初始三维真人脸部模型中的脸部形状参数和表情参数,得到第一人脸形状参数和第一表情参数;利用所述初始三维真人脸部模型与初始虚拟形象模型的映射关系,将所述第一人脸形状参数和所述第一表情参数迁移至所述初始虚拟形象模型中,得到目标虚拟形象模型;其中,所述初始三维真人脸部模型和所述初始虚拟形象模型均是由基础脸部模型以及脸部形状基和表情基而确定的模型;基于所述目标虚拟形象模型生成所述目标人物对应的虚拟形象。2.根据权利要求1所述的方法,其特征在于,所述基于所述人脸形状特征和所述表情特征,优化预设的初始三维真人脸部模型中的脸部形状参数和表情参数,得到第一人脸形状参数和第一表情参数,包括:基于所述人脸形状特征优化预设的初始三维真人脸部模型中的所述脸部形状参数,得到所述第一人脸形状参数;基于所述第一人脸形状参数更新所述初始三维真人脸部模型,得到第一三维真人脸部模型;基于所述表情特征优化所述第一三维真人脸部模型中的所述表情参数,得到所述第一表情参数。3.根据权利要求2所述的方法,其特征在于,所述基于所述人脸形状特征优化预设的初始三维真人脸部模型中的所述脸部形状参数,得到所述第一人脸形状参数,包括:确定所述人脸形状特征对应的二维形状关键点坐标;根据所述初始三维真人脸部模型和所述二维形状关键点坐标,确定对应的三维形状关键点坐标;利用所述三维形状关键点坐标与所述二维形状关键点坐标,更新所述脸部形状参数,得到所述第一人脸形状参数。4.根据权利要求3所述的方法,其特征在于,所述利用所述三维形状关键点坐标与所述二维形状关键点坐标,更新所述脸部形状参数得到所述第一人脸形状参数,包括:确定所述三维形状关键点坐标与所述二维形状关键点坐标之间的第一误差参数;利用所述第一误差参数对所述初始三维真人脸部模型的脸部形状参数进行迭代更新,直至计算得到的第一误差参数满足预设的第一迭代停止条件;将计算得到的误差参数对应的人脸形状参数确定为所述第一人脸形状参数。5.根据权利要求2所述的方法,其特征在于,所述基于所述表情特征优化所述第一三维真人脸部模型中的所述表情参数,得到所述第一表情参数,包括:基于所述表情特征确定至少一个关联表情参数;基于所述至少一个关联表情参数与所述表情参数进行组合,得到预测表情参数;在所述预测表情参数满足预设条件的情况下,将所述预测表情参数确定为所述第一表情参数。6.根据权利要求5所述的方法,其特征在于,所述在所述预测表情参数满足预设条件的情况下,将所述预测表情参数确定为所述第一表情参数,包括:
确定所述表情特征对应的二维表情关键点坐标;利用所述预测表情参数更新所述第一三维真人脸部模型,得到第二三维真人脸部模型;根据所述第二三维真人脸部模型和所述二维表情关键点坐标,确定对应的三维表情关键点坐标;确定所述三维表情关键点坐标与所述二维表情关键点坐标之间的第二误差参数;利用所述第二误差参数对所述预测表情参数进行迭代更新,直至计算得到的第二误差参数满足预设的第二迭代停止条件;将计算得到的第二误差参数对应的预测表情参数确定为所述第一表情参数。7.根据权利要求1-6中任一项所述的方法,其特征在于,所述初始三维真人脸部模型的脸部形状基与所述初始虚拟形象模型的脸部形状基相同;所述初始三维真人脸部模型的表情基与所述初始虚拟形象模型的表情基相同;相应地,所述初始三维真人脸部模型与所述初始虚拟形象模型的映射关系包括:所述初始三维真人脸部模型的脸部形状参数与所述初始虚拟形象模型的脸部形状参数对应;所述初始三维真人脸部模型的表情参数与所述初始虚拟形象模型的表情参数对应。8.根据权利要求1-6中任一项所述的方法,其特征在于,所述基于所述目标虚拟形象模型生成所述目标人物对应的虚拟形象,包括:根据待处理语音数据确定对应的目标表情参数;根据所述目标表情参数对所述目标虚拟形象模型进行渲染,得到所述目标人物对应的虚拟形象。9.根据权利要求1所述的方法,其特征在于,所述方法还包括:根据预设的虚拟形象类型,确定所述初始三维真人脸部模型中的基础脸部模型;利用所述初始三维真人脸部模型与初始虚拟形象模型的映射关系,将所述初始三维真人脸部模型中的基础脸部模型迁移至所述初始虚拟形象模型中。10.一种虚拟形象的生成装置,其特征在于,包括:确定模块,用于确定待处理图像中目标人物的人脸形状特征和表情特征;处理模块,用于基于所述人脸形状特征和所述表情特征,优化预设的初始三维真人脸部模型中的脸部形状参数和表情参数,得到第一人脸形状参数和第一表情参数;映射模块,用于利用所述初始三维真人脸部模型与初始虚拟形象模型的映射关系,将所述第一人脸形状参数和所述第一表情参数迁移至所述初始虚拟形象模型中,得到目标虚拟形象模型;其中,所述初始三维真人脸部模型和所述初始虚拟形象模型均是由基础脸部模型以及脸部形状基和表情基而确定的模型;生成模块,用于基于所述目标虚拟形象模型生成所述目标人物对应的虚拟形象。11.一种电子设备,其特征在于,包括:存储器和处理器;所述存储器与所述处理器连接,用于存储程序;所述处理器,通过运行所述存储器中的程序,实现如权利要求1至9中任意一项虚拟形象的生成方法。
12.一种存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程度被处理器运行时,实现如权利要求1至9中任意一项虚拟形象的生成方法。

技术总结
本申请提供了虚拟形象的生成方法、装置、设备及存储介质,具体实现方案为:确定待处理图像中目标人物的人脸形状特征和表情特征;基于人脸形状特征和表情特征,优化预设的初始三维真人脸部模型中的脸部形状参数和表情参数,得到第一人脸形状参数和第一表情参数;利用初始三维真人脸部模型与初始虚拟形象模型的映射关系,将第一人脸形状参数和第一表情参数迁移至初始虚拟形象模型中,得到目标虚拟形象模型;其中,初始三维真人脸部模型和初始虚拟形象模型均是由基础脸部模型以及脸部形状基和表情基而确定的模型;基于目标虚拟形象模型生成目标人物对应的虚拟形象。根据本申请的技术方案,能够有效减小生成的虚拟形象与真人形象之间差距。之间差距。之间差距。


技术研发人员:李林 周良 何山 胡金水 殷兵 刘聪
受保护的技术使用者:科大讯飞股份有限公司
技术研发日:2022.10.27
技术公布日:2022/11/25
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1