三维虚拟形象生成方法、装置及电子设备与流程

文档序号:33650846发布日期:2023-03-29 08:23阅读:来源:国知局

技术特征:
1.一种三维虚拟形象生成方法,包括:获取目标图像;根据所述目标图像确定三维重建基底,所述目标区域为所述目标图像包括的区域;基于预先获取的标准基底的拓扑,对所述三维重建基底进行重新拓扑构造,得到所述目标区域的目标三维基底;将所述目标三维基底和所述标准基底进行融合,得到所述目标区域的三维虚拟形象。2.根据权利要求1所述的方法,其中,所述根据所述目标图像确定三维重建基底,包括:根据所述目标图像确定预设融合变形系数;基于所述预设融合变形系数对预先获取的预设重建基底进行修正,得到所述三维重建基底;还包括:获取目标基底;基于所述目标基底与所述预设融合变形系数获取所述标准基底。3.根据权利要求2所述的方法,所述目标区域为所述目标图像的人脸区域,所述根据所述目标图像确定预设融合变形系数,包括:获取所述目标区域的二维人脸关节点;计算所述二维人脸关节点和预先从数据库中获取的三维人脸关节点之间的重投影误差;根据所述重投影误差确定所述预设融合变形系数。4.根据权利要求2所述的方法,其中,所述目标基底包括第一基础基底和m个第一特征基底,m为大于1的整数;所述基于所述目标基底与所述预设融合变形系数获取所述标准基底,包括:计算每个第一特征基底对应的第一基底向量,与所述第一基础基底对应的第一特征向量之间的第一差值向量,以得到m个第一差值向量;计算每个第一差值向量与所述预设融合变形系数之间的乘积,以得到m个第一乘积向量;计算所述m个第一乘积向量的第一和向量;计算所述第一基础基底对应的第一基底向量与所述第一和向量的第二和向量,并获取所述第二和向量;将所述第二和向量对应的基底确定为所述标准基底。5.根据权利要求2所述的方法,其中,所述预设重建基底包括第二基础基底和n个第二特征基底,n为大于1的整数;所述基于所述预设融合变形系数对预先获取的预设重建基底进行修正,得到所述三维重建基底,包括:计算每个第二特征基底对应的第二基底向量,与所述第二基础基底对应的第二特征向量之间的第二差值向量,以得到n个第二差值向量;计算每个第二差值向量与所述预设融合变形系数之间的乘积,以得到n个第二乘积向量;计算所述n个第二乘积向量的第三和向量;计算所述第二基础基底对应的第二基底向量与所述第三和向量的第四和向量,并获取
所述第四和向量;将所述第四和向量对应的基底确定为所述三维重建基底。6.根据权利要求1至5中任一项所述的方法,其中,所述将所述目标三维基底和所述标准基底进行融合,得到所述目标区域的三维虚拟形象,包括:对所述目标三维基底进行划分,得到l个第一基底区域,以及,对所述标准基底进行划分,得到l个第二基底区域,l为大于1的整数;基于预先获取的l个相似度融合系数将l个所述第一基底区域和l个所述第二基底区域进行融合,得到所述目标区域的三维虚拟形象,所述相似度融合系数、所述第一基底区域和所述第二基底区域一一对应。7.根据权利要求6所述的方法,所述基于预先获取的l个相似度融合系数将l个所述第一基底区域和l个所述第二基底区域进行融合,得到所述目标区域的三维虚拟形象,包括:基于预先获取的l个相似度融合系数确定s个第一顶点的相似度融合系数和s个第二顶点对应的相似度融合系数,s个所述第一顶点为l个所述第一基底区域对应的顶点,s个所述第二顶点为l个所述第二基底区域对应的顶点,s为大于1的整数;根据s个所述第一顶点的相似度融合系数和s个所述第二顶点对应的相似度融合系数,将l个所述第一基底区域和l个所述第二基底区域进行融合,得到所述目标区域的三维虚拟形象。8.根据权利要求6所述的方法,还包括:获取i个相似度融合系数,i个所述相似度融合系数分别与i个所述第一基底区域和i个所述第二基底区域一一对应,i个所述第一基底区域为所述目标三维基底中包括的顶点所在区域,i个所述第二基底区域为所述标准基底中包括的顶点所在区域;根据i个所述相似度融合系数计算得到h个相似度融合系数,h个所述相似度融合系数中每个相似度融合系数对应的第一基底区域,为i个所述第一基底区域中任意相邻两个第一基底区域之间的区域,h个所述相似度融合系数中每个相似度融合系数对应的第二基底区域,为i个所述第二基底区域中任意相邻两个第二基底区域之间的区域;i和h均为大于1,且小于l的整数,且l等于i和h的和。9.一种三维虚拟形象生成装置,包括:第一获取模块,用于获取目标图像;确定模块,用于根据所述目标图像确定三维重建基底,所述目标区域为所述目标图像包括的区域;拓扑构造模块,用于基于预先获取的标准基底的拓扑,对所述三维重建基底进行重新拓扑构造,得到所述目标区域的目标三维基底;融合模块,用于将所述目标三维基底和所述标准基底进行融合,得到所述目标区域的三维虚拟形象。10.根据权利要求9所述的装置,其中,所述确定模块,包括:第一确定子模块,用于根据所述目标图像确定预设融合变形系数;修正子模块,用于基于所述预设融合变形系数对预先获取的预设重建基底进行修正,得到所述三维重建基底;所述三维虚拟形象生成装置,还包括:
第二获取模块,用于获取目标基底;第三获取模块,用于基于所述目标基底与所述预设融合变形系数获取所述标准基底。11.根据权利要求10所述的装置,其中,所述目标区域为所述目标图像的人脸区域,所述第一确定子模块,包括:获取单元,用于获取所述目标区域的二维人脸关节点;计算单元,用于计算所述二维人脸关节点和预先从数据库中获取的三维人脸关节点之间的重投影误差;第一确定单元,用于根据所述重投影误差确定所述预设融合变形系数。12.根据权利要求10所述的装置,其中,所述目标基底包括第一基础基底和m个第一特征基底,m为大于1的整数;所述第三获取模块,包括:第一计算子模块,用于计算每个第一特征基底对应的第一基底向量,与所述第一基础基底对应的第一特征向量之间的第一差值向量,以得到m个第一差值向量;第二计算子模块,用于计算每个第一差值向量与所述预设融合变形系数之间的乘积,以得到m个第一乘积向量;第三计算子模块,用于计算所述m个第一乘积向量的第一和向量;第四计算子模块,用于计算所述第一基础基底对应的第一基底向量与所述第一和向量的第二和向量,并获取所述第二和向量;第二确定子模块,用于将所述第二和向量对应的基底确定为所述标准基底。13.根据权利要求10所述的装置,其中,所述预设重建基底包括第二基础基底和n个第二特征基底,n为大于1的整数;所述修正子模块,包括:第一计算单元,用于计算每个第二特征基底对应的第二基底向量,与所述第二基础基底对应的第二特征向量之间的第二差值向量,以得到n个第二差值向量;第二计算单元,用于计算每个第二差值向量与所述预设融合变形系数之间的乘积,以得到n个第二乘积向量;第三计算单元,用于计算所述n个第二乘积向量的第三和向量;第四计算单元,用于计算所述第二基础基底对应的第二基底向量与所述第三和向量的第四和向量,并获取所述第四和向量;第二确定单元,用于将所述第四和向量对应的基底确定为所述三维重建基底。14.根据权利要求9至13中任一项所述的装置,其中,所述融合模块,包括:划分子模块,用于对所述目标三维基底进行划分,得到l个第一基底区域,以及,对所述标准基底进行划分,得到l个第二基底区域,l为大于1的整数;第一融合子模块,用于基于预先获取的l个相似度融合系数将l个所述第一基底区域和l个所述第二基底区域进行融合,得到所述目标区域的三维虚拟形象,所述相似度融合系数、所述第一基底区域和所述第二基底区域一一对应。15.根据权利要求14所述的装置,其中,所述融合模块,包括:第三确定子模块,用于基于预先获取的l个相似度融合系数确定s个第一顶点的相似度融合系数和s个第二顶点对应的相似度融合系数,s个所述第一顶点为l个所述第一基底区域对应的顶点,s个所述第二顶点为l个所述第二基底区域对应的顶点,s为大于1的整数;第二融合子模块,用于根据s个所述第一顶点的相似度融合系数和s个所述第二顶点对
应的相似度融合系数,将l个所述第一基底区域和l个所述第二基底区域进行融合,得到所述目标区域的三维虚拟形象。16.根据权利要求14所述的装置,还包括:第四获取模块,用于获取i个相似度融合系数,i个所述相似度融合系数分别与i个所述第一基底区域和i个所述第二基底区域一一对应,i个所述第一基底区域为所述目标三维基底中包括的顶点所在区域,i个所述第二基底区域为所述标准基底中包括的顶点所在区域;计算模块,用于根据i个所述相似度融合系数计算得到h个相似度融合系数,h个所述相似度融合系数中每个相似度融合系数对应的第一基底区域,为i个所述第一基底区域中任意相邻两个第一基底区域之间的区域,h个所述相似度融合系数中每个相似度融合系数对应的第二基底区域,为i个所述第二基底区域中任意相邻两个第二基底区域之间的区域;i和h均为大于1,且小于l的整数,且l等于i和h的和。17.一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-8中任一项所述的方法。18.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-8中任一项所述的方法。19.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-8中任一项所述的方法。

技术总结
本公开提供了一种三维虚拟形象生成方法、装置及电子设备,涉及人工智能技术领域,尤其涉及计算机视觉、增强现实、虚拟现实、深度学习等技术领域,可应用元宇宙、虚拟数字人等场景,三维虚拟形象生成方法,包括:获取目标图像;根据所述目标图像确定三维重建基底,所述目标区域为所述目标图像包括的区域;基于预先获取的标准基底的拓扑,对所述三维重建基底进行重新拓扑构造,得到所述目标区域的目标三维基底;将所述目标三维基底和所述标准基底进行融合,得到所述目标区域的三维虚拟形象。得到所述目标区域的三维虚拟形象。得到所述目标区域的三维虚拟形象。


技术研发人员:刘豪杰
受保护的技术使用者:北京百度网讯科技有限公司
技术研发日:2022.12.20
技术公布日:2023/3/28
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1