三维重建方法、装置、电子设备及存储介质与流程

本公开涉及计算机，尤其涉及一种三维重建方法、装置、电子设备及存储介质。

背景技术：

1、由单目rgb图像或视频自动三维重建出可以驱动的数字人模型，是计算机视觉与图形学领域的一个很有前景的研究方向，在元宇宙等方向有重要应用价值。

2、相关技术中，通常是针对输入图像中的人体的整体进行三维重建，这样重建得到的三维模型的精细度较低。

3、需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现思路

1、本公开的目的在于提供一种三维对象重建方法、装置、电子设备及存储介质，该方法可以获得具有较高面部精度的人体三维模型，提高了人体三维重建的面部的精细度。

2、本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

3、本公开实施例提供一种三维对象重建方法，该方法包括：获取待处理图像，所述待处理图像包括人体；从所述待处理图像中提取获得人体图像和人脸图像；根据所述人体图像确定人体形状参数，并根据所述人体形状参数确定第一人体参数模型；根据所述人脸图像确定人脸形状参数，并根据所述人脸形状参数确定人脸参数模型；将所述第一人体参数模型和所述人脸参数模型进行合并处理，获得第二人体参数模型，所述第二人体参数模型的面部精度高于所述第一人体参数模型的面部精度。

4、在本公开一些示例性实施例中，所述方法还包括：根据所述人体图像获得人体表面信息，所述人体表面信息包括衣物信息和头发信息；根据人体表面信息和所述第二人体参数模型，获得第三人体参数模型。

5、在本公开一些示例性实施例中，从所述待处理图像中提取获得人体图像和人脸图像，包括：将所述待处理图像输入至人体和人脸检测模块中，提取获得所述人体图像和所述人脸图像。

6、在本公开一些示例性实施例中，根据所述人体图像确定人体形状参数，包括：将所述人体图像输入至人体参数模型预测模块中，获得所述人体形状参数；其中，根据所述人体形状参数确定第一人体参数模型，包括：获取预设的人体姿态参数；根据所述人体形状参数和所述人体姿态参数，确定所述第一人体参数模型。

7、在本公开一些示例性实施例中，根据所述人脸图像确定人脸形状参数，包括：将所述人体图像输入至人脸参数模型预测模块中，获得所述人脸形状参数；其中，根据所述人脸形状参数确定人脸参数模型：获取预设的表情参数；根据所述人脸形状参数和所述表情参数，确定所述人脸参数模型。

8、在本公开一些示例性实施例中，将所述第一人体参数模型和所述人脸参数模型进行合并处理，获得第二人体参数模型，包括：使用所述人脸参数模型对应的三角面片替换所述第一人体参数模型中与人脸对应的三角面片，以获得所述第二人体参数模型。

9、在本公开一些示例性实施例中，根据所述人体图像获得人体表面信息，包括：通过基于隐函数建模的表面预测模型对所述人体图像进行处理，获得所述人体表面信息；其中，根据人体表面信息和所述第二人体参数模型，获得第三人体参数模型，包括：将所述人体表面信息和所述第二人体参数模型进行合并处理，获得第三人体参数模型。

10、本公开实施例提供一种三维对象重建装置，包括：获取模块，用于获取待处理图像，所述待处理图像包括人体；提取模块，用于从所述待处理图像中提取获得人体图像和人脸图像；确定模块，用于根据所述人体图像确定人体形状参数，并根据所述人体形状参数确定第一人体参数模型；所述确定模块还用于根据所述人脸图像确定人脸形状参数，并根据所述人脸形状参数确定人脸参数模型；获得模块，用于将所述第一人体参数模型和所述人脸参数模型进行合并处理，获得第二人体参数模型，所述第二人体参数模型的面部精度高于所述第一人体参数模型的面部精度。

11、本公开实施例提供一种电子设备，包括：至少一个处理器；存储终端设备，用于存储至少一个程序，当至少一个程序被至少一个处理器执行时，使得至少一个处理器实现上述任一种三维重建方法。

12、本公开实施例提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一种三维重建方法。

13、本公开实施例提供的三维重建方法，从待处理图像中提取获得人体图像，根据人体图像的人体形状参数建立粗粒度的第一人体参数模型；从待处理图像中提取获得人脸图像，根据人脸形状参数确定具有较高面部精度的人脸参数模型；将第一人体参数模型和人脸参数模型进行合并处理，获得具有较高面部精度的第二人体参数模型，提高了人体三维重建的面部的精细度。

14、应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

技术特征：

1.一种三维重建方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，还包括：

3.根据权利要求1或2所述的方法，其特征在于，从所述待处理图像中提取获得人体图像和人脸图像，包括：

4.根据权利要求1或2所述的方法，其特征在于，根据所述人体图像确定人体形状参数，包括：

5.根据权利要求1或2所述的方法，其特征在于，根据所述人脸图像确定人脸形状参数，包括：

6.根据权利要求1或2所述的方法，其特征在于，将所述第一人体参数模型和所述人脸参数模型进行合并处理，获得第二人体参数模型，包括：

7.根据权利要求2所述的方法，其特征在于，根据所述人体图像获得人体表面信息，包括：

8.一种三维重建装置，其特征在于，包括：

9.一种电子设备，其特征在于，包括：

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法。

技术总结
本公开提供一种三维重建方法、装置、电子设备及存储介质。该方法包括：获取待处理图像，所述待处理图像包括人体；从所述待处理图像中提取获得人体图像和人脸图像；根据所述人体图像确定人体形状参数，并根据所述人体形状参数确定第一人体参数模型；根据所述人脸图像确定人脸形状参数，并根据所述人脸形状参数确定人脸参数模型；将所述第一人体参数模型和所述人脸参数模型进行合并处理，获得第二人体参数模型，所述第二人体参数模型的面部精度高于所述第一人体参数模型的面部精度。

技术研发人员：郑秋宏
受保护的技术使用者：中国电信股份有限公司技术创新中心
技术研发日：
技术公布日：2024/2/29