一种图像处理方法、装置和终端设备的制作方法

文档序号:6509409阅读:133来源:国知局
一种图像处理方法、装置和终端设备的制作方法
【专利摘要】本发明公开了一种图像处理方法和装置,属于图像处理【技术领域】。所述方法包括:构建目标对象的人脸三维模型;将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的三维模型。本发明通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
【专利说明】一种图像处理方法、装置和终端设备
【技术领域】
[0001]本发明涉及图像处理【技术领域】,特别涉及一种图像处理方法、装置和终端设备。
【背景技术】
[0002]在旅游区和体育竞技场等等场合中,我们经常看到游客将彩绘绘制在脸上,然后进行拍照,从而得到更加丰富有趣的照片。随着图像处理和手机应用技术的发展,出现了一些贴图软件,用户可以利用这些贴图软件的贴图功能,在照片中添加花纹,对照片进行美化。
[0003]目前的手机贴图软件在进行人脸面部贴图时,通常是将平面的花纹采用叠加的方式,覆盖到照片上,从而在照片中的人脸上添加花纹。由于人脸照片和花纹均是平面的,花纹和用户想要贴花纹的区域的形状并不是完全匹配的,所以不能使花纹精确贴在用户想要的位置,存在不对称,错位等现象,贴加花纹后的图片真实性较差。

【发明内容】

[0004]为了解决贴加花纹后的图片真实性较差的问题,本发明实施例提供了图像处理方法、装置和终端设备。所述技术方案如下:
[0005]一方面,本发明实施例提供了一种图像处理方法,所述方法包括:
[0006]构建目标对象的人脸三维模型;
[0007]将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的三维模型。
[0008]在一种可能的实现方式中,所述构建目标对象的人脸三维模型,采用如下方式:
[0009]获取所述目标对象的二维照片;
[0010]采用人面部定位算法对所述二维照片中的所述目标对象进行人脸定位,得到人脸定位结果;
[0011]根据所述人脸定位结果对预设的平均人脸三维模型进行变化,得到所述目标对象的人脸三维模型。
[0012]在另一种可能的实现方式中,所述构建目标对象的人脸三维模型,采用如下方式:
[0013]采用深度摄像头获取所述目标对象的面部深度信息数据;
[0014]采用获取到的所述面部深度信息数据构建所述目标对象的人脸三维模型。
[0015]在一种可能的实现方式中,所述将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,采用如下方式:
[0016]根据预设的三维纹理与所述目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到所述目标对象的人脸三维模型上。
[0017]可选地,所述将用户选取的三维纹理加载到所述人脸三维模型上,采用如下方式:[0018]根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置;
[0019]获取用户的纹理修改指令;
[0020]根据所述纹理修改指令,调整所述人脸三维模型上的三维纹理,并将调整后的三维纹理加载到所述人脸三维模型上。
[0021 ] 可选地,所述方法还包括:
[0022]将所述带纹理的人脸三维模型,转换为所述目标对象的二维照片。
[0023]另一方面,本发明实施例还提供了一种图像处理装置,所述装置包括:
[0024]构建模块,用于构建目标对象的人脸三维模型;
[0025]加载模块,将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的三维模型。
[0026]在一种可能的实现方式中,所述构建模块包括:
[0027]获取单元,用于获取所述目标对象的二维照片;
[0028]人脸定位单元,用于采用人面部定位算法对所述二维照片中的所述目标对象进行人脸定位,得到人脸定位结果;
[0029]构建单元,用于根据所述人脸定位结果对预设的平均人脸三维模型进行变化,得到所述目标对象的人脸三维模型。
[0030]在另一种可能的实现方式中,所述构建模块包括:
[0031]摄像单元,用于采用深度摄像头获取所述目标对象的面部深度信息数据;
[0032]生成单元,用于采用获取到的所述面部深度信息数据构建所述目标对象的人脸三维模型。
[0033]在一种可能的实现方式中,所述加载模块,用于根据预设的三维纹理与所述目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到所述目标对象的人脸三维模型上。
[0034]在另一种可能的实现方式中,所述加载模块,包括:
[0035]位置确定单元,用于根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置;
[0036]接收单元,用于获取用户的纹理修改指令;
[0037]加载单元,用于根据所述纹理修改指令,调整所述人脸三维模型上的三维纹理,并将调整后的三维纹理加载到所述人脸三维模型上。
[0038]可选地,所述装置还包括:
[0039]转换模块,用于将所述带纹理的人脸三维模型,转换为所述目标对象的二维照片。
[0040]又一方面,本发明实施例提供了一种终端设备,所述终端设备包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行,所述一个或者一个以上程序包含用于进行以下操作的指令:
[0041]构建目标对象的人脸三维模型;
[0042]将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的人脸三维模型。
[0043]本发明实施例提供的技术方案带来的有益效果是:[0044]通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
【专利附图】

【附图说明】
[0045]为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0046]图1是本发明实施例提供的一种图像处理方法的流程图;
[0047]图2是本发明实施例提供的一种图像处理方法的流程图;
[0048]图3是本发明实施例提供的一种图像处理方法的流程图;
[0049]图4是本发明实施例提供的一种图像处理装置的结构示意图;
[0050]图5是本发明实施例提供的一种图像处理装置的结构示意图;
[0051]图6是本发明实施例提供的一种图像处理装置的结构示意图;
[0052]图7是本发明实施例提供的一种终端设备的硬件结构图。
【具体实施方式】
[0053]为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
[0054]图1显示了本发明实施例提供的一种图像处理方法,该方法的执行主体可以为各种终端设备,终端设备包括但不限于移动终端设备、个人计算机等,参见图1,该方法包括:
[0055]101:构建目标对象的人脸三维模型。
[0056]其中,目标对象可以是二维照片中的人,也可以是某个真实的人。当目标对象为真实的人时,上述执行主体需要带有摄像头。
[0057]102:将用户选取的三维纹理加载到目标对象的人脸三维模型中,得到该目标对象的带纹理的人脸三维模型。
[0058]具体地,可以预先设置一些三维纹理,用户可以根据喜好来选择将哪个三维纹理添加到目标对象的三维模型中。而将用户选取的三维纹理加载到目标对象的人脸三维模型中,可以采用纹理映射的方法。
[0059]本发明实施例通过先构建目标对象的人脸三维模型,再将用户选取的三维纹理加载到目标对象的人脸三维模型中,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
[0060]图2显示了本发明实施例提供的一种图像处理方法,该方法的执行主体可以为各种终端设备,终端设备包括但不限于移动终端、个人计算机等,在本实施例中,该实施例可以带有普通摄像头,也可以不带。参见图2,该方法包括:
[0061]201:获取目标对象的二维照片。
[0062]具体地,可以从某个电子设备存储的图片中选取目标对象的二维照片,也可以是直接用摄像头拍摄得到目标对象的二维照片。[0063]202:采用人面部定位算法对获取到的二维照片中的目标对象进行人脸定位,得到人脸定位结果。
[0064]该步骤202可以包括:利用人脸结构的先验知识对二维照片中的目标对象的人脸的二维特征点进行深度估计,得到人脸的二维特征点对应的三维特征点,即得到上述人脸
定位结果。
[0065]203:根据人脸定位结果对预设的平均人脸三维模型进行变化,得到目标对象的人脸三维模型。
[0066]在终端设备中预设一个平均人脸三维模块,该平均人脸三维模型可以是通过PCA(Principal Component Analysis,主成分分析)训练得到的,根据人脸定位结果中的特征点对预设的平均人脸三维模型进行变化,是根据人脸三维特征点来变化该平均三维人脸模型,从而得到目标对象的人脸三维模型。
[0067]通过上述步骤201?203即可得到目标对象的人脸三维模型。
[0068]204:将用户选取的三维纹理加载到目标对象的人脸三维模型上。
[0069]在实现时,终端设备可以先预先保存多个三维纹理供用户选择,保存的三维纹理的数据包括预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系。例如,若用户想将内容为花朵的三维纹理加载到人嘴部,该对应关系就可以包括花朵中部(例如花蕊)中的各点与人嘴轮廓特征点的对应关系。
[0070]在本发明实施例的一种实现方式中,该步骤204可以包括:根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到目标对象的人脸三维模型上。
[0071]在实现时,加载的过程即采用三维纹理的数据替换目标对象的人脸三维模型的对应的数据,从而得到带纹理的人脸三维模型。
[0072]在本发明实施例的另一实现方式中,该步骤204还可以包括:
[0073]根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置;
[0074]获取用户的纹理修改指令,所述操作指令包括但不限于纹理移动指令和纹理调整指令,其中,纹理移动指令用于整体移动三维纹理,纹理调整指令用于局部修正三维纹理的形状,例如拖动三维纹理的某个边界点的操作指令;
[0075]根据获取到的纹理修改指令,调整人脸三维模型上的三维纹理并将调整后的三维纹理加载到目标对象的人脸三维模型上。
[0076]先根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置,然后再根据用户的纹理修改指令调整三维纹理,通过这种半交互的方式,可以简单快速并且精确地将三维纹理贴合到用户期望的位置。继续以上述花朵的例子为例,先根据花朵中部(例如花蕊)中的各点与人嘴轮廓特征点的对应关系,确定花朵在人嘴部的加载位置,此时,有的人嘴巴和鼻子之间的距离较近,但是花朵整体较大,用户可以通过上述纹理调整指令适当缩小花朵的整体范围,每次调整后,都会显示新的加载位置,直到用户对新的加载位置满意为止,从而将花朵精确调整到用户期望的位置。
[0077]可选地,本发明实施例的方法还可以包括:[0078]205:将带纹理的人脸三维模型,转换为目标对象的二维照片。
[0079]用户可以将带纹理的人脸三维模型以三维图像的形式保存,在需要时,再将其转换为二维照片。容易知道,由于得到的是人脸三维模型,所以用户在将其转换为二维照片时,可以根据需要,调整目标对象的照片的拍摄角度。
[0080]本发明实施例通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
[0081]图3显示了本发明实施例提供的一种图像处理方法,该方法的执行主体可以为各种终端设备,终端设备包括但不限于移动终端设备、个人计算机等,本实施例的执行主体需要带有深度摄像头。参见图3,该方法包括:
[0082]301:采用深度摄像头获取目标对象的面部深度信息数据。
[0083]其中,该深度摄像头可以为Kinect摄像头。该面部深度信息数据可以包括额头、耳部、眼角、鼻端、嘴部等部位的特征点以及面部的表情和动作等。
[0084]通过深度摄像头获取目标对象的面部深度信息数据来构建目标对象的人脸三维模型,由于是直接获取三维的人脸数据信息,无需二维向三维转化,因而构建的三维人脸模型与真实人脸的相似度高,可以使三维纹理加载精度更高、彩绘合成效果更好。
[0085]302:采用获取到的面部深度信息数据构建目标对象的人脸三维模型。
[0086]303:将用户选取的三维纹理加载到目标对象的人脸三维模型上。
[0087]该步骤303的具体实现过程与前述步骤204相同,在此不再赘述。
[0088]本发明实施例通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
[0089]图4显示了本发明实施例提供的一种图像处理装置,该装置可以为终端设备,终端设备包括但不限于移动终端设备、个人计算机等,参见图4,该装置包括:
[0090]构建模块401,用于构建目标对象的人脸三维模型;
[0091]加载模块402,将用户选取的三维纹理加载到目标对象的人脸三维模型上,得到带纹理的三维模型。
[0092]本发明实施例通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
[0093]图5显示了本发明实施例提供的一种图像处理装置,该装置可以为终端设备,终端设备包括但不限于移动终端设备、个人计算机等,参见图5,该装置包括:
[0094]构建模块501,用于构建目标对象的人脸三维模型;
[0095]加载模块502,用于根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到目标对象的人脸三维模型上。
[0096]在本实施例中,构建模块501包括:
[0097]获取单元5011,用于获取目标对象的二维照片;
[0098]人脸定位单元5012,用于采用人面部定位算法对二维照片中的目标对象进行人脸定位,得到人脸定位结果;[0099]构建单元5013,用于根据人脸定位结果对预设的平均人脸三维模型进行变化,得到目标对象的人脸三维模型。
[0100]在本实施例中,加载模块502包括:
[0101]位置确定单元5021,用于根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置;
[0102]接收单元5022,用于获取用户的纹理修改指令;
[0103]加载单元5023,用于根据纹理修改指令,调整人脸三维模型上的三维纹理,并将调整后的三维纹理加载到人脸三维模型上。
[0104]先根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置,然后再根据用户的纹理修改指令调整三维纹理,通过这种半交互的方式,可以简单快速并且精确地将三维纹理贴合到用户期望的位置。
[0105]可选地,该装置还包括:转换模块503,用于将带纹理的人脸三维模型,转换为目标对象的二维照片。用户可以将带纹理的人脸三维模型以三维图像的形式保存,在需要时,再将其转换为二维照片。容易知道,由于得到的是人脸三维模型,所以用户在将其转换为二维照片时,可以根据需要,调整目标对象的照片的拍摄角度。
[0106]本发明实施例通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。
[0107]图6显示了本发明实施例提供的一种图像处理装置,该装置可以为终端设备,终端设备包括但不限于移动终端设备、个人计算机等,参见图6,该装置包括:
[0108]构建模块601,用于构建目标对象的人脸三维模型;
[0109]加载模块602,将用户选取的三维纹理加载到目标对象的人脸三维模型上,得到带纹理的三维模型。
[0110]在本实施例中,构建模块601包括:
[0111]摄像单元6011,用于采用深度摄像头获取目标对象的面部深度信息数据;
[0112]生成单元6012,用于采用获取到的面部深度信息数据构建目标对象的人脸三维模型。
[0113]通过深度摄像头获取目标对象的面部深度信息数据来构建目标对象的人脸三维模型,由于是直接获取三维的人脸数据信息,无需二维向三维转化,因而构建的三维人脸模型与真实人脸的相似度高,可以使三维纹理加载精度更高、彩绘合成效果更好。
[0114]在本实施例中,加载模块602用于根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到目标对象的人脸三维模型上。在实现时,加载的过程即采用三维纹理的数据替换目标对象的人脸三维模型的对应的数据,从而得到带纹理的人脸三维模型。
[0115]可选地,该装置还可以包括转换模块603,用于将带纹理的人脸三维模型,转换为目标对象的二维照片。
[0116]本发明实施例通过构建目标对象的人脸三维模型,将用户选取的三维纹理加载到目标对象的人脸三维模型上,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。[0117]需要说明的是:上述实施例提供的图像处理装置在进行图像处理时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的图像处理装置与图像处理方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
[0118]图7为本发明实施例所涉及的终端设备的结构示意图,该终端设备可以用于实施上述实施例中提供的图像处理方法。具体来讲:
[0119]终端设备700可以包括RF (Radio Frequency,射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解,图7中示出的终端设备结构并不构成对终端设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
[0120]RF电路110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器180处理;另外,将涉及上行的数据发送给基站。通常,RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA (Low Noise Amplifier,低噪声放大器)、双工器等。此外,RF电路110还可以通过无线通信与网络和其他设备通信。该无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS (General Packet Radio Service,通用分组无线服务)、CDMA(CodeDivision Multiple Access,石马分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE (Long Term Evolution,长期演进)、电子邮件、SMS (ShortMessaging Service,短消息服务)等。
[0121]存储器120可用于存储软件程序以及模块,处理器180通过运行存储在存储器120的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据终端设备700的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器120还可以包括存储器控制器,以提供处理器180和输入单元130对存储器120的访问。
[0122]输入单元130可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器180,并能接收处理器180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131,输入单元130还可以包括其他输入设备132。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
[0123]显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端设备700的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141,可选的,可以采用IXD (Liquid Crystal Display,液晶显示器)、OLED (Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的,触敏表面131可覆盖显示面板141,当触敏表面131检测到在其上或附近的触摸操作后,传送给处理器180以确定触摸事件的类型,随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图7中,触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面131与显示面板141集成而实现输入和输出功能。
[0124]终端设备700还可包括至少一种传感器150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板141的亮度,接近传感器可在终端设备700移动到耳边时,关闭显示面板141和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端设备700还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
[0125]音频电路160、扬声器161,传声器162可提供用户与终端设备700之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器180处理后,经RF电路110以发送给比如另一终端设备,或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔,以提供外设耳机与终端设备700的通信。
[0126]WiFi属于短距离无线传输技术,终端设备700通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图7示出了 WiFi模块170,但是可以理解的是,其并不属于终端设备700的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
[0127]处理器180是终端设备700的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行终端设备700的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器180可包括一个或多个处理核心;优选的,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器180中。
[0128]终端设备700还包括给各个部件供电的电源190 (比如电池),优选的,电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
[0129]尽管未示出,终端设备700还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,终端设备的显示单元是触摸屏显示器,终端设备还包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行,该一个或者一个以上程序包含用于进行以下操作的指令:
[0130]构建目标对象的人脸三维模型;
[0131]将用户选取的三维纹理加载到目标对象的人脸三维模型上,得到带纹理的人脸三维模型。
[0132]可选地,该一个或者一个以上程序还包含用于进行以下操作的指令:
[0133]获取目标对象的二维照片;
[0134]采用人面部定位算法对二维照片中的目标对象进行人脸定位,得到人脸定位结果;
[0135]根据人脸定位结果对预设的平均人脸三维模型进行变化,得到目标对象的人脸三维模型。
[0136]可选地,该一个或者一个以上程序还包含用于进行以下操作的指令:
[0137]采用深度摄像头获取目标对象的面部深度信息数据;
[0138]采用获取到的面部深度信息数据构建目标对象的人脸三维模型。
[0139]可选地,该一个或者一个以上程序还包含用于进行以下操作的指令:
[0140]根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到目标对象的人脸三维模型上。
[0141]可选地,该一个或者一个以上程序还包含用于进行以下操作的指令:
[0142]根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置;
[0143]获取用户的纹理修改指令;
[0144]根据纹理修改指令,调整人脸三维模型上的三维纹理,并将调整后的三维纹理加载到人脸三维模型上。
[0145]可选地,该一个或者一个以上程序还包含用于进行以下操作的指令:
[0146]将带纹理的人脸三维模型,转换为目标对象的二维照片。
[0147]本发明实施例通过先构建目标对象的人脸三维模型,再将用户选取的三维纹理加载到目标对象的人脸三维模型中,由于是将三维纹理加载到人脸三维模型中,考虑到了深度效果,所以可以更好地模拟真实生活中的情景,得到更加逼真的类似于面部彩绘的效果。当采用深度摄像头采集人脸数据并建立人脸三维模型时,由于采集的数据准确高,因而构建的三维人脸模型相似度高,三维纹理映射精确度高。通过采用用户参与的半交互式的方式加载三维纹理,并且可以实时显示加载后的效果,还增加了用户的体验性。
[0148]本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
[0149]以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
【权利要求】
1.一种图像处理方法,其特征在于,所述方法包括: 构建目标对象的人脸三维模型; 将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的人脸三维模型。
2.根据权利要求1所述的方法,其特征在于,所述构建目标对象的人脸三维模型,采用如下方式: 获取所述目标对象的二维照片; 采用人面部定位算法对所述二维照片中的所述目标对象进行人脸定位,得到人脸定位结果; 根据所述人脸定位结果对预设的平均人脸三维模型进行变化,得到所述目标对象的人脸三维模型。
3.根据权利要求1所述的方法,其特征在于,所述构建目标对象的人脸三维模型,采用如下方式: 采用深度摄像头获取所述目标对象的面部深度信息数据; 采用获取到的所述面部深度信息数据构建所述目标对象的人脸三维模型。
4.根据权利要求1所述的方法,其特征在于,所述将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,采用如下方式: 根据预设的三维纹理与所.述目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到所述目标对象的人脸三维模型上。
5.根据权利要求1所述的方法,其特征在于,所述将用户选取的三维纹理加载到所述人脸三维模型上,采用如下方式: 根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置; 获取用户的纹理修改指令; 根据所述纹理修改指令,调整所述人脸三维模型上的三维纹理,并将调整后的三维纹理加载到所述人脸三维模型上。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述方法还包括: 将所述带纹理的人脸三维模型,转换为所述目标对象的二维照片。
7.一种图像处理装置,其特征在于,所述装置包括: 构建模块,用于构建目标对象的人脸三维模型; 加载模块,用于将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的三维模型。
8.根据权利要求7所述的装置,其特征在于,所述构建模块包括: 获取单元,用于获取所述目标对象的二维照片; 人脸定位单元,用于采用人面部定位算法对所述二维照片中的所述目标对象进行人脸定位,得到人脸定位结果; 构建单元,用于根据所述人脸定位结果对预设的平均人脸三维模型进行变化,得到所述目标对象的人脸三维模型。
9.根据权利要求7所述的装置,其特征在于,所述构建模块包括:摄像单元,用于采用深度摄像头获取所述目标对象的面部深度信息数据; 生成单元,用于采用获取到的所述面部深度信息数据构建所述目标对象的人脸三维模型。
10.根据权利要求7所述的装置,其特征在于,所述加载模块,用于根据预设的三维纹理与所述目标对象的人脸三维模型的特征点的对应关系,将用户选取的三维纹理加载到所述目标对象的人脸三维模型上。
11.根据权利要求7所述的装置,其特征在于,所述加载模块,包括: 位置确定单元,用于根据预设的三维纹理与目标对象的人脸三维模型的特征点的对应关系,确定三维纹理在人脸三维模型上的加载位置; 接收单元,用于获取用户的纹理修改指令; 加载单元,用于根据所述纹理修改指令,调整所述人脸三维模型上的三维纹理,并将调整后的三维纹理加载到所述人脸三维模型上。
12.根据权利要求7-11任一项所述的方法,其特征在于,所述装置还包括: 转换模块,用于将所述带纹理的人脸三维模型,转换为所述目标对象的二维照片。
13.—种终端设备,其特征在于,所述终端设备包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行,所述一个或者一个以上程序包含用于进行以下操作的指令: 构建目标对象的人脸三维模型; 将用户选取的三维纹理加载到所述目标对象的人脸三维模型上,得到带纹理的人脸三维模型。
【文档编号】G06T17/00GK103473804SQ201310385369
【公开日】2013年12月25日 申请日期:2013年8月29日 优先权日:2013年8月29日
【发明者】王琳 申请人:小米科技有限责任公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1