一种虚拟对象渲染方法及装置的制造方法

一种虚拟对象渲染方法及装置的制造方法
【专利摘要】本发明实施例提供的一种虚拟对象渲染方法及装置，该方法包括：获得待渲染对象的材质和各个模型面的渲染需求；根据所述待渲染对象的材质，从预先建立的材质贴图库中选择与每一个模型面的渲染需求相对应的材质贴图，其中，所述材质贴图库中存储有每一材质的不同渲染需求对应的材质贴图；根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对所述待渲染对象的渲染。应用本发明实施例提供的方法进行虚拟对象渲染时，利用预先根据真实材质得到的材质贴图进行渲染，而无需采用美工绘制的方式，提高了虚拟对象渲染的效果，提高了虚拟场景的真实感。
【专利说明】
一种虚拟对象渲染方法及装置
技术领域
[0001] 本发明涉及图形图像处理技术领域，特别是涉及一种虚拟对象渲染方法及装置。
【背景技术】
[0002] 虚拟现实技术，是一种可以创建和体验虚拟世界的计算机仿真系统。利用计算机 仿真系统生成的数字化模拟场景被称为虚拟场景，用户可以通过鼠标、键盘等与所制作的 虚拟场景进行交互并产生身临其境的体验。目前，虚拟现实技术在游戏、动画等各个领域中 得到了广泛的应用，例如，利用虚拟现实技术制作的网络游戏，等等。
[0003] 虚拟场景中往往是包括多个虚拟对象(简称"对象"）的，例如，在网络游戏中，虚拟 场景中一般可以包括虚拟人物、虚拟房屋、虚拟天空以及虚拟武器装备等多个对象;而每个 对象通常是由多个模型面构成的，其中，模型面可以是三角形的模型面，也可以是四边形的 模型面，等等。为了使得虚拟场景具有真实感，往往要对虚拟场景中所包括的对象进行渲 染，如对对象的光线效果的渲染等，虚拟场景中对象渲染效果的好坏往往直接关系到虚拟 场景的真实感。现有技术中，对于对象的渲染往往是由专业人员根据渲染经验通过美工绘 制方式来完成的。
[0004] 可见，通过美工绘制的方式来渲染虚拟对象时很大程度上会受到专业人员的绘画 程度的限制，导致虚拟场景的真实感不高。

【发明内容】

[0005] 本发明实施例的目的在于提供一种虚拟对象渲染方法及装置，以提高虚拟场景的 真实感。
[0006] 为达到上述目的，本发明实施例公开了一种虚拟对象渲染方法，所述方法包括：
[0007] 获得待渲染对象的材质和各个模型面的渲染需求；
[0008] 根据所述待渲染对象的材质，从预先建立的材质贴图库中选择与每一个模型面的 渲染需求相对应的材质贴图，其中，所述材质贴图库中存储有每一材质的不同渲染需求对 应的材质贴图；
[0009] 根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对所述待渲染对象 的渲染。
[0010] 可选的，通过以下方式建立所述材质贴图库：
[0011] 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单 相机获取预设的材质在不同光照条件下的各个样本图像；
[0012] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利 用非线性优化方法计算所述材质基于不同渲染需求的材质贴图参数；
[0013] 根据所述材质贴图参数，生成所述材质的不同渲染需求对应的各个材质贴图。 [0014]可选的，所述根据各个样本图像的图像信息、各个样本图像对应的光照图案以及 相机位置，利用非线性优化方法计算所述材质基于不同渲染需求的材质贴图参数，包括：
[0015] 通过以下步骤，计算所述材质基于不同渲染需求的材质贴图参数：
[0016] 依据像素点的像素值，利用预设的聚类算法，对所述各个样本图像中的全部像素 点进行聚类处理，获得聚类后的类别；
[0017] 按照预设的像素点遍历规则，确定每一类别中的第一个像素点；
[0018] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利 用非线性优化方法，计算每一类别中第一个像素点的材质贴图参数；
[0019] 根据每一类别中其他像素点与第一个像素点的亮度比值，计算其他像素点的权重 系数，并根据所述每一类中第一个像素点的材质贴图参数计算其他像素点的材质贴图参 数。
[0020] 可选的，所述利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图 案，并利用单相机获取预设的材质在不同光照条件下的各个样本图像，包括：
[0021] 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单 相机，采集所述材质在每一预设光源颜色的不同光照强度下的各个样本图像。
[0022] 可选的，所述材质贴图参数包括:漫反射系数、镜面反射系数、法向量、高光系数；
[0023] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利 用非线性优化方法，计算每一类别中第一个像素点的材质贴图参数，包括：
[0024] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并 按照以下表达式计算每一类别中第一个像素点的材质贴图参数，
[0025]
[0026] 其中，V(x)= Pd (X) · Dot (N(x)，L)+Ps (X) · pow( (Dot (N(x)，H)，g(x) )· Dot (N(x)， U，I(x)为所述各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd(x)为像 素点X的漫反射系数，Ps(X)为像素点X的镜面反射系数，N(X)为像素点X的法向量，g(x)为像 素点X的高光系数，L为像素点X的光源方向，H为像素点X的光源方向与图像采集设备方向的 中间分量。
[0027] 可选的，所述根据所述材质贴图参数，生成所述材质的不同渲染需求对应的各个 材质贴图之后，还包括：
[0028] 利用预先生成的标准材质的标准材质贴图参数，校正计算得到的所述材质的材质 贴图参数。
[0029] 可选的，每一个模型面的渲染需求中包括镜面反射信息、漫反射信息、法向量信息 和尚光?目息；
[0030] 所述材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反射材质贴图、 法向量材质贴图和高光材质贴图。
[0031 ]为达到上述目的，本发明实施例公开了一种虚拟对象渲染装置，所述装置包括：
[0032]信息获得模块，用于获得待渲染对象的材质和各个模型面的渲染需求；
[0033]贴图选择模块，用于根据所述待渲染对象的材质，从预先建立的材质贴图库中选 择与每一个模型面的渲染需求相对应的材质贴图，其中，所述材质贴图库中存储有每一材 质的不同渲染需求对应的材质贴图；
[0034]渲染模块，用于根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对 所述待渲染对象的渲染。
[0035] 可选的，还包括材质贴图库建立模块，所述材质贴图库建立模块包括：图像获得子 模块、贴图参数计算子模块、材质贴图生成子模块;其中，
[0036] 所述图像获得子模块，用于利用显示器作为面光源，基于傅里叶变换模拟出不同 形状的光照图案，并利用单相机获取预设的材质在不同光照条件下的各个样本图像；
[0037]所述贴图参数计算子模块，用于根据各个样本图像的图像信息、各个样本图像对 应的光照图案以及相机位置，利用非线性优化方法计算所述材质基于不同渲染需求的材质 贴图参数；
[0038] 所述材质贴图生成子模块，用于根据所述材质贴图参数，生成所述材质的不同渲 染需求对应的各个材质贴图。
[0039] 可选的，所述贴图参数计算子模块，包括:聚类单元、像素点确定单元、第一贴图参 数计算单元、第二贴图参数计算单元;其中，
[0040] 所述聚类单元，用于依据像素点的像素值，利用预设的聚类算法，对所述各个样本 图像中的全部像素点进行聚类处理，获得聚类后的类别；
[0041] 所述像素点确定单元，用于按照预设的像素点遍历规则，确定每一类别中的第一 个像素点；
[0042] 所述第一贴图参数计算单元，用于根据各个样本图像的图像信息、各个样本图像 对应的光照图案以及相机位置，利用非线性优化方法，计算每一类别中第一个像素点的材 质贴图参数；
[0043] 所述第二贴图参数计算单元，用于根据每一类别中其他像素点与第一个像素点的 亮度比值，计算其他像素点的权重系数，并根据所述每一类中第一个像素点的材质贴图参 数计算其他像素点的材质贴图参数。
[0044]可选的，所述图像获得子模块，具体用于：
[0045] 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单 相机，采集所述材质在每一预设光源颜色的不同光照强度下的各个样本图像。
[0046] 可选的，所述材质贴图参数包括:漫反射系数、镜面反射系数、法向量、高光系数；
[0047] 所述第一贴图参数计算单元，具体用于：
[0048]根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并 按照以下表达式计算每一类别中第一个像素点的材质贴图参数，
[0049]
[0050] 其中，V(x)= Pd (X) · Dot (N(x)，L)+Ps (X) · pow( (Dot (N(x)，H)，g(x) )· Dot (N(x)， U，I(x)为所述各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd(x)为像 素点X的漫反射系数，Ps(X)为像素点X的镜面反射系数，N(X)为像素点X的法向量，g(x)为像 素点X的高光系数，L为像素点X的光源方向，H为像素点X的光源方向与图像采集设备方向的 中间分量。
[0051 ]可选的，还包括:贴图参数校正模块，用于：
[0052]在所述材质贴图生成子模块根据所述材质贴图参数获得与所述材质的不同渲染 需求对应的各个材质贴图之后，利用预先生成的标准材质的标准材质贴图参数，校正计算 得到的所述材质的材质贴图参数。
[0053] 可选的，每一个模型面的渲染需求中包括镜面反射信息、漫反射信息、法向量信息 和尚光?目息；
[0054] 所述材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反射材质贴图、 法向量材质贴图和高光材质贴图。
[0055] 本发明实施例提供一种虚拟对象渲染方法及装置。在进行虚拟对象渲染时，首先 获得待渲染对象的材质和各个模型面的渲染需求，然后根据待渲染对象的材质，从预先建 立的材质贴图库中选择与每一个模型面的渲染需求相对应的材质贴图，最后根据所选择的 各个材质贴图对每一模型面进行渲染，进而完成对所述待渲染对象的渲染。应用本发明实 施例提供的方法进行虚拟对象渲染时，利用预先根据真实材质得到的材质贴图进行渲染， 而无需采用美工绘制的方式，提高了虚拟对象渲染的效果，提高了虚拟场景的真实感。
【附图说明】
[0056] 为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现 有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本 发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以 根据这些附图获得其他的附图。
[0057]图1为本发明实施例提供的一种虚拟对象渲染方法的流程示意图；
[0058]图2为本发明实施例提供的一种虚拟对象渲染装置的结构示意图。
【具体实施方式】
[0059] 下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完 整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于 本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他 实施例，都属于本发明保护的范围。
[0060] 如图1所示，为本发明实施例提供的一种虚拟对象渲染方法的流程示意图，该方法 可以包括以下步骤：
[0061] 步骤S101:获得待渲染对象的材质和各个模型面的渲染需求。
[0062] 材质，可以理解成材料和质感的结合，其表面具有特定的可视属性，简而言之，就 是物体看起来是什么质地。这些可视属性是指表面的色彩、纹理、光滑度、透明度、反射率、 折射率、发光度等。
[0063] 对于不同的材质而言，往往具有不同的可视属性，因此，对不同材质的模型面进行 渲染时的渲染需求也往往是不同的。
[0064] 这里提及的"渲染需求"，为用于指示如何对待渲染对象进行渲染的信息。
[0065] 需要说明的是，本领域内的技术人员可以根据实际应用中的具体情况，合理设定 针对待渲染对象的渲染需求。
[0066] -种实现方式中，每一个模型面的渲染需求中具体可以包括:镜面反射信息、漫反 射信息、法向量信息和高光信息。举例而言，对于镜面渲染效果而言，渲染需求可以包括:镜 面反射信息和法向量;对于漫反射渲染效果而言，渲染需求可以包括:漫反射信息和法向 量，需要说明的是，这里仅仅是列举了几种具体的渲染需求，当然还可以有其他的渲染需 求，在此不再一一列举。
[0067]当然，实际应用中，每一模型面的渲染需求还可以包括除上述列举的四种渲染需 求以外的其他信息，本发明实施例不需要对渲染需求的具体内容进行限定。
[0068]步骤S102:根据待渲染对象的材质，从预先建立的材质贴图库中选择与每一个模 型面的渲染需求相对应的材质贴图。
[0069] 其中，材质贴图库中存储有每一材质的不同渲染需求对应的材质贴图。
[0070] 需要说明的是，材质贴图库中存储有多种材质的材质贴图，每一材质又可以包括 多种材质贴图，每一材质贴图与每一材质的具体渲染需求是一一对应的。举例而言，若用于 指示如何对材质A进行渲染的渲染需求中包括:镜面反射信息和法向量，则材质贴图库中材 质A应该至少包括:镜面反射材质贴图和法向量材质贴图。
[0071] -种实现方式中，材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反 射材质贴图、法向量材质贴图和高光材质贴图。当然，这里仅仅是举例说明而已，材质贴图 库中所存储的每一材质对应的材质贴图还可以包括除所列举的这四种材质贴图以外的贴 图。但是，材质贴图库中每一材质所对应的材质贴图至少需要包括与步骤SlOl中所提及的 渲染需求中的每一具体渲染需求对应的材质贴图。
[0072] 在本发明的一种具体实施例中，可以通过以下方式建立材质贴图库：
[0073] (11)利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利 用单相机获取预设的材质在不同光照条件下的各个样本图像。
[0074] 具体来说，获取预设的材质在不同光照条件下的各个样本图像，可以按照以下方 式进行:采集预设的材质在每一预设光源颜色的不同光照强度下的各个样本图像，其中，光 源形状可变。
[0075] 这里提及的预设光源颜色的不同光照强度，是指在进行样本图像的采集过程中， 光源的颜色可以是不同的，例如，白色光源、蓝色光源、红色光源等等，另外，即使是使用同 样颜色的光源，例如白色光源，光照强度也可以是不同的，例如，白色强光、白色弱光等等。
[0076] 需要说明的是，之所以采集不同光照条件下的样本图像，目的是为了增加预设的 材质的样本的多样性，以保证进行后续处理时能够得到较准确的材质贴图。
[0077] -种实现方式中，预设光源可以为面光源，实际应用中，可以用液晶显示器来模拟 不同光照条件的光源，这样能够大大降低真实光源的成本，且应用起来比较便捷。当然，这 里仅仅是举例说明，本发明实施例并不需要对预设光源的颜色和光照强度进行限定，本领 域内的技术人员需要根据实际应用中的具体情况进行合理的设置。
[0078] (12)根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位 置，利用非线性优化方法计算该材质基于不同渲染需求的材质贴图参数。
[0079]材质贴图参数，是指用于对待渲染对象进行渲染的材质贴图的具体数值，材质贴 图参数中可以包括多种具体的参数，且每一材质贴图的具体参数与每一渲染需求中的具体 渲染需求是一一对应的。举例而言，针对渲染需求中的镜面反射信息而言，材质贴图参数中 有镜面反射贴图参数与其对应。进一步来讲，渲染需求、材质贴图和材质贴图参数中所包括 的具体内容均是一一对应的，例如，镜面反射信息（属于渲染需求）、镜面反射材质贴图（属 于材质贴图）、和镜面反射材质贴图参数(属于材质贴图参数)两两之间均是一一对应的关 系。
[0080] 具体的，通过以下步骤，获得材质基于每一渲染需求的材质贴图参数：
[0081] (12-1)依据像素点的像素值，利用预设的聚类算法，对各个样本图像中的全部像 素点进行聚类处理，获得聚类后的类别。
[0082] 这里提及的预设的聚类算法可以是现有技术中常用的聚类算法，例如，K-means聚 类算法，这里不再对现有技术中的聚类算法进行描述。
[0083]另外，对于聚类后的类别的数目可以由本领域内的技术人员根据实际应用中的具 体情况进行合理的设置，本发明并不需要对此进行限定。
[0084] (12-2)按照预设的像素点遍历规则，确定每一类别中的第一个像素点。
[0085] -种实现方式中，可以按照所采集的样本图像的顺序，针对每一样本图像按照逐 行扫描的方式进行遍历，当扫描到与聚类后的类别相同的像素点时，确定定该像素点为该 类别中的第一个像素点，然后，再进行下一个类别的扫描。
[0086] 举例而言，假设按照采集顺序分别采集了I^I2和I3三张样本图像，聚类后的类别 SC 1X2。首先，将&确定为当前类别，从I1开始扫描图像，当扫描到^中坐标为(2,3)像素点 时，扫描到与C 1类别相同的像素点P1,则将像素点P1确定为(^类别的第一个像素点；然后再 将C 2确定为当前类别，按照同样的扫描方式进行扫描，当扫描到当扫描到I2中坐标为(5，6) 像素点时，扫描到与C 2类别相同的像素点P2,则将像素点P2确定为(：2类别的第一个像素点， 遍历结束。
[0087] 另一种实现方式中，可以按照聚类后的类别进行，针对每一类别中的像素点的聚 类顺序进行遍历，当扫描到与聚类后的类别相同的像素点时，确定该像素点为该类别中的 第一个像素点，然后，再进行下一个类别的扫描。
[0088] 举例而言，同样假设聚类后的类别为C1X2,其中，C冲包括Pn、P12、P 13和P14四个像 素点，C2中包括P21、P 22、P23和P24四个像素点。首先，将&确定为当前类别，从&类别开始扫描， 当扫描到像素点P 12时，扫描到与C1类别相同的像素点，则将像素点P12确定为C1类别的第一 个像素点;然后再将(： 2确定为当前类别，按照同样的扫描方式进行扫描，当扫描到当扫描到 像素点P23时，扫描到与C 2类别相同的像素点，则将像素点P23确定为&类别的第一个像素点， 遍历结束。
[0089]需要说明的是，上述列举的两种实现方式仅仅是举例说明而已，本发明实施例不 需要对具体的像素点遍历规则进行限定，任何可能的实现方式均可以应用于本发明。
[0090] (12-3)根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位 置，利用非线性优化方法，计算每一类别中第一个像素点的材质贴图参数。
[0091] -种实现方式中，材质贴图参数可以包括:漫反射系数、镜面反射系数、法向量、高 光系数；
[0092] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利 用非线性优化方法，计算每一类别中第一个像素点的材质贴图参数，可以包括：
[0093]根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并 按照以下表达式计算每一类别中第一个像素点的材质贴图参数，
[0094]
[0095] 其中，￥(叉）=卩(](叉）*〇〇1:(1^(叉）丄）+03(叉）*卩〇￥((〇〇1:(1^(叉），!〇，区（叉））*〇〇1:(1^(叉）， U，I (x)为各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd(x)为像素点x 的漫反射系数，Ps(X)为像素点X的镜面反射系数，N(X)为像素点X的法向量，g(x)为像素点X 的高光系数，L为像素点X的光源方向，H为像素点X的光源方向与图像采集设备方向的中间 分量。
[0096] -种实现方式中，可以按照以下方式获得像素点的光源方向L、像素点的光源方向 与图像采集设备方向的中间分量H:
[0097]按照预设的图像校正规则，对获取的各个样本图像进行图像校正；
[0098]根据图像校正的数据计算光源方向L、中间分量H。
[0099]需要说明的是，这里所提及的像素点的光源方向L、像素点的光源方向与图像采集 设备方向的中间分量H与样本图像采集时的硬件的位置关系有关，实际应用中，除了可以通 过上面提及的通过图像校正的方式来获得光源方向L和中间分量H的方式以为，还可以利用 其它方式，例如借助测量仪器手动测量等等。当然，本发明实施例并不需要对光源方向L和 中间分量H的获得方式进行限定，任何可能的实现方式均可以应用于本发明。
[0100] (12-4)根据每一类别中其他像素点与第一个像素点的亮度比值，计算其他像素点 的权重系数，并根据每一类中第一个像素点的材质贴图参数计算其他像素点的材质贴图参 数。
[0101] 可以看出，在获得材质贴图参数的过程中，实际上仅仅对聚类后所确定的属于每 一类别的第一个像素点的材质贴图参数进行了相关计算，而对于每一类别中除第一个像素 点以为的其他材质贴图参数仅仅是复制了同类别中的第一个像素点的材质贴图参数，由于 图像数据中像素点通常都是成千上万的，因此，利用由步骤（12-1)至步骤（12-4)提供的方 法，大大降低了计算材质贴图参数的计算量。
[0102] (13)根据该材质贴图参数，生成该材质的不同渲染需求对应的各个材质贴图。
[0103] -种实现方式中，步骤(13)根据材质贴图参数获得与材质的不同渲染需求对应的 各个材质贴图之后，还可以包括：
[0104] (14)利用预先生成的标准材质的标准材质贴图参数，校正计算得到的材质贴图参 数。
[0105] 通过利用标准材质的标准材质贴图参数对计算得到的材质贴图参数的校正，能够 尽可能的对计算失真的材质贴图参数进行修正，这样进一步保证了材质贴图参数的准确程 度和真实感。
[0106] 步骤S103:根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对待渲 染对象的渲染。
[0107]应用本发明实施例提供的方法进行虚拟对象渲染时，利用预先根据真实材质得到 的材质贴图进行渲染，而无需采用美工绘制的方式，提高了虚拟对象渲染的效果，提高了虚 拟场景的真实感。
[0108]进一步的，现有技术中采用美工绘制的方式获得材质贴图，即使是对于相同材质 的同一材质贴图仍需要美工绘制一次，而本发明实施例提供的方案进行虚拟对象渲染时， 对每一模型面进行渲染所利用的各个材质贴图是从预先建立的材质贴图库中选择得到的， 当材质贴图库建立以后，仅仅是选择合适的材质贴图进行渲染即可，无需再次进行美工绘 制或建立材质贴图库，因此，大大降低了虚拟对象渲染的工作量，提高了虚拟对象渲染的效 率。
[0109] 如图2所示，为本发明实施例提供的一种虚拟对象渲染装置的结构示意图，该装置 可以包括以下模块：
[0110] 信息获得模块210,用于获得待渲染对象的材质和各个模型面的渲染需求。
[0111] 贴图选择模块220,用于根据待渲染对象的材质，从预先建立的材质贴图库中选择 与每一个模型面的渲染需求相对应的材质贴图。
[0112] 其中，材质贴图库中存储有每一材质的不同渲染需求对应的材质贴图。
[0113] 渲染模块230,用于根据所选择的各个材质贴图对每一模型面进行渲染，进而完成 对待渲染对象的渲染。
[0114] 具体的，还可以包括材质贴图库建立模块，材质贴图库建立模块可以包括:图像获 得子模块、贴图参数计算子模块、材质贴图生成子模块。
[0115] 其中，图像获得子模块，用于利用显示器作为面光源，基于傅里叶变换模拟出不同 形状的光照图案，并利用单相机获取预设的材质在不同光照条件下的各个样本图像。
[0116] 贴图参数计算子模块，用于根据各个样本图像的图像信息、各个样本图像对应的 光照图案以及相机位置，利用非线性优化方法计算该材质基于不同渲染需求的材质贴图参 数。
[0117] 材质贴图生成子模块，用于根据材质贴图参数，生成该材质的不同渲染需求对应 的各个材质贴图。
[0118] 具体的，贴图参数计算子模块，可以包括:聚类单元、像素点确定单元、第一贴图参 数计算单元、第二贴图参数计算单元。
[0119] 其中，聚类单元，用于依据像素点的像素值，利用预设的聚类算法，对各个样本图 像中的全部像素点进行聚类处理，获得聚类后的类别。
[0120] 像素点确定单元，用于按照预设的像素点遍历规则，确定每一类别中的第一个像 素点。
[0121]第一贴图参数计算单元，用于根据各个样本图像的图像信息、各个样本图像对应 的光照图案以及相机位置，利用非线性优化方法，计算每一类别中第一个像素点的材质贴 图参数。
[0122] 第二贴图参数计算单元，用于根据每一类别中其他像素点与第一个像素点的亮度 比值，计算其他像素点的权重系数，并根据每一类中第一个像素点的材质贴图参数计算其 他像素点的材质贴图参数。
[0123] 具体的，图像获得子模块，具体用于：
[0124] 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单 相机，采集该材质在每一预设光源颜色的不同光照强度下的各个样本图像。
[0125] 具体的，材质贴图参数可以包括:漫反射系数、镜面反射系数、法向量、高光系数。
[0126] 第一贴图参数计算单元，具体用于：
[0127] 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并 按照以下表达式计算每一类别中第一个像素点的材质贴图参数，
[0128]
[0129] 其中，V(x) =Pd(X) · Dot(N(x)，L)+ps(x) · pow( (Dot(N(x)，H)，g(x)) · Dot(N(x)， U，I (x)为各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd(x)为像素点x 的漫反射系数，Ps(X)为像素点X的镜面反射系数，N(X)为像素点X的法向量，g(x)为像素点X 的高光系数，L为像素点X的光源方向，H为像素点X的光源方向与图像采集设备方向的中间 分量。
[0130] 具体的，还可以包括:贴图参数校正模块，用于：
[0131] 在材质贴图生成子模块根据材质贴图参数获得与材质的不同渲染需求对应的各 个材质贴图之后，利用预先生成的标准材质的标准材质贴图参数，校正计算得到的材质的 材质贴图参数。
[0132] 具体的，每一个模型面的渲染需求中可以包括镜面反射信息、漫反射信息、法向量 十目息和尚光?目息。
[0133] 材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反射材质贴图、法向 量材质贴图和高光材质贴图。
[0134] 应用本发明实施例提供的方法进行虚拟对象渲染时，利用预先根据真实材质得到 的材质贴图进行渲染，而无需采用美工绘制的方式，提高了虚拟对象渲染的效果，提高了虚 拟场景的真实感。
[0135] 进一步的，现有技术中采用美工绘制的方式获得材质贴图，即使是对于相同材质 的同一材质贴图仍需要美工绘制一次，而本发明实施例提供的方案进行虚拟对象渲染时， 对每一模型面进行渲染所利用的各个材质贴图是从预先建立的材质贴图库中选择得到的， 当材质贴图库建立以后，仅仅是选择合适的材质贴图进行渲染即可，无需再次进行美工绘 制或建立材质贴图库，因此，大大降低了虚拟对象渲染的工作量，提高了虚拟对象渲染的效 率。
[0136] 对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关 之处参见方法实施例的部分说明即可。
[0137] 需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实 体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存 在任何这种实际的关系或者顺序。而且，术语"包括"、"包含"或者其任何其他变体意在涵盖 非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要 素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备 所固有的要素。在没有更多限制的情况下，由语句"包括一个……"限定的要素，并不排除在 包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0138] 本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可 以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读取存储介质中， 这里所称得的存储介质，如:R0M/RAM、磁碟、光盘等。
[0139] 以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在 本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围 内。
【主权项】
1. 一种虚拟对象渲染方法，其特征在于，所述方法包括： 获得待渲染对象的材质和各个模型面的渲染需求； 根据所述待渲染对象的材质，从预先建立的材质贴图库中选择与每一个模型面的渲染 需求相对应的材质贴图，其中，所述材质贴图库中存储有每一材质的不同渲染需求对应的 材质贴图； 根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对所述待渲染对象的渲 染。2. 根据权利要求1所述的方法，其特征在于，通过以下方式建立所述材质贴图库： 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单相机 获取预设的材质在不同光照条件下的各个样本图像； 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利用非 线性优化方法计算所述材质基于不同渲染需求的材质贴图参数； 根据所述材质贴图参数，生成所述材质的不同渲染需求对应的各个材质贴图。3. 根据权利要求2所述的方法，其特征在于，所述根据各个样本图像的图像信息、各个 样本图像对应的光照图案以及相机位置，利用非线性优化方法计算所述材质基于不同渲染 需求的材质贴图参数，包括： 通过以下步骤，计算所述材质基于不同渲染需求的材质贴图参数： 依据像素点的像素值，利用预设的聚类算法，对所述各个样本图像中的全部像素点进 行聚类处理，获得聚类后的类别； 按照预设的像素点遍历规则，确定每一类别中的第一个像素点； 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利用非 线性优化方法，计算每一类别中第一个像素点的材质贴图参数； 根据每一类别中其他像素点与第一个像素点的亮度比值，计算其他像素点的权重系 数，并根据所述每一类中第一个像素点的材质贴图参数计算其他像素点的材质贴图参数。4. 根据权利要求2或3所述的方法，其特征在于，所述利用显示器作为面光源，基于傅里 叶变换模拟出不同形状的光照图案，并利用单相机获取预设的材质在不同光照条件下的各 个样本图像，包括： 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单相机， 采集所述材质在每一预设光源颜色的不同光照强度下的各个样本图像。5. 根据权利要求3所述的方法，其特征在于，所述材质贴图参数包括:漫反射系数、镜面 反射系数、法向量、高光系数； 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，利用非 线性优化方法，计算每一类别中第一个像素点的材质贴图参数，包括： 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并按照 以下表达式计算每一类别中第一个像素点的材质贴图参数，其中，V(x)=Pd(x) ·Οο?(Ν(χ)，υ+ρ；?(χ) ·ρ〇￥((Οο?(Ν(χ)，Η)Α(χ)) ·Οο?(Ν(χ)，υ，Ι (x)为所述各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd (χ)为像素点χ 的漫反射系数，ps(x)为像素点X的镜面反射系数，N(x)为像素点x的法向量，g(x)为像素点x 的高光系数，L为像素点X的光源方向，Η为像素点X的光源方向与图像采集设备方向的中间 分量。6. 根据权利要求2或3所述的方法，其特征在于，所述根据所述材质贴图参数，生成所述 材质的不同渲染需求对应的各个材质贴图之后，还包括： 利用预先生成的标准材质的标准材质贴图参数，校正计算得到的所述材质的材质贴图 参数。7. 根据权利要求1所述的方法，其特征在于， 每一个模型面的渲染需求中包括镜面反射信息、漫反射信息、法向量信息和高光信息； 所述材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反射材质贴图、法向 量材质贴图和高光材质贴图。8. -种虚拟对象渲染装置，其特征在于，所述装置包括： 信息获得模块，用于获得待渲染对象的材质和各个模型面的渲染需求； 贴图选择模块，用于根据所述待渲染对象的材质，从预先建立的材质贴图库中选择与 每一个模型面的渲染需求相对应的材质贴图，其中，所述材质贴图库中存储有每一材质的 不同渲染需求对应的材质贴图； 渲染模块，用于根据所选择的各个材质贴图对每一模型面进行渲染，进而完成对所述 待渲染对象的渲染。9. 根据权利要求8所述的装置，其特征在于，还包括材质贴图库建立模块，所述材质贴 图库建立模块包括:图像获得子模块、贴图参数计算子模块、材质贴图生成子模块;其中， 所述图像获得子模块，用于利用显示器作为面光源，基于傅里叶变换模拟出不同形状 的光照图案，并利用单相机获取预设的材质在不同光照条件下的各个样本图像； 所述贴图参数计算子模块，用于根据各个样本图像的图像信息、各个样本图像对应的 光照图案以及相机位置，利用非线性优化方法计算所述材质基于不同渲染需求的材质贴图 参数； 所述材质贴图生成子模块，用于根据所述材质贴图参数，生成所述材质的不同渲染需 求对应的各个材质贴图。10. 根据权利要求9所述的装置，其特征在于，所述贴图参数计算子模块，包括:聚类单 元、像素点确定单元、第一贴图参数计算单元、第二贴图参数计算单元;其中， 所述聚类单元，用于依据像素点的像素值，利用预设的聚类算法，对所述各个样本图像 中的全部像素点进行聚类处理，获得聚类后的类别； 所述像素点确定单元，用于按照预设的像素点遍历规则，确定每一类别中的第一个像 素点； 所述第一贴图参数计算单元，用于根据各个样本图像的图像信息、各个样本图像对应 的光照图案以及相机位置，利用非线性优化方法，计算每一类别中第一个像素点的材质贴 图参数； 所述第二贴图参数计算单元，用于根据每一类别中其他像素点与第一个像素点的亮度 比值，计算其他像素点的权重系数，并根据所述每一类中第一个像素点的材质贴图参数计 算其他像素点的材质贴图参数。11. 根据权利要求9或10所述的装置，其特征在于，所述图像获得子模块，具体用于： 利用显示器作为面光源，基于傅里叶变换模拟出不同形状的光照图案，并利用单相机， 采集所述材质在每一预设光源颜色的不同光照强度下的各个样本图像。12. 根据权利要求10所述的装置，其特征在于，所述材质贴图参数包括:漫反射系数、镜 面反射系数、法向量、高光系数； 所述第一贴图参数计算单元，具体用于： 根据各个样本图像的图像信息、各个样本图像对应的光照图案以及相机位置，并按照 以下表达式计算每一类别中第一个像素点的材质贴图参数，其中，V(x)=Pd(x) ·Οο?(Ν(χ)，υ+ρ；?(χ) ·ρ〇￥((Οο?(Ν(χ)，Η)Α(χ)) ·Οο?(Ν(χ)，υ，Ι (x)为所述各个样本图像中与第一个像素点坐标相同的像素点x的像素值，Pd (χ)为像素点χ 的漫反射系数，Ps(x)为像素点X的镜面反射系数，N(x)为像素点X的法向量，g(x)为像素点X 的高光系数，L为像素点χ的光源方向，Η为像素点χ的光源方向与图像采集设备方向的中间 分量。13. 根据权利要求9或10所述的装置，其特征在于，还包括:贴图参数校正模块，用于： 在所述材质贴图生成子模块根据所述材质贴图参数获得与所述材质的不同渲染需求 对应的各个材质贴图之后，利用预先生成的标准材质的标准材质贴图参数，校正计算得到 的所述材质的材质贴图参数。14. 根据权利要求8所述的装置，其特征在于， 每一个模型面的渲染需求中包括镜面反射信息、漫反射信息、法向量信息和高光信息； 所述材质贴图库中存储有每一材质对应的镜面反射材质贴图、漫反射材质贴图、法向 量材质贴图和高光材质贴图。
【文档编号】G06T15/00GK106056658SQ201610349066
【公开日】2016年10月26日
【申请日】2016年5月23日
【发明人】崔树林, 杨林, 武韬, 郭炜炜, 吴云, 黄衫
【申请人】珠海金山网络游戏科技有限公司