表情相似度度量方法及装置制造方法
【专利摘要】本发明公开一种基于几何特征的表情相似度度量方法及装置，用于提升刻画表情细微变化和局部细节的能力，寻找到最相似的表情。该表情相似度度量方法包括：利用链码编码获取目标面部区域内的特征点的形状信息；度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息；对两个目标面部区域内的所述形状信息和所述形变信息进行自适应加权，得到所述两个目标面部区域的表情相似距离；以及根据所述表情相似距离获取所述两个目标面部区域的表情相似度度量结果。采用本发明的表情相似度度量方法，对不同类型、不同强度的表情描述具有较好的鲁棒性，尤其是对嘴型、嘴张闭幅度等相似性的度量更具有优势。
【专利说明】表情相似度度量方法及装置
【技术领域】
[0001]本发明涉及人机交互【技术领域】，更具体的，涉及一种表情相似度度量方法及装置。【背景技术】
[0002]随着人机交互的深入和快速发展，面部表情分析成为情感计算当前研究的热点。随着表演驱动在游戏、电影等中广泛应用，近些年研究者们探索各种寻找相似表情的方法以合成高度逼真和自然的表情动画。Ira KemeImacher-ShIizerman等采用LBP提取与表情密切相关的眼睛、嘴巴区域的纹理特征，并用卡方距离衡量相似度以实现不同人间表情映射，能够较好的提取局部特征但在刻画微小变化的表情细节时具有瑕疵。Abhina等引入结构相似性理论并将结构相似度(Structural SIMilarity, SSIM)指数作为表情距离度量方式，通过最近邻(Nearest Neighbor, NN)方法寻找最相似图像,该方法较好的保持了各种表情的形变信息，但其局部细节的描述能力弱，在寻找复杂细节的表情图像时表现欠佳。
[0003]因此，现有技术中存在着刻画表情细微变化和局部细节能力弱的问题。
【发明内容】
[0004]本发明公开一种表情相似度度量方法及装置，用于解决现有技术中存在的刻画表情细微变化和局部细节能力弱的问题。
[0005]为实现上述目的，根据本发明的第一方面，提供一种表情相似度度量方法，并采用如下技术方案:
[0006]表情相似度度量方法，包括:利用链码编码获取目标面部区域内的特征点的形状信息；度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息；对两个目标面部区域内的所述形状信息和所述形变信息进行加权处理，得到所述两个目标面部区域的表情相似距离；以及根据所述表情相似距离获取所述两个目标面部区域的表情相似度度量结果。
[0007]进一步地，所述利用链码编码获取目标面部区域内的特征点的形状信息包括:用顺序连接的具有指定长度和方向的线段描述所述目标面部区域内的区域形状；计算所述线段的每一条线段与水平方向的夹角；根据所述夹角及单位角度对所述区域形状中的特征点进行链码编码，得到链码编码值；对所述链码编码值进行一次差分和非负处理，得到一处理结果；根据所述处理结果组成链码编码向量，得到所述形状信息。
[0008]进一步地，所述度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息包括:确定第一预设值个需要进行获取的形变信息的数量；根据所述目标面部区域中的表情区域的开合幅度、收缩程度以及不同表情区域间的几何信息计算形变信息。
[0009]进一步地，所述对两个目标面部区域内的所述形状信息和所述形变信息进行加权处理，得到所述两个目标面部区域的表情相似距离包括:
[0010]获取表情图像I和表情图像T的几何特征为[0011]I = (L1, D1), T = (LT, DT)；
[0012]L代表图像的形状信息，D代表图像的形变信息，
【权利要求】
1.一种表情相似度度量方法，其特征在于，包括: 利用链码编码获取目标面部区域内的特征点的形状信息； 度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息； 对两个目标面部区域内的所述形状信息和所述形变信息进行加权处理，得到所述两个目标面部区域的表情相似距离； 根据所述表情相似距离获取所述两个目标面部区域的表情相似度度量结果。
2.如权利要求1所述的度量方法，其特征在于，所述利用链码编码获取目标面部区域内的特征点的形状信息包括: 用顺序连接的具有指定长度和方向的线段描述所述目标面部区域内的区域形状； 计算所述线段的每一条线段与水平方向的夹角； 根据所述夹角及单位角度对所述区域形状中的特征点进行链码编码，得到链码编码值； 对所述链码编码值进行一次差分和非负处理，得到一处理结果； 根据所述处理结果组成链码编码向量，得到所述形状信息。
3.如权利要求1所述的度量方法，其特征在于，所述度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息包括: 确定第一预设值个需要进行获取的形变信息的数量； 根据所述目标面部区域中的表情区域的开合幅度、收缩程度以及不同表情区域间的几何信息计算形变信息。
4.如权利要求1所述的度量方法，其特征在于，所述对两个目标面部区域内的所述形状信息和所述形变信息进行加权处理，得到所述两个目标面部区域的表情相似距离包括: 获取表情图像I和表情图像T的几何特征为 I = (L1jD1)jT = (L1, Dt)； L代表图像的形状信息，D代表图像的形变信息，
5.如权利要求4所述的度量方法，其特征在于，确定所述权重系数Wi包括: 筛选第二预设值组数N的相似表情图像(In，Tn)作为训练集，所述权重系数Wi的求解过程转化为最小化式(3)目标函数Jw:
6.如权利要求1所述的度量方法，其特征在于，所述根据所述表情相似距离获取所述两个目标面部区域的表情相似度度量结果包括: 给定一幅表情图像和第三预设值个样本； 通过式(3)计算每个所述样本与所述表情图像的所述表情相似距离； 得到最小的表情相似距离S(I)，作为所述表情相似度度量结果:
7.一种表情相似度度量装置，其特征在于，包括: 第一获取模块，用来利用链码编码获取目标面部区域内的特征点的形状信息； 度量模块，用来度量所述目标面部区域内同一区域内的不相邻的特征点以及所述目标面部区域内的不同区域间特征点获取形变信息； 第一计算模块，用来对两个目标面部区域内的所述形状信息和所述形变信息进行加权处理，得到所述两个目标面部区域的表情相似距离； 第二获取模块，用来根据所述表情相似距离获取所述两个目标面部区域的表情相似度度量结果。
8.如权利要求7所述的度量装置，其特征在于，所述第一获取模块包括: 第一描述模块，用于用顺序连接的具有指定长度和方向的线段描述所述目标面部区域内的区域形状； 第二计算模块，用于计算所述线段的每一条线段与水平方向的夹角；根据所述夹角及单位角度对所述区域形状中的特征点进行链码编码，得到链码编码值； 第三计算模块，用于对所述链码编码值进行一次差分和非负处理，得到一处理结果； 第二描述模块，用于根据所述处理结果组成链码编码向量，得到所述形状信息。
9.如权利要求7所述的度量装置，其特征在于，所述度量模块包括: 第一控制模块，用于预设需要进行获取的形变信息的数量； 第四计算模块，用于根据所述目标面部区域中的表情区域的开合幅度、收缩程度以及不同表情区域间的几何信息计算形变信息。
10.如权利要求7所述的度量装置，其特征在于，所述第一计算模块包括: 第三获取模块，用于获取表情图像I和表情图像T的所述几何特征； 第一计算子模块，用于采用卡方距离公式计算所述表情图像I和所述表情图像T的所述表情相似距离； 第二计算子模块，用于对所述表情图像I和所述表情图像T的特征点加入所述权重系数^，修改所述卡方距离公式，计算所述表情图像I和所述表情图像T加入所述权重系数Wi后的所述表情相似距离。
【文档编号】G06K9/46GK103996029SQ201410222627
【公开日】2014年8月20日 申请日期:2014年5月23日 优先权日:2014年5月23日
【发明者】黄忠, 刘娟, 金中朝, 江巨浪 申请人:安庆师范学院