一种图像检索方法、装置、终端及计算机可读存储介质与流程

本发明涉及图像处理，特别是涉及一种图像检索方法、装置、终端及计算机可读存储介质。

背景技术：

1、异质人像是指素描、动漫化等的人像图，异质人像检索是指通过异质人像检索到真实可见光相机拍摄的同一人的人像图。真实人像图的检索，当前已是很成熟的技术，但基于素描、动漫化等图像对真实人像图像检索比较困难，由于素描、动漫化等图像相比于真实人像图像损失了较多的特征信息。

技术实现思路

1、本发明主要解决的技术问题是提供一种图像检索方法、装置、终端及计算机可读存储介质，解决现有技术中异质人像检索结果准确率不佳的问题。

2、为解决上述技术问题，本发明采用的第一个技术方案是：提供一种图像检索方法，图像检索方法包括：获取待检索异质人脸图像和预设数据库，预设数据库包括多个真实人脸图像，各真实人脸图像关联有对应的三维人脸图像；基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像；基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度；基于各三维人脸图像对应的相似度，确定待检索异质人脸图像的检索结果。

3、其中，真实人脸图像和待检索异质人脸图像分别具有对应的属性信息；基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像的步骤之前，包括：对预设数据库中的真实人脸图像进行筛选；其中，筛选真实人脸图像的步骤包括：基于待检索异质人脸图像的属性信息对预设数据库中的真实人脸图像进行筛选；和/或；对真实人脸图像进行异质转换，得到真实人脸图像的异质人脸转换图像；基于异质人脸转换图像与待检索异质人脸图像之间的相似度对真实人脸图像进行筛选。

4、其中，基于异质人脸转换图像与待检索异质人脸图像之间的相似度对真实人脸图像进行筛选，包括：对异质人脸转换图像和待检索异质人脸图像分别进行特征提取，得到异质人脸转换图像和待检索异质人脸图像分别对应的特征图；基于异质人脸转换图像的特征图和待检索异质人脸图像的特征图之间的相似度，确定真实人脸图像与待检索异质人脸图像之间的人脸相似度；响应于人脸相似度不符合预设要求，则将人脸相似度对应的真实人脸图像滤除。

5、其中，基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像，包括：采用纹理生成模型基于待检索异质人脸图像和三维人脸图像进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像以及各异质人脸生成图像与待检索异质人脸图像的纹理匹配度。

6、其中，异质人脸生成图像具有对应的纹理匹配度，基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度的步骤之前，包括：响应于异质人脸生成图像至少为两张，则将异质人脸生成图像根据对应的纹理匹配度从大到小进行排序；响应于至少两张异质人脸生成图像的纹理匹配度均大于匹配度阈值，则基于当前的异质人脸生成图像的纹理匹配度与当前的异质人脸生成图像之前的各异质人脸生成图像的纹理匹配度确定当前的异质人脸生成图像的累加匹配度；响应于累加匹配度大于累加匹配度阈值，则将累加匹配度对应的异质人脸生成图像滤除。

7、其中，基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度，包括：对异质人脸生成图像进行特征提取得到异质人脸生成图像的特征图；基于异质人脸生成图像的特征图与待检索异质人脸图像的特征图之间的特征相似度，确定异质人脸生成图像与待检索异质人脸图像之间的相似度；选取异质人脸生成图像与待检索异质人脸图像对应的最大相似度作为三维人脸图像与待检索异质人脸图像之间的相似度。

8、其中，基于各三维人脸图像对应的相似度，确定待检索异质人脸图像的检索结果，包括：将各三维人脸图像根据对应的相似度的大小进行排序；提取排序靠前的预设数量的三维人脸图像对应的真实人脸图像作为待检索异质人脸图像的检索结果。

9、为解决上述技术问题，本发明采用的第二个技术方案是：提供一种图像检索装置，图像检索装置包括：获取模块，用于获取待检索异质人脸图像和预设数据库，预设数据库包括多个真实人脸图像，各真实人脸图像关联有对应的三维人脸图像；纹理匹配模块，用于基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像；分析模块，用于基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度；处理模块，用于基于各三维人脸图像对应的相似度，确定待检索异质人脸图像的检索结果。

10、为解决上述技术问题，本发明采用的第三个技术方案是：提供一种终端，终端包括存储器、处理器以及存储于存储器中并在处理器上运行的计算机程序，处理器用于执行程序数据以实现如上述的图像检索方法中的步骤。

11、为解决上述技术问题，本发明采用的第四个技术方案是：提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述的图像检索方法中的步骤。

12、本发明的有益效果是：区别于现有技术的情况，提供的一种图像检索方法、装置、终端及计算机可读存储介质，图像检索方法包括：获取待检索异质人脸图像和预设数据库，预设数据库包括多个真实人脸图像，各真实人脸图像关联有对应的三维人脸图像；基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像；基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度。本申请提供的图像检索方法，基于待检索异质人脸图像对三维人脸图像进行纹理匹配，确定三维人脸图像对应的异质人脸生成图像，基于特征更完善的三维人脸图像得到的异质人脸生成图像具有与待检索异质人脸图像更匹配的特征信息，提高异质人脸生成图像的可靠性；将检索异质人脸图像与三维人脸图像对应的异质人脸生成图像进行比对，确定待检索异质人脸图像的检索结果，进而提高了检索结果的准确率。

技术特征：

1.一种图像检索方法，其特征在于，所述图像检索方法包括：

2.根据权利要求1所述的图像检索方法，其特征在于，所述真实人脸图像和所述待检索异质人脸图像分别具有对应的属性信息；

3.根据权利要求2所述的图像检索方法，其特征在于，

4.根据权利要求1所述的图像检索方法，其特征在于，

5.根据权利要求1～4任一项所述的图像检索方法，其特征在于，所述异质人脸生成图像具有对应的纹理匹配度，

6.根据权利要求1所述的图像检索方法，其特征在于，

7.根据权利要求1所述的图像检索方法，其特征在于，

8.一种图像检索装置，其特征在于，所述图像检索装置包括：

9.一种终端，其特征在于，所述终端包括存储器、处理器以及存储于所述存储器中并在所述处理器上运行的计算机程序，所述处理器用于执行程序数据以实现如权利要求1～7任一项所述的图像检索方法中的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1～7任一项所述的图像检索方法中的步骤。

技术总结
本发明提供一种图像检索方法、装置、终端及计算机可读存储介质，图像检索方法包括：获取待检索异质人脸图像和预设数据库，预设数据库包括多个真实人脸图像，各真实人脸图像关联有对应的三维人脸图像；基于待检索异质人脸图像对各三维人脸图像分别进行纹理匹配，得到三维人脸图像对应的至少一张异质人脸生成图像；基于至少一张异质人脸生成图像和待检索异质人脸图像之间的相似度，确定三维人脸图像与待检索异质人脸图像之间的相似度；基于各三维人脸图像对应的相似度，确定待检索异质人脸图像的检索结果。本申请提供的图像检索方法，通过将待检索异质人脸图像与三维人脸图像对应的异质人脸生成图像进行比对，提高检索结果的可靠性和准确率。

技术研发人员：邸德宁,杨凯航,华逸伦,郝敬松,朱树磊,殷俊
受保护的技术使用者：浙江大华技术股份有限公司
技术研发日：
技术公布日：2024/4/17