人脸底库自维护的方法、系统、电子装置和存储介质与流程

1.本技术涉及人脸识别技术领域，特别是涉及人脸底库自维护的方法、系统、电子装置和存储介质。


背景技术：

2.人脸识别是基于人的脸部特征信息进行身份识别的一种生物识别技术。人脸识别技术中1:n模式，是指对于输入的图片，经过人脸检测、人脸对齐后，提取特征，与人脸底库中保存的特征进行比对，取底库中top1相似度对应的人物信息，在一定阈值下判定人物名称。
3.在相关技术中，通常情况下，底库中的人脸特征需要特定的算法人员进行修改，修改特征的流程是固定的，该重复性工作会占用算法人员较多时间，费时费力；修改特征之后需进行测试，来验证是否会影响整体指标；测试没问题之后需要人工手动发布模型上线，而模型的发布会受公司的稳定性、可用性约束，无法立即修改立即生效，导致无法实时响应突发情况；此外，整个底库修改流程非常繁琐，且需要指定人员完成该项任务，人工成本高。因此，如何实现人脸底库维护自动化是一个值得研究的课题。
4.目前针对相关技术中，在对人脸底库进行修改和维护时，存在的流程复杂、人工成本高以及实时性差的问题，尚未提出有效的解决方案。


技术实现要素：

5.本技术实施例提供了一种人脸底库自维护的方法、系统、电子装置和存储介质，以至少解决相关技术中在对人脸底库进行修改和维护时，存在的流程复杂、人工成本高以及实时性差的问题。
6.第一方面，本技术实施例提供了一种人脸底库自维护的方法，所述方法包括：
7.获取人物入库数据，根据所述人物的信息进行重复性检测，并根据检测得到的结果对所述人物的图像进行重命名；
8.对重命名后的人物图像进行人脸检测和人脸对齐，输出得到对齐后的人脸，并对所述对齐后的人脸人工确认是否入库，在确认入库的情况下，提取所述对齐后人脸的特征并添加到临时库中；
9.将所述特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断所述测试结果是否达标，在判断达标的情况下，所述特征进入base底库，所述base底库生效。
10.在其中一些实施例中，根据所述人物的信息进行重复性检测包括：
11.根据入库的所述人物的信息，在所述base底库进行检索，检测是否存在人物信息重复的情况，其中所述人物信息包括中文名和拼音；
12.在检测出所述人物的信息重复的情况下，输出所述base底库中重复人物的对齐人脸和人物信息。
13.在其中一些实施例中，根据检测得到的结果对所述人物的图像进行重命名包括：
14.在判断所述人物为非重复人物的情况下，分配所述人物新的id，并对所述人物的图像进行重命名；
15.在判断所述人物为重复人物的情况下，将被重复人物的id分配给所述人物，并对所述人物的图像进行重命名。
16.在其中一些实施例中，对所述对齐后的人脸人工确认是否入库还包括：
17.在确认不入库的情况下，可以删除所述对齐后的人脸中不合格的人脸，其他人脸继续入库，或者直接弃用所述对齐后的人脸中所有的人脸，重新获取人物新的入库数据。
18.在其中一些实施例中，在通过测试集对底库中的特征进行识别测试之前，所述方法包括：
19.通过人物id确定需要删除的人物，并通过底库删除模块删除底库中人物数据；
20.通过人物id确定需要修改的人物，并通过底库修改模块对人物信息进行修改。
21.在其中一些实施例中，通过测试集对底库中的特征进行识别测试，得到测试结果包括：
22.将经过人脸检测、人脸对齐和特征提取的测试集，与底库中的特征进行对比识别，并通过人物风险防控分层系统得到最终相似度，取第一相似度对应的人物信息。
23.在其中一些实施例中，在所述base底库生效之后，所述方法包括：
24.通过人物id确定需要查询的人物，并通过底库查询模块进行查询，输出得到对应的人物信息。
25.第二方面，本技术实施例提供了一种人脸底库自维护的系统，所述系统包括：
26.获取模块，获取人物入库数据，根据所述人物的信息进行重复性检测，并根据检测得到的结果对所述人物的图像进行重命名；
27.入库模块，用于对重命名后的人物图像进行人脸检测和人脸对齐，输出得到对齐后的人脸，并对所述对齐后的人脸人工确认是否入库，在确认入库的情况下，提取所述对齐后人脸的特征并添加到临时库中；
28.测试模块，用于将所述特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断所述测试结果是否达标，在判断达标的情况下，所述特征进入base底库，所述base底库生效。
29.第三方面，本技术实施例提供了一种电子装置，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的人脸底库自维护的方法。
30.第四方面，本技术实施例提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述第一方面所述的人脸底库自维护的方法。
31.相比于相关技术，本技术实施例提供的人脸底库自维护的方法，获取人物入库数据，根据人物的信息进行重复性检测，并根据检测得到的结果对人物的图像进行重命名；接着，对重命名后的人物图像进行人脸检测和人脸对齐，输出得到对齐后的人脸，并对该对齐后的人脸人工确认是否入库，在确认入库的情况下，提取该对齐后人脸的特征并添加到临时库中；最后，将该对齐后人脸的特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断测试结果是否达标，在判断达标的情况下，
该对齐后人脸的特征进入base底库，base底库生效。
32.针对人脸底库维护流程繁琐、人工成本高，以及模型发布受公司稳定性、可用性约束而无法实时响应突发情况的问题，本技术对人脸底库维护系统进行了优化，将其平台化和自动化，集成入库与测试，实现从人物数据收集、实时入库生效到人脸测试识别模块的一体化，有效简化了人脸入库流程，节省了人工成本。此外，本技术还能对人物信息即修改即生效，实现实时响应突发情况，提高效率。
附图说明
33.此处所说明的附图用来提供对本技术的进一步理解，构成本技术的一部分，本技术的示意性实施例及其说明用于解释本技术，并不构成对本技术的不当限定。在附图中：
34.图1是根据本技术实施例的人脸底库自维护的方法的应用环境示意图；
35.图2是根据本技术实施例的人脸底库自维护的方法的流程图；
36.图3是根据本技术实施例的人脸底库自维护的流程示意图；
37.图4是根据本技术实施例的人脸底库自维护的系统的结构框图；
38.图5是根据本技术实施例的电子设备的内部结构示意图。
具体实施方式
39.为了使本技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本技术进行描述和说明。应当理解，此处所描述的具体实施例仅仅用以解释本技术，并不用于限定本技术。基于本技术提供的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本技术保护的范围。此外，还可以理解的是，虽然这种开发过程中所作出的努力可能是复杂并且冗长的，然而对于与本技术公开的内容相关的本领域的普通技术人员而言，在本技术揭露的技术内容的基础上进行的一些设计，制造或者生产等变更只是常规的技术手段，不应当理解为本技术公开的内容不充分。
40.在本技术中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本技术的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是，本技术所描述的实施例在不冲突的情况下，可以与其它实施例相结合。
41.除非另作定义，本技术所涉及的技术术语或者科学术语应当为本技术所属技术领域内具有一般技能的人士所理解的通常意义。本技术所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制，可表示单数或复数。本技术所涉及的术语“包括”、“包含”、“具有”以及它们任何变形，意图在于覆盖不排他的包含；例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可以还包括没有列出的步骤或单元，或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本技术所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电气的连接，不管是直接的还是间接的。本技术所涉及的“多个”是指大于或者等于两个。“和/或”描述关联对象的关联关系，表示可以存在三种关系，例如，“a和/或b”可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。本技术所涉及的术语“第
一”、“第二”、“第三”等仅仅是区别类似的对象，不代表针对对象的特定排序。
42.本技术提供的人脸底库自维护的方法，可以应用于如图1所示的应用环境中，图1是根据本技术实施例的人脸底库自维护的方法的应用环境示意图，如图1所示。其中，终端11与服务器10通过网络进行通信。服务器10获取人物入库数据，根据人物的信息进行重复性检测，并根据检测得到的结果对人物的图像进行重命名；接着，对重命名后的人物图像进行人脸检测和人脸对齐，输出得到对齐后的人脸，并通过设备11对该对齐后的人脸人工确认是否入库，在确认入库的情况下，提取该对齐后人脸的特征并添加到临时库中；最后，将该对齐后人脸的特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断测试结果是否达标，在判断达标的情况下，该对齐后人脸的特征进入base底库，base底库生效。其中，终端11可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务器10可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
43.本实施例提供了一种人脸底库自维护的方法，图2是根据本技术实施例的人脸底库自维护的方法的流程图，如图2所示，该流程包括如下步骤：
44.步骤s201，获取人物入库数据，根据人物的信息进行重复性检测，并根据检测得到的结果对人物的图像进行重命名；
45.可选的，获取人物入库数据，具体地，每个人物入库数据包括5张人脸图，分别为正脸、左侧脸、右侧点、抬头脸、低头脸，并确定人物的属性类别。
46.优选的，本实施例中，根据入库的人物的信息，在base底库进行检索，检测是否存在人物信息重复的情况，其中人物的信息包括中文名和拼音；在检测出人物的信息重复的情况下，输出base底库中重复人物的对齐人脸和人物信息，使得用户判断两者是否为同一人。
47.进一步地，在判断上述人物为非重复人物的情况下，分配该人物新的id，并对人物的图像进行重命名，具体地，将新id和图像输入重命名模块进行重命名；在判断该人物为重复人物的情况下，将被重复人物的id分配给该人物，并对人物的图像进行重命名，具体地，也是将id和图像输入重命名模块进行重命名；
48.步骤s202，对重命名后的人物图像进行人脸检测和人脸对齐，输出得到对齐后的人脸，并对对齐后的人脸人工确认是否入库，在确认入库的情况下，提取对齐后人脸的特征并添加到临时库中；
49.优选的，在通过步骤s201得到重命名后的人物像后，本实施例将重命名后的图像输入到人脸检测算法中，如果在一张图像中检测到多个人脸，则取最大的人脸输出；接着，再将人脸检测算法输出的人脸输入到人脸对齐算法中，输出得到对齐后的人脸；
50.进一步地，对对齐后的人脸人工确认是否入库，在确认入库的情况下，提取对齐后人脸的特征并添加到临时库中；在确认不入库的情况下，可以删除对齐后的人脸中不合格的人脸，其他人脸继续入库，或者直接弃用对齐后的人脸中所有的人脸，重新获取人物新的入库数据，进行新一轮的信息检测、人脸检测和人脸对齐；
51.步骤s203，将特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断测试结果是否达标，在判断达标的情况下，特征进入base底库，base底库生效。
52.优选的，在将步骤s202中得到的对齐后人脸的特征与底库现有的特征合并后，通过测试集对底库中的所有特征进行识别测试，得到测试结果，并通过测试指标判断测试结果是否达标，在判断达标的情况下，特征进入base底库，base底库生效。可选的，将经过人脸检测、人脸对齐和特征提取的测试集，与底库中的特征进行对比识别，并通过人物风险防控分层系统得到最终相似度，取第一相似度对应的人物信息，并将该人物特征添加到base底库中，使得base底库实时生效。
53.具体地，本实施例中，人物风险防控分层系统指根据不同属性的防控需求，为不同属性分配不同阈值，因此，可以通过不同的阈值，判断人物属性。其中，人物风险防控分层的计算公式如下式1所示：
[0054][0055]
其中，a为n
×
d维底库特征；b为d
×
m维测试样例特征；n为底库总样本量；m为测试样例人脸数量；d为特征维度；thrdiff为n
×
m维专属阈值差值，是由人物风险防控分层系统按防控需求为不同属性分配得到的不同阈值与固定阈值之间的差值，n个底库样本根据其对应的属性类别，拥有对应的阈值差值；argmax表示取最大值索引。
[0056]
在其中一些实施例中，在通过测试集对底库中的特征进行识别测试之前，还可以通过人物id确定需要删除的人物，并通过底库删除模块删除底库中人物数据；或者通过人物id确定需要修改的人物，并通过底库修改模块对人物信息进行修改，其中，修改的信息包括但不限于人物名称和属性。
[0057]
在其中一些实施例中，在base底库生效之后，可以通过人物id确定需要查询的人物，并通过底库查询模块进行查询，输出得到对应的人物信息。
[0058]
图3是根据本技术实施例的人脸底库自维护的流程示意图，如图3所示，通过上述步骤s201至步骤s203，本技术实施例对图3中由增加底库任务模块模块、测试模块和删改查底库任务模块组成的人脸底库维护系统进行了优化，将其平台化和自动化，集成入库与测试，实现从人物数据收集、实时入库生效到人脸测试识别模块的一体化，有效简化了人脸入库流程，节省了人工成本。此外，本技术实施例不受公司稳定性、可用性约束，能对人物信息即修改即生效，实现实时响应突发情况，提高效率。解决了在对人脸底库进行修改和维护时，存在的流程复杂、人工成本高以及实时性差的问题。
[0059]
需要说明的是，在上述流程中或者附图的流程图中示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
[0060]
本实施例还提供了一种人脸底库自维护的系统，该系统用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
[0061]
图4是根据本技术实施例的人脸底库自维护的系统的结构框图，如图4所示，该系统包括获取模块41、入库模块42和测试模块43：
[0062]
获取模块41，用于获取人物入库数据，根据人物的信息进行重复性检测，并根据检测得到的结果对人物的图像进行重命名；入库模块42，用于对重命名后的人物图像进行人
脸检测和人脸对齐，输出得到对齐后的人脸，并对对齐后的人脸人工确认是否入库，在确认入库的情况下，提取对齐后人脸的特征并添加到临时库中；测试模块43，用于将特征与底库特征合并后，通过测试集对底库中的特征进行识别测试，得到测试结果，并通过测试指标判断测试结果是否达标，在判断达标的情况下，特征进入base底库，base底库生效。
[0063]
通过上述系统，本技术实施例通过获取模块41获取人物入库数据并对该入库数据进行重复性检测和图像重命名，入库模块42通过对重命名图像进行人脸检测、对齐和人工确认后，进行特征入库；最后测试模块43测试识别特征信息，将达标的特征添加到底库中，是底库实时生效。整个系统平台化和自动化，集成入库与测试，实现从人物数据收集、实时入库生效到人脸测试识别模块的一体化，有效简化了人脸入库流程，节省了人工成本。此外，本技术实施例不受公司稳定性、可用性约束，能对人物信息即修改即生效，实现实时响应突发情况，提高效率。解决了在对人脸底库进行修改和维护时，存在的流程复杂、人工成本高以及实时性差的问题。
[0064]
需要说明的是，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
[0065]
此外，需要说明的是，上述各个模块可以是功能模块也可以是程序模块，既可以通过软件来实现，也可以通过硬件来实现。对于通过硬件来实现的模块而言，上述各个模块可以位于同一处理器中；或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
[0066]
本实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
[0067]
可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
[0068]
另外，结合上述实施例中的人脸底库自维护的方法，本技术实施例可提供一种存储介质来实现。该存储介质上存储有计算机程序；该计算机程序被处理器执行时实现上述实施例中的任意一种人脸底库自维护的方法。
[0069]
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种人脸底库自维护的方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
[0070]
在一个实施例中，图5是根据本技术实施例的电子设备的内部结构示意图，如图5所示，提供了一种电子设备，该电子设备可以是服务器，其内部结构图可以如图5所示。该电子设备包括通过内部总线连接的处理器、网络接口、内存储器和非易失性存储器，其中，该非易失性存储器存储有操作系统、计算机程序和数据库。处理器用于提供计算和控制能力，网络接口用于与外部的终端通过网络连接通信，内存储器用于为操作系统和计算机程序的
运行提供环境，计算机程序被处理器执行时以实现一种人脸底库自维护的方法，数据库用于存储数据。
[0071]
本领域技术人员可以理解，图5中示出的结构，仅仅是与本技术方案相关的部分结构的框图，并不构成对本技术方案所应用于其上的电子设备的限定，具体的电子设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
[0072]
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本技术所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(rom)、可编程rom(prom)、电可编程rom(eprom)、电可擦除可编程rom(eeprom)或闪存。易失性存储器可包括随机存取存储器(ram)或者外部高速缓冲存储器。作为说明而非局限，ram以多种形式可得，诸如静态ram(sram)、动态ram(dram)、同步dram(sdram)、双数据率sdram(ddrsdram)、增强型sdram(esdram)、同步链路(synchlink)dram(sldram)、存储器总线(rambus)直接ram(rdram)、直接存储器总线动态ram(drdram)、以及存储器总线动态ram(rdram)等。
[0073]
本领域的技术人员应该明白，以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
[0074]
以上所述实施例仅表达了本技术的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本技术构思的前提下，还可以做出若干变形和改进，这些都属于本技术的保护范围。因此，本技术专利的保护范围应以所附权利要求为准。