人脸识别方法、装置和服务器与流程

文档序号:16050514发布日期:2018-11-24 11:14阅读:351来源:国知局

本发明实施例涉及人脸识别技术领域,例如涉及一种人脸识别方法、装置和服务器。

背景技术

人脸识别技术目前在人工智能视觉领域中得到了广泛应用,人脸识别技术通过图像采集设备获取待确定身份用户的图像,然后在所述图像中检测人脸图像,再利用算法对人脸图像进行特征提取,进而将提取的特征与预设人脸特征库中已有的范本进行相似性比对,找出相似度最高的人脸作为识别结果,以判断用户的身份。

在研究现有技术的过程中,发明人发现相关技术中至少存在如下问题:在自然场景下进行人脸识别时,在预设人脸特征库包含的人脸特征数量较大时,由于人脸特征比对范围较大,可能会出现识别正确率下降的情况。因此,有必要提供一种能缩小人脸特征比对范围,提高识别正确率的人脸识别方法。



技术实现要素:

本发明实施例的一个目的是提供一种能缩小人脸特征比对范围,提高识别正确率的人脸识别方法、装置和服务器。

第一方面,本发明实施例提供了一种人脸识别方法,所述人脸识别方法应用于服务器,所述方法包括:

获取待确定身份用户的人脸图像,基于所述人脸图像进行识别获得所述人脸图像的人脸特征;

获取定位装置的定位信息,基于所述定位信息从预设人脸特征库中获得人脸特征比对范围,所述预设人脸特征库和所述人脸特征比对范围均包括已知用户的人脸特征和用户信息,所述人脸特征比对范围包括的人脸数量小于所述预设人脸特征库中包括的人脸数量;

将所述人脸特征基于所述人脸特征比对范围进行识别,并根据识别结果指示机器人对所述待确定身份用户进行询问。

第二方面,本发明实施例还提供了一种人脸识别装置,所述人脸识别装置应用于服务器,所述装置包括:

人脸特征获取模块,用于获取待确定身份用户的人脸图像,基于所述人脸图像进行识别获得所述人脸图像的人脸特征;

人脸特征比对范围获取模块,用于获取定位装置的定位信息,基于所述定位信息从预设人脸特征库中获得人脸特征比对范围,所述预设人脸特征库和所述人脸特征比对范围均包括已知用户的人脸特征和用户信息,所述人脸特征比对范围包括的人脸数量小于所述预设人脸特征库中包括的人脸数量;

识别模块,用于将所述人脸特征基于所述人脸特征比对范围进行识别,并根据识别结果指示机器人对所述待确定身份用户进行询问。

第三方面,本发明实施例还提供了一种服务器,包括:

至少一个处理器;以及,

与所述至少一个处理器通信连接的存储器;其中,

所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述的方法。

本发明实施例提供的人脸识别方法、装置和服务器,通过获取定位装置的定位信息,并根据所述定位信息从预设人脸特征库中获得人脸特征比对范围,将待确定身份用户的人脸特征基于所述人脸特征比对范围进行识别以识别待确定身份用户的身份。因为采用了相对于预设人脸特征库缩小的人脸特征比对范围,提高了识别正确率。

附图说明

一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。

图1是本发明人脸识别方法和装置的应用场景示意图;

图2是本发明人脸识别方法的一个实施例的流程图;

图3是本发明人脸识别方法的一个实施例的流程图;

图4是本发明人脸识别装置的一个实施例的结构示意图;

图5是本发明人脸识别装置的一个实施例的结构示意图;

图6是本发明实施例提供的服务器的硬件结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

本发明实施例提供的人脸识别方法和装置,适用于图1所示的应用场景。在图1所示的应用场景中,包括人脸识别系统100和云端服务器200。其中,人脸识别系统100包括服务器10、图像采集装置20、至少一个定位装置30和机器人40。云端服务器200装载有预设人脸特征库,所述预设人脸特征库包括已知用户的人脸特征和用户信息(例如用户身份标识)。图像采集装置20用于采集用户的图像,并将所述图像发送给服务器10。定位装置30用于定位相关用户,并获得相关用户的用户信息发送给服务器10。服务器10根据定位装置30发送的信息对预设人脸特征库进行缩小,获得只包括相关用户的人脸特征的人脸特征比对范围。服务器10识别待确定身份用户的图像中的人脸图像,并利用算法对待确定身份用户的人脸图像进行人脸特征提取(例如基于预先训练好的神经网络模型对人脸图像进行人脸特征提取),然后将人脸特征基于所述人脸特征比对范围进行比对识别,以确认待确定身份用户的身份。采用缩小的人脸特征比对范围对待确定身份用户的人脸特征进行比对识别,能提高识别的正确率。

其中,图像采集装置20可以为摄像头、摄像机、照相机、扫描仪,或者其他带有拍照功能的设备(智能手机、平板电脑等)。定位装置30例如基站、wifi定位装置等。机器人40可以为固定位置机器人也可以为可移动的机器人。人脸识别算法例如基于人脸特征点的识别算法、基于整幅人脸图像的识别算法、基于模板的识别算法和基于神经网络的识别算法等。

以上仅示例性的示出了应用场景的一种形式,在其他应用场景中,也可以不使用云端服务器200,而将预设人脸特征库装载在本地人脸识别系统100的服务器10中。图像采集装置20可以单独设置(例如设置在房间门口),也可以集成在机器人40上。服务器10、图像采集装置20、定位装置30和机器人40的数量可以为一个也可以为多个。

图2为本发明实施例提供的人脸识别方法的一个实施例的流程图,所述人脸识别方法可由图1中的服务器10执行,如图2所示,所述人脸识别方法包括:

101:获取待确定身份用户的人脸图像,基于所述人脸图像进行识别获得所述人脸图像的人脸特征。

可以通过图像采集装置20采集待确定身份用户的图像,服务器10接收到待确定身份用户的图像后,识别所述图像中的人脸图像,并利用算法对待确定身份用户的人脸图像进行人脸特征提取,例如基于预先训练好的神经网络模型对人脸图像进行人脸特征提取。

102:获取定位装置的定位信息,基于所述定位信息从预设人脸特征库中获得人脸特征比对范围,所述预设人脸特征库和所述人脸特征比对范围均包括已知用户的人脸特征和用户信息,所述人脸特征比对范围包括的人脸数量小于所述预设人脸特征库中包括的人脸数量。

定位装置30定位相关用户,并获得定位信息发送给服务器10,其中定位信息包括用户的信息(例如用户的身份标识)。服务器10根据相关用户的信息对预设人脸特征库进行缩小,获得只包括相关用户的人脸特征的人脸特征比对范围。

其中,在一些实施例中,定位装置30可以包括第一基站和第二基站,人脸特征比对范围包括第一人脸特征比对范围和第二人脸特征比对范围。服务器10通过第一基站定位到的定位信息从预设人脸特征库中获得第一人脸特征比对范围,通过第二基站定位到的信息从预设人脸特征库中获得第二人脸特征比对范围。具体的,第一基站和第二基站可以通过定位用户携带的手机等电子设备定位用户的位置,从而获得出现在某一区域的相关用户。

本发明实施例的人脸识别方法可以适用于多种人脸识别的场景,包括各种营业厅(例如电信营业厅、售票厅或其他营业厅)、火车站、飞机场等。在其中一些应用场景中,第一基站可以是设置在室内的基站,第二基站可以是设置在室外的基站。第一基站定位出当前时间(例如当前一段时间或者当前时刻)所述室内的用户,并将用户的信息(例如用户的身份标识)发送给服务器10,服务器10根据该信息从预设人脸特征库中找出室内用户的人脸特征作为第一人脸特征比对范围。

第二基站设置的目的是找出最有可能来所述室内办理业务的人,第二基站的定位方法可以根据具体应用场景调整。在一些应用场景中,第二基站可以定位获得在第一预设时段内在预设区域内出现的用户的信息,并将该信息发送给服务器10。其中,第一预设时段和预设区域可以事先设定,第一预设时段例如一年、半年、一个月或其他时间,预设区域可以是所述室内附近的一定区域,例如所述室内方圆五公里内,第二基站发送给服务器10的信息可以包括用户的身份标识、出现时间等。用户的身份标识可以是sim卡标记用户身份的唯一标识,例如手机号码。服务器10根据第二基站的定位信息确定在该区域内出现时间较多(例如一个月内出现20天或者半年内出现两个月)的用户(有可能是该地区的常驻用户),并获得这些用户的信息为第一用户信息。服务器10再获取第二预设时段(例如一个月)内来过所述室内办理业务的用户,并获得这些用户的信息为第二用户信息。服务器10将第一用户信息和第二用户信息取交集获得第三用户信息,并根据第三用户信息获得第二人脸特征比对范围。

其中,在实际应用中,第一人脸特征比对范围和第二人脸特征比对范围可以是服务器10从预设人脸特征库中获取的数据子库,也可以仍存在于预设人脸特征库中,仅通过标签与预设人脸特征库中的其他数据相区分。

在另一些实施例中,定位装置30也可以仅包括一类基站,例如设置在室内的基站或者设置在室外一定区域内的基站。服务器10根据该基站的定位信息从预设人脸特征库中仅获得一个人脸特征比对范围。当然,在其他实施例中,人脸特征比对范围也可以包括更多的比对范围,例如第一人脸特征比对范围、第二人脸特征比对范围和第三人脸特征比对范围等等,本发明实施例不作限定。

103:将所述人脸特征基于所述人脸特征比对范围进行识别,并根据识别结果指示机器人对待确定身份用户进行询问。

在人脸特征比对范围包括第一人脸特征比对范围和第二人脸特征比对范围的场合,将第一人脸特征比对范围设置成包括室内用户的人脸特征,很大的缩小了人脸特征比对范围。只要用户进入所述室内时被第一基站定位到,其人脸特征就能进入第一人脸特征比对范围,则服务器10能快速准确的基于第一人脸特征比对范围识别出待确定身份用户。如果通过第一人脸特征比对范围比对的初级识别结果中,具有相似度大于或者等于第一预设阈值的人脸特征,则确认用户的身份为其中相似度最高的人脸特征对应的用户,则无需再将所述人脸特征与第二人脸特征比对范围进行比对。

但对一些未带手机或其他电子设备的用户,即使该用户进入所述室内,第一基站也将定位不到该用户,则通过第一人脸特征比对范围将识别不出该用户(即识别结果的相似度均小于第一预设阈值)。针对这些用户,服务器10可以再将用户的人脸特征与第二人脸特征比对范围进行对比,如果识别结果中存在相似度大于或者等于第一预设阈值的人脸特征,则确认用户的身份为其中相似度最高的人脸特征对应的用户。如果识别结果中最大相似度大于第二预设阈值且小于第一预设阈值,则可以获得相似度位于前几位(例如前三位)的人脸特征对应的用户,然后指示机器人40对待确定身份用户进行询问,确认其是否是上述相似度最高的用户之一。具体的,询问方式可以以选择问句的方式提出。例如服务器10获得相似度最高的几个用户身份分别是李xx、张xx和王xx,则机器人40可以询问待确定身份用户,“你是李先生、张先生还是王先生”?通过待确定身份用户的肯定或者否定回答可以确定待确定身份用户的身份。这种选择式的询问方式,可以给用户亲切感,提高用户体验。

在其中一些实施例中,请参照图3,如果待确定身份用户的回答是肯定的答案,例如用户回答“我是李xx”,机器人40将待确定身份用户的回答结果发送给服务器10,服务器10根据待确定身份用户的回答结果提取该待确定身份用户的人脸特征,并将该待确定身份用户的人脸特征、用户身份信息和照片上传到预设人脸特征库,以提高下次的识别正确率。

如果通过第二人脸特征比对范围获得的识别结果的相似度均小于或者等于第二预设阈值,则服务器10可以直接指示机器人40询问该待确定身份用户的用户信息,然后根据该用户的信息在预设人脸特征库中搜索到该用户对应的人脸特征,并将获得的人脸特征与该用户的人脸特征进行比对,以确定该用户的身份。

在人脸特征比对范围仅包括一个人脸特征比对范围的场合,如果通过该人脸特征比对范围获得的识别结果中,存在相似度大于或者等于第一预设阈值的人脸特征,则确认待确定身份用户的身份为其中相似度最高的人脸特征对应的用户。如果识别结果中最大相似度大于第二预设阈值且小于第一预设阈值,则可以获得相似度位于前几位(例如前三位)的人脸特征对应的用户,然后指示机器人40对待确定身份用户进行询问,确认其是否是上述相似度最高的用户之一。如果相似度均小于或者等于第二预设阈值,则服务器10可以直接指示机器人40询问该待确定身份用户的用户信息。

其中,第一预设阈值和第二预设阈值可以事先设定,例如第一预设阈值设置为60%,第二预设阈值设置为55%。

本发明实施例通过获取定位装置的定位信息,并根据所述定位信息从预设人脸特征库中获得人脸特征比对范围,将待确定身份用户的人脸特征基于所述人脸特征比对范围进行比对识别以识别待确定身份用户的身份。因为采用了相对于预设人脸特征库缩小的人脸特征比对范围,提高了识别正确率,同时还提供了识别速度。

相应的,本发明实施例还提供了一种人脸识别装置,所述人脸识别装置用于图1所示的服务器10,如图4所示,所述人脸识别装置400包括:

人脸特征获取模块401,用于获取待确定身份用户的人脸图像,基于所述人脸图像进行识别获得所述人脸图像的人脸特征;

人脸特征比对范围获取模块402,用于获取定位装置的定位信息,基于所述定位信息从预设人脸特征库中获得人脸特征比对范围,所述预设人脸特征库和所述人脸特征比对范围均包括已知用户的人脸特征和用户信息,所述人脸特征比对范围包括的人脸数量小于所述预设人脸特征库中包括的人脸数量;

识别模块403,用于将所述人脸特征基于所述人脸特征比对范围进行识别,并根据识别结果指示机器人对所述待确定身份用户进行询问。

本发明实施例通过获取定位装置的定位信息,并根据所述定位信息从预设人脸特征库中获得人脸特征比对范围,将待确定身份用户的人脸特征基于所述人脸特征比对范围进行比对识别以识别待确定身份用户的身份。因为采用了相对于预设人脸特征库缩小的人脸特征比对范围,提高了识别正确率,同时还提供了识别速度。

在人脸识别装置400的一些实施例中,识别模块403具体用于:

如果识别结果的相似度满足预设条件,则获得识别结果中相似度最高的至少一个人脸特征,指示机器人基于该至少一个人脸特征对应的用户身份信息进行询问。

具体的,在其中一些实施例中,识别模块403具体用于:

如果识别结果中最大相似度大于第二预设阈值且小于第一预设阈值,则获得识别结果中相似度最高的至少一个人脸特征,指示机器人基于该至少一个人脸特征的用户身份信息进行询问;

如果识别结果中最大相似度小于或者等于第二预设阈值,则指示机器人询问所述待确定身份用户的用户身份信息。

在人脸识别装置400的一些实施例中,请参照图5,所述定位装置包括第一基站和第二基站,所述人脸特征比对范围包括第一人脸特征比对范围和第二人脸特征比对范围;

人脸特征比对范围获取模块402包括:

第一人脸特征比对范围获取子模块4021,用于获取所述第一基站的定位信息,基于所述第一基站的定位信息从预设人脸特征库中获得第一人脸特征比对范围;

第二人脸特征比对范围获取子模块4022,用于获取所述第二基站的定位信息,基于所述第二基站的定位信息从预设人脸特征库中获得第二人脸特征比对范围;

识别模块403还具体用于:

将所述人脸特征基于所述第一人脸特征比对范围进行识别,获得初级识别结果,如果初级识别结果中具有相似度大于或者等于第一预设阈值的人脸特征,则根据相似度最高的人脸特征确认所述待确定身份用户的身份;

如果初级识别结果的相似度均小于第一预设阈值,则将所述人脸特征基于所述第二人脸特征比对范围进行识别,获得识别结果。

其中,在人脸识别装置400的一些实施例中,所述第一基站为室内的基站,所述第二基站为室外基站;

第一人脸特征比对范围获取子模块4021具体用于:

获取所述第一基站通过实时定位获取的位于所述室内的用户的用户信息,根据所述用户信息在预设人脸特征库中获得第一人脸特征比对范围。

第二人脸特征比对范围获取子模块4022具体用于:

获取所述第二基站的定位信息,所述第二基站的定位信息包括在第一预设时段内、在预设区域内出现的用户的信息,根据所述第二基站的定位信息获得第一用户信息,所述第一用户信息为在第一预设时段内、在所述预设区域内出现的时间超过预设时间阈值的用户的信息;

获取第二用户信息,所述第二用户信息为第二预设时段内、来过所述室内的用户的信息;

将所述第一用户信息和所述第二用户信息取交集,获得第三用户信息,根据所述第三用户信息在所述预设人脸特征库中获得第二人脸特征比对范围。

在人脸识别装置400的其他实施例中,请参照图5,人脸识别装置400还包括:

上传模块404,用于接收机器人发送的用户确认消息,根据所述用户确认消息将所述待确定身份用户的人脸特征、用户身份信息和图像上传所述预设人脸特征库。

需要说明的是,上述人脸识别装置可执行本发明实施例所提供的人脸识别方法,具备执行方法相应的功能模块和有益效果。未在人脸识别装置实施例中详尽描述的技术细节,可参见本发明实施例所提供的人脸识别方法。

图6是本发明实施例提供的服务器10的硬件结构示意图,如图6所示,该服务器10包括:

一个或多个处理器11以及存储器12,图6中以一个处理器11为例。

处理器11和存储器12可以通过总线或者其他方式连接,图6中以通过总线连接为例。

存储器12作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本发明实施例中的人脸识别方法对应的程序指令/模块(例如,附图4所示的人脸特征获取模块401、人脸特征比对范围获取模块402和识别模块403)。处理器11通过运行存储在存储器12中的非易失性软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例的人脸识别方法。

存储器12可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据人脸识别装置的使用所创建的数据等。此外,存储器12可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器12可选包括相对于处理器11远程设置的存储器,这些远程存储器可以通过网络连接至人脸识别装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

所述一个或者多个模块存储在所述存储器12中,当被所述一个或者多个处理器11执行时,执行上述任意方法实施例中的人脸识别方法,例如,执行以上描述的图2中的方法步骤101至步骤103,图3中的方法步骤201至步骤205;实现图4中的模块401-403、图5中模块401-404、子模块4021-4022的功能。

上述产品可执行本发明实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明实施例所提供的方法。

本发明实施例提供了一种非易失性计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行,例如图7中的一个处理器11,可使得上述一个或多个处理器可执行上述任意方法实施例中的人脸识别方法,例如,执行以上描述的图2中的方法步骤101至步骤103,图3中的方法步骤201至步骤205;实现图4中的模块401-403、图5中模块401-404、子模块4021-4022的功能。

以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

通过以上的实施方式的描述,本领域普通技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现,当然也可以通过硬件。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(read-onlymemory,rom)或随机存储记忆体(randomaccessmemory,ram)等。

最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;在本发明的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,步骤可以以任意顺序实现,并存在如上所述的本发明的不同方面的许多其它变化,为了简明,它们没有在细节中提供;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1