基于人脸识别的电子人脉网建立方法及相关设备与流程

文档序号:15518084发布日期:2018-09-25 18:48阅读:170来源:国知局

本发明涉及人脸识别技术领域,特别涉及一种基于人脸识别的电子人脉网建立方法及相关设备。



背景技术:

在人生的每一个阶段,我们都会遇到一些人(比如:亲人、朋友、同事或者驴友等),通常我们都会记录下他们的联系方式,当随着时间的推移,我们会忘记这些人的长相或因为联系方式更换而联系不上这些人,就是我们经常遇到的脸盲症,人工智能、大数据技术的不断提升,人们处理图像数据以及声音信息的能力已经达到了智能化的程度,尤其人脸识别方面已经取得了很大进展,然而,在日常生活中的应用,人脸识别目前主要广泛应用于监控、手机拍照、考勤打卡等场合,目前还没有一种很好的方案用来解决脸盲症这一尴尬的问题。



技术实现要素:

本发明实施例提供了一种基于人脸识别的电子人脉网建立方法、系统及可穿戴设备,智能识别出现的人脸信息,提供相应的管理操作,提高人与人之间交往的灵活性可长久性,提升用户体验。

第一方面,本发明提供一种基于人脸识别的电子人脉网建立方法,所述方法包括:

初始化预先建立交往人员数据库,所述交往人员数据库包括预先存储的交往人员人脸图像数据、与所述交往人员人脸图像数据对应的标识信息、重要交往人员人脸图像数据以及重要对话记录列表;

实时获取目标区域出现的人脸图像数据;

将采集到的所述人脸图像数据进行人脸识别并与所述交往人员数据库进行比对;

当所述人脸图像数据满足预设条件则执行相应操作。

作为一种可能的实现方式,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据与所述交往人员数据库中的任意交往人员人脸数据相匹配则向预设对象发送第一种方式提示,所述第一种方式提示包括语音提示和/或文字提示。

作为一种可能的实现方式,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据与所述交往人员数据库中的任意交往人员人脸数据均不匹配则对所述人脸图像数据进行记录,手动添加所述人脸图像数据的标识信息或通过语义识别获取相应信息作为所述人脸图像数据的标识信息。

作为一种可能的实现方式,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据在实时采集过程中存在时间或出现次数达到设定阈值则向预设对象发送提醒信息,所述提醒信息包括所述人脸图像数据对应人员出现时间以及出现次数。

作为一种可能的实现方式,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据与所述重要交往人员人脸图像数据相匹配则向预设对象发送第二种提示,所述第二种提示不同于所述第一种提示。

作为一种可能的实现方式,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据与所述重要对话记录列表相匹配则将所述人脸图像数据对应人员的对话内容以语音或文字的方式进行记录。

作为一种可能的实现方式,所述交往人员数据库还包括人脸图像数据屏蔽列表,所述当所述人脸图像数据满足预设条件则执行相应操作,包括:

当所述人脸图像数据与所述人脸图像数据屏蔽列表相匹配则不响应所述人脸图像数据对应的操作和不提示预设对象。

第二方面,本发明提供一种基于人脸识别的电子人脉网建立系统,应用于上述的基于人脸识别的电子人脉网建立方法,所述系统包括视频采集模块、视频控制模块、音频采集模块、音频控制模块、手动控制模块、数据传输模块、数据处理模块、存储控制模块、存储模块及图像音频输出设备,所述数据传输模块分别与所述视频采集模块、所述视频控制模块、所述音频采集模块、所述音频控制模块、所述数据处理模块、所述存储控制模块、所述存储模块电性连接,所述视频采集模块及所述音频采集模块分别将采集到的现场的视频图像数据与音频数据通过所述数据传输模块传递给所述数据处理模块,所述数据处理模块通过所述数据传输模块将控制信号分别传递给所述存储模块、所述视频控制模块、所述音频控制模块及图像音频输出设备,所述视频控制模块与所述音频控制模块通过所述手动控制模块进行手动控制,所述数据处理模块对采集的所述视频图像数据及所述音频数据进行识别、解析并识别所述视频图像数据中的人脸图像数据是否在交往人员数据库中,根据匹配结果执行相应的操作。

作为一种可能的实现方式,所述的数据处理模块为本地数据处理模块或云端处理模块,所述本地数据处理模块采用cpu处理器、gpu处理器或专用芯片,所述存储模块为本地存储或云存储,所述数据传输模块采用有线传输模块或者无线传输模块,所述图像音频输出设备采用显示器或扬声器,所述视频采集模块采用摄像头,所述音频采集模块为麦克风。

作为一种可能的实现方式,所述无线传输模块的信号传输方式采用蓝牙、wi-fi、zigbee、4g信号或5g信号中的一种或多种。

第三方面,本发明提供了一种可穿戴设备,具有如上述提到的基于人脸识别的电子人脉网建立系统。

本发明提供的基于人脸识别的电子人脉网建立方法、系统及可穿戴设备,通过对交往人员进行人脸识别进行归类处理,可以形成一种“人脉的电子记忆”,在日常生活使用中可以使得人不再忘记不应该忘记的朋友,也可以使得人快速的适应新环境,不但可以储存,还可以传承,通过本系统录制的人脉记录,可以进行智能信息整理,形成一种无形的财富可以传承给后代,由于该系统采集过程是一种长期佩戴过程,不仅仅记录名字和人脸图像,使用者与其的互动信息也可以很好的被记录下来,提高人与人之间交往的灵活性可长久性,提升用户体验。

附图说明

图1是本发明实施例中提供的基于人脸识别的电子人脉网建立方法的流程示意图;

图2是本发明实施例中提供的基于人脸识别的电子人脉网建立系统的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

结合图1所示,本发明提供一种基于人脸识别的电子人脉网建立方法,所述方法包括:

s101、初始化预先建立交往人员数据库,所述交往人员数据库包括预先存储的交往人员人脸图像数据、与所述交往人员人脸图像数据对应的标识信息、重要交往人员人脸图像数据以及重要对话记录列表。

交往人员可以是有意或无意遇见的人员,可以是使用者熟悉的也可以是使用者不认识的人,交往人员数据库中的交往人员人脸图像数据可以预先进行图像获取,还可以在后期进行交往人员人脸图像数据的添加,交往人员人脸图像数据对应的标识信息可以是该交往人员的姓名、编号等可以作为所属标识的信息,编号可以采用工号、学号、身份证号、手机号等,重要交往人员人脸图像数据是作为特殊处理的一类交往人员,重要程度比一般交往人员高,如vip身份,对待重要交往人员的提供更高级的服务,如播放欢迎语等,重要对话记录列表中的数据是对处于该列表中交往人员的对话进行记录。

s102、实时获取目标区域出现的人脸图像数据。

通过摄像头实时采集目标区域出现的人脸图像数据,通过麦克风采集目标区域的音频信息,通过视频采集控制模块控制摄像头,通过音频采集控制模块控制麦克风采集,通过数据传输模块得到数据处理模块的采集指令,还可以通过手动控制模块获得采集指令,目标区域即摄像头所拍摄的区域,可以灵活定义或调整,如公司门口处、业务办理区等,通过人脸识别技术将摄像头采集的视频数据中的人脸图像数据进行提取,本领域普通技术人员应当了解,对此不作赘述。

s103、将采集到的所述人脸图像数据进行人脸识别并与所述交往人员数据库进行比对。

通过人脸识别的手段获取到人脸图像数据,通过与交往人员数据库中的交往人员人脸图像数据、重要交往人员人脸图像数据以及重要对话记录列表进行匹配,利用图像相似度比对作为匹配的手段,相似度达到设定的阈值则可以确定两个图片相匹配,对于图像匹配是通过对影像内容、特征、结构、关系、纹理及灰度等的对应关系,相似性和一致性的分析,寻求相似影像目标,可以通过灰度匹配或者特征匹配的方式进行,实际检测时,采用cnn前向传播的方式,输入图像矩阵经由神经网络各层处理,即可得到目标识别的结果。

s104、当所述人脸图像数据满足预设条件则执行相应操作。

具体地,当所述人脸图像数据与所述交往人员数据库中的任意交往人员人脸数据相匹配则向预设对象发送第一种方式提示,预设对象可以是使用者,所述第一种方式提示包括语音提示和/或文字提示,这里新的交往人员人脸图像数据在交往人员数据库中找到,则该交往人员视为熟人,可以向使用者进行汇报,语音提示可以包括铃声、语音留言等,语音内容可以是交往人员的名字及职位,,或上一次遇见时的时间和地点,对此不做限定,而文字提示则可以采用短消息的方式进行,文字内容也可以同为交往人员的名字及职位,或上一次遇见时的时间和地点,对此不做限定,需要说明的是,为了配合进行消息提示,可以预先绑定指定设备,如手机、可穿戴设备或耳机等,满足预设条件时候则可以触发向指定设备的提示。

按照交往人员对所获得的信息进行归类,将同一人员发生的交往过程整理在一起进行存储。当调取电子人脉网中的交往人员信息时,不仅能够看到交往人员的名字、照片、职位等信息,还可以看到主体与交往人员的关键对话及关键视频。

当所述人脸图像数据与所述交往人员数据库中的任意交往人员人脸数据均不匹配则对所述人脸图像数据进行记录,则此时该交往人员视为陌生人,可以对该交往人员进行拍照记录,使用者可以通过查看该交往人员图像后进行手动添加所述人脸图像数据的标识信息,还可以该交往人员的对话内容进行语义识别,提取其中包含标识信息的信息作为人脸图像数据的标识信息,如在未成功匹配上时,陌生交往人员可以自报家门,如“我是xxx”,则可以通过语音识别获取对话内容,再通过语义识别分析出该交往人员的名字为xxx,将该陌生交往人员的标识信息填写为xxx,提高设备的智能化。

当所述人脸图像数据在实时采集过程中存在时间或出现次数达到设定阈值则向预设对象发送提醒信息,所述提醒信息包括所述人脸图像数据对应人员出现时间以及出现次数,这里是针对反复出现目标区域或者长时间停留在目标区域的交往人员,可以是熟人交往人员或者陌生交往人员,当该交往人员在目标区域长时间逗留或者反复出现次数达到一定值则向使用者进行提示,提示的内容可以保护该交往人员出现时间以及出现次数,对此出现时候可以同时将每次出现的时间进行记录提示,以避免交往人员有紧急事情却不是重要交往人员造成耽误的情况发生,提高设备的智能化,也可以主体后期手动添加交往人员信息。

当所述人脸图像数据与所述重要交往人员人脸图像数据相匹配则向预设对象发送第二种提示,所述第二种提示不同于所述第一种提示,这里针对重要交往人员进行的高优先级的提示,提示的方式与第一种提示不同,每一种提示方式使用者可以进行灵活选择设定,如采用为字体时候可以进行高亮突出显示,采用语音方式提示时候可以进行高优先级提醒,避免错过重要交往人员。

当所述人脸图像数据与所述重要对话记录列表相匹配则将所述人脸图像数据对应人员的对话内容以语音或文字的方式进行记录,重要对话记录列表中的交往人员可以预先添加,当出现属于重要对话记录列表中的交往人员时候,对该交往人员的对话内容进行记录,如直接采用录音的方式,或者采用语音识别的方式转换为文字进行保存,对此不做限定。

所述交往人员数据库还包括人脸图像数据屏蔽列表,人脸图像数据屏蔽列表类似黑名单,使用者不想看到某些交往人员,则可以将该交往人员的人脸图像数据添加人脸图像数据屏蔽列表中,在当所述人脸图像数据与所述人脸图像数据屏蔽列表相匹配则不响应所述人脸图像数据对应的操作和不提示预设对象,当交往人员存在人脸图像数据屏蔽列表中则认为是需要屏蔽交往人员,则该交往人员产生的操作不进行相应,不将该交往人员的来访信息向使用者提示,也不记录对话内容,仅在使用者查看交往人员信息时候做展示,减少不受欢迎交往人员对使用者的打扰,提高设备的智能化。

对于灰度匹配的基本思想:以统计的观点将图像看成是二维信号,采用统计相关的方法寻找信号间的相关匹配。利用两个信号的相关函数,评价它们的相似性以确定同名点。灰度匹配通过利用某种相似性度量,如相关函数、协方差函数、差平方和、差绝对值和等测度极值,判定两幅图像中的对应关系。灰度匹配法是归一化的灰度匹配法,通过逐像素的把一个以一定大小的实时图像窗口的灰度矩阵,与参考图像的所有可能的窗口灰度阵列,按某种相似性度量方法进行搜索比较的匹配方法,从理论上说就是采用图像相关技术。

对于特征匹配是指通过分别提取两个或多个图像的特征(点、线、面等特征),对特征进行参数描述,然后运用所描述的参数来进行匹配的一种算法。基于特征的匹配所处理的图像一般包含的特征有颜色特征、纹理特征、形状特征、空间位置特征等。特征匹配首先对图像进行预处理来提取其高层次的特征,然后建立两幅图像之间特征的匹配对应关系,通常使用的特征基元有点特征、边缘特征和区域特征。特征匹配需要用到许多诸如矩阵的运算、梯度的求解、还有傅立叶变换和泰勒展开等数学运算。常用的特征提取与匹配方法有:统计方法、几何法、模型法、信号处理法、边界特征法、傅氏形状描述法、几何参数法、形状不变矩法等。基于图像特征的匹配方法可以克服利用图象灰度信息进行匹配的缺点,由于图像的特征点比较像素点要少很多,大大减少了匹配过程的计算量;同时,特征点的匹配度量值对位置的变化比较敏感,可以大大提高匹配的精确程度,特征点的提取过程可以减少噪声的影响,对灰度变化,图像形变以及遮挡等都有较好的适应能力。

本发明提供的基于人脸识别的电子人脉网建立方法,通过对交往人员进行人脸识别进行归类处理,可以形成一种“人脉的电子记忆”,在日常生活使用中可以使得人不再忘记不应该忘记的朋友,也可以使得人快速的适应新环境,不但可以储存,还可以传承,通过本系统录制的人脉记录,可以进行智能信息整理,形成一种无形的财富可以传承给后代,由于该系统采集过程是一种长期佩戴过程,不仅仅记录名字和人脸图像,使用者与其的互动信息也可以很好的被记录下来,提高人与人之间交往的灵活性可长久性,提升用户体验。

结合图2所示,对应地,本发明实施例中提供一种基于人脸识别的电子人脉网建立系统,应用于上述的基于人脸识别的电子人脉网建立方法,所述系统包括视频采集模块201、视频控制模块202、音频采集模块203、音频控制模块204、手动控制模块205、数据传输模块206、数据处理模块207、存储控制模块208、存储模块209及图像音频输出设备210,所述数据传输模块206分别与所述视频采集模块201、所述视频控制模块202、所述音频采集模块203、所述音频控制模块204、所述数据处理模块207、所述存储控制模块208、所述存储模块209电性连接,所述视频采集模块201及所述音频采集模块203分别将采集到的现场的视频图像数据与音频数据通过所述数据传输模块206传递给所述数据处理模块207,所述数据处理模块207通过所述数据传输模块206将控制信号分别传递给所述存储模块209、所述视频控制模块202、所述音频控制模块204及图像音频输出设备,所述视频控制模块202与所述音频控制模块204通过所述手动控制模块进行手动控制,所述数据处理模块207对采集的所述视频图像数据及所述音频数据进行识别、解析并识别所述视频图像数据中的人脸图像数据是否在交往人员数据库中,根据匹配结果执行相应的操作,通过对交往人员进行人脸识别进行归类处理,可以形成一种“人脉的电子记忆”,在日常生活使用中可以使得人不再忘记不应该忘记的朋友,也可以使得人快速的适应新环境,不但可以储存,还可以传承,通过本系统录制的人脉记录,可以进行智能信息整理,形成一种无形的财富可以传承给后代,由于该系统采集过程是一种长期佩戴过程,不仅仅记录名字和人脸图像,使用者与其的互动信息也可以很好的被记录下来,提高人与人之间交往的灵活性可长久性,提升用户体验。

具体地,数据处理模块207为本地数据处理模块或云端处理模块,所述本地数据处理模块采用cpu处理器、gpu处理器或专用芯片,所述存储模块209为本地存储或云存储,所述数据传输模块206采用有线传输模块或者无线传输模块,所述图像音频输出设备采用显示器、音响或扬声器,所述视频采集模块201采用摄像头,所述音频采集模块203为麦克风,本领域普通技术人员可以灵活选择,对此不做限定。

可以理解的是,为了使得系统正常工作,本方案中还具有供电部分,本领域普通技术人员应当了解,对此不做限定。

具体地,所述无线传输模块的信号传输方式采用蓝牙、wi-fi、zigbee、4g信号或5g信号中的一种或多种,本领域普通技术人员可以灵活选择,对此不做限定。

对应地,本发明实施例中还提供一种可穿戴设备,可穿戴设备具有上述介绍的基于人脸识别的电子人脉网建立系统,这里的可穿戴设备可以是智能眼镜、智能手表、智能手环、智能头盔或智能头带,随行采集人生活中遇到的交往库里的交往人员信息,也可以固定放置在指定场所,通过使用本发明提供的可穿戴设备不仅仅记录名字和人脸图像,使用者与其的互动信息也可以很好的被记录下来,提高人与人之间交往的灵活性可长久性,提升用户体验。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(rom,readonlymemory)、随机存取存储器(ram,randomaccessmemory)、磁盘或光盘等。

以上对本发明所提供的一种基于人脸识别的电子人脉网建立方法、系统及可穿戴设备进行了详细介绍,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1