一种能与访客交互的智能门禁系统以及交互方法与流程

本发明涉及一种智能门禁，尤其涉及一种能够与访客智能交互的智能门禁系统及其交互方法。

背景技术：

传统门禁,是一个简单的消息触发系统,消息内容单一。门口安装触发器,屋内安装接收器,通过有线或者无线的方式传输消息.当来访者触发了触发器后,接收器会收到信号并发生声音提醒屋内人员。

而对讲/可视门禁,在传统门禁的基础上增加了对讲/可视的功能,是一个点对点的通信系统,不仅仅可以传输一个触发信号,而可以传输语音/图像信息,丰富了通信的内容,提高了主人响应来访者的方式和效率.但传输距离依旧限制于屋内.

互联网门禁,拓展了对讲/可视门禁的信息传输的渠道,可以接入互联网,使得任何一台接入互联网的智能手机都可以通过App连接到门禁,即使主人不在家中也不会漏接来访者的呼叫,进一步提高了主人响应来访者的效率.

现有的互联网门禁通常有三个重要的部分组成:

门禁终端.通常包含微处理器模块,摄像头模块,麦克风模块,喇叭模块,网络(WiFi)模块这些主要的硬件组成模块。通过摄像头模块,可以实现视频数据的录制；通过麦克风和喇叭模块,可以实现音频数据的录制和播放；通过网络模块,可以实时地将录制到的音视频数据传输到因特网上。

移动终端端App。通常与门禁终端配套使用,只要移动终端接入了因特网,App就能够连接到门禁终端,实现实时查看视频与双向音频对讲的功能.此外还能实现用户管理和设备管理等辅助功能.

云端服务器.主要用于打通门禁终端端和移动终端App的数据链路,通常门禁终端和移动终端App都会通过因特网与云端服务器建立数据连接,云端服务器可以将一端的数据转发到另一端,类似于一个路由器的功能,从而实现点对点的数据通信.

访客按了门禁上的呼叫按钮之后,门禁会向云端服务器发出呼叫请求,而云端服务器会将呼叫请求以推送消息的形式发送到与该门禁关联过的移动终端App上；主人收到App上的消息后可以选择接通来实现与访客的实时对话,也可以选择快速回复告知访客不方便接听,与传统的电话的接听方式类似.

但是现有的互联网门铃仅仅是扩展了信息传输的渠道,而在应对访客的呼叫请求上还显得不那么智能,导致用户体验并不是很好.例如在快递员上门送快递,主人并不在家的情况下,快递员按了呼叫按钮,所有与该门铃关联的移动端App都会收到推送(比如男主人,女主人,孩子,老人),很多人会被打扰；而实际上只需要让快递员将快递投放到门口指定位置即可,并不一定需要实时地与主人通话,并不需要因为呼叫而打扰到所有家人.

例如有邻居小孩上门找主人家的小孩玩耍,他只需要呼叫到小孩即可,不想惊动其他家人,但是目前一旦发起呼叫,所有人都会收到呼叫请求,无法更精确地呼叫某个人.

技术实现要素：

本发明为了解决上述技术问题，提出一种能够进一步探知访客真实意图的门禁终端系统，为后续操作的决策提供参考，实现访客意图的精确解决方案，而不干扰不相关的住户，提高了门禁与访客的人机交互体验。

本发明的技术方案如下：

一种能与访客交互的智能门禁系统，包括门禁终端，移动终端，云端服务器；其特征在于：门禁终端能够收集访客信息，并将其发送到云端服务器；云端服务器根据收集到的访客信息，识别访客意图，选择对应的应用场景，云端服务器根据所选择的应用场景判断是否需要与移动终端建立连接，若不需要与移动终端建立连接，则根据该应用场景通过门禁终端直接与访客进行自动交互，若需要与移动终端建立连接，则使门禁终端与移动终端建立连接使得访客与移动终端持有者进行交互。

优选地，所述门禁终端、移动终端、云端服务器通过互联网连接。

优选地，门禁终端通过麦克风模块、喇叭模块与访客进行语音交互，所述访客信息包括语音信息，麦克风模块收集访客的语音信息，喇叭模块接收从云端服务器或者移动终端的语音交互信息与访客进行交互。

优选地，所述云端服务器根据访客的语音信息识别访客意图，并选择对应的应用场景。

优选地，当识别所述访客意图为无需找住户时，选择第一应用场景，云端服务器判断为不需要与移动终端建立连接，当识别访客意图为找住户时，选择第二应用场景，云端服务器判断为需要与移动终端建立连接。

优选地，门禁终端还包括摄像头模块，所述访客信息还包括图像或者视频信息，摄像头模块收集访客的图像或者视频信息。

优选地，所述图像或视频信息，作为来访纪录保存。

优选地，所述门禁终端还包括按键模块，按键模块用于引导访客输入语音信息。

优选地，所述门禁终端还包括按键模块，按键模块用于引导访客输入图像或者视频信息。

优选地，门禁终端还包括显示模块，所述显示模块接收移动终端或者云端服务器的图像或者视频信息，当云端服务器判断为不需要与移动终端建立连接时，显示模块从云端服务器接收能够引导访客完成后续操作的图像或者视频信息，当云端服务器判断为需要与移动终端建立连接时，显示模块从移动终端接收移动终端持有者的视频信息或者图像信息。

优选地，当选择为第一应用场景后，云端服务器向门禁终端发送语音提示信息，引导访客进行完成操作。

优选地，当选择为第二应用场景后，云端服务器向门禁终端的喇叭发送语音提示信息，引导访客输入目标住户的连接信息，云端服务器根据所述连接信息建立门禁终端和目标住户移动终端之间的语音连接通道。

优选地，当访客完成操作后，云端服务器向移动终端推送访客来访的操作结果信息消息。

优选地，所述第一应用场景是送快递或者送水。

优选地，所述第二应用场景是找住户。

优选地，门禁终端包括按键模块，麦克风模块、喇叭模块，按键模块上设置有不需要建立门禁终端与移动终端之间连接的应用场景的第一按键模块，和需要建立门禁终端与移动终端之间连接的第二按键模块；当访客操作第一按键模块时，云端服务器识别访客意图为不需要找住户，选择第一应用场景，判断为不需要与移动终端建立连接；当访客操作第二按键模块时，云端服务器识别访客意图为需要找住户，选择第二应用场景，并判断为需要与移动终端建立连接，使门禁终端与移动终端建立连接。

优选地，当选择为第一应用场景后，云端服务器向门禁终端发送提示信息，引导访客进行完成操作。

优选地，当选择为第二应用场景后，云端服务器向门禁终端的喇叭发送提示信息，引导访客输入目标住户的连接信息，云端服务器根据所述连接信息建立门禁终端和目标住户移动终端之间的语音连接通道。

优选地，所述云端服务器通过机器学习以及大数据方法，构造与访客进行人机交互的AI程序，所述AI程序分析并理解访客信息从中识别出访客意图，选择对应的应用场景。

优选地，当识别所述访客意图为无需找住户时，选择第一应用场景，云端服务器判断为不需要与移动终端建立连接，当识别访客意图为找住户时，选择第二应用场景，云端服务器判断为需要与移动终端建立连接；

其中，云端服务器建立常来访客人脸图像信息数据库，所述每条人脸图像信息作为访客身份信息，根据该人脸图像信息数据库设置偏好配置，所述偏好配置是住户从常来访客人脸图像信息数据库中选择偏好的访客身份信息作为偏好组；

当选择第二应用场景后，云端服务器通过门禁终端的摄像头模块拍摄人脸图像，并在偏好配置中查找匹配的人脸图像，若查找到匹配图像，则云端服务器控制门禁终端自动开启。

优选地，当选择第二应用场景后，云端服务器通过门禁终端的摄像头模块拍摄人脸图像后，所述人脸图象作为一次访客来访记录被上传至云端服务器保存；所述常来访客人脸图像信息数据库中的每条人脸图像信息是住户通过移动终端上传的自定义人脸图像或者住户通过移动终端查询云端服务器的访客来访记录并从来访记录中提取。

一种应用于门禁系统的访客智能交互方法，包括门禁终端，移动终端，云端服务器；其特征在于：

门禁终端能够收集访客信息，并将其发送到云端服务器；

云端服务器根据收集到的访客信息，识别访客意图，选择对应的应用场景，云端服务器根据所选择的应用场景判断是否需要与移动终端建立连接，若不需要与移动终端建立连接，则根据该应用场景通过门禁终端直接与访客进行自动交互，若需要与移动终端建立连接，则使门禁终端与移动终端建立连接使得访客与移动终端持有者进行交互。

优选地，门禁终端在收集访客信息之前，先由访客在门禁终端上向云端服务器发出服务请求，云端服务器向门禁终端发送语音提示，引导访客输入访客信息。

优选地，当识别所述访客意图为无需找住户时，选择第一应用场景，云端服务器判断为不需要与移动终端建立连接，当识别访客意图为找住户时，选择第二应用场景，云端服务器判断为需要与移动终端建立连接。

优选地，门禁终端收集到的访客信息包括语音信息，云端服务器根据该语音信息识别访客的意图。

优选地，当选择为第一应用场景后，云端服务器向门禁终端发送语音提示信息，引导访客进行完成操作。

优选地，当选择为第二应用场景后，云端服务器向门禁终端的喇叭发送语音提示信息，引导访客输入目标住户的连接信息，云端服务器根据所述连接信息建立门禁终端和目标住户移动终端之间的语音连接通道。

优选地，当访客完成操作后，云端服务器向移动终端推送访客来访的操作结果信息消息。

优选地，所述第一应用场景是送快递或者送水。

优选地，所述第二应用场景是找住户。

优选地，访客通过门禁终端的按键模块输入访客信息，按键模块包括第一按键模块和第二按键模块，当访客操作第一按键模块时，云端服务器识别访客意图为不需要找住户，选择第一应用场景，判断为不需要与移动终端建立连接；当访客操作第二按键模块时，云端服务器识别访客意图为需要找住户，选择第二应用场景，并判断为需要与移动终端建立连接，使门禁终端与移动终端建立连接。

优选地，所述云端服务器通过机器学习以及大数据方法，构造与访客进行人机交互的AI程序，所述AI程序分析并理解访客信息从中识别出访客意图，选择对应的应用场景。

优选地，选择第二应用场景后，云端服务器向门禁终端的喇叭发送语音提示信息之前，还包括：

云端服务器建立常来访客人脸图像信息数据库，所述每条人脸图像信息作为访客身份信息，根据该人脸图像信息数据库设置偏好配置，所述偏好配置是住户从常来访客人脸图像信息数据库中选择偏好的访客身份信息作为偏好组；

当选择第二应用场景后，云端服务器通过门禁终端的摄像头模块拍摄人脸图像，并在偏好配置中查找匹配的人脸图像，若查找到匹配图像，则云端服务器控制门禁终端自动开启，若没有查找到匹配图像则进行向门禁终端的喇叭发送语音提示信息，引导访客输入目标住户的连接信息，云端服务器根据所述连接信息建立门禁终端和目标住户移动终端之间的语音连接通道。

优选地，当选择第二应用场景后，云端服务器通过门禁终端的摄像头模块拍摄人脸图像后，所述人脸图象作为一次访客来访记录被上传至云端服务器保存；所述常来访客人脸图像信息数据库中的每条人脸图像信息是住户通过移动终端上传的自定义人脸图像或者住户通过移动终端查询云端服务器的访客来访记录并从来访记录中提取。

本发明技术方案带来的有益效果

本发明根据访客意图选择不同的应用场景从而选择不同的处理方式，使得访客更加精确地满足自己的需求，也不打扰不相关的住户，并且通过语音识别技术，使得访客与门禁之间的人机交互带来了更好的低门槛用户体验。

附图说明

为了更清楚地说明本发明的技术方案，下面将对实施方式中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明的门禁系统的系统模块框图

图2为本发明门禁交互方法的一个实施例

图3是本发明门禁交互方法的一个优选实施例

图4将图3的语音提示换成视频、图像或文字的一个实施例

图5是将图3中通过语音识别判断应用场景的方式直接替换为键盘直接输入的一个实施例

具体实施方式

实施例一

如图1本发明的门禁系统包括门禁终端1、移动终端2、云端服务器3，它们之间通过互联网数据连通，门禁终端用于收集访客信息，移动终端用于与门禁终端建立通讯，方便访客与住户进行交互，云端服务器用于分析提取访客信息，识别访客的意图，判断访客是否需要与住户建立通讯；

门禁终端1包括麦克风、喇叭、网络模块以及控制器模块，但还可以包括摄像头、按键模块、LED灯模块、显示器模块，电控锁模块(现有技术，图示中未示出)；

所述门禁终端的控制器模块接收云端服务器的开门指令，控制模块根据该指令控制电控锁模块开门；

所述按键模块可以是触摸屏或者普通键盘，能够输入数字、文字信息，显示屏可以是LCD显示屏，LED等模块用于提示访客操作而进行闪烁，网络模块可以是wifi或者3G/4G模块。

移动终端2可以手机、平板电脑、PDA等能运行门禁APP的移动设备；

云端服务器3通过机器学习以及大数据方法，构造与访客进行人机交互的AI程序，所述AI程序分析并提取访客的真实意图，并选择符合该意图的应用场景，根据该应用场景判断是否需要与移动终端建立连接，如果不需要与移动终端建立连接，则表明，访客并不需要找住户，例如，访客的真实意图可能只是送快递或者送水的意图，这时，访客都可不必打开门禁进入住处，只需要云端服务器根据送水或送快递的应用场景的相关语音交互数据直接发送给门禁终端以提示访客完成送水或送快递操作。如果需要与移动终端建立连接，则表明，访客是找住户，而访客找住户多数是在找某一个人，因此访客不必要打扰其他人，只需要在门禁终端和所需要找的住户的移动终端之间建立连接。

门禁终端收集访客信息，可以直接通过麦克风接收语音信号，访客通过按键模块的引导输入自然语言的语音信息，发送给云端服务器，云端服务器通过内置的AI程序识别访客的语音信息，识别访客的身份、意图，判断访客意图适用于哪种引用场景，并选择该适用的应用场景，应用场景分为两类，第一类是不需要打扰住户，第二类是需要找住户，因此，第一应用场景只需要访客和门禁终端进行智能人机交互就可以满足需求，在云端服务器通过设置AI语音识别程序，利用大数据(如调用大数据方法库)、机器学习技术(如调用机器学习方法库)，就能够应对访客的简单需求，例如，送快递、送水，只需要引导访客将快递件或水放在指定位置即可，在完成操作后，优选地，可以向住户发送短信，或者消息推送，而不必建立实时的双向连接。第二应用场景只需要访客找到想找的住户，与其移动终端建立双向通讯连接，访客可以通过键盘引导以输入访客想要找的住户的关键信息，该关键信息，可以是通过语音输入，也可以是通过键盘输入，例如手机号、住户名字等，优选地是，访客通过语音输入想找的住户姓名，由云端服务器通过AI程序理解并识别找到与该住户名字绑定的移动终端，发出建立双向连接的请求，访客在接受该请求后，访客可与该住户进行语音通话，然后通过移动终端上的app控制门禁是否开启，让访客进来。

第一应用场景可根据访客的需求的扩展，而不仅限于本发明文字中限定的几种。

所述访客信息还可以包含图像或视频信息，该图像或者视频信息可以作为一种来访纪录信息保存下来，以便住户查询。

具体的访客与门禁的交互过程可以是，访客通过门禁上的按键模块引导输入语音信息，同时摄像头模块开启，以记录整个来访过程，视频、图像信息和语音信息被一同发送到云端服务器上，云端服务器上的AI程序通过语义分析理解识别访客的意图，当判断为访客意图适用于第一应用场景时，即不需要找住户，云端服务器则向门禁终端发送语音提示信息引导访客完成诸如送水或者送快递的操作，并通过按键模块向云端服务器反馈完成结果，云端服务器可以向将该结果以短信或者消息的方式广播推送给与该住户相关的所有的移动终端设备，引导访客完成第一应用场景的引导信息，不限于语音信息，也可以是视频、图像、文字信息，即云端服务器选择第一应用场景后，向门禁终端的显示器模块发送引导访客操作的图像、文字或者视频信息，通过显示屏显示。当判断为访客意图适用于第二应用场景时，即需要找住户时，云端服务器则向门禁终端发送语音提示信息引导访客输入目标住户的连接信息，该连接信息可以是手机号或者名字，该目标住户的连接信息可以通过按键输入，也可以是语音输入，内容可以是“131xxxxxxxx”、“我找xx(人名)”、“xx(人名)”等。云端服务器根据该连接信息，找到与其绑定的移动终端，向该移动终端的门禁对应APP发出建立门禁终端与移动终端之间的双向连接的请求，该移动终端的目标住户，收到该请求，选择接受或者不接受，当接受后请求，访客可以与目标住户建立实时语音连接，并同时可以通过移动终端上的app控制门禁的开启与关闭。优选地，在第二应用场景中，建立语音连接的同时也可建立视频连接，使得访客和目标住户可以进行实时视频通话。优选地，在第二应用场景中，访客和住户也可以不必建立实时的语音或视频，例如，当云端服务器根据访客输入的连接信息找到目标住户的移动终端时，只需要引导访客输入文字或者语音信息，并将其推送到目标住户的移动终端APP上，这种情况类似微信上的发送文字和语音消息的，主要是考虑目标住户可能出于不方便而对门禁APP设置了勿打扰的设定，当目标住户看到消息后，可以控制门禁APP开门或者不开门。

在第二应用场景中，还可以有访客的身份认证，例如当云端服务器通过语音技术判断访客意图后并选择第二应用场景时，云端服务器控制门禁终端的摄像头拍摄访客的图像，进行人脸识别，云端服务器可以与公安系统连接，识别访客的真实身份并保存，以提供安全来访记录；或者，云端服务器可以建立常来访客的人脸图像信息的数据库，识别当前访客是否为常来访客，若是，则认证为常来访客，其中，常来访客可以通过住户从访客来访记录中提取并设置，可以由住户通过手机app设置，例如，访客来访时，云端服务器识别为第二应用场景后，控制门禁终端拍摄访客人脸图片，并作为来访记录的一部分保存并上传云端服务器，住户可通过移动终端APP查看来访记录；云端服务器从来访记录中提取访客的身份信息，身份信息包括访客的人脸照片，住户可通过移动终端APP选择性的将一些身份信息加入到常来访客的人脸图像信息数据库中，该数据中每条张人脸图像对应一个常来访客的身份信息，住户也可以通过移动终端APP上传自定义的人脸图像加入到上述数据库中；识别是否为常来访客，是基于选择第二类应用场景时，当前来访记录的人脸图片与常来访客的人脸图像信息数据库的人脸信息进行查找比对，查找到，则认证为常来访客。

云端服务器还可以提供偏好访客设置，当云端服务器识别常来访客满足偏好访客时，可以不必与住户移动终端建立双向连接，偏好设置使得某些常来访客被住户认定为具有开门权限的的访客，因此，当这些访客来访时，也不必打扰住户，云端服务器认定常来访客满足偏好设置时，自动开启门禁，并向住户推送一条哪个常来访客来访的消息推送。

住户可以通过移动终端APP为门禁终端开门设置访客偏好配置，并将访客偏好配置存储在云端服务器上，该偏好配置是基于云端服务器建立的常来访客的人脸图像信息数据库的，住户在常来访客的人脸图像信息数据库中选择可以自动开门的访客身份信息，并加入偏好配置，该偏好配置相当于从数据库中选择一些访客身份信息建立偏好配置组，当访客来访时，云端服务器选择第二应用场景后，通过门禁终端的摄像头拍摄人脸图片，并在偏好配置组中查找匹配的人脸图片信息，当找到后，云端服务器控制门禁终端自动开启；当云端服务器没有找到匹配的人脸图片时，则向门禁终端发送提示信息，提示需要找的目标住户的连接信息，使得访客可以通过门禁终端与目标住户的移动终端建立双向连接进行沟通，具体方案，与前述记载相同，这里不再赘述。

云端服务器通过网络与门禁终端相互连接，在第二应用场景中，当云端服务器判断为为偏好的常来访客自动开门时，云端服务器通过发送开门指令给门禁终端的控制模块控制电控锁模块开启进行开门，当云端服务器判断为非偏好常来访客或非常来访客后，建立了门禁终端与目标住户移动终端的双向连接后，住户与访客沟通后，同意开门，则住户通过移动终端APP向云端服务发送开门指令，云端服务器转发该开门指令到门禁终端，门禁终端的控制器模块根据该开门指令控制电控锁开启。

实施例二

本实施例与实施例一的不同主要在于，识别访客的意图不是通过语音识别实现，而是通过门禁终端上的按键模块实现，例如，门禁终端的按键可以设置有默认的第一应用场景的多个按钮，即可以称作第一按键模块，例如送水、送快递，访客按下按键后，云端服务器可以直接判断访客意图不是找人，并选择第一应用场景，门禁终端还设置有第二应用场景的按钮，即可以称作第二按键模块，例如找人，访客按下按键后，云端服务器提示访客输入目标住户的连接信息，本实施例的按键模块除了具有应用场景选择的按钮外，还具有能够输入数字、文字信息的按键，按键模块可以是触摸屏通过软件设置，而也可以是门禁专用的物理键盘。

根据上述实施例一、实施例二的门禁系统还可以提出对应的门禁系统的访客智能交互方法，该访客智能交互方法利用门禁终端，移动终端，云端服务器实现访客与门禁终端的智能人机交互；如

通过门禁终端能够收集访客信息，并将其发送到云端服务器；云端服务器根据收集到的访客信息，识别访客意图，选择对应的应用场景，云端服务器根据所选择的应用场景判断是否需要与移动终端建立连接，若不需要与移动终端建立连接，则根据该应用场景通过门禁终端直接与访客进行自动交互，若需要与移动终端建立连接，则使门禁终端与移动终端建立连接使得访客与移动终端持有者进行交互。

在门禁终端在收集访客信息之前，可先由访客在门禁终端上向云端服务器发出服务请求，云端服务器向门禁终端发送语音提示，引导访客输入访客信息，如图2中所示，当识别所述访客意图为无需找住户时，选择第一应用场景，云端服务器判断为不需要与移动终端建立连接，当识别访客意图为找住户时，选择第二应用场景，云端服务器判断为需要与移动终端建立连接。

门禁终端收集到的访客信息包括语音信息，云端服务器根据该语音信息识别访客的意图，如图3所示，图3是图2的一个优选实施例，其中的交互信息都通过语音识别技术以自然语言的方式实现。

当选择为第一应用场景后，云端服务器向门禁终端发送语音提示信息，引导访客进行完成操作。

当选择为第二应用场景后，云端服务器向门禁终端的喇叭发送语音提示信息，引导访客输入目标住户的连接信息，云端服务器根据所述连接信息建立门禁终端和目标住户移动终端之间的语音连接通道。

当访客完成操作后，访客可以通过门禁终端向云端服务器发送完成操作的反馈信息，云端服务器可向住户的移动终端推送访客来访病完成操作的推送消息。

所述第一应用场景是送快递或者送水，所述第二应用场景是找住户即不需要与住户建立交互的应用场景。

图4是将图3的语音提示换成视频、图像或文字的一个实施例。

识别访客意图还可以不通过访客的语音信息如图5所示，访客通过门禁终端的按键模块输入访客信息，按键模块包括第一按键模块和第二按键模块，分别对应第一应用场景和第二类应用场景，当访客操作第一按键模块时，云端服务器识别访客意图为不需要找住户，选择第一应用场景，判断为不需要与移动终端建立连接；当访客操作第二按键模块时，云端服务器识别访客意图为需要找住户，选择第二应用场景，并判断为需要与移动终端建立连接，使门禁终端与移动终端建立连接，第一按键模块有送水按键和送快递按键等，可根据具体的不需要打扰住户的场景增加第一应用场景的按键数量，当访客按下第一类应用场景的按键时，云端服务器及选择了第一应用场景，判断为不需要与住户建立门禁和移动终端的双向连接，同理访客按下第二应用场景的按键时，即选择第二应用场景，判断为需要与住户移动终端建立连接，进而向门禁终端发出提示信息，引导访客输入目标住户信息。

所述云端服务器通过机器学习以及大数据方法，构造与访客进行人机交互的AI程序，所述AI程序分析并理解访客信息从中识别出访客意图，选择对应的应用场景。

以上实施例仅仅是本发明方案的列举，一切能够实现本发明所提出的识别访客意图，选择应用场景，判断是否与住户建立连接，使得访客通过门禁终端可以实现便捷人及交互的方案都在本发明的保护范围之类。