一种用于银行网点的物联网设备的场景控制方法及系统与流程

本发明涉及智慧银行，具体涉及一种用于银行网点的物联网设备的场景控制方法及系统。

背景技术：

1、银行网点在室内设计过程中，各个分区之间的组合应考虑全面，便于使用、配备合理，将每个分区划分得相对独立又互相影响，互相作用，形成一个有机的整体。银行网点一般分为基础网点和精品网点。基础网点，是为普通客户提供交易服务的物理网点，必须设置自助服务区，咨询服务区、咨询引导区、客户等候区、现金服务区、非现金服务区；精品网点：基本设施、功能全面，能够满足贵宾客户的金融服务需求，必须设置自助服务区、咨询引导区、客户等候区、现金服务区、非现金服务区、电子银行体验区。

2、顾客到银行办理业务，在进入银行网点前，先进行业务咨询，然后选择自助服务、人工服务或网银体验；若是客户选择人工服务，则进行取号、填单、等候、叫号、业务办理、评价，然后离开。

3、目前在银行业中，几乎所有银行网点对于设备的开和关、设备运行状态收集及监控都需要依赖人工或者多个指定系统协作完成。使用人工管理的方式，无疑会带来人力的极大浪费，网点的开门、撤防、开灯、设备开机、空调开启、新风打开等以及这一系列设备的逆向操作都是需要人为干预的；也有些网点运用了设备自带的自动开关属性，设置了一些设备定时的开关操作，虽然暂时无需人为操作，但是在特殊情况到来，比如临检时，依然需要现场人员逐一操作。此外，对于网点设备故障情况，从设备的故障发现、故障解决都是需要人员介入的，不仅带来了时效上的延迟，也是属于重复性、易被遗忘性工作。故当前大力推广的无人银行网点，通过智能设备的应用虽然在一定程度上减少了人力成本的投入，但是由于业务办理流程过程中无人引导，也造成如存在业务办理时间长、网点环境不舒适等问题。

4、例如，中国专利申请2020102057796公开了基于物联网的银行网点营业管控方法及系统，它能够有效实现针对银行网点的自动化且智能化的营业管控，并能够有效提高银行网点中设备故障的发现及处理效率，进而能够有效提高银行网点营业过程的可靠性。但是它无法实现基于具体的业务办理场景，为顾客提供专有的业务服务，更无法实现无人银行网点的智能化服务。

5、又例如，中国专利申请2021113177635，公开了金融场景类用户感知信息处理方法、系统、设备及应用，线下网点各物联终端传感器数据、线上开放银行埋点数据、第三方系统推送信息、行内其他平台或业务流程数据的采集；对数据的etl、离线计算、实时计算、ai算法分析等进行计算和分析；通过数据建模进行分层数据融合，实现数据资产建设；通过统一服务开放、统一权限管理、统一运维管理、统一告警中心实现数据服务体系建设；支持线上、线下网点数字化运营进行数据应用；挖掘用户应用场景，提供更智能化的个性化服务，提升用户感知。该发明提供更精准个性化的服务，如帮助营业厅分析访客构成、热点区域，客流轨迹，有针对性的提升线下业务营销推广；但是其未能实现银行网点物联网设备的自动化管控，更未能实现基于用于用户办理业务的场景控制。

技术实现思路

1、本发明目的在于提供一种用于银行网点的物联网设备的场景控制方法及系统，充分解决无人银行网点的业务办理过程中无人引导、业务办理时间长、网点环境不舒适等问题。

2、为达成上述目的，本发明提出如下技术方案：一种用于银行网点的物联网设备的场景控制方法，包括：

3、接收并识别第一语音信息、第一手势信息和第一人脸信息；

4、根据对第一语音信息、第一手势信息和第一人脸信息的第一识别结果，发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，所述待选场景模板预设在所述控制中心内，包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；

5、接收并识别第二语音信息、第二手势信息和第二人脸信息；

6、根据对第二语音信息、第二手势信息和第二人脸信息的第二识别结果，发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式；其中，所述场景选择指令至少包括待选场景模板中的其中一种场景。

7、进一步的，接收并识别获得所述第一识别结果或第二识别结果的过程包括：

8、构建语音通道、手势通道、人脸通道，并分别通过语音通道、手势通道、人脸通道接收人机交互的指称对象输入的语音信息、手势信息和人脸信息；

9、从语音信息、手势信息和人脸信息中分别提取语音指称对象约束信息、手势指称对象约束信息、人脸指称对象约束信息，其中，所述手势指称对象约束信息包括当前指点手势所维持的时间统计量；

10、将语音、手势、人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定人机交互的指称对象；

11、从语音指称对象约束信息中提取对指称对象的命令信息，获得识别结果。

12、进一步的，从语音信息、手势信息和人脸信息获得识别结果的具体过程为：

13、构建并应用多通道分层整合模型；其中，多通道分层整合模型包括物理层、词汇层和语法层；

14、所述物理层接收由所述语音通道、手势通道和人脸通道输入的语音信息、手势信息、人脸信息；

15、所述词汇层包括语音识别解析模块、手势识别解析模块和人脸识别解析模块，其中，语音识别解析模块将物理层接收的语音信息解析为语音指称对象约束信息、手势识别解析模块将物理层接收的手势信息解析为手势指称对象约束信息、人脸识别解析模块将物理层接收的人脸信息解析为人脸指称对象约束信息；

16、所述语法层将所述语音指称对象约束信息、手势指称对象约束信息及人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定出人机交互的指称对象；以及所述语法层从所述语音指称对象约束信息中提取对所述指称对象的命令信息。

17、进一步的，所述多通道分层整合模型还包括语义层；

18、所述根据第一识别结果发送场景开启指令和根据第二识别结果发送场景选择指令的过程均为，在所述多通道分层整合模型的语义层将识别结果中获得的所述命令信息作用于指称对象。

19、进一步的，所述多通道分层整合模型还包括任务槽和生产系统，所述任务槽包括命令表项以及指称对象表项；

20、所述语义层将所述命令信息填入所述任务槽的命令表项、将所述指称对象填入所述任务槽的指称对象表项；

21、当所述任务槽完成填充，触发所述生产系统执行任务命令。

22、进一步的，还包括：

23、获取银行网点场景应用的各影响因素的维度数据，包括任务类型维度、时间维度、光线维度、用户体征状态维度、用户距离维度；

24、根据一种或多种所述维度数据，控制调节指定区域的场景模式下各物联网设备输出通道的开启或关闭。

25、本发明另一技术方案在于公开一种用于银行网点的物联网设备的场景控制系统，该系统包括：

26、第一接收识别模块，用于接收并识别第一语音信息、第一手势信息和第一人脸信息；

27、第一发送模块，用于根据对第一语音信息、第一手势信息和第一人脸信息的第一识别结果，发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，所述待选场景模板预设在所述控制中心内，包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；

28、第二接收识别模块，用于接收并识别第二语音信息、第二手势信息和第二人脸信息；

29、第二发送模块，用于根据对第二语音信息、第二手势信息和第二人脸信息的第二识别结果，发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式；其中，所述场景选择指令至少包括待选场景模板中的其中一种场景。

30、进一步的，第一接收识别模块接收并识别获得所述第一识别结果或第二接收识别模块接收并识别获得第二识别结果的执行单元均包括：

31、构建接收单元，用于构建语音通道、手势通道、人脸通道，并分别通过语音通道、手势通道、人脸通道接收人机交互的指称对象输入的语音信息、手势信息和人脸信息；

32、第一提取单元，用于从语音信息、手势信息和人脸信息中分别提取语音指称对象约束信息、手势指称对象约束信息、人脸指称对象约束信息，其中，所述手势指称对象约束信息包括当前指点手势所维持的时间统计量；

33、对比确定单元，用于将语音、手势、人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定人机交互的指称对象；

34、第二提取单元，用于从语音指称对象约束信息中提取对指称对象的命令信息，获得识别结果。

35、进一步的，还包括：

36、构建应用模块，用于构建并应用多通道分层整合模型；其中，多通道分层整合模型包括物理层、词汇层和语法层；

37、所述物理层接收所述构建接收单元接收的语音信息、手势信息、人脸信息；

38、所述词汇层包括语音识别解析模块、手势识别解析模块和人脸识别解析模块，所述第一提取单元经所述语音识别解析模块将语音信息解析为语音指称对象约束信息、手势识别解析模块将手势信息解析为手势指称对象约束信息、人脸识别解析模块将人脸信息解析为人脸指称对象约束信息；

39、所述对比确定单元经所述语法层将所述语音指称对象约束信息、手势指称对象约束信息及人脸指称对象约束信息与虚拟环境中模型对象的特征信息进行对比，确定出人机交互的指称对象；

40、所述第二提取单元经所述语法层从所述语音指称对象约束信息中提取对所述指称对象的命令信息。

41、进一步的，还包括：

42、获取模块，用于获取银行网点场景应用的各影响因素的维度数据，包括任务类型维度、时间维度、光线维度、用户体征状态维度、用户距离维度；

43、控制调节模块，用于根据一种或多种所述维度数据，控制调节指定区域的场景模式下各物联网设备输出通道的开启或关闭。

44、由以上技术方案可知，本发明的技术方案获得了如下有益效果：

45、本发明公开的用于银行网点的物联网设备的场景控制方法及系统，其方法包括：接收并识别第一语音信息、第一手势信息和第一人脸信息；根据第一识别结果发送场景开启指令，以便控制中心响应场景开启指令显示待选场景模板；其中，所述待选场景模板预设在所述控制中心内，包括迎宾场景、业务咨询场景、自助服务场景、人工服务场景、网银体验场景、业务办理场景；接收并识别第二语音信息、第二手势信息和第二人脸信息；根据第二识别结果发送场景选择指令，以便控制中心响应并执行场景选择指令调整指定区域的场景模式；本发明在不同的工作区域提供对应的业务场景，根据输入的客户语音、人脸和手势信息选择输出客户最适宜的场景，使得顾客能够享受舒适的室内环境，获得较好的银行业务办理体验。

46、另外，本发明提供了用于无人银行网点的物联网设备场景控制方法，其预设的任一待选场景模板均为多个银行物联网设备的功能点的组合，因此可根据场景选择对多个物联网设备进行整体控制，实现指定区域内具体功能的应用，一体化实现无人银行网点的灯光、空调、安防、窗帘等设备的智能化控制，大大便利用户的操作。

47、应当理解，前述构思以及在下面更加详细地描述的额外构思的所有组合只要在这样的构思不相互矛盾的情况下都可以被视为本公开的发明主题的一部分。

48、结合附图从下面的描述中可以更加全面地理解本发明教导的前述和其他方面、实施例和特征。本发明的其他附加方面例如示例性实施方式的特征和/或有益效果将在下面的描述中显见，或通过根据本发明教导的具体实施方式的实践中得知。