一种基于增强现实实现客户端场景交互的方法与流程

本发明涉及银行业务办理领域，具体涉及一种基于增强现实技术实现客户端场景交互的方法。

背景技术：

根据人口学调查显示，最近几年来中国人口的老龄化问题突出；随着智能化的普及，越来越多的年轻人生活越来越智能化，比如手机支付，手机外卖，手机银行等；而许多年纪大或者教育程度低的人群逐渐与社会脱节。如银行，很多银行拥有自己的客户端，用户可以在手机银行客户端上办理业务，避免了在外地办理业务不方便以及需要找到自己对应银行卡的银行不方便等情况。通常流程是在银行开通网上银行服务，然后进入银行客户端，再进行登录，再一步一步的办理操作，最后完成网上银行的业务办理；但是对于老年人视力差或者教育程度低或者盲人等人群，对于这一类人群在缺少引导的情况下很难网上银行的办理业务；但是网上业务办理相对于柜台办理，对于简化银行操作，节省银行服务人员等很有意义；对于年轻用户来看现有的客户端操作较为繁琐，模式单一；那么如何实现这一人群使用网上银行等来办理银行业务以及如何实现更好的银行客户端与用户之间的交互带给用户更好的体验成为现在的关注热点。

技术实现要素：

本发明的目的在于：针对上述由于老人以及盲人缺少引导而无法在相应客户端办理银行业务的问题，本发明提供一种基于增强现实技术实现客户端场景交互进而引导特殊用户实现客户端办理银行业务的方法。

本发明采用的技术方案如下：

一种基于增强现实实现客户端场景交互的方法,其特征在于，包括以下步骤：

(1)利用装有摄像设备的工具获取各种银行业务办理场景的实景图，不同业务流程根据客户lbs定位以及屏幕点击操作，获得不同银行业务对应的实景以及控制参数，该控制参数能控制虚拟客户经理配合实景进行动作变换以及语音交互；

(2)将每张影像存成数组数据结构，该数组数据结构包括对应取样时间的虚拟客户经理模型的动作以及声音，并对影像数据进行分割、加入前后指针或标记，使用客户经理的动作说话内容手势与影像数据同步化，形成虚拟实景的数字内容；

(3)将虚拟实景的数字内容封装成sdk，并将sdk进行编码嵌入带摄像头以及语音识别的智能终端；

(4)在步骤(1)处理的同时，利用多组传感器以及摄像设备采集在客户经理指导下办理不同业务时候的用户的手势，语音，用于获得实景对应的交互控制数据信息，该交互控制数据信息能够指导智能终端的虚拟场景的变换；

(5)将交互控制数据信息的内容封装成sdk,同时将其编码同步嵌入步骤(3)中的带摄像头以及语音识别的智能终端；

(6)在智能终端的虚拟场景根据用户的语音或手势移动进行场景变化，最终用户在智能终端的虚拟实景的引导下在智能终端上实现银行业务办理。

具体地，步骤(1)和步骤(4)中的摄像设备均包括多组摄像设备，对相应采集的影像进行全方位的摄像。

具体地，步骤(3)与步骤(5)中将sdk嵌入智能终端的第三方app。

本申请中，用户语音通过智能终端的语音识别进行识别输入，手势通过摄像头进行采集输入；虚拟实景可以根据语音以及手势来进行相应的变换，最后在虚拟实景的整体引导下用户可以在智能终端办理好网上银行业务。

本申请中利用增强现实技术，采集银行办理业务的交互场景获得虚拟实景的数据内容，再封装成sdk,并将其嵌入至智能终端，一方面用户可以直接通过访问智能终端来获得虚拟实景的交互体验，使得用户的用户体验更好；另一方面老人或者盲人等相对特殊人群可以通过直接访问智能终端的虚拟实景办理银行业务，使得这一类的相对特殊人群可以在智能终端的引导下顺利便捷的使用手机银行等相关服务。与此同时，这对于拓展网上银行的用户量有重要意义，可以减少线下银行从业人员的数量等。

用户可以直接访问第三方app来访问虚拟实景并同时在虚拟实景的引导作用下完成智能终端上的银行业务办理。

综上所述，由于采用了上述技术方案，本发明的有益效果是：

本申请中利用增强现实技术，采集银行办理业务的交互场景获得虚拟实景的数据内容，再封装成sdk,并将其嵌入至智能终端，一方面用户可以直接通过访问智能终端来获得虚拟实景的交互体验，使得用户的用户体验更好；另一方面老人或者盲人等相对特殊人群可以通过直接访问智能终端的虚拟实景办理银行业务，使得这一类的相对特殊人群可以在智能终端的引导下顺利便捷的使用手机银行等相关服务。与此同时，这对于拓展网上银行的用户量有重要意义，可以减少线下银行从业人员的数量等。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。通过附图所示，本发明的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图，重点在于示出本发明的主旨。

图1是本发明基于增强现实实现客户端场景交互的方法的流程图；

图2是网上银行开户流程图；

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

实施例1

原有的网上银行开户流程主要包括六大步骤：

步骤1，用户注册：输入用户名，姓名，省份证号，登录密码，再次确认登录密码，验证码信息进行注册，无误后注册成功；(其中用户需要识别和理解注册信息并正确填写完成方可注册成功)

步骤2，用户登录：用户需要根据注册时候的用户名以及登录密码进行输入登录(用户需要牢记注册时的用户名以及密码，如果忘记密码，需要再实名找回)；

步骤3，选择业务类型：用户需要理解和选择网上银行开户属于网上业务办理大类，同时要理解个人开户也企业开户业务类型区别并进行选择(选择错误的业务类型将会导致开户失败)；

步骤4，填写开户人信息以及选择开户账号相关信息：开户人信息主要包括开户人的姓名，电话，省份证号，省份证正反面，地址；开户账号相关信息主要包括开户类型(储蓄卡或是信用卡或是其他)，开户附加功能选择(网上支付，手机短信等)；(用户如果填写错误的开户人信息将会导致开户失败；用户如果选择错误的开户账号相关信息容易导致后期使用不方便)。

开户的整个过程，对于每一步需要填写或者选择的信息需要基本的认知以及需要基本的识字能力，所以网上银行的使用对于年纪大眼睛近视的老人以及盲人或者缺乏基本教育的人群有难度。

下面将详细阐述基于本方案的实现网上银行开户的过程：

一种基于增强现实实现客户端场景交互的方法,包括以下步骤：

(1)利用装有摄像设备的工具获取各种银行业务办理场景的实景图，不同业务流程根据客户lbs定位以及屏幕点击操作，获得不同银行业务对应的实景以及控制参数，该控制参数能控制虚拟客户经理配合实景进行动作变换以及语音交互；

具体地来说，拍摄场景中，客户经理首先在门口迎接用户，简单问候之后，进行开户业务的介绍，并将用户带领至开户窗口，并指导用户开户信息填写的各项介绍以及填写的注意事项。在这个过程中，控制参数主要就包含了客户经理的位置坐标，客户经理的语速，讲话内容的时间控制；需要采集的信息包括客户经理的行为动作以及面部表情，语言内容，地理位置坐标，银行办理业务场景。

(2)将每张影像存成数组数据结构，该数组数据结构包括对应取样时间的客户经理的动作以及声音，并对影像数据进行分割、加入前后指针或标记，使用客户经理的动作说话内容手势与影像数据同步化，形成虚拟实景的数字内容；

(3)将虚拟实景的数字内容封装成sdk，并将sdk进行编码嵌入带摄像头以及语音识别的智能终端的网上银行的app中；

(4)在步骤(1)处理的同时，利用多组传感器以及摄像设备采集在客户经理指导下办理银行开户业务时候的用户的手势，语音，用于获得实景对应的交互控制数据信息，该交互控制数据信息能够指导智能终端的虚拟场景的变换；

具体地来说，需要采集用户在开户业务时候的细节手势，具体语音，并同时控制用户办理业务时候的坐标等。

(5)将交互控制数据信息的内容封装成sdk,同时将其编码同步嵌入步骤(3)中的带摄像头以及语音识别的智能终端的网上银行的app中；

(6)在智能终端的虚拟场景根据用户的语音或手势移动进行场景变化，最终用户在智能终端的虚拟实景的引导下在智能终端上实现银行业务办理。

具体地，步骤(2)中的传感器和步骤(4)的传感器均包括里程计，惯性传感器，gps,麦克风，温度计，计时器，气体传感器，语音识别器，倾斜计。

具体地，步骤(1)和步骤(4)中的摄像设备均包括多组摄像设备，对相应采集的影像进行全方位的摄像。

在采集过程中，需要多次拍摄，采集清晰的影像；同时多方位的采集银行大厅的信息，便于营造后期一个更接近与真实化世界的虚拟实景。