一种终端柜员机及其智能双录应用的制作方法

本发明涉及一种终端柜员机及其智能双录应用。

背景技术：

当前客户在证卷及银行营业厅办理相关业务时，如果业务中需要进行双录，都必须进入设置好的双录室，提前准备好相关的专业录音录像设备，同时需要两名工作人员参与，一名工作人员同客户问答并入镜，另一名工作人员负责录像，完成后，把录像的音视频文件导出，再导入业务系统一起提交审核。

在办理证卷及银行相关业务时，双录是高频业务环节，会造成排队等待，客户服务体验差，而且录像过程中存在低头、脱离录像区域等不合规的情况就需要重新开始录制，双录已成为客户办理相关业务的瓶颈，同时因为要设置专门双录室、设备以及多名工作人员参与，造成资源和人力成本的浪费。

技术实现要素：

为了解决现有技术中所存在的问题，本发明的目的在于提供一种终端柜员机及其智能双录应用，主要通过自助双录或远程双录实现方式，为客户和柜员机之间，或客户和远程坐席之间进行音视频问答，同时进行实时音视频存档。

为实现本发明的目的，在此所提供的终端柜员机包括：

操作显示屏，为电磁电容屏，用于终端柜员机与用户之间进行交互；

播放显示屏，用于播放投教视频和显示双录实时录像信息；

摄像头模块，用于拍摄用户操作信息及实时录制视频；

语音模块，用于双录过程中每个步骤开始时进行语音播报，提示用户应该完成的操作，优化客户体验；

语音识别模块，用于双录话术问答过程中，实时识别客户回答的话术问题；

签字笔，在操作显示屏上书写，可记录和收集电子笔迹数据，可将笔迹数据加密存储于pdf文件内，并能够对pdf文件内的笔迹数据进行书写回放；其中，笔迹数据是指书写的力度、加速度、矢量图型数据等。签字笔可以采用现有的任何一种，在此采用无源无线签字笔，通过切割磁力线实现定位和压力感知。无纸化终端（操作屏）通过hid接口接收电磁笔信息，实现电磁设备的位置xy坐标、压力、加速度的信息，并通过笔迹平滑算法，实现类似钢笔毛笔的书法效果。

进一步的，为保证客户双录审核通过率，支持图像检测技术。双录过程中，如果客户存在低头看手机、戴帽子或眼镜、中途偏离摄像区域等不符合双录要求时，应用会给出醒目的违规提醒，超过5秒没有纠正，系统会自动退出，提示重新开始双录。

进一步的，双录业务话术播报由客户实时控制，可控制话术播报的加速、减速，可重复播报话术，可暂停话术播报。

进一步的，实时语音识别，业务话术播报完成后，客户回答话术问题，系统通过语音识别模块实时语音识别并显示识别结果。每一条话术有三次回答识别机会，若三次均没有完成话术问答，显示“继续”按钮，用户可点击进入下一个问题。

进一步的，可进行视频回放，双录录制完成以后，客户在提交之前通过操作显示屏可回看录制的视频，支持手动拖拉视频进度，可选择重新录制。

进一步的，双录过程中每个步骤开始时通过语音模块实时语音播报，提示用户应该完成的操作，优化客户体验。

进一步的，采用上下屏双屏模式，下屏为操作显示屏，被配置为终端柜员机与客户之间的交互；上屏为播放显示屏，用于播放投教视频和显示双录实时录像信息。根据业务要求，上下屏实时交互同步和数据共享。

进一步的，支持多种画面模式，单画面模式（自助双录，支持引导用户自助办理业务）、画中画模式（远程双录，支持用户通过终端柜员机远程和坐席视频见证）；根据不同的业务要求可设置画面模式。

进一步的，双录过程中实时以流媒体形式上传双录的音视频数据信息保存到后台管理服务器。

采用上述技术方案后，本发明与现有技术相比具有以下有益效果：

本发明所提供的终端柜员机及其智能双录应用能够使得用户不需要排队等待，提前在终端柜员机上完成待办业务的双录环节功能，终端柜员机实时以流媒体形式上传双录的音视频数据信息保存到后台管理服务器，办理关联的业务时自动加载智能双录结果数据，节省业务办理时间，用户体验更好，同时减少客服人员的数量以及双录相关的硬件设备成本。

附图说明

图1为本发明所提供的终端柜员机构成双录模块结构图；

图2为本发明所提供的预约双录业务选择页面；

图3为本发明提供的柜员机自助双录单画面模式；

图4为本发明提供的柜员机远程双录双画面模式；

图5为本发明提供的柜员机双录提醒页面；

图6为本发明提供的柜员机播放投教视频；

图7为本发明提供的柜员机观看投教视频提醒页面；

图8为本发明提供的柜员机双录话术问答操作界面之一；

图9为本发明提供的柜员机双录话术问答操作界面之二；

图10为本发明提供的柜员机双录话术问答操作界面之三；

图11为本发明提供的柜员机双录话术问答操作界面之四；

图12为本发明提供的柜员机双录抄写页面；

图13为本发明提供的柜员机添加签名页面；

图14为本发明提供的柜员机双录提醒页面；

图15为本发明提供的柜员机双录回放页面；

图中：1-操作显示屏，2-播放显示屏，3-摄像头模块，4-语音模块，5-语音识别模块，6-签字笔。

具体实施方式

在此结合附图和具体示例对本发明所提供的技术方案作进一步详细的说明。

为了解决现有的客户在证卷及银行营业厅办理相关业务时，如果业务中需要进行双录，都必须进入设置好的双录室，提前准备好相关的专业录音录像设备，同时需要两名工作人员参与，一名工作人员同客户问答并入镜，另一名工作人员负责录像，完成后，把录像的音视频文件导出，再导入业务系统一起提交审核，客户服务体验差，同时又造成资源和人力成本浪费等问题，本发明在此提供一种终端柜员机及其智慧双录应用。

图1图解了本发明所提供的终端柜员机的结构，其包括了操作显示屏1，播放显示屏2，摄像头模块3，语音模块4，语音识别模块5，签字笔6；每个模块的作用分别如下：

操作显示屏1，电磁电容屏，被配置为终端柜员机与用户之间的交互；

播放显示屏2，被配置播放投教视频和显示双录实时录像信息；

摄像头模块3，被配置拍摄用户操作信息及实时录制视频；

语音模块4，被配置双录过程中每个步骤开始时进行语音播报，提示用户应该完成的操作，优化客户体验；

语音识别模块5，被配置双录话术问答过程中，实时识别客户回答的话术问题；

签字笔6，在操作显示屏上书写，被配置可记录和收集电子笔迹数据，可将笔迹数据加密存储于pdf文件内，并能够对pdf文件内的笔迹数据进行书写回放；其中，笔迹数据是指书写的力度、加速度、矢量图型数据等。签字笔可以采用现有的任何一种，在此采用无源无线签字笔，通过切割磁力线实现定位和压力感知。无纸化终端（操作屏）通过hid接口接收电磁笔信息，实现电磁设备的位置xy坐标、压力、加速度的信息，并通过笔迹平滑算法，实现类似钢笔毛笔的书法效果。

为实现本发明的目的，在此所提供的终端柜员机上的智能双录技术实施步骤包括：

步骤1：选择待办双录业务

语音模块进行播报提示：请选择待办业务，点击后进行业务相关的视频录制；

操作显示屏上选择要办理双录的具体业务，如图2所示；不同业务的双录，合规要求双录的形式不同（自助双录，如图3所示；远程双录，如图4所示）；播放显示屏全屏显示相关轮播广告；点击具体待办业务后进入步骤2。

步骤2：双录动画提醒

语音模块进行播报提示：按照监管要求，您需要录制一段视频，请阅读注意事项并按照提示操作进行，完成后点击下一步；

操作显示屏进入双录动画提示页面，提示用户请全程正面对准摄像头、不能低头看手机、不能离开摄像区域等，如图5所示；点击下一步进入步骤3。

步骤3：播放投教视频

播放显示屏左侧播放业务相关的投教视频，同时打开摄像头开始进行视频录制，右侧显示实时录像信息，如图6所示；操作显示屏进入观看投教视频动画提示页面，如图7所示；投教视频播放完后，操作显示屏自动跳转话术播报页面，进入步骤4；

投教视频根据合规要求必须看完，不能跳过或快进播放；

播放投教视频由系统根据业务合规配置，若针对某个业务，系统没有配置播放投教视频则自动跳过该步骤。

步骤4：话术问答

语音模块进行播报提示：请根据操作屏幕信息提示，依次回答智能柜员机的问题，完成后点击下一步；

操作显示屏进入话术播报文字提示页面，语音播报提示完成后间隔1秒自动播报第一条话术，话术播报完成后提示用户回答，如图8所示；用户回答完成后，通过语音识别模块实时语音识别，显示用户回答的文字信息，如图9所示；若用户回答识别正确，自动播报下一条话术；若用户回答识别有误，提示用户再次大声回答，如图10所示；若用户连续回答三次仍然识别有误，提示用户点击右侧的继续按钮，用户点击后，自动播报下一条话术，如图11所示；播放显示屏左侧显示静态广告图片，右侧显示实时录像，如图3所示；

业务话术播报由客户实时控制，点击加速、减速按钮可控制话术播报速度的加速或减速0.1秒；点击重播按钮，可重复播报话术；点击暂停按钮，可暂停话术播报，如图8所示；

用户回答完所有的话术播报后，下一步按钮可点击，用户点击后进入步骤5；

业务话术的条数由系统根据业务合规配置，若针对某个业务，系统没有配置话术播报则自动跳过该步骤。

步骤5：双录抄写及添加签名

语音模块进行播报提示：请根据操作屏幕信息提示，依次抄写重点提示文字，同时添加签名，完成后点击下一步；

操作显示屏进入双录抄写页面，如图12所示；通过签字笔在操作显示屏进行抄写，抄写完成后，点击添加签名弹出添加签名的窗口，如图13所示；客户可通过签字笔进行签名，签名完成后，显示实时签名在签名区域。点击已签姓名可支持重新签名；

签名完成后下一步可点击，点击后上传抄写和签名数据到服务器，进入步骤7；

双录抄写及添加签名由系统根据业务合规配置，若针对某个业务，系统没有配置则自动跳过该步骤。

步骤6：违规提醒

为保证客户双录审核通过率，双录过程中，如果客户存在低头看手机、戴帽子或眼镜、中途偏离摄像区域等不符合双录要求时，系统会给出醒目的提示，如图14所示。若客户纠正后提示消失，若超过5秒没有纠正，系统会自动退出到双录提醒页面，提示重新开始双录。

步骤7：双录视频回放

语音模块语音播报提示：请回看双录视频，确认无误后点击“提交”按钮；

视频回放，双录录制完成以后，客户在提交之前可回看录制的视频，支持手动拖拉视频进度，可重新进行双录，如图15所示；

以上实施示例仅用以说明本发明的技术方案而非限制，本领域普通技术人员对本发明的技术方案所做的修改或等同替换，只要不脱离本发明的技术方案的精神和范围，均涵盖在本发明的权利要求范围内。