电梯轿厢内乘客对话的语音识别及内容显示的方法与流程

本发明涉及一种电梯轿厢内乘客对话的语音识别及内容显示的方法，属于电梯控制技术领域。

背景技术：

目前在电梯中安装有报警装置，通过报警装置报警时，被困乘客只能通过扬声器和麦克风与应急平台、维保客户端进行音频沟通。一方面，应急平台虽然可以看到被困乘客的视频信息，但是被困乘客无法看到应急平台的情况；另一方面，被困乘客、应急平台、维保客户端三方的语言出现不一致时，尤其是出现方言时，极易造成沟通问题，继而出现以下问题：(1)乘客的情绪无法得到有效地安抚；(2)维保救援的效率低下。

技术实现要素：

针对现有技术存在的上述缺陷，本发明提出了一种电梯轿厢内乘客对话的语音识别及内容显示的方法，通过构建三方视频对讲和同步语音转文字，极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。

本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，包括如下步骤：

步骤一：搭建对话和显示系统：包括如下小步：

第一步：搭建信息播放装置：在电梯轿厢内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置连接用于接收信息的通信模块；

第二步：搭建远程平台：在远程端搭建云端服务器、应急平台和维保客户端，应急平台包括与云端服务器相连用于与电梯轿厢音视频对话的采集和播放装置，应急平台与维保客户端通过云端服务器与网络传输装置相连；

步骤二：语音识别及内容显示：包括如下小步：

第一步：同步语音识别：电梯轿厢、应急平台和维保客户端输入的语音信号，分别经过语音库的识别同步转换成文字；

第二步：同步内容显示：识别出的文字与同时采集到的音视频信号通过云端服务器交互传输到三方的信息播放装置、应急平台和维保客户端上。

进一步地，所述步骤一第一步中，电梯轿厢的信息播放装置的播放模块包括播放音频的扬声器、播放视频的显示屏；信息播放装置还与用于推送信息的云端服务器、用于接收电梯故障的急救模块相连。

进一步地，所述步骤一第二步中，应急平台包括与信息播放装置双向音视频对讲的音视频采集装置、音视频播放装置。

进一步地，所述步骤一第二步中，网络传输装置接收到的信息包括电梯运行、报警及故障信息、轿厢音视频信息、应急平台音视频信息。

进一步地，所述步骤二第一步中，语音库搭建有方言语言数据库，建立所有方言的识别区，设定需要翻译的方言类别，语音库对输入的语音进行识别处理，语音库对接收的语音进行方言的对照翻译，输出系统对翻译出的方言进行输出。

进一步地，所述步骤二第一步中，语音库调用与电梯轿厢所在区域的方言语言数据库，查找对应该方言语言数据库的普通话特征库，完成应急平台、维保客户端与电梯轿厢的语音交互。

进一步地，所述步骤二第一步中，语音库通过网络传输装置更新方言语言数据库，并允许通过信息播放装置、应急平台和维保客户端进行评分和校准。

进一步地，所述步骤二第二步中，云端服务器存储三方的音视频信息，以及同步转换成的文字；云端服务器通过反馈回的评分和校准数据优化语音库，完善本地最佳方言语言数据库的配置。

本发明的有益效果是：本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，通过在电梯轿厢、应急平台与维保客户端的语音库，同步将三方的语音同步转换为文字，通过三方的播放装置与音视频信号同步播放；极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。

附图说明

图1是本发明的原理连接框图。

图2是三方语音识别及内容显示结构示意图。

图中：1、电梯轿厢；2、网络传输装置；3、云端服务器；4、应急平台；5、维保客户端。

具体实施方式

为了使本发明目的、技术方案更加清楚明白，下面结合实施例，对本发明作进一步详细说明。

如图1所示，本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，包括如下步骤：

步骤一：搭建对话和显示系统：包括如下小步：

第一步：搭建信息播放装置：在电梯轿厢1内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置2连接用于接收信息的通信模块；

第二步：搭建远程平台：在远程端搭建云端服务器3、应急平台4和维保客户端5，应急平台4包括与云端服务器3相连用于与电梯轿厢1音视频对话的采集和播放装置，应急平台4与维保客户端5通过云端服务器3与网络传输装置2相连；

步骤二：语音识别及内容显示：包括如下小步：

第一步：同步语音识别：电梯轿厢1、应急平台4和维保客户端5输入的语音信号，分别经过语音库的识别同步转换成文字；

第二步：同步内容显示：识别出的文字与同时采集到的音视频信号通过云端服务器3交互传输到三方的信息播放装置、应急平台4和维保客户端5上。

如图2所示，所述步骤一第一步中，电梯轿厢1的信息播放装置的播放模块包括播放音频的扬声器、播放视频的显示屏；信息播放装置还与用于推送信息的云端服务器3、用于接收电梯故障的急救模块相连。

进一步地，所述步骤一第二步中，应急平台4包括与信息播放装置双向音视频对讲的音视频采集装置、音视频播放装置。

进一步地，所述步骤一第二步中，网络传输装置2接收到的信息包括电梯运行、报警及故障信息、轿厢音视频信息、应急平台4音视频信息。

进一步地，所述步骤二第一步中，语音库搭建有方言语言数据库，建立所有方言的识别区，设定需要翻译的方言类别，语音库对输入的语音进行识别处理，语音库对接收的语音进行方言的对照翻译，输出系统对翻译出的方言进行输出。

进一步地，所述步骤二第一步中，语音库调用与电梯轿厢1所在区域的方言语言数据库，查找对应该方言语言数据库的普通话特征库，完成应急平台4、维保客户端5与电梯轿厢1的语音交互。

进一步地，所述步骤二第一步中，语音库通过网络传输装置2更新方言语言数据库，并允许通过信息播放装置、应急平台4和维保客户端5进行评分和校准。

进一步地，所述步骤二第二步中，云端服务器3存储三方的音视频信息，以及同步转换成的文字；云端服务器3通过反馈回的评分和校准数据优化语音库，完善本地最佳方言语言数据库的配置。

本发明的有益效果是：本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，通过在电梯轿厢1、应急平台4与维保客户端5的语音库，同步将三方的语音同步转换为文字，通过三方的播放装置与音视频信号同步播放；极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。

本发明可广泛运用于各种家用、商用、工业用电梯控制场合。

以上所述仅为本发明的较佳实施例而己，并不以本发明为限制，凡在本发明的精神和原则之内所作的均等修改、等同替换和改进等，均应包含在本发明的专利涵盖范围内。

技术特征：

技术总结
本发明涉及一种电梯轿厢内乘客对话的语音识别及内容显示的方法，属于电梯控制技术领域。本发明包括如下步骤:在电梯轿厢内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置连接用于接收信息的通信模块；在远程端搭建云端服务器、应急平台和维保客户端，应急平台包括与云端服务器相连用于与电梯轿厢音视频对话的采集和播放装置，应急平台与维保客户端通过云端服务器与网络传输装置相连；电梯轿厢、应急平台和维保客户端输入的语音信号，分别经过语音库的识别同步转换成文字；识别出的文字与同时采集到的音视频信号通过云端服务器交互传输到三方的信息播放装置、应急平台和维保客户端上。

技术研发人员：张云超;王延鹏;李泽群
受保护的技术使用者：深圳桥通物联科技有限公司;青岛桥通软件科技有限公司
技术研发日：2019.01.31
技术公布日：2019.05.17