基于语音和图像辨识的变电设备缺陷管理方法及设备与流程

技术领域：

本发明涉及供变电检修领域，特别是涉及一种基于语音和图像辨识的变电设备缺陷管理方法。

背景技术：
：

随着我国经济体量的不断增加，国家电网的规模也同步增长。大量的变电站内运行着大量的变电设备，设备在运行的过程中产生的问题需要变电运维人员及时发现及时登记，召集相应的运检人员对问题设备进行修复，这个过程叫做变电缺陷管理。变电站在长期的运行过程中会产生较多的缺陷，据统计平均每个运维班现有的各种缺陷数量有200条左右，如此多的缺陷数量如果不能进行有效的管控，将会给设备的安全运行带来极大地隐患。当前运维班组的缺陷管理还存在以下问题：

设备缺陷管理过程落后。依然采用人员发现、手写记录、输入表格、上报部门、电话催促、现场验收、手动消缺、上报部门，缺陷的整个管理流程相当繁琐。

设备缺陷记录录入繁琐。现场人员发现缺陷后需要用纸笔记录后再回集控中心登录到缺陷表格中，然后再上传给缺陷管理单位，繁琐的记录过程降低了缺陷的录入效率和精准度。

设备缺陷数目繁多，查询极不方便。登记在缺陷表上的缺陷条数较多，每个运维班大概有200条左右，12个运维班将会达到2400条，在如此庞大的记录中查询某条缺陷将会效率极低。

设备缺陷无直观统计，导致缺陷管控能力的缺失。使用表格的方式登记的缺陷，在筛选、统计、精查等方面都较为落后，导致缺陷管理人员无法快速、直观的掌握缺陷的处理情况、类别情况、发展情况等。

技术实现要素：
：

本发明所要解决的技术问题是：克服现有技术的不足，提供一种通过移动数据终端上的语音识别模块和图像识别模块进行语音录入和设备的查找，与后台数据终端进行信息交互后，在移动数据终端上进行显示的基于语音和图像辨识的变电设备缺陷管理方法。

本发明的技术方案是：一种基于语音和图像辨识的变电设备缺陷管理方法，其特征是：通过移动数据终端上的语音识别模块和图像识别模块进行语音录入和设备的查找，与后台数据终端进行信息交互后，在移动数据终端上进行显示，其具体步骤为：步骤一、人员在移动数据终端上登陆相应的应用软件并核对身份后，实现移动数据终端与后台数据终端的自动通讯；

步骤二、后台数据终端接收到移动数据终端的信息完成打卡后，发送任务信息到移动数据终端；

步骤三、人员根据移动数据终端上显示的任务信息开展工作，并向后台数据终端定时推送移动数据终端的位置信息；

步骤四、后台数据终端接收到位置信息后，调取变电设备电子地图，并在变电设备电子地图上显示移动数据终端的移动轨迹；

步骤五、采用移动数据终端的拍照功能，在变电站现场对设备进行拍照，经过图像识别并与后台数据终端内的缺陷数据库进行联动，调取该设备相关缺陷及关联设备信息，并在移动数据终端上进行显示，便于进行重点巡检；

步骤六、人员巡检变电设备时，通过移动数据终端上的语音录入识别模块进行语音录入，通过算法分析识别后，将录入的语音内容转化为文字内容，并填充到对应的栏目中；

步骤七、重复步骤五和步骤六，直至完成对设备的巡检工作后，在移动数据终端上生产巡检记录进行核对，核对无误后签字上传，完成巡检操作。

步骤八、后台数据终端将缺陷进行规范导出，导出缺陷列表、导出缺陷详情说明、导出word版的缺陷报告供人员观看。

进一步的，所述步骤1中，移动数据终端与后台数据终端自动通讯时，移动数据终端自动发送位置信息、登陆者身份信息和时间信息，并建立实时通讯机制。

进一步的，所述步骤四中，变电设备电子地图为，根据电力设备的地理位置信息，预先标注在电子地图中进行标注。

进一步的，所述步骤五中，图像的识别，是对设备唯一的设备编号进行拍照，并对照片中的设备编号进行文本解析，就可以立即获得该设备的信息和相关缺陷记录。

进一步的，所述步骤六中，算法分析识别采用的是云语音识别算法，通过移动智能终端的采集设备，运维人员在缺陷设备现场通过语音描述将设备缺陷状态进行录入，并快速形成文字报告。

进一步的，所述移动数据终端为嵌有sdk系统的手机或平板，所述后台数据终端为具有人机交互设备的电脑主机。

一种基于语音和图像辨识的变电设备缺陷管理设备，包括后台数据终端和移动数据终端，其特征是：所述移动数据终端为至少两个，且均通过无线模块与所述后台数据终端连通；

移动数据终端：采用移动数据终端的拍照功能，在变电站现场对设备进行拍照，经过图像识别并与后台数据终端内的缺陷数据库进行联动，调取该设备相关缺陷及关联设备信息，并在移动数据终端上进行显示，便于进行重点巡检；人员巡检变电设备时，通过移动数据终端上的语音录入识别模块进行语音录入，通过算法分析识别后，将录入的语音内容转化为文字内容，并填充到对应的栏目中；

后台数据终端：接收到移动数据终端的信息完成打卡后，发送任务信息到移动数据终端；并接收移动数据终端定时推送的位置信息；后台数据终端接收到位置信息后，调取变电设备电子地图，并在变电设备电子地图上显示移动数据终端的移动轨迹；

无线模块：用于移动数据终端和后台数据终端之间的通讯。

进一步的，所述移动数据终端为嵌有sdk系统的手机或平板，所述后台数据终端为具有人机交互设备的电脑主机。

本发明的有益效果是：

1、本发明通过移动数据终端上的语音识别模块和图像识别模块进行语音录入和设备的查找，与后台数据终端进行信息交互后，在移动数据终端上进行显示，能够进行快速录入、快速共享、快速查找、快速统计的急速缺陷管控应用，通过语音辨识将缺陷通过描述转换成文字，通过图像拍照设备来快速查找设备相关缺陷，通过数据分析和数据可视化技术将复杂的缺陷问题直观的展现，协助变电运维人员全面掌控缺陷过程，提高缺陷消除力，使变电设备能够快速恢复正常状态，保障运行安全稳定。

2、本发明通过移动式数据终端，运维人员及管理人员可以随时随地对缺陷数据进行采集、上传、分析、筛选和查看。将原来的固定式缺陷管理变为移动式缺陷管理，极大地提高了缺陷的管控效率。

3、本发明在后台数据终端不但可以对各类缺陷进行数据分析和查找，还可以将缺陷进行规范导出，导出缺陷列表、导出缺陷详情说明、导出word版的缺陷报告，使缺陷管理更加标准、更加完善。

附图说明：

图1为基于语音和图像辨识的变电设备缺陷管理方法的流程图。

图2为设备照片图

图3为语音录入界面图。

具体实施方式：

实施例：参见图1、图2和图3。

基于语音和图像辨识的变电设备缺陷管理方法，包括后台数据终端和移动数据终端，其特征是：所述移动数据终端为至少两个，且均通过无线模块与所述后台数据终端连通；通过移动数据终端上的语音识别模块和图像识别模块进行语音录入和设备的查找，与后台数据终端进行信息交互后，在移动数据终端上进行显示，能够进行快速录入、快速共享、快速查找、快速统计的急速缺陷管控应用，通过语音辨识将缺陷通过描述转换成文字，通过图像拍照设备来快速查找设备相关缺陷，通过数据分析和数据可视化技术将复杂的缺陷问题直观的展现，协助变电运维人员全面掌控缺陷过程，提高缺陷消除力，使变电设备能够快速恢复正常状态，保障运行安全稳定。

下面结合附图和实施例对本申请进行详细描述。

一种基于语音和图像辨识的变电设备缺陷管理设备，包括后台数据终端和移动数据终端，移动数据终端为至少两个，且均通过无线模块与后台数据终端连通；

移动数据终端：采用移动数据终端的拍照功能，在变电站现场对设备进行拍照，经过图像识别并与后台数据终端内的缺陷数据库进行联动，调取该设备相关缺陷及关联设备信息，并在移动数据终端上进行显示，便于进行重点巡检；人员巡检变电设备时，通过移动数据终端上的语音录入识别模块进行语音录入，通过算法分析识别后，将录入的语音内容转化为文字内容，并填充到对应的栏目中；

后台数据终端：接收到移动数据终端的信息完成打卡后，发送任务信息到移动数据终端；并接收移动数据终端定时推送的位置信息；后台数据终端接收到位置信息后，调取变电设备电子地图，并在变电设备电子地图上显示移动数据终端的移动轨迹；

无线模块：用于移动数据终端和后台数据终端之间的通讯。

移动数据终端为嵌有sdk系统的手机或平板，所述后台数据终端为具有人机交互设备的电脑主机。

其具体使用方式如下所示。

通过移动数据终端上的语音识别模块和图像识别模块进行语音录入和设备的查找，与后台数据终端进行信息交互后，在移动数据终端上进行显示，其具体步骤为：步骤一、人员在移动数据终端上登陆相应的应用软件并核对身份后，实现移动数据终端与后台数据终端的自动通讯；

移动数据终端与后台数据终端自动通讯时，移动数据终端自动发送位置信息、登陆者身份信息和时间信息，并建立实时通讯机制。

移动数据终端为嵌有sdk系统的手机或平板，后台数据终端为具有人机交互设备的电脑主机。

步骤二、后台数据终端接收到移动数据终端的信息完成打卡后，发送任务信息到移动数据终端。

步骤三、人员根据移动数据终端上显示的任务信息开展工作，并向后台数据终端定时推送移动数据终端的位置信息。

步骤四、后台数据终端接收到位置信息后，调取变电设备电子地图，并在变电设备电子地图上显示移动数据终端的移动轨迹；

步骤四中，变电设备电子地图为，根据电力设备的地理位置信息，预先标注在电子地图中进行标注。

步骤五、采用移动数据终端的拍照功能，在变电站现场对设备进行拍照，经过图像识别并与后台数据终端内的缺陷数据库进行联动，调取该设备相关缺陷及关联设备信息，并在移动数据终端上进行显示，便于进行重点巡检；

图像的识别，是对设备唯一的设备编号进行拍照，并对照片中的设备编号进行文本解析，就可以立即获得该设备的信息和相关缺陷记录。

变电站设备都带有唯一的设备编号，而在设备缺陷又和设备编号有极强的关联，因此在现场只需对设备编号进行拍照，并对照片中的设备编号进行文本解析，就可以立即获得该设备的信息和相关缺陷记录。通过拍照的方式获得设备缺陷信息的方式，使现场的工作人员能够快速便捷的掌握设备情况。

识别后内容：10kv刁家2板付李庄线（如图所示）

可直接查询显示设备相关缺陷。

步骤六、人员巡检变电设备时，通过移动数据终端上的语音录入识别模块进行语音录入，通过算法分析识别后，将录入的语音内容转化为文字内容，并填充到对应的栏目中；

算法分析识别采用的是云语音识别算法，通过移动智能终端的采集设备，运维人员在缺陷设备现场通过语音描述将设备缺陷状态进行录入，并快速形成文字报告。

缺陷描述部分（如图所示），要填写六项内容，通过语音辨识，工作人员在录入时，将标题也一起说出来，算法可以识别并填充后面的内容：例如：缺陷设备1号主变高压套管，缺陷等级一般，设备双重名称智1号主变，部件名称套管底座，缺陷描述发热较为严重95摄氏度，典型特征需要停电检修。算法将分类将上述内容填充到对应的位置。

云语音识别算法在科大讯飞的sdk内，使用科大讯飞的sdk必须先要到科大的官网上注册应用，并开通语音听写功能服务，获取appid，并下载sdk。

步骤七、重复步骤五和步骤六，直至完成对设备的巡检工作后，在移动数据终端上生产巡检记录进行核对，核对无误后签字上传，完成巡检操作。

步骤八、后台数据终端将缺陷进行规范导出，导出缺陷列表、导出缺陷详情说明、导出word版的缺陷报告供人员观看。

以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。