一种基于AR眼镜的煤矿安全作业的人员培训方法与流程

本发明属于煤矿安全作业培训领域，涉及ar技术，具体是一种基于ar眼镜的煤矿安全作业的人员培训方法。

背景技术：

1、煤矿作业一直伴随着安全问题，在进入煤矿作业之前都需要事先对人员进行培训，使得其进入煤矿后能够熟悉作业以及避免安全问题，针对还未完全掌握煤矿作业的人员也可以通过培训获取更多的知识，在遇到突发问题时能够及时解决。

2、专利申请号为cn114038260a公开了一种基于ar眼镜煤矿安全作业培训的方法，模拟步骤如下：s1.首先实时获取煤矿的现实场景信息，再将获取的现实场景信息上传到计算机系统中，再经过计算机对获取的现实场景进行处理；s2.待步骤s1完成后，再根据煤矿作业现场人员岗位属性，选择受训人员受训的项目，接着将实场景信息中的标识物模型库中的信息进行加载，然后将现实场景信息发送至云服务器；但该技术方案需要通过普通摄像头获取煤矿的现实场景信息，从而不能获取现实场景信息的各个目标作业对象的对应标注信息和异常信息，且未公开如何将ar影像转化为受训人员具体的模拟学习对象。

3、为此，本发明提出了一种基于ar眼镜的煤矿安全作业的人员培训方法。

技术实现思路

1、本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提出一种基于ar眼镜的煤矿安全作业的人员培训方法，该种基于ar眼镜的煤矿安全作业的人员培训方法解决了如何基于ar眼镜对煤矿作业人员进行安全培训的问题。

2、为实现上述目的，根据本发明的第一方面的实施例提出一种基于ar眼镜的煤矿安全作业的人员培训方法，包括：

3、步骤一：通过头戴式ar眼镜获取日常作业中煤矿现场的虚实视频图像，发送至云服务器；

4、步骤二：对获取的日常作业中煤矿现场的虚实视频图像进行分析处理，获取第一类虚实视频图像和第二类虚实视频图像；

5、步骤三：对第一类虚实视频图像和第二类虚实视频图像进行处理，生成能操作目标作业对象的人机交互界面；

6、步骤四：受训人员通过头戴式ar眼镜登录客户终端进行相应岗位相应级别的人机交互界面查看和操作学习。

7、进一步地，相应岗位的作业人员通过头戴式ar眼镜对其工作范围内的所有目标作业对象进行拍摄获取对应岗位的煤矿现场的现实视频图像，并通过头戴式ar眼镜获取现实视频图像中目标作业对象的虚拟画面信息，生成虚实视频图像。

8、进一步地，虚拟画面信息为头戴式ar眼镜与煤矿监测系统无线连接所获取的各仪器仪表参数信息、自带的检测传感器对煤矿现场环境的检测信息以及作业路线信息；其中虚拟画面信息还呈现各参数信息和检测信息的异常状态。

9、进一步地，云服务器对获取的煤矿现场的虚实视频图像根据岗位类型进行分类存储，以及根据日期顺序进行排序；针对同一岗位类型的不同日期的煤矿现场的虚实视频图像，按照虚拟画面信息是否正常进行划分，将对应日期虚拟画面信息都正常的煤矿现场的虚拟视频图像标记为第一类虚实视频图像，将对应日期虚拟画面信息存在异常的煤矿现场的虚拟视频图像标记为第二类虚实视频图像，并进行存储。

10、进一步地，将第一类虚实视频图像中的各个目标作业对象按照作业前后划分，在作业前的目标作业对象画面上设置相应的作业动作组件，且各个动作组件设置有规范作业结果和不规范作业结果进行反馈；相应的动作组件的操作通过头戴式ar眼镜的手势进行控制；

11、若操作规范，则显示对应作业后的目标作业对象的画面，以及提示操作规范；

12、若操作不规范，则提示操作不规范并继续操作，并开始计时，若在预设时间阈值内未操作规范，则询问是否查看规范操作的方案，若查看，则进行规范操作显示，待操作规范后，切入对应作业后的目标作业对象画面。

13、进一步地，将第二类虚实视频图像中的有异常的目标作业对象按照异常解决前和异常解决后划分，在异常解决前的目标作业对象画面上设置相应的维修动作组件，且各个维修动作组件设置有异常未解决结果和异常已解决结果进行反馈；相应的维修动作组件的操作通过头戴式ar眼镜的手势进行控制；

14、若异常已解决，则显示异常解决后的对应目标作业对象的画面，以及提示异常已解决；

15、若异常未解决，则提示异常未解决并继续操作，并开始计时，若在预设时间阈值内未解决异常，则询问是否查看异常解决方案，若查看，则显示异常解决方案，待操作正确后，切入异常解决后的目标作业对象画面。

16、进一步地，对应岗位的安全作业教学培训的人机交互界面按照煤矿作业顺序划分为不同的级别，若当前级别的安全培训学习完成后，则进入下一级别的安全培训学习

17、与现有技术相比，本发明的有益效果是：

18、本发明通过头戴式ar眼镜获取日常作业中煤矿现场的虚实视频图像，发送至云服务器；从而获取煤矿现场的各个目标作业对象的对应虚拟信息和异常信息；云服务器对获取的日常作业中煤矿现场的虚实视频图像进行分析处理，获取第一类虚实视频图像和第二类虚实视频图像；并对第一类虚实视频图像和第二类虚实视频图像进行处理，生成能操作目标作业对象的人机交互界面；公开了如何将虚实视频图像转化为受训人员具体的模拟学习对象；受训人员通过头戴式ar眼镜登录客户终端进行相应岗位相应级别的人机交互界面查看和操作学习；使得不同岗位的煤矿作业人员在没有完全熟悉煤矿作业之前减少进入煤矿现场的次数，避免了因操作不当或者不熟悉煤矿环境而发生安全问题，同时通过本发明的一种基于ar眼镜的煤矿安全作业的人员培训方法能够让相应岗位的煤矿工作人员能够学习更全面、更真实的煤矿安全作业的知识，提高了煤矿安全作业的培训效率和煤矿作业的效率。

技术特征：

1.一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，包括：

2.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，相应岗位的作业人员通过头戴式ar眼镜对其工作范围内的所有目标作业对象进行拍摄获取对应岗位的煤矿现场的现实视频图像，并通过头戴式ar眼镜获取现实视频图像中目标作业对象的虚拟画面信息，生成虚实视频图像。

3.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，虚拟画面信息为头戴式ar眼镜与煤矿监测系统无线连接所获取的各仪器仪表参数信息、自带的检测传感器对煤矿现场环境的检测信息以及作业路线信息；其中虚拟画面信息还呈现各参数信息和检测信息的异常状态。

4.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，云服务器对获取的煤矿现场的虚实视频图像根据岗位类型进行分类存储，以及根据日期顺序进行排序；针对同一岗位类型的不同日期的煤矿现场的虚实视频图像，按照虚拟画面信息是否正常进行划分，将对应日期虚拟画面信息都正常的煤矿现场的虚拟视频图像标记为第一类虚实视频图像，将对应日期虚拟画面信息存在异常的煤矿现场的虚拟视频图像标记为第二类虚实视频图像，并进行存储。

5.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，将第一类虚实视频图像中的各个目标作业对象按照作业前后划分，在作业前的目标作业对象画面上设置相应的作业动作组件，且各个动作组件设置有规范作业结果和不规范作业结果进行反馈；相应的动作组件的操作通过头戴式ar眼镜的手势进行控制；

6.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，将第二类虚实视频图像中的有异常的目标作业对象按照异常解决前和异常解决后划分，在异常解决前的目标作业对象画面上设置相应的维修动作组件，且各个维修动作组件设置有异常未解决结果和异常已解决结果进行反馈；相应的维修动作组件的操作通过头戴式ar眼镜的手势进行控制；

7.根据权利要求1所述的一种基于ar眼镜的煤矿安全作业的人员培训方法，其特征在于，对应岗位的安全作业教学培训的人机交互界面按照煤矿作业顺序划分为不同的级别，若当前级别的安全培训学习完成后，则进入下一级别的安全培训学习。

技术总结
本发明公开了一种基于AR眼镜的煤矿安全作业的人员培训方法，属于煤矿安全作业培训领域，如何基于AR眼镜对煤矿作业人员进行安全培训的问题；通过头戴式AR眼镜获取日常作业中煤矿现场的虚实视频图像，对获取的日常作业中煤矿现场的虚实视频图像进行分析处理获取第一类虚实视频图像和第二类虚实视频图像，对第一类虚实视频图像和第二类虚实视频图像进行处理生成能操作目标作业对象的人机交互界面，受训人员通过头戴式AR眼镜登录客户终端进行相应岗位和级别的人机交互界面模拟学习；避免了因操作不当或不熟悉煤矿环境发生安全问题，让作业人员能够学习更全面、更真实的煤矿安全作业知识，提高了煤矿安全作业的培训效率和煤矿作业的效率。

技术研发人员：张悦生,张建森,蔡云龙,李仁军,李松,李永全,李雪,王军
受保护的技术使用者：淮南万泰电子股份有限公司
技术研发日：
技术公布日：2024/1/12