采煤作业中异常事件的检测方法、装置及设备与流程

文档序号:31053303发布日期:2022-08-06 09:02阅读:来源:国知局

技术特征:
1.一种采煤作业中异常事件的检测方法,其特征在于,所述方法包括:获取采煤工作面的视频帧;从所述视频帧中识别所述采煤工作面中采煤机的滚筒的位置,以及所述采煤工作面的状态信息;所述状态信息包括以下至少一种:所述采煤工作面中液压支架的工作状态、以及所述采煤工作面中煤壁的厚薄状态;基于所识别到的滚筒的位置以及所述状态信息从所述视频帧中确定危险区域,以基于所述视频帧中的危险区域确定是否存在异常事件。2.根据权利要求1所述的方法,其特征在于,所述基于所识别到的滚筒的位置以及所述状态信息从所述视频帧中确定危险区域,包括:在基于所述状态信息确定所识别到的滚筒的位置准确的情况下,基于所述滚筒的位置从所述视频帧中确定危险区域。3.根据权利要求2所述的方法,其特征在于,所述液压支架包括位于所述滚筒附近的多个液压支架,所述状态信息包括所述多个液压支架的工作状态,所述基于所述状态信息确定所识别到的滚筒的位置准确,包括:基于所述视频帧从所述多个液压支架中确定护帮板处于关闭状态的第一液压支架,在所述第一液压支架的位置与所述滚筒的位置符合预设的第一位置关系的情况下,确定所识别到的滚筒的位置准确;和/或基于所述视频帧从多个液压支架中确定处于推溜状态的第二液压支架,在所述第二液压支架的位置与所述滚筒的位置符合预设的第二位置关系的情况下,确定所识别到的滚筒的位置准确;和/或基于所述视频帧从多个液压支架中确定处于移架状态的第三液压支架,在所述第三液压支架的位置与所述滚筒的位置符合预设的第三位置关系的情况下,确定所识别到的滚筒的位置准确。4.根据权利要求2-3任一项所述的方法,其特征在于,所述状态信息包括所述煤壁的厚薄状态,所述基于所述状态信息确定所识别到的滚筒的位置准确,包括:在基于所述视频帧确定位于所述滚筒第一侧的煤壁的厚度大于位于所述滚筒第二侧的煤壁的厚度的情况下,确定所识别到的所述滚筒的位置准确,其中,所述第二侧指向所述第一侧的方向为所述采煤机的移动方向。5.根据权利要求1-4任一项所述的方法,其特征在于,在基于所识别到的滚筒的位置以及所述状态信息从所述视频帧中确定危险区域之后,所述方法还包括:获取所述视频帧的下一帧视频帧;确定所述采煤机在所述视频帧以及所述下一帧视频帧中的位置偏移量;基于所述视频帧中的危险区域以及所述位置偏移量确定所述下一帧视频帧中的危险区域。6.根据权利要求1-5任一项所述的方法,其特征在于,所述采煤工作面上方间隔地分布多个图像采集装置,所述视频帧由所述多个图像采集装置中的第一图像采集装置采集,所述方法还包括:基于所述多个图像采集装置中除所述第一图像采集装置以外的其他图像采集装置,与所述第一图像采集装置的相对位置关系,将所述视频帧中的危险区域映射到所述其他图像
采集装置采集的视频帧中,以确定所述其他图像采集装置采集的视频帧中的危险区域。7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:基于所述视频帧中各对象的位置、以及采集所述视频帧的图像采集装置在采煤工作面的位置,确定所述各对象在采煤工作面的位置,并基于所确定的位置确定所述各对象在采煤工作面的动画中对应的动画形象,其中,所述动画用于展示所述采煤工作面的实时状态;基于从所述视频帧识别到的所述各对象的状态更新所述动画中所述各对象对应的动画形象的状态,并将更新后的动画展示给用户。8.根据权利要求1-7任一项所述的方法,其特征在于,所述基于所述危险区域确定是否存在异常事件,包括:从所述视频帧中检测目标对象,得到所述目标对象对应的检测框;在所述目标对象对应的检测框左下角的顶点位于所述危险区域内的情况下,则确定出现异常。9.一种采煤作业中异常事件的检测装置,其特征在于,所述装置包括:获取模块,用于获取采煤工作面的视频帧;识别模块,用于从所述视频帧中识别所述采煤工作面中采煤机的滚筒的位置,以及所述采煤工作面的状态信息;所述状态信息包括以下至少一种:所述采煤工作面中液压支架的工作状态、以及所述采煤工作面中煤壁的厚薄状态;检测模块,用于基于所识别到的滚筒的位置以及所述状态信息从所述视频帧中确定危险区域,以基于所述视频帧中的危险区域确定是否存在异常事件。10.一种电子设备,其特征在于,所述电子设备包括处理器、存储器、存储于所述存储器可供所述处理器执行的计算机指令,所述处理器执行所述计算机指令时实现如权利要求1-8任一项所述的方法。

技术总结
本说明书实施例提供一种采煤作业中异常事件的检测方法、装置及设备。所述方法包括:获取采煤工作面的视频帧,从所述视频帧中识别所述采煤工作面中采煤机的滚筒的位置,以及所述采煤工作面的状态信息;所述状态信息包括以下至少一种:所述采煤工作面中液压支架的工作状态、以及所述采煤工作面中煤壁的厚薄状态;基于所识别到的滚筒的位置以及所述状态信息从所述视频帧中确定危险区域,以基于所述视频帧中的危险区域确定是否存在异常事件。通过上述方式,确定的危险区域更加准确,在基于危险区域判定是否出现异常事件时,也可以得到更加准确的判定结果,避免出现误告警或漏告警。避免出现误告警或漏告警。避免出现误告警或漏告警。


技术研发人员:李帆 李艳民 闵旺华 成功 王治方
受保护的技术使用者:北京市商汤科技开发有限公司
技术研发日:2022.03.30
技术公布日:2022/8/5
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1