一种用于煤矿的精确监测人员进出的方法与流程

文档序号:18032148发布日期:2019-06-28 22:47阅读:250来源:国知局
一种用于煤矿的精确监测人员进出的方法与流程

本发明属于图像识别技术领域,具体涉及一种用于煤矿的精确监测人员进出的方法。



背景技术:

由于我国地矿环境复杂、自然环境灾害严重、安全生产技术基础薄弱、从业人员素质较低、加上众多矿区规模小、难以获取较大资金投资,这使得井下人员正常流动一直是井下人员安全作业首先要考虑的问题,如何监控井下作业人员正确流动,避免非操作人员或未经培训合格的人员冒充替代工作人员进出矿区是目前要解决的问题,从而降低安全隐患,减少工人家庭、国家财产的巨大损失。

当前人数检测的方法主要为井下人员定位系统,为每一个操纵人员配备人员定位装置,实现人员的实时精确定位,但其造价太高,难以满足符合小型矿场现有的经济要求;视频检测中图像识别是准确识别人员信息的重要手段,且成本低,在专利号zl200710027252.3的中国发明专利中,授权了“一种用于煤矿的矿工出入自动监测的方法”,这种方法仅能监测工人进出人数,无法识别进出人员是否正确,且视频采取时不能有电机车或猴车等除工作人员外任何可运动物体,监测抗干扰性差,有必要提出进一步的改善方案。



技术实现要素:

本发明所要解决的技术问题在于针对上述现有技术中的不足,提供一种用于煤矿的精确监测人员进出的方法,通过人脸对比和人员头顶识别共同监测矿区人员进出,其中人员头顶通过alexnet卷积神经网络模型识别解决,避免矿区复杂的环境对运动物体的识别干扰,识别率高、误检率低,且通过间歇式统计矿区人员进出情况,及时查出非操作人员,保证井下人员操作的规范性与安全性,便于推广使用。

为解决上述技术问题,本发明采用的技术方案是:一种用于煤矿的精确监测人员进出的方法,其特征在于,该方法包括以下步骤:

步骤一、构建图像处理系统:在煤矿巷道指定位置安装门形支架,在门形支架的一个竖向支撑杆上安装用于采集进入矿区的工作人员脸部图像的第一摄像头,在门形支架的另一个竖向支撑杆上安装用于采集离开矿区的工作人员脸部图像的第二摄像头,在门形支架的横杆上安装用于采集进出矿区的人员的头顶图像的第三摄像头,第三摄像头朝向煤矿巷道的地面,第一摄像头、第二摄像头和第三摄像头均与工控机连接,第一摄像头、第二摄像头、第三摄像头和工控机构成图像处理系统,所述工控机上连接有存储器;

步骤二、工作人员脸部图像的存储:对矿区经过培训且培训合格的工作人员的脸部图像进行提取,将提取的工作人员的脸部图像与该工作人员的姓名对应,并存储在所述存储器中,提取的各张工作人员的脸部图像的尺寸及像素大小均相同;

步骤三、训练alexnet卷积神经网络模型:将hollywoodheadsdataset数据库中带有人头顶的图像数据和现场采集的带有人员头顶的图像数据混合构成数据训练集,利用所述数据训练集训练alexnet卷积神经网络模型,直至所述alexnet卷积神经网络模型人员头顶的图像识别正确率高于70%;alexnet卷积神经网络模型由输入层i1、卷积层c1、池化层p1、卷积层c2、池化层p2、卷积层c3、池化层p3、全连接层f和输出层o1构成;

步骤四、监测人员进入矿区情况,过程如下:

步骤401、利用第一摄像头采集进入矿区的工作人员脸部图像,工控机识别第一摄像头采集的进入矿区的工作人员脸部图像,并与存储在存储器中的工作人员的脸部图像进行比对,得到间歇进入矿区的工作人员姓名及间歇进入矿区的工作人员人数xa;

步骤402、利用第三摄像头采集人员的头顶图像,并送入alexnet卷积神经网络模型,识别人员的头顶图像,将第三摄像头视野内位于煤矿巷道的出入口侧的半区视为上半区,将第三摄像头视野内远离煤矿巷道的出入口侧的半区视为下半区,跟踪各个人员的头顶图像,当人员的头顶图像从上半区移动至下半区时,统计间歇进入矿区的实际人员人数xb;

步骤403、利用第一摄像头和第三摄像头实时采集图像数据,当第一摄像头和第三摄像头的视野内均无图像数据时,统计间歇进入矿区的人员情况,当xa=xb时,间歇进入矿区的实际人员均为工作人员,执行步骤404;当xa≠xb时,间歇进入矿区的实际人员中存在非操作人员,执行步骤405;

步骤404、将间歇进入矿区的工作人员人数xa赋值于间歇进入人数变量xi后循环步骤401,并根据公式获取累计进入矿区的工作人员人数总数si,其中,i为间歇进入统计次数编号,i为间歇进入统计次数累计总数;

步骤405、工控机驱动报警器提示管理人员有非操作人员进入矿区,管理人员及时回看上一间歇统计时间段内的视频找出非操作人员,使xa=xb,执行步骤404;

步骤五、监测人员离开矿区情况,过程如下:

步骤501、利用第二摄像头采集离开矿区的工作人员脸部图像,工控机识别第二摄像头采集的进入矿区的工作人员脸部图像,并与存储在存储器中的工作人员的脸部图像进行比对,得到间歇离开矿区的工作人员姓名及间歇离开矿区的工作人员人数ya;

步骤502、利用第三摄像头采集人员的头顶图像,并送入alexnet卷积神经网络模型,识别人员的头顶图像,跟踪各个人员的头顶图像,当人员的头顶图像从下半区移动至上半区时,统计间歇离开矿区的实际人员人数yb且yb=ya;

步骤503、利用第二摄像头和第三摄像头实时采集图像数据,当第二摄像头和第三摄像头的视野内均无图像数据时,将间歇离开矿区的工作人员人数ya赋值于间歇离开人数变量yj后循环步骤501,并根据公式获取累计离开矿区的工作人员人数总数sj,其中,j为间歇离开统计次数编号,j为间歇离开统计次数累计总数;

步骤六、监测矿区内实时人员情况:第一摄像头、第二摄像头和第三摄像头同时采集图像数据,当第一摄像头、第二摄像头和第三摄像头的视野内均无图像数据时,根据公式δ=si-sj,计算矿区内实时人员数量δ后循环步骤四,同时通过工控机查看矿区内实时人员的姓名。

上述的一种用于煤矿的精确监测人员进出的方法,其特征在于:步骤一中第一摄像头倾斜安装在门形支架的一个竖向支撑杆上,且第一摄像头的摄像端偏向煤矿巷道的出入口,第二摄像头倾斜安装在门形支架的另一个竖向支撑杆上,且第二摄像头的摄像端偏向煤矿巷道的巷道内侧。

上述的一种用于煤矿的精确监测人员进出的方法,其特征在于:步骤三中卷积层c1、卷积层c2和卷积层c3均采用11×11的卷积核,池化层p1和池化层p2均采用3×3的池化窗口,池化层p3采用2×2的池化窗口。

上述的一种用于煤矿的精确监测人员进出的方法,其特征在于:所述第三摄像头与煤矿巷道的地面之间的距离为2.5m~3.5m,第一摄像头和第二摄像头等高,第一摄像头与煤矿巷道的地面之间的距离为1.5m~2m,第一摄像头、第二摄像头和第三摄像头均为红外网络摄像机,第一摄像头、第二摄像头和第三摄像头的像素不小于200万。

上述的一种用于煤矿的精确监测人员进出的方法,其特征在于:步骤三中hollywoodheadsdataset数据库中带有人头顶的图像数据量和现场采集的带有人员头顶的图像数据量的比为8:2,所述数据训练集中图像数据量不小于2000。

本发明与现有技术相比具有以下优点:

1、本发明通过构建图像处理系统,利用在门形支架顶部安装第三摄像头采集人员头顶图像,避免由于人员遮挡带来的人数统计不准确的问题,利用在门形支架的一个竖杆上安装的第一摄像头采集进入矿区的人员的脸部图像,避免由于只采用第三摄像头无法辨识人员身份信息的问题,导致非操作人员进入矿区而带来的安全隐患,利用在门形支架的另一个竖杆上安装的第二摄像头采集离开矿区的人员的脸部图像,便于后期查找矿区内存在人员的身份信息,便于推广使用。

2、本发明通过训练alexnet卷积神经网络模型识别图像中人员头顶图像,并利用工控机统计人员头顶图像的数量,进而获得人员数量,实际监测时,采用在门形支架顶部安装的第三摄像头采集人员头顶图像,送入训练好的alexnet卷积神经网络模型中识别人员数量,避免矿区复杂的环境对运动物体的识别干扰,识别率高、误检率低,可靠稳定,使用效果好。

3、本发明方法步骤简单,通过间歇式统计矿区人员进出情况,在人员进入矿区的情况下,采用人员头顶图像与人员脸部图像同时识别跟踪的方式,利用第三摄像头统计人员头顶数量、利用第一摄像头统计识别人员人脸以及人脸数量,当某一时刻,第三摄像头和第一摄像头的视野范围内均无人员信息时,工控机统计该间歇时段内的人员数量,当第三摄像头统计的人员头顶数量和第一摄像头统计的人员人脸数量不一致时,说明有非操作人员进入矿区,报警提示并回看监控,及时找出非操作人员,保证井下人员操作的规范性与安全性;在人员离开矿区的情况下,采用人员头顶图像与人员脸部图像同时识别跟踪的方式,利用第三摄像头统计人员头顶数量、利用第二摄像头统计识别人员人脸以及人脸数量,在第一摄像头、第二摄像头和第三摄像头的视野内均无图像数据时,计算矿区内实时人员数量,同时通过工控机查看矿区内实时人员的姓名,采用严进宽出的方式,提高操作安全性,便于推广使用。

综上所述,本发明通过人脸对比和人员头顶识别共同监测矿区人员进出,其中人员头顶通过alexnet卷积神经网络模型识别解决,避免矿区复杂的环境对运动物体的识别干扰,识别率高、误检率低,且通过间歇式统计矿区人员进出情况,及时查出非操作人员,保证井下人员操作的规范性与安全性,便于推广使用。

下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。

附图说明

图1为本发明第一摄像头、第二摄像头和第三摄像头与门形支架的安装关系示意图。

图2为本发明门形支架布设在煤矿巷道上的俯视图。

图3为本发明方法的方法流程框图。

图4为本发明监测人员进入矿区情况的方法流程框图。

图5为本发明监测人员离开矿区情况的方法流程框图。

附图标记说明:

1—第一摄像头;2—第二摄像头;3—第三摄像头;

4—门形支架;5—上半区域;6—下半区域;

7—人员;8—煤矿巷道。

具体实施方式

如图1至图3所示,本发明的一种用于煤矿的精确监测人员进出的方法,包括以下步骤:

步骤一、构建图像处理系统:在煤矿巷道8指定位置安装门形支架4,在门形支架4的一个竖向支撑杆上安装用于采集进入矿区的工作人员脸部图像的第一摄像头1,在门形支架4的另一个竖向支撑杆上安装用于采集离开矿区的工作人员脸部图像的第二摄像头2,在门形支架4的横杆上安装用于采集进出矿区的人员7的头顶图像的第三摄像头3,第三摄像头3朝向煤矿巷道8的地面,第一摄像头1、第二摄像头2和第三摄像头3均与工控机连接,第一摄像头1、第二摄像头2、第三摄像头3和工控机构成图像处理系统,所述工控机上连接有存储器;

需要说明的是,通过构建图像处理系统,利用在门形支架4顶部安装第三摄像3头采集人员头顶图像,避免由于人员遮挡带来的人数统计不准确的问题,利用在门形支架4的一个竖杆上安装的第一摄像头1采集进入矿区的人员的脸部图像,避免由于只采用第三摄像头3无法辨识人员身份信息的问题,导致非操作人员进入矿区而带来的安全隐患,利用在门形支架4的另一个竖杆上安装的第二摄像头2采集离开矿区的人员的脸部图像,便于后期查找矿区内存在人员的身份信息。

本实施例中,步骤一中第一摄像头1倾斜安装在门形支架4的一个竖向支撑杆上,且第一摄像头1的摄像端偏向煤矿巷道8的出入口,第二摄像头2倾斜安装在门形支架4的另一个竖向支撑杆上,且第二摄像头2的摄像端偏向煤矿巷道8的巷道内侧。

本实施例中,所述第三摄像头3与煤矿巷道8的地面之间的距离为2.5m~3.5m,第一摄像头1和第二摄像头2等高,第一摄像头1与煤矿巷道8的地面之间的距离为1.5m~2m,第一摄像头1、第二摄像头2和第三摄像头3均为红外网络摄像机,第一摄像头1、第二摄像头2和第三摄像头3的像素不小于200万。

需要说明的是,第三摄像头3与煤矿巷道8的地面之间的距离为2.5m~3.5m,识别角度大于60度,以此保证监控范围直径超过3m;第一摄像头1和第二摄像头2等高,第一摄像头1与煤矿巷道8的地面之间的距离为1.5m~2m,保证过往人员7都处在识别敏感区,识别敏感区分为上半区域5和下半区域6,上半区域5为第三摄像头3视野内位于煤矿巷道8的出入口侧的半区视对应的实地区域,下半区域6为第三摄像头3视野内远离煤矿巷道8的出入口侧的半区视对应的实地区域,如图2所示,第一摄像头1、第二摄像头2和第三摄像头3的像素不小于200万,焦距4mm,监控视角大于60°。

步骤二、工作人员脸部图像的存储:对矿区经过培训且培训合格的工作人员的脸部图像进行提取,将提取的工作人员的脸部图像与该工作人员的姓名对应,并存储在所述存储器中,提取的各张工作人员的脸部图像的尺寸及像素大小均相同;

步骤三、训练alexnet卷积神经网络模型:将hollywoodheadsdataset数据库中带有人头顶的图像数据和现场采集的带有人员头顶的图像数据混合构成数据训练集,利用所述数据训练集训练alexnet卷积神经网络模型,直至所述alexnet卷积神经网络模型人员头顶的图像识别正确率高于70%;alexnet卷积神经网络模型由输入层i1、卷积层c1、池化层p1、卷积层c2、池化层p2、卷积层c3、池化层p3、全连接层f和输出层o1构成;

需要说明的是,通过训练alexnet卷积神经网络模型识别图像中人员头顶图像,并利用工控机统计人员头顶图像的数量,进而获得人员数量,实际监测时,采用在门形支架4顶部安装的第三摄像头4采集人员头顶图像,送入训练好的alexnet卷积神经网络模型中识别人员数量,避免矿区复杂的环境对运动物体的识别干扰,识别率高、误检率低,可靠稳定,使用效果好。

本实施例中,步骤三中卷积层c1、卷积层c2和卷积层c3均采用11×11的卷积核,池化层p1和池化层p2均采用3×3的池化窗口,池化层p3采用2×2的池化窗口。

本实施例中,步骤三中hollywoodheadsdataset数据库中带有人头顶的图像数据量和现场采集的带有人员头顶的图像数据量的比为8:2,所述数据训练集中图像数据量不小于2000。

步骤四、监测人员进入矿区情况,过程如下:

步骤401、利用第一摄像头1采集进入矿区的工作人员脸部图像,工控机识别第一摄像头1采集的进入矿区的工作人员脸部图像,并与存储在存储器中的工作人员的脸部图像进行比对,得到间歇进入矿区的工作人员姓名及间歇进入矿区的工作人员人数xa;

步骤402、利用第三摄像头3采集人员7的头顶图像,并送入alexnet卷积神经网络模型,识别人员7的头顶图像,将第三摄像头3视野内位于煤矿巷道8的出入口侧的半区视为上半区,将第三摄像头3视野内远离煤矿巷道8的出入口侧的半区视为下半区,跟踪各个人员7的头顶图像,当人员7的头顶图像从上半区移动至下半区时,统计间歇进入矿区的实际人员人数xb;

步骤403、利用第一摄像头1和第三摄像头3实时采集图像数据,当第一摄像头1和第三摄像头3的视野内均无图像数据时,统计间歇进入矿区的人员情况,当xa=xb时,间歇进入矿区的实际人员均为工作人员,执行步骤404;当xa≠xb时,间歇进入矿区的实际人员中存在非操作人员,执行步骤405;

步骤404、将间歇进入矿区的工作人员人数xa赋值于间歇进入人数变量xi后循环步骤401,并根据公式获取累计进入矿区的工作人员人数总数si,其中,i为间歇进入统计次数编号,i为间歇进入统计次数累计总数;

步骤405、工控机驱动报警器提示管理人员有非操作人员进入矿区,管理人员及时回看上一间歇统计时间段内的视频找出非操作人员,使xa=xb,执行步骤404;

步骤五、监测人员离开矿区情况,过程如下:

步骤501、利用第二摄像头2采集离开矿区的工作人员脸部图像,工控机识别第二摄像头2采集的进入矿区的工作人员脸部图像,并与存储在存储器中的工作人员的脸部图像进行比对,得到间歇离开矿区的工作人员姓名及间歇离开矿区的工作人员人数ya;

步骤502、利用第三摄像头3采集人员7的头顶图像,并送入alexnet卷积神经网络模型,识别人员7的头顶图像,跟踪各个人员7的头顶图像,当人员7的头顶图像从下半区移动至上半区时,统计间歇离开矿区的实际人员人数yb且yb=ya;

步骤503、利用第二摄像头2和第三摄像头3实时采集图像数据,当第二摄像头2和第三摄像头3的视野内均无图像数据时,将间歇离开矿区的工作人员人数ya赋值于间歇离开人数变量yj后循环步骤501,并根据公式获取累计离开矿区的工作人员人数总数sj,其中,j为间歇离开统计次数编号,j为间歇离开统计次数累计总数;

步骤六、监测矿区内实时人员情况:第一摄像头1、第二摄像头2和第三摄像头3同时采集图像数据,当第一摄像头1、第二摄像头2和第三摄像头3的视野内均无图像数据时,根据公式δ=si-sj,计算矿区内实时人员数量δ后循环步骤四,同时通过工控机查看矿区内实时人员的姓名。

本发明使用时,通过间歇式统计矿区人员进出情况,在人员进入矿区的情况下,采用人员头顶图像与人员脸部图像同时识别跟踪的方式,利用第三摄像头统计人员头顶数量、利用第一摄像头统计识别人员人脸以及人脸数量,当某一时刻,第三摄像头和第一摄像头的视野范围内均无人员信息时,工控机统计该间歇时段内的人员数量,当第三摄像头统计的人员头顶数量和第一摄像头统计的人员人脸数量不一致时,说明有非操作人员进入矿区,报警提示并回看监控,及时找出非操作人员,保证井下人员操作的规范性与安全性;在人员离开矿区的情况下,采用人员头顶图像与人员脸部图像同时识别跟踪的方式,利用第三摄像头统计人员头顶数量、利用第二摄像头统计识别人员人脸以及人脸数量,在第一摄像头、第二摄像头和第三摄像头的视野内均无图像数据时,计算矿区内实时人员数量,同时通过工控机查看矿区内实时人员的姓名,采用严进宽出的方式,提高操作安全性。

以上所述,仅是本发明的较佳实施例,并非对本发明作任何限制,凡是根据本发明技术实质对以上实施例所作的任何简单修改、变更以及等效结构变化,均仍属于本发明技术方案的保护范围内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1