一种森林防火烟火识别方法及其系统与流程

本发明涉及图像识别领域，具体涉及一种森林防火烟火识别方法及其系统。

背景技术：

目前，森林防火预警技术主要集中在针对光、温两个物理量进行的报警，而在树木茂盛的林区，火灾前期往往只有烟能出现在监控视线内，如何用一种方法，实现火灾的烟火报警，成为一种迫切的需要，对于森林火灾的及时扑灭有着重要的意义。

现有的森林防火烟火识别报警技术，大多数是采用预置位方法进行报警的，也就是云台运行到固定点进行静态的图像识别后，进入下一个固定点重复烟火识别的动作，这就会造成识别时间长、不灵活、有死角等问题；如何形成一种能够进行动态的烟火识别的技术成为一种迫切的需求。

技术实现要素：

本发明针对现有技术中存在的技术问题，提供一种森林防火烟火识别方法及其系统，其提供全天候的森林烟火识别技术，采用双目摄像机对森林烟火进行全天候巡航识别，对发现的烟火区域进行及时报警，其反应迅速，识别精度高，报警及时，可较大程度地降低森林火灾造成的损失。

本发明解决上述技术问题的技术方案如下：

一种森林防火烟火识别方法，包括以下步骤：

获取森林的热成像图像信息及可见光图像信息；

对所述可见光图像信息及所述热成像图像进行预处理、并提取所述热成像图像的特征，将所述可见光图像信息判断为白天图像信息或夜晚图像信息并进行反馈，分别提取所述白天图像信息或所述夜晚图像信息的特征；

根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升；

根据所述可见光图像信息判断巡航区域是否有烟，标出疑似烟雾区域；

将所述疑似烟雾区域对应与预存的白天烟雾特征点库或夜晚烟雾特征点库进行比对，判断其是否为烟火区域；

对温度连续上升的所述高温区域和/或存在烟火区域的巡航区域进行静态图像识别。

本发明是基于森林防火监视设备巡航过程中可见光摄像机采集的图像进行动态识别，其主要是通过云台动态巡航中找出疑似烟点，然后停止巡航进行静态图像识别确认是否是火灾引起的烟。动态扫描识别主要是对视频流做单帧图像截取，通过对图像的一系列操作，判断单帧图像中是否有存在烟的可能性；静态图像识别是在云台静止的情况下，通过视频流获得的一连串的视频图像并对图像进行一系列操作、结合移动方向及速度等特征进行对比以排除干扰物体，如果得到烟在图像上的位置，就画框提示报警。通过分别将白天图像信息与白天烟雾特征点库对比、夜晚图像信息与夜晚烟雾特征点库，能更精准地识别出火灾点。动态扫描识别结合静态图像识别，识别烟火区域的精度高，反应迅速，报警及时。

在上述技术方案的基础上，本发明还可以做如下改进。

优选地，所述对所述可见光图像信息及所述热成像图像进行预处理，包括：

对所述可见光图像信息及所述热成像图像进行图像大小处理、去噪处理、颜色处理、纹理度处理。

优选地，所述根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升，还包括：

对有高温区域出现的所述热成像图像的连续多帧热成像画面进行判断是否温度连续升高，若温度连续升高则判断为烟火区域。

优选地，所述根据所述可见光图像信息判断巡航区域是否有烟，包括：

对比颜色处理后的图像与纹理度处理后的图像，提取所述高温区域做颜色纹理比对，计算所述符合特征区域内的纹理像素点个数，当所述纹理像素点个数占像素点总个数的预设比例时，则认为所述高温区域是所述疑似烟雾区域。

优选地，设定图像的一条水平线作为基准线，间隔固定采样周期提取所述可见光图像整体灰度信息，根据基准线上的像素点的灰度平均值，修改动态扫描识别参数，达到对当前天气环境的参数自适应学习功能。

优选地，每隔一个小时提取所述可见光图像整体灰度信息。

优选地，所述静态图像识别包括：摄取静态图像，对视频流进行一系列操作、结合移动方向及速度等特征进行对比以排除干扰物体，包括如下步骤：

a、读取多帧连续的所述可见光图像与所述热成像图像，对所述可见光图像与所述热成像图像进行降采样压缩处理；

b、设定所述可见光图像背景；

c、根据相邻的图像判定所述热成像图像发生温度变换或所述可见光图像发生偏移；

d、火点颜色特征提取；

e、提取前景目标；

f、结合运动速度特征和运动方向特征排除干扰物体；

g、标明所述烟火区域，并发出报警。

一种森林防火烟火识别系统，包括双目摄像机、云台和控制装置，

所述双目摄像机设置在所述云台上并通过有线或无线通信方式与所述控制装置连接，用于拍摄森林的热成像信息及可见光信息并上传至所述控制装置，

所述控制装置包括：

预处理模块，用于对所述可见光图像信息及所述热成像图像进行预处理、并提取所述热成像图像特征，将所述可见光图像信息判断为白天图像信息或夜晚图像信息并进行反馈，分别提取所述白天图像信息或所述夜晚图像信息的特征；

高温区域判断模块，用于根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升；

烟火区域判断模块，用于根据所述可见光图像信息判断巡航区域是否有烟，标出疑似烟雾区域；用于将所述疑似烟雾区域对应与预存的白天烟雾特征点库或夜晚烟雾特征点库进行比对，判断其是否为烟火区域；

静态图像识别模块，用于对温度连续上升的所述高温区域和/或存在烟火区域的巡航区域进行静态图像识别。

一种森林防火烟火识别装置，包括：

存储器，用于存储计算机软件程序；

处理器，用于读取并执行所述计算机软件程序，实现上述方案所述的一种森林防火烟火识别方法。

一种非暂态计算机可读存储介质，所述存储介质中存储用于实现上述方案的一种森林防火烟火识别方法的计算机软件程序。

本发明的有益效果是：通过采用双目摄像机对森林进行全天候监测，监测范围广，不需要人工巡防有利于保证人民的生命安全，通过分别将白天图像信息与白天烟雾特征点库对比、夜晚图像信息与夜晚烟雾特征点库，能更精准地识别出火灾点，能够在白天或者夜晚及时发现火情并进行处理，有效避免了资源和财产损失，自动化程度高，监测范围广泛。采用360°动态扫描，实现全方位无死角监控，克服了以往采用预置位方法进行监控的方法，其次动态扫描与静态扫描相结合，提高了监控的准确率，同时，系统结构简单，且能根据环境参数自主修改扫描参数以适应各种恶劣的环境。

附图说明

图1为本发明系统结构框图；

图2为本发明烟火识别流程图。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。

如图1～2所示，一种森林防火烟火识别方法，主要包括以下步骤：

获取森林的热成像图像信息及可见光图像信息；

对所述可见光图像信息及所述热成像图像进行预处理、并提取所述热成像图像的特征，将所述可见光图像信息判断为白天图像信息或夜晚图像信息并进行反馈，分别提取所述白天图像信息或所述夜晚图像信息的特征；预处理包括对所述可见光图像信息及所述热成像图像进行图像大小处理、去噪处理、颜色处理、纹理度处理等。

根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升；通过对连续的多帧所述热成像图像信息进行比对，进而判断是否温度连续升高，若温度连续升高则判断为烟火区域，然后对其进行静态图像识别；若所述高温区域温度并未连续升高，则对所述可见光图像信息进行识别。

根据所述可见光图像信息判断巡航区域是否有烟，标出疑似烟雾区域；

将所述疑似烟雾区域对应与预存的白天烟雾特征点库或夜晚烟雾特征点库进行比对，判断其是否为烟火区域；若所述疑似烟雾区域的特征与所述烟雾特征点库内的特征点相似，则转为判断所述疑似烟雾区域是否温度连续升高。所述烟雾特征点库是通过对大量烟雾图片做特征点提取构成的烟雾特征数据库。

对温度连续上升的所述高温区域和/或存在烟火区域的巡航区域进行静态图像识别，若静态图像识别结果为确定存在烟火区域，则进行报警。

本发明是基于森林防火监视设备巡航过程中可见光摄像机采集的图像进行动态识别，其主要是通过云台动态巡航中找出疑似烟点，然后停止巡航进行静态图像识别确认是否是火灾引起的烟。动态扫描识别主要是对视频流做单帧图像截取，通过对图像的一系列操作，判断单帧图像中是否有存在烟的可能性；静态图像识别是在云台静止的情况下，通过视频流获得的一连串的视频图像并对图像进行一系列操作、结合移动方向及速度等特征进行对比以排除干扰物体，如果得到烟在图像上的位置，就画框提示报警。动态扫描识别结合静态图像识别，识别烟火区域的精度高，反应迅速，报警及时。通过分别将白天图像信息与白天烟雾特征点库对比、夜晚图像信息与夜晚烟雾特征点库，能更精准地识别出火灾点。

在上述技术方案的基础上，本实施例还可以做如下改进。

本实施例中，所述根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升，还包括：

对有高温区域出现的所述热成像图像的连续多帧热成像画面进行判断是否温度连续升高，若温度连续升高则判断为烟火区域。

本实施例中，所述根据所述可见光图像信息判断巡航区域是否有烟，包括：

对比颜色处理后的图像与纹理度处理后的图像，提取所述高温区域做颜色纹理比对，计算所述符合特征区域内的纹理像素点个数，当所述纹理像素点个数占像素点总个数的预设比例时，则认为所述高温区域是所述疑似烟雾区域。

本实施例中，设定图像的一条水平线作为基准线，间隔固定采样周期提取所述可见光图像整体灰度信息，根据基准线上的像素点的灰度平均值，修改动态扫描识别参数，达到对当前天气环境的参数自适应学习功能。

本实施例中，每隔一个小时提取所述可见光图像整体灰度信息。

本实施例中，所述静态图像识别包括：摄取静态图像，对视频流进行一系列操作、结合移动方向及速度等特征进行对比以排除干扰物体，包括如下步骤：

a、读取多帧连续的所述可见光图像与所述热成像图像，对所述可见光图像与所述热成像图像进行降采样压缩处理；

b、设定所述可见光图像背景；

c、根据相邻的图像判定所述热成像图像发生温度变换或所述可见光图像发生偏移；

d、火点颜色特征提取；

e、提取前景目标；

f、结合运动速度特征和运动方向特征排除干扰物体；

g、标明所述烟火区域，并发出报警。

一种森林防火烟火识别系统，包括双目摄像机、云台和控制装置，所述云台进行360°周期性巡航，所述双目摄像机设置在所述云台上并通过有线或无线通信方式与所述控制装置连接，用于拍摄森林的热成像信息及可见光信息并上传至所述控制装置，所述控制装置还控制所述云台运转；

所述控制装置包括：

预处理模块，用于对所述可见光图像信息及所述热成像图像进行预处理、并提取所述热成像图像特征，将所述可见光图像信息判断为白天图像信息或夜晚图像信息并进行反馈，分别提取所述白天图像信息或所述夜晚图像信息的特征；

高温区域判断模块，用于根据所述热成像图像信息判断是否有高温区域出现，判断所述高温区域的温度是否连续上升；

烟火区域判断模块，用于根据所述可见光图像信息判断巡航区域是否有烟，标出疑似烟雾区域；用于将所述疑似烟雾区域对应与预存的白天烟雾特征点库或夜晚烟雾特征点库进行比对，判断其是否为烟火区域；

静态图像识别模块，用于对温度连续上升的所述高温区域和/或存在烟火区域的巡航区域进行静态图像识别。

一种森林防火烟火识别装置，包括：

存储器，用于存储计算机软件程序；

处理器，用于读取并执行所述计算机软件程序，实现以上实施例中所述的一种森林防火烟火识别方法。

一种非暂态计算机可读存储介质，所述存储介质中存储用于实现以上实施例中所述的一种森林防火烟火识别方法的计算机软件程序。

本实施例是基于森林防火烟火识别系统对巡航过程中双目摄像机采集的图像进行动态识别，其主要是通过云台动态巡航中找出疑似烟点，然后停止巡航进行静态图像识别确认是否是火灾引起的烟。动态扫描识别主要是对视频流做单帧图像截取，通过对图像的一系列操作，判断单帧图像中是否有存在烟的可能性；静态图像识别是在云台静止的情况下，通过视频流获得的一连串的视频图像并对图像进行一系列操作、结合移动方向及速度等特征进行对比以排除干扰物体，如果得到烟在图像上的位置，就画框提示报警。动态扫描识别结合静态图像识别，识别烟火区域的精度高，反应迅速，报警及时。通过分别将白天图像信息与白天烟雾特征点库对比、夜晚图像信息与夜晚烟雾特征点库，能更精准地识别出火灾点。

本发明通过采用双目摄像机对森林进行全天候监测，监测范围广，不需要人工巡防有利于保证人民的生命安全，自动对森林的可见光图像、热成像图像进行识别，能够在白天或者夜晚及时发现火情并进行处理，有效避免了资源和财产损失，自动化程度高，监测范围广泛。采用360°动态扫描，实现全方位无死角监控，克服了以往采用预置位方法进行监控的方法，其次动态扫描与静态扫描相结合，提高了监控的准确率，同时，系统结构简单，且能根据环境参数自主修改扫描参数以适应各种恶劣的环境。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。