基于图像的铁路接触网鸟窝异常情况检测方法
【专利摘要】本发明公开了一种基于图像的铁路接触网鸟窝异常情况检测方法，采用数字图像处理的方法自动识别铁路接触网巡视图像中存在鸟窝的异常情况。主要步骤为：1)铁路接触网图像二值化；2)接触网支柱主干部分和细线区域部分提取；3)基于悬空点检测的鸟窝可疑区域定位；4)鸟窝可疑区域的直线方向直方图和长度直方图特征提取；5)基于直线方向和长度分布特性的鸟窝识别；本发明方法可高效、自动地对铁路接触网进行鸟窝异常情况的检测和识别，具有重大的安全意义和实际应用价值，适用于高速铁路和普通铁路接触网子自动巡检，能有效帮助巡检人员快速发现接触网支架上是否存在鸟窝，排查潜在的安全隐患，提高巡检人员工作效率，避免人工判读带来的巨大人力消耗。
【专利说明】基于图像的铁路接触网鸟窝异常情况检测方法
【技术领域】
[0001]本发明属于计算机视觉领域，具体涉及一种基于图像的铁路接触网鸟窝异常情况的定位和识别方法。
技术背景
[0002]铁路接触网是为列车供电架设的特殊线路。截止2010年12月底，中国国内运营时速200公里以上的高速铁路里程已经达到8358公里，在建和即将兴建的高速铁路客运专线和城际铁路里程已达1.7万公里。根据中国中长期铁路网规划方案，至2012年，中国将建成42条高速铁路客运专线，基本建成以“四纵四横”为骨架的全国快速客运网，总里程1.3万公里；到2020年中国时速在200公里以上的高速铁路里程将会达到5万公里。
[0003]为了保证高速列车的安全运营，接触网需要经常巡检，目前对350km/h的高速客运专线接触网设备进行在线巡视的设备已经初步成型。要对接触网的各种安全隐患进行有效检测，巡检设备需记录大量视频数据，然而，面对海量的巡检视频数据，若仅靠人工判读，工作量大、效率低、可靠性难以保障。我国铁路线路长、分布广、环境多样，因此存在安全隐患问题的接触网的位置很分散，如何准确高效地对巡检图像进行智能分析，降低巡检人员劳动强度、提高工作效率、保障铁路安全成为一个亟待解决的难题。
[0004]本发明所要解决的技术问题是自动识别铁路接触网巡检视频图像中存在的鸟窝异常情况。铁路接触网上的鸟窝一般存在于接触网支柱上，由一些方向不一、长度不一的悬在空中近似直线的细线组成，根据这些特征，本发明具创新意义地提出用直线的方向直方图和长度直方图来描述鸟窝，进而通过SVM分类器自动识别铁路接触网图像中是否存在鸟窝异常。鸟窝异常检测是铁路接触网巡检中的重要内容，本发明的提出能够有效解决人工判读带来的巨大工作量的问题，为巡检人员的工作带来极大的便利，具有重大的安全意义和实际应用价值。
【发明内容】
[0005]为了实现鸟窝异常情况的自动识别，本发明采用的技术方案为:
[0006]一种基于图像的铁路接触网鸟窝异常情况的定位和识别方法，从高速客运专线接触网设备进行在线巡视拍摄的连续视频图像中识别出接触网是否存在鸟窝异常。根据鸟窝图像的特征，本发明采取处理步骤如下:
[0007](I)铁路接触网图像二值化:使用自适应二值化的方法，能够得到的二值图1。很好地保持了铁路接触网图像信息；
[0008](2)接触网支柱主干部分和细线区域部分提取:采用边缘膨胀法提取接触网支架的主干区域的二值图1m ;提取细线区域部分:对步骤(I)中提取的清晰二值图1。使用腐蚀相减的方法得到一个只包含图像中细线区域的二值图1t ;
[0009](3)基于悬空点检测的鸟窝可疑区域定位:结合接触网支架的主干区域图像Im和二值图像I。，通过进行悬空点检测确定鸟窝可疑区域。[0010](4)鸟窝可疑区域的直线方向直方图和长度直方图特征提取:对鸟窝可疑区域使用霍夫变换检测出直线，计算直线的方向和长度，从而进行统计得到该区域直线的方向直方图和长度直方图作为特征向量。
[0011](5)基于直线方向和长度分布特性的鸟窝识别:将特征信息输入对应的已构造完成的分类器进行分类，将分类结果进行概率融合，从而自动检测铁路接触网图像中是否存在鸟窝异常。
[0012]所述步骤(I)中，采用不同大小的滑动窗口对图像进行自适应阈值化，将得到的二值图像结合，并通过连通区域检测移除噪点，最终得到包含完整图像信息的二值图。
[0013]所述步骤(2)中，在接触网支柱的主干部分方面采用边缘膨胀的方法提取；在细线区域部分方面采用腐蚀相减的方法提取。
[0014]所述步骤(3)中，鸟窝可疑区域的定位结合接触网支柱主干部分图像和二值图像进行，主要是通过滑动窗口在接触网支柱的主干区域附近对二值图像进行悬空点检测，若滑动窗口内的悬空点数高于阈值，就认为该块是鸟窝可疑区域。
[0015]所述步骤(4)中，对鸟窝可疑区域进行霍夫变换提取直线，计算直线的方向和长度，从而进行统计得到该区域直线的方向直方图和长度直方图，并将其作为特征向量。
[0016]所述步骤(5)中，将鸟窝可疑区域中提取出的直线的方向直方图特征向量和长度直方图特征向量输入对应的已构造SVM分类器，通过SVM分类器得到该区域存在鸟窝的概率，最后，通过概率融合判定该区域是否存在鸟窝异常。
[0017]采用本发明能够实时地对铁路接触网巡检图像是否存在鸟窝异常进行自动识别，该技术能够有效解决人工判读带来的巨大工作量的问题，为巡检人员的工作带来极大的便利，从而提高巡检人员的工作效率。
【专利附图】
【附图说明】
[0018]图1是铁路接触网存在鸟窝异常的示例图。
[0019]图2是本发明的系统框图。
[0020]图3是本发明的总体框图。
[0021]图4是存在鸟窝异常图像与不存在鸟窝异常图像的直线方向和长度分布对比图。
[0022]图5是鸟窝异常的定位与识别算法流程图。
【具体实施方式】
[0023]下面结合附图介绍本发明【具体实施方式】。
[0024]图1为典型的铁路接触网巡检图像存在鸟窝异常的示意图。
[0025]图2为本发明的系统框图，铁路接触网巡检系统配备有两个车载CXD摄像机，分辨率分别是2456X2058(500万像素)和1392 X 1040(100万像素)。分辨率较高的摄像机用于拍摄铁路接触网图像，分辨率较低的图像用于拍摄接触网支柱杆号和里程碑。本发明中，仅采用高分辨率摄像机拍摄的接触网图像。在列车运行过程中，两个摄像机以17帧/ s的帧率同时拍摄列车前方的铁路图像。每次巡检系统运行都将在线拍摄大量的图片数据，因此将这些图片数据存储到可移动的存储设备上。可移动存储设备上的数据可以通过计算机进行离线的分析和处理，包括鸟窝异常检测，而这部分就是本发明所做的工作。[0026]图3为本发明的总体框图，读取铁路接触网图像后，首先，采用自适应二值化方法，得到能够完整保留图像有用信息的铁路接触网二值图；然后，提取接触网支柱主干部分和细线区域部分，分别用于鸟窝的辅助定位和直线提取；随后，使用滑动窗口遍历图像，结合鸟窝存在支柱附近的先验知识进行悬空点检测以定位鸟窝区域；然后，对鸟窝可疑区域进行霍夫变换提取直线，并计算直线的方向和长度，进而统计得到直线的方向直方图向量和长度直方图向量；最后， 将特征向量输入分类器进行鸟窝识别，如果存在鸟窝异常则预
目O
[0027]图4为存在鸟窝异常图像与不存在鸟窝异常图像的直线方向和长度分布对比图，用于说明本发明提出的两个特征能够很好的描述鸟窝。其中(a)是原图，(b)是使用定位出的鸟窝可疑区域，(C)是对鸟窝可疑区域进行霍夫变换提取出的直线，(d)是直线的方向直方图，(e)是直线的长度直方图。从图4中可以看出，鸟窝图像中的直线通常方向不一、长度不一，因此直线的方向直方图和长度直方图分布比较广泛，而非鸟窝图像，例如绝缘子图像，通常是由几个明显的峰值构成。
[0028]图5为鸟窝异常的定位与识别算法流程图，取wXw大小的滑动窗口 P遍历图像，判断P中是否存在鸟窝。输入的图像为三幅预处理得到的二值图1p主干图1m和细枝图1t,使用滑动窗口遍历图像，分别设置P为三个图像的感兴趣区域，提取P对应位置的Pc、Pm和Pt，若Pm中属于主干区域的像素个数大于阈值ε 1且匕中检测到的悬空点个数大于阈值ε2，则该区域是鸟窝可疑区域，对Pt提取可疑区域的直线方向直方图描述向量和长度直方图描述向量，分别通过对应的分类器得到存在鸟窝的两个概率值，通过两个概率值的融合判定该区域是否存在鸟窝异常。若遍历完图像没有一个区域存在鸟窝异常则该图像检测结果为不存在鸟窝异常。
[0029]为便于对本发明的细节作更为清楚的介绍，对本发明主要步骤详述如下:
[0030]步骤1:铁路接触网图像二值化。使用自适应二值化的方法，选择不同的大小的ηΧη滑动窗口对图像进行分块二值化，每一块采用该块的均值作为二值化阈值，计算公式如下:
[0031 ]
【权利要求】
1.一种基于图像的铁路接触网鸟窝异常情况检测方法，从高速客运专线接触网设备进行在线巡视拍摄的连续视频图像中识别出接触网是否存在鸟窝异常，包含如下处理步骤: (1)铁路接触网图像二值化:使用自适应二值化的方法，得到很好地保持铁路接触网图像信息的二值图1c; (2)接触网支柱主干部分和细线区域部分提取:采用边缘膨胀法提取接触网支架的主干区域的二值图1M;提取细线区域部分:对步骤(I)中提取的清晰二值图L使用腐蚀相减的方法得到一个只包含图像中细线区域的二值图1t ; (3)基于悬空点检测的鸟窝可疑区域定位:结合接触网支架的主干区域图像Im和二值图像I。，通过进行悬空点检测确定鸟窝可疑区域； (4)鸟窝可疑区域的直线方向直方图和长度直方图特征提取:对鸟窝可疑区域使用霍夫变换检测出直线，计算直线的方向和长度，从而进行统计得到该区域直线的方向直方图和长度直方图作为特征向量； (5)基于直线方向和长度分布特性的鸟窝识别:将特征信息输入对应的已构造完成的分类器进行分类，将分类结果进行概率融合，从而自动检测铁路接触网图像中是否存在鸟內TT巾ο
2.根据权利要求1所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(I)中，采用不同大小的滑动窗口对图像进行自适应阈值化，将得到的二值图像结合，并通过连通区域检测移除噪点，最终得到包含完整图像信息的二值图。
3.根据权利要求1所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(2)中，在接触网支柱的主干部分方面采用边缘膨胀的方法提取；在细线区域部分方面采用腐蚀相减的方法提取。
4.根据权利要求1所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(3)中，鸟窝可疑区域的定位结合接触网支柱主干部分图像和二值图像进行，主要是通过滑动窗口在接触网支柱的主干区域附近对二值图像进行悬空点检测，若滑动窗口内的悬空点数高于阈值，就认为该块是鸟窝可疑区域。
5.根据权利要求1所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(4)中，对鸟窝可疑区域进行霍夫变换提取直线，计算直线的方向和长度，从而进行统计得到该区域直线的方向直方图和长度直方图，并将其作为特征向量。
6.根据权利要求1所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(5)中，将鸟窝可疑区域中提取出的直线的方向直方图特征向量和长度直方图特征向量输入对应的已构造SVM分类器，通过SVM分类器得到该区域存在鸟窝的概率，最后，通过概率融合判定该区域是否存在鸟窝异常。
7.根据权利要求1或6所述的基于图像的铁路接触网鸟窝异常情况检测方法，其特征是，所述步骤(5)的分类器构造特征是:将有鸟窝的图像和无鸟窝的图像分别作为正样本和负样本输入，通过支持向量机(SVM)分别对鸟窝可疑区域直线的方向直方图特征向量和长度直方图特征向量进行训练，得到基于直线方向分布的SVM分类器和基于直线长度分布的SVM分类器。
【文档编号】G06K9/62GK103745224SQ201310721802
【公开日】2014年4月23日 申请日期:2013年12月24日 优先权日:2013年12月24日
【发明者】吴晓, 袁萍, 彭强, 张靓云 申请人:西南交通大学