一种城市道路障碍物识别系统的制作方法
【专利摘要】本发明公开了一种城市道路交通障碍物跟踪检测方法，涉及图像预处理、前景图像提取、道路区域检测、多目标跟踪、障碍物初步检测、道路交通安全威胁分析等部分。图像预处理部分通过减少图像中的噪声，增强图像对比度从而提高图像后续处理的可靠性；前景图像提取用于目标检测；道路区域检测用来判断障碍物所处位置，利用八邻域种子灰度填充算法得到道路区域；通过均值偏移算法结合最近邻域搜索算法进行多目标跟踪；通过检测目标位置的变化来判断障碍物；分析障碍物上游车辆状态来判断障碍物是否对交通安全造成威胁并进行报警。本发明实现利用固定图像传感器对城市道路交通障碍物的自动检测，可以预防交通事故的发生。
【专利说明】一种城市道路障碍物识别系统
【技术领域】
[0001]本发明涉及城市道路交通障碍物检测领域，特别是提供一种城市道路障碍物识别系统。
【背景技术】
[0002]城市交通问题是本世纪以来，工业发达国家一直为之困扰的问题。进入80年代以来，我国城市的经济贸易和社会活动日益繁忙，车辆和交通流量发生了前所未有的迅速增长，传统的道路交通设施已经不能适应现代社会的需要。当前，我国城市特别是大城市的交通问题极其严重，交通事故数量自改革开放以来呈不断上升趋势。2010年，全国共接报道路交通事故3906164起，同比上升35.9%。其中，涉及人员伤亡的道路交通事故219521起，造成65225人死亡、254075人受伤，直接财产损失9.3亿元。交通安全问题已经成为当今世界上一个严重的社会问题，众多的专家学者都在研究如何减少交通事故，保障道路交通安全
[I]。
[0003]智能交通系统(ITS)是将先进的信息技术、数据通信传输技术、电子传感技术、电子控制技术以及计算机处理技术等有效的集成，运用于整个地面运输管理体系，而建立起的一种在大范围、全方位发挥作用的，实时、准确、高效的综合运输和管理系统[2]。它能使人、车、路以及环境密切配合，和谐统一，极大地提高综合交通运输效率，保障交通安全。智能交通系统可以为交通部门及时、准确地提供交通信息，从而使交通管理控制系统有效地适应各种交通状况，运用多种控制系统，在相对宏观的高度合理疏导或者调配运力，从而最大效能地发挥交通管理系统在交通监视、交通控制、出入控制、救援管理等方面的准确性和调控性。
[0004]20世纪90年代以来，随着地面运输整体式解决方案一ITS的蓬勃发展，基于视频的交通事件检测系统进入了一个崭新的阶段。如何利用先进的交通事件检测系统精确检测并检测道路中停止车辆(包括非法停车与事故车辆)和遗撒物等可能阻碍交通运行的障碍物，并及时通知管理部门进行处理调度，使公路始终处于畅通、安全的状态一直是世界各国交通工程师努力研究和实践的一大课题。
[0005]随着经济的发展和交通运输业的不断进步，我国道路交通安全状况也越来越严峻。自改革开放以来，道路交通虽有了长足的发展，但交通事故也更加严重。尤其是交通障碍物给交通安全带来的威胁。
[0006]道路障碍物不仅给通行车辆和司乘人员造成了生命财产损失，影响了道路的通畅，而且给道路运营管理单位带来了经济损失和诉讼纠纷，给道路的管理和维护带来了麻烦。快速的检测出障碍物至关重要，有助于保证车辆运行的通畅以及及时的反馈通知交通管理部门，提高交管部门及时处理交通事故的效率。
[0007]城市复杂道路环境下的障碍物检测与检测是有效预防交通事故的交通管理系统的第一步，也是其核心和关键，高效、可靠的障碍物检测技术已成为现代ITS研究的新热点。城市道路交通障碍物检测系统是智能交通系统中的重要的基础子系统之一。城市道路交通障碍物检测系统通过检测检测障碍物并且分析其对交通安全造成的影响，并通过网络向交通部门进行报警或者交通显示屏向出行者发布，从而实现整个交通系统中及时的检测影响交通安全的障碍物，提高路网的通行能力，降低交通事故发生率，减少因交通事故带来的经济损失。目前障碍物检测方法在国内外发达国家和地区有一定的研究，主要针对高速公路或城市道路十字交叉口，并没有考虑行人等干扰因素，且大多数都是研究停止车辆(非法停车或交通事故)的检测，对遗撒物的自动检测研究较少。国外在道路障碍物检测方面的研究比较早、比较成熟，已开发出许多实际应用的产品，均能实现非法停车和遗撒物的检测，并且在高速公路背景下能取得很高的检测精度。但目前国外针对场景更复杂的城市道路障碍物检测方面的研究还不够成熟，没有考虑城市道路中行人等非机动车辆的干扰及前后机动车间的干扰；对具有多态性的遗撒物的检测研究成果仍较少，没有研究停止车辆和遗撒物的分类检测。而且也并没有结合中国的道路交通环境特点，尤其是北京等发达城市，拥有大量的用于监控的固定CXD图像传感器，充分利用这些传感器的优势，既节省成本，又能提高交通的智能化和安全性。因此，城市道路交通障碍物检测方法仍是需要深入研究的热点方向。
[0008]已公开的中国发明专利CN200710075458.3提出一种通过停车检测来实现车辆交通事故自动检测方法，没有对障碍物对交通安全造成的影响进行分析研究，也并未对行人进行排除，对检测到的障碍物进行停止车辆与遗撒物的分类，所以系统的可靠性不高、检测环节有很多不完善的地方。
【发明内容】
[0009]有鉴于此，本发明目的在于提供了一种可靠性、完善性均较高的城市道路交通障碍物检测系统。
[0010]为了达到目的，本发明提出的技术方案为:
[0011]一种城市道路交通障碍物检测系统，基于城市道路交通固定CXD图像检测器，其特征在于，所描述检测方法包括以下步骤:
[0012]步骤S1、通过固定CXD图像传感器获取城市道路交通视频图像序列；
[0013]步骤S2、采用改进的混合高斯背景建模方法建立背景，提取出运动目标前景图像；
[0014]步骤S3、利用步骤二中得到的背景图像提取道路区域；
[0015]步骤S4、对每个目标块建立meanshift跟踪窗，并且赋予唯一的ID，进行基于跟踪链表的多车辆跟踪；
[0016]步骤S5、通过动态特征，静态特征提出几何约束障碍物检测方法对障碍物进行检测；
[0017]步骤S6、通过车辆运行轨迹的变化分析障碍物对交通安全造成的影响；
[0018]步骤S7、对可能造成交通事故的障碍物通过特征进行分类检测并且报警。
[0019]综上所述，本发明利用改进的混合高斯背景建模方法建立背景，能够很好地适应背景的动态变化，抗干扰性强；进行多目标跟踪，计算每个目标的一定时间内的位置变化来判断是否为障碍物；然后判断其是否处于道路中央，是的话进行下一步处理；通过分析车道内车辆交通轨迹的变化以及车速变化来研究其对道路交通安全造成的影响。本发明的成果所具有的特性能够为向交通管理部门报警提供参考，为出行者的出行提供安全指示与保障，同时为交通管理部门制定策略提供帮助。对于提升我国在城市道路交通障碍物检测领域的研究和应用水平，具有重要的理论意义，对于解决我国城市道路的交通拥挤，具有重要的现实意义。
【专利附图】
【附图说明】
[0020]为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0021]图1是本发明一种城市道路交通障碍物检测系统结构框图。
[0022]图2是道路区域提取示意图。
[0023]图3是描述多目标跟踪过程流程示意图。
[0024]图4是障碍物检测流程示意图。
[0025]图5描述障碍物对道路交通安全模型示意图。
【具体实施方式】
[0026]下面将结合本发明的附图，对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0027]图1本发明一种城市道路交通障碍物检测系统结构框图，如图1所示，本发明所示一种城市道路交通障碍物检测，基于城市道路交通固定CXD图像检测器。包括如下步骤:
[0028]步骤S1、通过固定CXD图像传感器获取城市道路交通视频图像序列；
[0029]步骤S2、采用改进的混合高斯背景建模方法建立背景，提取出运动目标前景图像；
[0030]步骤S3、利用步骤二中得到的背景图像提取道路区域；
[0031]步骤S4、对每个目标块建立meanshift跟踪窗，并且赋予唯一的ID号，进行基于跟踪链表的多车辆跟踪；
[0032]步骤S5、通过动态特征，静态特征提出几何约束障碍物检测方法对障碍物进行检测；
[0033]步骤S6、通过车辆运行轨迹的变化分析障碍物对交通安全造成的影响；
[0034]步骤S7、对障碍物进行分类检测并且报警。
[0035]步骤Sll通过固定CXD图像传感器，获取道路交通视频图像，并对视频图像做中值滤波处理，消除图像的干扰噪声；
[0036]图2为前景目标提取示意图，如图2所示，步骤S2中，进行混合高斯背景提取，并且提取前景目标，具体步骤如下:
[0037]步骤S21建立混合高斯分布模型，进行背景的实时更新；
[0038]步骤S22将原视频图像与背景图像相减，通过Otsu自动阈值的获取进行前景目标分离；[0039]具体做法：[0040]基本原理如下：设图像灰度级1~M。第i级像素ni个，总像素
【权利要求】
1.一种城市道路障碍物识别系统，其特征在于:该系统基于城市道路交通固定图像检测器，检测城市道路区域出现的障碍物，包括遗撒物以及道路内停止车辆，所述识别系统包括以下步骤: 步骤S1、通过固定图像传感器获取城市道路交通视频图像序列； 步骤S2、采用改进的混合高斯背景建模方法建立背景，提取出运动目标前景图像； 步骤S3、利用步骤二中得到的背景图像提取道路区域； 步骤S4、对每个目标块建立meanshift跟踪窗，并且赋予唯一的ID号，进行基于跟踪链表的多车辆跟踪； 步骤S5、通过动态特征，静态特征提出几何约束障碍物检测方法对障碍物进行检测； 步骤S6、通过车辆运行轨迹的变化分析障碍物对交通安全造成的影响； 步骤S7、对障碍物进行分类识别并且报警。
2.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:所述步骤SI中获取城市视频图像序列是通过单一固定CCD摄像机获得城市交通道路的监控视频图像。
3.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:所述步骤S2中，采用基于改进的高斯混合背景提取前景图像包含以下步骤: 步骤S21:基于混合高斯分布模型实时更新得到背景图像与前景图像I ; 步骤S22:将原图像与背景图像相减，利用自适应阈值分割方法得到初步的前景图像2 ； 步骤S23:将前景图像I与前景图像2做与，利用数学形态学的开运算去除小面积的非运动车辆目标: 步骤S24:利用轮廓投影分析与形状分析结合去除阴影； 步骤S25:基于腐蚀和膨胀运算的四连通区域车辆轮廓提取算法，并且进行轮廓内部区域填充； 步骤S26:通过计算轮廓内部区域面积，排除非运动车辆以及不可能是障碍物的的干扰块。
4.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:步骤S3中，通过基于混合高斯分布模型得到的背景图像提取道路区域，包括以下步骤: 步骤S31:在背景图像正中选取一个点，选取此点的灰度值； 步骤S32:判断种子点上下左右相隔十个像素点处的灰度值与种子点灰度值相比，若都相差在3之内，将此种子点作为种子点；否则重新选取种子点； 步骤S33:步骤S32中得到种子点后，取其灰度值，通过八邻域种子灰度填充算法填充道路区域； 步骤S34:将道路区域全置为灰度值255，其余区域置为O，得到初步的道路区域； 步骤S35:对步骤S34得到的道路区域进行轮廓填充，得到最终的道路区域。
5.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:步骤S4中，对每个目标块建立meanshift跟踪窗，进行基于跟踪链表的多车辆跟踪包括以下步骤: 步骤S41:为了实现多目标同时跟踪，为每个车辆分别建立一个跟踪链表； 步骤S42:利用步骤S2得到的前景目标，利用其质心位置与颜色作为meanshift跟踪时的特征；步骤S43:使用meanshift算法对每帧中得到的每个运动目标进行跟踪，赋予唯一的ID号，并且将同一目标的位置信息面积信息保存到相应的跟踪链表中； 步骤S44:添加新的目标对象并更新当前跟踪队列，为新加的目标添加唯一的ID号，为其建立meanshift跟踪链表，对于消失的目标删除其跟踪链表。
6.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:步骤S5中，计算每个目标块一定时间内的位置变化，判断障碍物，包括以下步骤: 步骤S51:利用步骤S4 meanshift跟踪目标，提取并且保存每帧图像中每个目标的质心坐标； 步骤S52:每隔一定时间按照查找ID号找到同一目标的质心坐标值； 步骤S53:通过比较目标位置的变化来判断图像中是否出现静止的目标； 步骤S54:上一步若判断出有，进一步检测其质心的位置，若在道路区域中，则初步判定为障碍物，进一步判断障碍物对交通安全的影响。
7.根据权利要求1所述的一种城市道路障碍物识别系统，其特征在于:步骤S6中，分析障碍物对交通安全造成的影响，包括以下步骤: 步骤S61:根据步骤S33，将每个目标块的坐标值按照视频图像的先后顺序保存成一个序列； 步骤S62:每隔10帧计算当前帧中目标质心与对应的目标第一个保存的质心连线的斜率值； 步骤S63:对同一目标计算得到的斜率值进行排序，找出变化最大的斜率值； 步骤S64:将上一步骤得到的变化最大的斜率值与设定的阈值进行比较，当大于阈值，判断车辆遇到障碍物后改变了行驶方向，说明障碍物影响了交通安全。
8.根据权利要求1所述的城市道路障碍物识别系统，其特征在于:步骤S7中，对检测到的障碍物进行识别分类，包括以下步骤: 步骤S71:建立用于车辆识别的车辆二值图样本库； 步骤S72:分别提取其Zernike矩并且保存为数组组成识别库； 步骤S73:对实际检测到障碍物，取其最小外界矩形二值图区域，同样提取其Zernike矩与识别库中的样本值 匹配，满足一定匹配度，则判断此障碍物为车辆，否则为遗洒物；步骤S74:进行报警。
【文档编号】G08G1/16GK103914688SQ201410120838
【公开日】2014年7月9日 申请日期:2014年3月27日 优先权日:2014年3月27日
【发明者】蓝金辉, 郭敏, 刘敏, 吐尔尼亚孜·艾比布 申请人:北京科技大学