专利名称：利用影像侦测违规车辆的系统及方法
技术领域：
本发明涉及一种违规车辆监控系统及方法，尤其涉及一种利用影像侦测违规车辆的系统及方法。
背景技术：
目前现有的超速闯红灯照 相装置，为采用感应线圈侦测的方式。当红灯亮起，可以通知该照相装置拍摄穿越十字路口的违规车辆。然而，实行此种方式，必须先在道路的停止线前方开挖道路并埋设感应线圈，该开挖道路的方式既费时又费力，同时开挖道路对使用者会造成极大的不方便。此外，由于该方式需要车辆直接压过感应线圈的埋设点才可以获得精确的侦测结果，当感应线圈经过长期车辆辗压而断裂或失去感应功能时，整体维修工程也会相当的麻烦。至于雷达侦测照相装置，不但成本高，而且只能侦测车辆违规超速，对于其它道路状况，例如车流量、平均车速、车种等，则无法进行处理。因此，该雷达侦测照相装置的功能会受到限制，如无法自动记录所侦测的数据并加以分析、运用或配合目前的道路管控，且不方便于系统的维护与改良。
发明内容
鉴于以上内容，有必要提供一种利用影像侦测违规车辆的方法，能以较少的人力和较佳的便利性达到监控违规车辆的目的，从而有效地预防车辆违规及交通事故。所述利用影像侦测违规车辆的方法包括影像获取步骤，接收摄像装置实时拍摄的交通信号灯的影像及该交通信号灯所在路口的交通状况的影像，该交通信号灯至少包括一个红色信号灯和一个绿色信号灯；交通信号灯侦测步骤，分析该交通信号灯的影像，侦测该交通信号灯中的红色信号灯是否为亮；违规车辆侦测步骤，当侦测结果为红色信号灯亮时，通过所述交通状况的影像及移动对象侦测算法判断是否有车辆越过该路口的道路停止线；及车牌识别步骤，当有车辆越过该道路停止线时，从该交通状况的影像中识别出该车辆的车牌号，并记录该车牌号。此外，还有必要提供一种利用影像侦测违规车辆的系统，能以较少的人力和较佳的便利性达到监控违规车辆的目的，从而有效地预防车辆违规及交通事故。所述利用影像侦测违规车辆的系统包括影像获取模块，用于接收摄像装置实时拍摄的交通信号灯的影像及该交通信号灯所在路口的交通状况的影像，该交通信号灯至少包括一个红色信号灯和一个绿色信号灯；交通信号灯侦测模块，用于分析该交通信号灯的影像，侦测该交通信号灯中的红色信号灯是否为亮；违规车辆侦测模块，用于当侦测结果为红色信号灯亮时，通过所述交通状况的影像及移动对象侦测算法判断是否有车辆越过该路口的道路停止线；及车牌识别模块，用于当有车辆越过该道路停止线时，从该交通状况的影像中识别出该车辆的车牌号，并记录该车牌号。相较于现有技术，本发明所述的利用影像侦测违规车辆的系统及方法，可根据监控设备所拍摄影像的区域亮度变化量，来监控交通信号灯的变化，并根据影像内容进行交通监控，在整体设定上具有相当大的弹性，可以进一步整合交通流量控管或车牌识别等功能，同时也可通过有线或无线网络传输数据给警政单位，以达到有效预防违规及交通事故的目的。
图I是本发明利用影像侦测违规车辆的系统较佳实施例的运行环境示意图。图2是图I中的侦测系统较佳实施例的功能模块图。图3是本发明利用影像侦测违规车辆 的方法较佳实施例的作业流程图。图4是图3步骤S02的具体方法流程图。图5是本发明车辆越过道路停止线的示意图。图6(A)和图6(B)是交通信号灯的示意图。图7是本发明另一个实施例中利用影像侦测违规车辆的系统的运行环境示意图。主要元件符号说明
监控设备[I
交通信号灯2
终端服务器3
摄像装置10
侦测系统12
存储单元14
MH16
传输装置18
影像获取模块120
交通信号灯侦测模块@
违规车辆侦测模块124
车牌识别模块126
WMA、B、C如下具体实施方式
将结合上述附图进一步说明本发明。
具体实施方式
如图I所示，是本发明利用影像侦测违规车辆的系统(以下简称为“侦测系统12”)较佳实施例的运行环境示意图。所述侦测系统12是具有特定功能的软件程序段，该软件程序段被存储在监控设备I的存储单元14中，且能够被安装在该监控设备I内的处理器16执行以实现违规车辆的侦测。如图2所示，所述侦测系统12包括影像获取模块120、交通信号灯侦测模块122、违规车辆侦测模块124及车牌识别模块126，其具体功能将在图3至图4中进行详细描述。所述监控设备I还包括至少一个摄像装置10 (图中仅示意一个)。该摄像装置10用于拍摄街道交叉路口的交通信号灯2，并于交通信号灯2中的红色信号灯亮时拍摄经过道路停止线的车辆，该道路停止线如图5中的虚线所示。其中，所述交通信号灯2包括红色信号灯、黄色信号灯和绿色信号灯，在其他实施例中，该交通信号灯2也可以仅包括红色信号灯和绿色信号灯。本实施例以交通信号灯2包括红、黄和绿三种颜色的信号灯为例，如图6(A)和图6(B)中所示。参见图5为本发明车辆越过道路停止线的示意图。该图示意了一个设置有交通信 号灯2的交叉路口，监控设备I设置在相对于交通信号灯2的位置上，可以监控路口交通状况。为了对相对位置间的各个车道上的车辆进行侦测监控，监控设备I须安装在较高的位置处，例如路灯、交通标志、其它交通信号灯柱、升降型的支撑柱或高架杆上。当有违规车辆A出现时能立即判断并进行摄影拍照，所述侦测系统12安装在该监控设备I内，以便实时接收摄像装置10所拍摄的影像以进行违规车辆判断。在其他实施例中，所述侦测系统12也可以安装在一个与监控设备I相连的电子装置内。该电子装置与监控设备I安装在同一个能拍摄到交通信号灯2的位置处。如图3所示，是本发明利用影像侦测违规车辆的方法较佳实施例的作业流程图。步骤S01，摄像装置10实时拍摄所述交通信号灯2的工作状态及该交通信号灯2所在路口的交通状况，所述影像获取模块120获取该交通信号灯2的影像及该路口的交通状况的影像。步骤S02，交通信号灯侦测模块122通过分析该交通信号灯2的影像，来侦测该交通信号灯2中的红色信号灯是否为亮。具体流程如图4中的描述。若步骤S02中的判断结果为红色信号灯没有亮，则返回步骤S01。若步骤S02中的判断结果为红色信号灯亮，则于步骤S03，违规车辆侦测模块124通过摄像装置10所拍摄的影像侦测出是否有车辆越过该路口的道路停止线，并由此确定是否有车辆违规，即闯红灯。若侦测结果为没有车辆越过该道路停止线，则结束流程。若侦测结果为有车辆越过该道路停止线，则进入步骤S04。具体而言，参考图5所示，违规车辆侦测模块124将以图中虚线所示的道路停止线作为判断是否违规的分界线，利用移动对象侦测算法得到影像画面中移动物体(如车辆A)及其移动方向，再判断该移动物体是否超越该道路停止线，若有移动物体超越该道路停止线，则进一步判断该移动物体的面积是否符合一般车辆的大小，且判断该移动物体的移动方向是否为图5中的第一方向，若以上判断条件皆属实，则违规车辆侦测模块124判定该移动物体为违规车辆，并认定该车辆违规闯红灯。在本实施例中，所述移动对象侦测算法可以为背景相减法(backgroundsubtraction)，即扣除影像画面中不变的静止背景区，剩余未被扣除的残余区块即为移动物体所在区块。在其他实施例中，所述移动对象侦测算法还可以为光流侦测法(opticalflow)，该光流侦测法从相邻两影像画面中找出光流的变化，即利用同一物体上的点在前后影像间的位移向量来识别移动物体及其移动方向。在另一个实施例中，所述移动对象侦测算法也可以为时间差异法(temporal differencing),该时间差异法是指将相邻的两张影像相减，求出影像中物体的变化量，并累积连续影像中的微量变化，找出物体的移动范围，并由此范围判定是否为移动物体及识别出该移动物体的移动方向。步骤S04，车牌识别模块126从所述摄像装置10所拍摄的影像中识别出该车辆的车牌号，并记录该车牌号。本实施例中，所述车牌号识别一般包括三个步骤，分别是车牌定位、车牌分割与字符识别，其中，用作车牌定位的算法可以是AdaBoost、类神经网络算法等。如图4所示，是图3步骤S02的具体方法流程图。步骤S200，交通信号灯侦测模块122接收摄像装置10所拍摄的交通信号灯2的影
像。 为了克服外界环境光对摄像装置10所拍摄影像的影响，步骤S202，交通信号灯侦测模块122利用HSI (Hue-Saturation-Intensity (Lightness))颜色模型分析该影像，以过滤出影像中交通信号灯2可能出现的区块。该HSI颜色模型用H、S、I三参数描述颜色特性，其中H定义颜色的波长，称为色调；S表示颜色的深浅程度，称为饱和度；1表示强度或亮度，通过将色调、饱和度和亮度分开计算，可以有效避免像素灰阶受到外界光线明暗程度的影响。具体而言，首先根据以下计算公式将影像由RGB空间转换成HSI空间
i[(i -G) + (i -5)]H = cos 1 {——^-r}
[(i -G)2 +(R-G)(G-B)Y
3^ = I- ,D p D, [min(i ,G,^)] ,I = -(R + G + B)
(R + G + B)3其中，RGB分别是红色、绿色和蓝色像素的灰阶值，若以八位表示灰阶则其RGB的灰阶范围落在0和255之间，经过以上换算，H则是0度到360度，S落在0至I之间，I的范围会介于0至255之间。步骤S204，交通信号灯侦测模块122对红色、绿色与黄色三种颜色的信号灯进行判断，以去除影像中非信号灯的区块，即将三种颜色信号灯的区块从所接收的影像中过滤出来。具体而言，为了实现对红色、绿色与黄色三种信号灯的颜色进行判断的目的，本实施例先为红色、绿色与黄色信号灯的色彩分别设定一个相对应的临界值作撷取判断。例如，对红色信号灯的颜色的判断条件定义如下
Hra ^ Hue ^ HRa2 < Saturation Ir 2 < Intensity以上表示判断红色信号灯的颜色的色调范围介于Hu与Hk,2之间，且饱和度与亮度分别大于Sim与IK,i，其中，Hk,2、Sim与Iu为该红色信号灯的颜色判断的临界值。同理，对于绿色及黄色信号灯颜色的判断条件分别如下
权利要求
1.一种利用影像侦测违规车辆的方法，其特征在于，该方法包括 影像获取步骤，接收摄像装置实时拍摄的交通信号灯的影像及该交通信号灯所在路口的交通状况的影像，该交通信号灯至少包括一个红色信号灯和一个绿色信号灯； 交通信号灯侦测步骤，分析该交通信号灯的影像，侦测该交通信号灯中的红色信号灯是否为売; 违规车辆侦测步骤，当侦测结果为红色信号灯亮时，通过所述交通状况的影像及移动对象侦测算法判断是否有车辆越过该路口的道路停止线；及 车牌识别步骤，当有车辆越过该道路停止线时，从该交通状况的影像中识别出该车辆的车牌号，并记录该车牌号。
2.如权利要求I所述的利用影像侦测违规车辆的方法，其特征在于，所述交通信号灯侦测步骤包括如下步骤 HSI颜色模型步骤，利用HSI颜色模型分析上述交通信号灯的影像，以过滤出该影像中交通信号灯所在的区块； 过滤步骤，为每种颜色信号灯设定一个相对应的临界值作为撷取条件，从所述影像中过滤出各信号灯的区块； 确认步骤，根据各信号灯区块的像素数目、信号灯区块的矩形框的宽高比例，进一步确认上述过滤后的区块是否是信号灯的区块；及 信号灯识别步骤，当上述区块是信号灯的区块时，利用各种颜色信号灯的相对位置识别信号灯，以判断出红色信号灯是否为亮。
3.如权利要求2所述的利用影像侦测违规车辆的方法，其特征在于，所述信号灯识别步骤包括 建立固定大小与型式的屏蔽； 扫描影像中交通信号灯所在的区块得到屏蔽运算结果；及 将屏蔽运算结果与一个设定的临界值做比较，以识别出红色信号灯是否亮。
4.如权利要求I所述的利用影像侦测违规车辆的方法，其特征在于，所述违规车辆侦测步骤包括如下步骤 将所述路口的道路停止线作为判断是否违规的分界线； 利用移动对象算法得到影像画面中移动物体及其移动方向； 判断该移动物体是否超越所述道路停止线； 当该移动物体超越该道路停止线时，判断该移动物体的面积是否符合各种车辆的大小，且判断该移动物体的移动方向是否满足第一方向；及 若该移动物体的面积符合车辆的大小且该移动物体的移动方向满足所述第一方向，则判定该移动物体为违规车辆，并认定该车辆违规闯红灯。
5.如权利要求4所述的利用影像侦测违规车辆的方法，其特征在于，所述移动对象侦测算法包括背景相减法、光流侦测法、时间差异法。
6.如权利要求I所述的利用影像侦测违规车辆的方法，其特征在于，所述车牌识别步骤包括车牌定位、车牌分割与字符识别，其中，用作车牌定位的算法是AdaBoost或类神经网络算法。
7.一种利用影像侦测违规车辆的系统，其特征在于，该系统包括影像获取模块，用于接收摄像装置实时拍摄的交通信号灯的影像及该交通信号灯所在路口的交通状况的影像，该交通信号灯至少包括一个红色信号灯和一个绿色信号灯； 交通信号灯侦测模块，用于分析该交通信号灯的影像，侦测该交通信号灯中的红色信号灯是否为亮； 违规车辆侦测模块，用于当侦测结果为红色信号灯亮时，通过所述交通状况的影像及移动对象侦测算法判断是否有车辆越过该路口的道路停止线；及 车牌识别模块，用于当有车辆越过该道路停止线时，从该交通状况的影像中识别出该车辆的车牌号，并记录该车牌号。
8.如权利要求7所述的利用影像侦测违规车辆的系统，其特征在于，所述交通信号灯侦测模块通过以下步骤侦测红色信号灯是否为亮 利用HSI颜色模型分析上述交通信号灯的影像，以过滤出该影像中交通信号灯所在的区块； 为每种颜色信号灯设定一个相对应的临界值作为撷取条件，从所述影像中过滤出各信号灯的区块； 根据各信号灯区块的像素数目、信号灯区块的矩形框的宽高比例，进一步确认上述过滤后的区块是否是信号灯的区块；及 当上述区块是信号灯的区块时，利用各种颜色信号灯的相对位置识别信号灯，以判断出红色信号灯是否为亮。
9.如权利要求7所述的利用影像侦测违规车辆的系统，其特征在于，所述违规车辆侦测模块通过以下步骤判断是否有车辆越过该路口的道路停止线 将所述路口的道路停止线作为判断是否违规的分界线； 利用移动对象算法得到影像画面中移动物体及其移动方向； 判断该移动物体是否超越所述道路停止线； 当该移动物体超越该道路停止线时，判断该移动物体的面积是否符合各种车辆的大小，且判断该移动物体的移动方向是否满足第一方向 '及 若该移动物体的面积符合车辆的大小且该移动物体的移动方向满足所述第一方向，贝1J判定该移动物体为违规车辆，并认定该车辆违规闯红灯。
10.如权利要求7所述的利用影像侦测违规车辆的系统，其特征在于，所述车牌识别模块通过车牌定位、车牌分割与字符识别从交通状况的影像中识别出违规车辆的车牌号，其中，用作车牌定位的算法是AdaBoost或类神经网络算法。
全文摘要
一种利用影像侦测违规车辆的方法包括接收摄像装置实时拍摄的交通信号灯的影像及该交通信号灯所在路口的交通状况的影像；分析该交通信号灯的影像，侦测该交通信号灯中的红色信号灯是否为亮；当侦测结果为红色信号灯亮时，通过所述交通状况的影像及移动对象侦测算法判断是否有车辆越过该路口的道路停止线；及当有车辆越过该道路停止线时，从该交通状况的影像中识别出该车辆的车牌号，并记录该车牌号。本发明还提供一种利用影像侦测违规车辆的系统。利用本发明，可以有效地预防车辆违规及交通事故。
文档编号H04N5/225GK102737505SQ201110095640
公开日2012年10月17日 申请日期2011年4月15日 优先权日2011年4月15日
发明者李隆基, 陈建霖 申请人:鸿富锦精密工业(深圳)有限公司, 鸿海精密工业股份有限公司