基于车牌识别和图像方差算法的小区违停告警方法与流程

本发明涉及一种智能小区管理方法，尤其涉及一种基于车牌识别和图像方差算法的小区违停告警机制。

背景技术：

随着城市人口集中化趋势的发展和科技的进步，智慧社区逐渐由理论转向实践，越来越多的智能化设备和技术应用到社区的基本管理和社区成员的日常生活中。然而社区内人口的流动性很大，人员类型也很复杂，车辆进出也存在很大的乱象，很多非停车区域或者限制停车时间的区域，往往由于人为监管难度大，而迟迟无法解决，造成小区内车辆堵塞道路，小区内车辆行驶困难，严重影响了小区的生活质量和出行方便。

因此，有必要提出一种改进，解决现有的问题。

技术实现要素：

本发明的目的是解决现有技术中的问题，提供一种基于车牌识别和图像方差算法的小区违停告警方法。

本发明的技术方案是：一种基于车牌识别和图像方差算法的小区违停告警方法，包括以下步骤：s1、在小区摄像头拍摄区域内划定车辆违停监测区域，在摄像头成像相片内将车辆违停监测区域进行圈定；s2、在所述车辆违停监测区域正常情况下，获取一张照片p0作为对比底图；对p0进行灰度处理得到灰度图p0_gray；s3、每隔n帧实时对摄像头的帧图像p与对比底图p0检测区域进行均方差err计算；s4、若err大于8，对帧图像p进行车牌识别，确认车辆违停信息并进行处理，将车辆违停信息上报至门卫车辆出入闸管理系统；若err小于等于8，则返回步骤s3；s5、所述门卫车辆出入闸管理系统收到车辆违停信息后，将违停车辆录入违停车辆信息库并计算违停罚款数额；当违停车辆缴纳罚款并通过车闸后，所述门卫车辆出入闸管理系统将该车辆的违停信息移存至历史违停处罚记录。

作为一种优选的技术方案，所述步骤s3之后还包括以下步骤s6：记上一次底图更新时间为t0，若检测到某一帧图像p的对别均方差err小于1，且此时时间t满足t-t0＞60s，则将底图p0替换为p，对底图进行更新。

作为一种进一步优选的技术方案，所述步骤s6与所述步骤s4同步进行。

作为一种优选的技术方案，所述步骤s3均方差err计算具体步骤为：s31、设置帧图像p的图像像素为h*w*3，对帧图像p进行灰度处理后得到帧图像p的灰度图p_gray；s32、检测区域的四个点坐标d1(x1，y1)，d2(x2，y2)，d3(x3，y3)，d4(x4，y4)所形成的四边形圈定区域a；s33、设定帧图像像素差临界值为temp，则计算灰度图p0_gray和p_gray在区域a上的像素方差err，计算公式为：其中，(h,w)∈a且p_gray(h,w)-p0_gray(h,w)＞temp。

作为一种进一步优选的技术方案，所述步骤s3中n为30，即每隔30帧获取摄像头视频流中的一帧p。

作为一种优选的技术方案，在所述步骤s4内所述确认车辆违停信息并进行处理步骤之前，还包括步骤s7：设置违停车辆信息登记字典。

作为一种进一步优选的技术方案，所述违停车辆信息登记字典内包括信息有：车牌号、违停状态、当前违停初始被抓拍时间tf、当前违停上次被抓拍时间tl、累计违停时间tw、违停车辆证据存储队列、潜在车辆违停证据临时存储队列。

作为一种更进一步优选的技术方案，所述步骤s4具体包括以下步骤：s41、对帧图像p进行车牌识别，识别出完整车牌信息；s42、判断所述车牌信息是否存在于所述违停车辆信息登记字典内，若不存在，在所述违停车辆信息登记字典内建立该车牌信息，并将帧图像数据加入所述潜在车辆违停证据临时存储队列；之后执行步骤s43；若存在，执行步骤s43；s43、获取该车牌信息在所述违停车辆信息登记字典内的当前违停上次被抓拍时间tl；若本次被抓拍时间tn-tl>t0，则将tl之前违停信息保存，重新开始当前违停计时，所述当前违停初始被抓拍时间tf、所述当前违停上次被抓拍时间tl均修改为tn，将帧图像p添加到所述潜在车辆违停证据临时存储队列；若本次被抓拍时间tn-tl≤t0，则判断当前违停的累积违停时间tw＝tn-tf是否大于临停车区域的限制时间的分钟数，若大于则将帧图像p添加到所述违停车辆证据存储队列，并将车辆违停信息上报至门卫车辆出入闸管理系统，否则，修改当前违停上次被抓拍时间tl＝本次被抓拍时间tn，将帧图像数据加入所述潜在车辆违停证据临时存储队列。

作为一种再进一步优选的技术方案，所述t0为1.5分钟。

作为一种优选的技术方案，所述步骤s5中，当所述违停车辆信息库内有多个违停信息时，计算违停罚款最大数额作为最终罚款数额。

本发明的基于车牌识别和图像方差算法的小区违停告警方法，利用小区内普通摄像头，对主干道上禁止停车或者限制临时时间的区域进行实时监控，更加智能化的将小区内违规停车的车辆信息实时上报到小区车辆出入口的车闸信息系统中，进行违停罚款处理。同时由于普通摄像头下进行车牌识别需要借助云端视频流调曲，所有识别操作在云端进行，受到环境影响例如光线、车牌角度等干扰因素比较大，车牌识别算法比较复杂，频繁调用消耗性能较大，因此本发明采用图像方差进行预处理和过滤，更加高效、快速、低耗能和智能化的对小区内违规停车现象进行实时监测和举证处理，提升小区生活品质和提高小区智能化管理水平。

本发明的基于车牌识别和图像方差算法的小区违停告警方法中图像灰度图方差算法运行效率远高于车牌识别的效率，因此首先通过图像灰度图检测区域方差算法进行疑似车辆在限定最可停车时间的临停车区域进行初步检测，若发现疑似车辆，则对视频监控的获取的该帧图像进行车牌识别，若识别出车牌信息，则将对该车牌在限时临停区域进行停车时间计算，若超过临停限制时间，则将该车车牌信息推动到小区的车辆进出口系统，当车辆经过小区车辆出入车闸处，不予通行，提示缴纳违停罚款和累计停车时长信息，并展示一张违停图片。

附图说明

图1为本发明基于车牌识别和图像方差算法的小区违停告警方法的流程框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义，“多种”一般包含至少两种，但是不排除包含至少一种的情况。

应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的商品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的商品或者系统中还存在另外的相同要素。

如图1所示，本发明的一种基于车牌识别和图像方差算法的小区违停告警方法，包括以下步骤：s1、在小区摄像头拍摄区域内划定车辆违停监测区域，在摄像头成像相片内将车辆违停监测区域进行圈定；s2、在所述车辆违停监测区域正常情况下，获取一张照片p0作为对比底图；对p0进行灰度处理得到灰度图p0_gray；s3、每隔n帧实时对摄像头的帧图像p与对比底图p0检测区域进行均方差err计算；s4、若err大于8，对帧图像p进行车牌识别，确认车辆违停信息并进行处理，将车辆违停信息上报至门卫车辆出入闸管理系统；若err小于等于8，则返回步骤s3；s5、所述门卫车辆出入闸管理系统收到车辆违停信息后，将违停车辆录入违停车辆信息库并计算违停罚款数额；当违停车辆缴纳罚款并通过车闸后，所述门卫车辆出入闸管理系统将该车辆的违停信息移存至历史违停处罚记录。

为了保证地图p0可以反映出车辆违停监测区域的真实图形信息，提高图像处理的准确性，作为优选方案，所述步骤s3之后还包括以下步骤s6：记上一次底图更新时间为t0，若检测到某一帧图像p的对别均方差err小于1，且此时时间t满足t-t0＞60s，则将底图p0替换为p，对底图进行更新。

在实际应用中步骤s6涉及到对均方差err的判断，步骤s4也涉及到对均方差err的判断，因此，步骤s6可以与步骤s4同步进行，也可以先于或晚于步骤s4进行，同时，由于对均方差err的取值要求不同，应当知晓，步骤s4与步骤s6是择一进行的。

底图p0的灰度图p0_gray为p0图像中h*w的二维数组。

对于步骤s3中对摄像头的帧图像p与对比底图p0检测区域进行均方差err计算的步骤为：s31、设置帧图像p的图像像素为h*w*3，对帧图像p进行灰度处理后得到帧图像p的灰度图p_gray；s32、检测区域的四个点坐标d1(x1，y1)，d2(x2，y2)，d3(x3，y3)，d4(x4，y4)所形成的四边形圈定区域a；s33、设定帧图像像素差临界值为temp，则计算灰度图p0_gray和p_gray在区域a上的像素方差err，计算公式为：其中，(h,w)∈a且p_gray(h,w)-p0_gray(h,w)＞temp。

上述p_gray为帧图像p的图像信息中h*w的二维数组。

在所述步骤s4内所述确认车辆违停信息并进行处理步骤之前，还包括步骤s7：设置违停车辆信息登记字典。步骤s7可以在步骤s4之前的任一时间进行，也即可以在步骤s1、s2、s3、s4任一步骤之前。

所述违停车辆信息登记字典内可以包括信息有：车牌号、违停状态、当前违停初始被抓拍时间tf、当前违停上次被抓拍时间tl、累计违停时间tw、违停车辆证据存储队列、潜在车辆违停证据临时存储队列。

在实际应用中，违停车辆信息登记字典结构如下：car_illegel_lane_dic＝{车牌号：{违停状态：(ture/false)；当前违停初始被抓拍时间tf：t_first_time：****-**-****:**:**(年-月-日时-分-秒)；当前违停上次被抓拍时间tl：t_last_time：****-**-****:**:**(年-月-日时-分-秒)；累计违停时间tw：t_illegel_lane_durationg:***(分)；违停车辆证据存储路径(**/**/车牌号_第一次被抓拍时间(t_first_time)_摄像头ip.npy)}}。由于同一辆车辆相邻两次被抓拍并记录和保存违停信息的时间间隔至少为1分钟，潜在车辆违停视频证据临时存储队列frame_queue，队列长度为临停车区域的限制时间的分钟数limit_minute_max。

此时，步骤s4具体包括以下步骤：s41、对帧图像p进行车牌识别，识别出完整车牌信息；s42、判断所述车牌信息是否存在于所述违停车辆信息登记字典内，若不存在，在所述违停车辆信息登记字典内建立该车牌信息，并将帧图像数据加入所述潜在车辆违停证据临时存储队列；之后执行步骤s43；若存在，执行步骤s43；s43、获取该车牌信息在所述违停车辆信息登记字典内的当前违停上次被抓拍时间tl；若本次被抓拍时间tn-tl>t0，则将tl之前违停信息保存，重新开始当前违停计时，所述当前违停初始被抓拍时间tf、所述当前违停上次被抓拍时间tl均修改为tn，将帧图像p添加到所述潜在车辆违停证据临时存储队列；若本次被抓拍时间tn-tl≤t0，则判断当前违停的累积违停时间tw＝tn-tf是否大于临停车区域的限制时间的分钟数，若大于则将帧图像p添加到所述违停车辆证据存储队列，并将车辆违停信息上报至门卫车辆出入闸管理系统，否则，修改当前违停上次被抓拍时间tl＝本次被抓拍时间tn，将帧图像数据加入所述潜在车辆违停证据临时存储队列。

在步骤ss42中，若车牌信息不存在于违停车辆信息登记字典内，则将该车辆信息根据字典license_plate_information结构，将对应信息添加进去，该车辆信息被视为潜在违停车辆，作为潜在违停车辆其车牌信息被创建license_plate_information_frame_queue.create(limit_minute_max)，并且执行license_plate_information_frame_queue.put(p),即将图片数据加入队列。

步骤s43中，当tn-tl≤t0时，将该帧图像添加到该车辆的违停视频证据临时存储队列license_plate_information_frame_queue.put(p)，后判断判断当前违停的累积违停时间tw＝tn-tf是否大于临停车区域的限制时间的分钟数。若大于则将该license_plate_information_frame_queue队列中的帧存储在违停车辆视频存储路径(**/**/车牌号_第一次被抓怕时间(t_first_time)_摄像头ip.npy)内作为证据，并将车辆违停信息上报至门卫车辆出入闸管理系统。否则，修改当前违停上次被抓拍时间tl：t_last_time＝本次被抓拍时间tn：time.time，将帧图像数据加入所述潜在车辆违停证据临时存储队列license_plate_information_frame_queue.put(p)。

在实际应用中，t0可以设定为1.5分钟。当然也可以根据需求，设定为其他数值。

由于同一车辆在车辆车闸系统可能会录入多个违停信息，车辆出入口关系统收到车辆违停信息上报后，将违停车辆录入违停车辆信息库，并根据摄像头ip计算违停罚款最大数额作为惩罚最终数额，当违停车辆缴纳完罚款并通过车闸后，车闸系统将会把系统内所有有关该车辆的违停信息移存到历史违停处罚记录内。

本发明的基于车牌识别和图像方差算法的小区违停告警方法，利用小区内普通摄像头，对主干道上禁止停车或者限制临时时间的区域进行实时监控，更加智能化的将小区内违规停车的车辆信息实时上报到小区车辆出入口的车闸信息系统中，进行违停罚款处理。同时由于普通摄像头下进行车牌识别需要借助云端视频流调曲，所有识别操作在云端进行，受到环境影响例如光线、车牌角度等干扰因素比较大，车牌识别算法比较复杂，频繁调用消耗性能较大，因此本发明采用图像方差进行预处理和过滤，更加高效、快速、低耗能和智能化的对小区内违规停车现象进行实时监测和举证处理，提升小区生活品质和提高小区智能化管理水平。

本发明的基于车牌识别和图像方差算法的小区违停告警方法中图像灰度图方差算法运行效率远高于车牌识别的效率，因此首先通过图像灰度图检测区域方差算法进行疑似车辆在限定最可停车时间的临停车区域进行初步检测，若发现疑似车辆，则对视频监控的获取的该帧图像进行车牌识别，若识别出车牌信息，则将对该车牌在限时临停区域进行停车时间计算，若超过临停限制时间，则将该车车牌信息推动到小区的车辆进出口系统，当车辆经过小区车辆出入车闸处，不予通行，提示缴纳违停罚款和累计停车时长信息，并展示一张违停图片。

综上所述仅为本发明较佳的实施例，并非用来限定本发明的实施范围。即凡依本发明申请专利范围的内容所作的等效变化及修饰，皆应属于本发明的技术范畴。