专利名称：一种基于自适应双背景模型的视频禁停事件检测方法
技术领域：
本发明属智能型影像监控技术(IVS)视频目标自动检测和跟踪领域，特别是涉及一种基于自适应双背景模型的视频禁停事件检测方法。
背景技术：
传统的事件检测监控方式完全依赖监控中心的操作人员进行画面监控。有实验数 据表明，在经过22分钟监控后，监控人员可能错过高达95%的画面所发生的事件。面对日 益庞大的监控内容，在监控人员责任心、工作状态等各种因素的影响下，传统人为监控系统 往往存在漏报率高、响应速度慢及可靠性差等问题，整个视频监控系统的有效性无法得到 保证。由于监控系统越来越庞大，如果全部采用人为监控，其人力成本也会非常高昂。而智 能型影像监控技术(IVS)起源于计算机视觉技术(computer vision)，它对影像进行分析， 从影像中提取信息，发现感兴趣事件，从而可以在某些场合替代人为监控或者协助人为监 控。在911事件以后，国际上基于反恐的形势，对于IVS的需求越来越迫切，视频禁停事件 检测作为视频智能事件检测技术的重要应用之一，有十分广泛的应用。例如候机厅、候车室 的可疑包裹检测，停机坪非法放置物检测，以及交通领域的违章禁停检测等。基于视频技术 的禁停事件检测具备全天候运行、自动实时报警的能力，有巨大的经济价值和社会价值。一 般传统视频分析技术的主要对象是移动目标，难以实现较为准确的停留目标检测和处理移 动目标与停留目标交融的情况。因此，本研究根据层次背景模型思想，构建自适应长短效双 背景模型，设计快速的目标检测与跟踪方法，通过静动目标的长效跟踪，来实现禁停事件的 自动实时检测和告警。在国内到目前为止，尚未检索到类似技术或相关专利报道。
发明内容
本发明的目的提供一种基于自适应双背景模型的视频禁停事件检测方法，设计与 构建自适应长短效双背景模型，设计快速的目标检测与跟踪方法，通过静动目标的长效跟 踪，来实现禁停事件的自动检测禁停并实时告警，以克服传统技术之不足。实现本发明之目的的技术解决方案措施如下一种基于自适应双背景模型的视频禁停事件检测方法，在视频信号采集的基础上 对场景内的情况进行智能化监视，包括目标检测、目标跟踪、事件分析其特征在于包括如下 步骤(1)长短效背景模型的初始化基于混合高斯模型和背景区域划分思想，进行长短 效背景模型的子单元划分、子单元混合高斯模型初始；(2)BLOB目标检测、停留目标、鬼影目标检测与长短效背景更新，停留目标区域及 时更新到短效背景中，长效背景进行非运动区域选择性更新，以适应光照的缓慢变化；通过 鬼影判断，来发现停留目标离开原有的位置，用于实现对相应短效背景区域做精确更新；(3)启发式方法的BLOB快速目标跟踪，为保证运动目标跟踪的适应性，设计快速 的启发式方法，根据位置优先的几何特征关联法则，来跟踪并判定目标的位置、速度；判定是否支持静止目标跟踪？如果不支持，进入PBlob Tracker运动目标跟踪，如果支持，进入 PBlob Tracker动静目标跟踪；(4)禁停事件检测与输出告警，在完成停留目标的检测基础上，停留目标的几何特 征、停留时间、停留区域符合告警条件时，则进行声光电告警，对应告警事件记录入库； (5)长短效背景模型选择性更新，针对运动，刚静止、刚运动和光照变化，选择性更 新长短效背景模型。所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特征在于，所述 的长短效背景模型的初始化、BLOB目标检测采用设计各类BLOB区域的系统性判定方法实 现目标的快速检测。所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特征在于，所述 的停留目标、鬼影目标检测与长短效背景更新，包括停留目标的检测判定，停留目标跟踪尝 试期间，根据该目标的几何特征，精确更新到短效背景中，同时需要对尝试停留目标进行运 动目标关联，若未达到尝试要求，则纠正短效背景，同时转入运动目标跟踪；短、长效背景差 输出的目标为停留目标输出结果，长效背景不进行运动区域的更新，其他区域和短效背景 一样，执行混合高斯背景模型更新，以适应光照的缓慢变化。所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特征在于，所述 的启发式方法的BLOB快速目标跟踪，包括设计快速的启发式方法来保证跟踪的实时性，检 测出的BLOB区域属于哪个目标，根据位置最近优先的匹配原则，建立高斯分布似然函数， 根据连续两帧计算t时刻的目标速度。所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特征在于，所述 的包括停留目标的检测判定，依据两个因素目标在连续帧中的运动速度小于给定阈值； 帧差法确定的目标连续自然运动种子点数小于给定阈值，即停留目标的检测准则速度小 于给定阈值，自然运动种子数小于阈值。需要强调的是传统混合高斯或其改进型背景模型，主要是针对运动目标检测，不 能同时检测出运动目标和静止目标。而本方案在结合跟踪的邻帧种子补偿法过滤、选择性 更新策略上具有独到的构思。在双背景模型建立和自适应更新流程上，做了大量的创造性 工作，进一步在具体实施方式
中说明。本发明与已有技术的传统事件检测方法相比，具有如下优点和有益效果(1)基于现有视频监控设备，加入本视频智能检测模块以扩展其功能，实现全天候 运行。可根据用户设定的检测门限，对实时视频进行7X24不间断的分析。(2)相对于传统监控方式而言极大的提高了报警实时性。(3)本发明的可靠性更高，成本更加低廉。(4)大幅节省人力成本。当监控系统规模比较庞大时，传统人工方式需投入更多人 力物力财力，实施本发明则会大幅节省人力代价。
图1是本发明所述的视频禁停事件检测方法全流程示意图。图1. 5是本发明所述的BLOB特征划分示意图。图2是本发明所述的视频禁停事件检测方法流程框图示意图。
图3是传统IVS禁停事件检测流程示意图。图4是本发明所述的背景模型建立和自适应更新流流程框图示意图。图5图(含a、b、c、d、e小图)本发明所述的视频禁停事件检测方法实施例1效 果图。图6 (含a、b、C、d、e、f小图)是本发明所述的视频禁停事件检测方法实施例2效果图。
具体实施例方式参见图1图1. 5图2图3可知，图1是本发明所述的基于双背景模型的视频禁停留 事件全流程，其中长短效背景模型精确快速更新、基于BLOB方法的快速目标检测与跟踪、 鬼影目标精确检测、双背景差停留目标检测是具体关键技术手段。在所述流程中，步骤如 下(1)长短效背景模型的初始化。基于混合高斯模型和背景区域划分思想，进行长短 效背景模型的子单元划分、子单元混合高斯模型初始。(2)BLOB目标检测、停留目标、鬼影目标检测，图1. 5所示的BLOB划分包括运动可 视目标BLOB、阴影BLOB、鬼影BLOB、光照变化BLOB、背景噪声BLOB等。设计各类BLOB区域 的系统性判定方法，来实现目标的快速检测。首先消除光照变化，将像素三原色的变化相关 性考虑到背景减除里，同时通过计算小块区域的光照变化特性来进一步处理。接着，计算邻 帧差作为前景运动种子，对获取的差分粗前景BLOB进行八连通标记，计算每个标记块的运 动种子数，并判定连通体内运动种子数符合一定阈值来判定是否为真实运动前景BLOB。考 虑部分目标BLOB运动缓慢，帧间差几乎没有种子，设计通过对跟踪BLOB的质心预测位置进 行种子补偿来消除这种错误。停留目标的检测判定，依据两个因素目标在连续帧中的运动速度小于给定阈值； 帧差法确定的目标连续自然运动种子点数小于给定阈值。停留目标跟踪尝试期间，根据该 目标的几何特征，精确更新到短效背景中，同时需要对尝试停留目标进行运动目标关联，若 未达到尝试要求，则纠正短效背景，同时转入运动目标跟踪。短、长效背景差输出的目标为 停留目标输出结果。长效背景不进行运动区域的更新，其他区域和短效背景一样，执行混合 高斯背景模型更新，以适应光照的缓慢变化。停留目标区域及时更新到短效背景中，长效背景进行非运动区域选择性更新，以 适应光照的缓慢变化；通过鬼影判断，来发现停留目标离开原有的位置，用于实现步骤5对 相应短效背景区域做精确更新；(3)启发式方法的BLOB快速目标跟踪，为保证运动目标跟踪的适应性，设计快速 的启发式方法，根据位置优先的几何特征关联法则，来跟踪并判定目标的位置、速度；判定 是否支持静止目标跟踪？如果不支持，进入PBlob Tracker运动目标跟踪，如果支持，进入 PBlob Tracker动静目标跟踪；设计快速的启发式方法来保证跟踪的实时性。每个目标Oi (t)定义如下要素位 置P(t)、几何特征g(t)、速度v(t)、生命期L(t)、身份标志I (t)、是否静止标志、跟踪状态 (尝试、正常、外推)等。运动目标t时刻位置预测如下 检测出的BLOB区域属于哪个目标，根据位置最近优先的匹配原则，建立高斯分布
似然函数 上式⑵中，。(i=l，2，…,!!！)为t时刻运动目标预测中心位置，Pj = 1,2,…，η
为检测出的观测区域的中心位置。参数σ e
。与Pj位置越近，则的值越
大。考虑观测区域位置P”目标的预测值，t时刻的跟踪结果如下 根据连续两帧，计算t时刻的目标速度。(4)禁停事件检测与输出告警，禁停事件告警需要满足三个方面的要求目标几 何特征的要求；目标的停留时间；目标的停留位置。对于目标的识别，本方法考虑到实时性 的原因，未做要求。有符合禁停告警条件的事件发生时，触发声光电的告警讯号，对应目标 的告警告警事件做做入库处理，以备查询使用。(5)长短效背景模型选择性更新，针对运动，刚静止、刚运动和光照变化，选择性更 新背景模型。包括填充绘制运动BLOB、刚静止BLOB、刚运动BLOB和光照变化重建，根据不 同类型实现mLongBG短效背景模型、mShortBG短效背景模型选择性更新与输出。图3示意的是传统IVS禁停事件检测流程。传统IVS用于禁停事件检测，无法处 理动静目标转换，只能建立运动目标速度和位置跟踪，不能有效解决动静目标的遮挡问题， 不能很好解决长时间、大范围的动静目标有效跟踪。传统IVS用于禁停事件检测，对运动到 场景内静止一段时间的危险停留检测功能非常弱。而本方案的方法，则可以有效解决无约 束条件下的禁停事件检测。图4是本发明所述的背景模型建立和自适应更新流流程框图示意图。从中可知背 景模型在初始帧序列种建立mShortBG短效背景模型、mLongBG短效背景模型及其子单元划 分子单元混合模型初始以及其它主要参数初始如整体背景帧邻近帧等。新输入图像时先判 断停留检测否？如果是No则传统移动目标检测包括混合高斯模型检测、多特征阴影检测、 邻帧种子补偿法过滤。如果是Yes则mShortBG运动检测包括处理光照变化检测、多特征阴 影消除邻帧种子补偿法过滤；mLongBe停留检测包括处理真实运动种子判断、鬼影检测、停 留前景检测，双背景模型选择性更新包括处理Blob、运动、刚静止、刚运动、光照变化重建， 并根据不同类型实现mShortB6选择性更新和mLongBG选择性更新。图5为鬼影检测的实施例，其中(a)中三轮车为停留，(b)为三轮车已离开原有位 置，(c)为未消除ghost的短效背景(传统混合高斯也有此特性)，(d)为传统方法未消除 ghost的前景，(e)本方法消除ghost的前景。停留目标离开原有的位置，目标检测会出现图5 (d)的错误目标，对于这样的鬼影目标，依据三个因素来判定尝试的静止目标与长效 背景差的自然种子点小于一定阈值；该目标的几何特征与附近无关联运动目标相匹配；该 目标的纹理特征与附近运动目标相匹配。鬼影一旦判定，则从长效背景中纠正错误的短效 背景区域。
图6为禁停事件检测的又一实施例，图中(a)为包含非法停留的输入帧及处理结 果显示，(b)为未加停留目标检测的前景，(c)为本方法进行停留目标检测后的结果，(d)为 短效背景，(e)为停留目标检测，(f)为运动前景。从图6可以看出，若没有进行停留目标检 测，图中(b)的三轮车与过往的行人粘和在一起，而进行停留目标检测之后的(c)则避免了 粘和，从而在(a)中实现了目标BLOB的连续跟踪。从图(a)看出，停留目标的检测，还能部 分解决单视图下的遮挡。从图6可以看出，本发明的停留目标检测完整性也比较好。
权利要求
一种基于自适应双背景模型的视频禁停事件检测方法，在视频信号采集的基础上对场景内的情况进行智能化监视，包括目标检测、目标跟踪、事件分析其特征在于包括如下步骤(1)长短效背景模型的初始化，基于混合高斯模型和背景区域划分，进行长短效背景模型的子单元划分、子单元混合高斯模型初始；(2)BLOB目标检测、停留目标、鬼影目标检测，停留目标区域及时更新到短效背景中，长效背景进行非运动区域选择性更新，以适应光照的缓慢变化；通过鬼影判断，来发现停留目标离开原有的位置，用于实现对相应短效背景区域做精确更新；(3)启发式方法的BLOB快速目标跟踪，为保证运动目标跟踪的适应性，设计快速的启发式方法，根据位置优先的几何特征关联法则，来跟踪并判定目标的位置、速度；判定是否支持静止目标跟踪？如果不支持，进入PBlob Tracker运动目标跟踪，如果支持，进入PBlob Tracker动静目标跟踪；(4)禁停事件检测与输出告警，在完成停留目标的检测基础上，停留目标的几何特征、停留时间、停留区域符合告警条件时，则进行声光电告警，对应告警事件记录入库；(5)长短效背景模型选择性更新，针对运动，刚静止、刚运动和光照变化，选择性更新长短效背景模型。
2.根据权利要求1所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特 征在于，所述的长短效背景模型的初始化、BLOB目标检测采用设计各类BLOB区域的系统性 判定方法实现视频目标的快速检测。
3.根据权利要求1所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特 征在于，所述的启发式方法的BLOB快速目标跟踪，包括设计快速的启发式方法来保证跟踪 的实时性，判定检测出的BLOB区域属于哪个目标，根据位置最近优先的匹配原则，建立高 斯分布似然函数，根据连续两帧计算t时刻的目标速度。
4.根据权利要求1所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特 征在于，所述的停留目标、鬼影目标检测与长短效背景模型选择性更新，包括停留目标的检 测判定，停留目标跟踪尝试期间，根据该目标的几何特征，精确更新到短效背景中，同时对 尝试停留目标进行运动目标关联，若未达到尝试要求，则纠正短效背景，同时转入运动目标 跟踪；短、长效背景差输出的目标为停留目标输出结果，长效背景不进行运动区域的更新， 其他区域和短效背景一样，执行混合高斯背景模型更新，以适应光照的缓慢变化。
5.根据权利要求4所述的一种基于自适应双背景模型的视频禁停事件检测方法，其特 征在于，所述的包括停留目标的检测判定，依据两个因素目标在连续帧中的运动速度小于 给定阈值；帧差法确定的目标连续自然运动种子点数小于给定阈值，即停留目标的检测准 则速度小于给定阈值，自然运动种子数小于阈值。
全文摘要
本发明公开了一种基于自适应双背景模型的视频禁停事件检测方法，属智能型影像监控技术(IVS)视频目标自动检测和跟踪领域。设计与构建自适应长短效双背景模型，设计快速的目标检测与跟踪方法，通过静动目标的长效跟踪，来实现禁停事件的自动检测禁停并实时告警，以克服传统技术之不足。其步骤包括(1)长短效背景模型的初始化；(2)BLOB目标检测、停留目标、鬼影目标检测与长短效背景更新；(3)启发式方法的BLOB快速目标跟踪；(4)禁停事件检测与输出告警；(5)长短效双背景模型选择性更新。相对于传统监控方式而言极大的提高了报警实时性，智能型影像监控可靠性更高，成本更加低廉。
文档编号G06T7/20GK101848369SQ20091021654
公开日2010年9月29日 申请日期2009年12月4日 优先权日2009年12月4日
发明者吴岳洲, 熊运余, 王守厚, 陈延涛, 鲁书贤 申请人:四川川大智胜软件股份有限公司