专利名称：一种具有对目标的辅助监测功能的视频监控方法及系统的制作方法
技术领域：
本发明涉及计算机视觉领域的安全监控技术，尤其涉及一种视频监控方 法及系统。
背景技术：
现代城市中的轨道交通是一种非常便利的交通方式，它不受天气和交通 状况的影响，可以载乘客按时到达目的地，因此人们都非常喜欢选择轨道交 通作为出行方式。但是，由于城市人口众多，多数人又都希望按时到达目的 地，因此使得轨道交通的客流量非常大。通常在站台上，特别是上车下车的 屏蔽门处，更是人群拥挤之处，同时也是最容易造成安全事故的地方。用安 全员来进行人为管理，需要消耗人的大量精力，而且由于人群拥挤，容易忽 略一些看不到的情景。
现有的人流统计系统主要是利用在现场安装传感器来进行测量统计，这 样的装置在类似轨道交通这种场景下安装非常不方{更，卩吏用和维护的耗资也 比较大，而且人流过大时，统计也不准确。
对于其他公众，例如商场、公园门口和某些通道出入口也存在类似的问 题。而除了人以外，对车辆等其他运动目标，也有类似的问题。
发明内容
本发明所要解决的技术问题是提供一种具有对目标的辅助监测功能的视 频监控方法及系统，能够智能化地辅助安全管理员进行管理，从而有效地减 少安全隐患，同时能够节省大量的管理人力。
为了解决上述技术问题，本发明提供了一种具有对目标的辅助监测功能的视频监控方法，包括以下步骤
(a) 对目标区域图像进行采集；
(b) 对目标区域图像中的监测目标进行识别和跟踪处理，获取监测目标 的数目和/或运动信息；
(c )根据获取的监测目标的数目和/或运动信息进行人流状况综合统计 及分析。
进一步地，步骤(b)分为以下步骤
背景建模，对目标区域图像进行过滤，得到背景图像并进行更新；
获取监测目标图像，从当前帧图像中减去当前背景图像并根据相减后得 到的像素点的差分值选择监测目标图像的像素点，获取作为前景的监测目标 图像；
识别和跟踪，先对监测目标图像中的监测目标进行识别，然后对识别出 的监测目标进行跟踪。
进一步地，在进行背景建才莫时，是对目标区域图像进行多帧中值滤波， 并且判断中值变化是否超过一预设的阈值，如果没有超过，则将滤波后的图 像更新为新的背景图像，如果超过，则不对背景图像进行更新。
进一步地，在获取监测目标图像时，从当前帧图像中减去当前背景图像， 对图像上的每一像素点，先对相减后的差分值进行加权值变换，再判断变换 后的值是否大于一预设的阈值，如果大于，则判定其为监测目标图像中的像 素点，对各像素点处理完后，再采用形态学的腐蚀膨胀方法进一步消除其中 的噪声及目标千扰，得到监测目标图像。
进一步地，对监测目标进行识别和跟踪时，先对监测目标图像中的监测 目标进行识别，获取图像中监测目标的数目并与一设定的阈值进行比较，当 大于或大于等于该阈值时，采用均值迁移方法对监测目标图像中的运动目标 进行跟踪分析，否则用多个椭圆近似所有的前景目标进行跟踪分析，跟踪分 析后获取监测目标的运动信息。
进一步地，
步骤(c)进行综合统计及分析后，如符合设定的报警条件则进行报警，包"^"以下处理中的 一种或多种
将监测目标的数目信息与预设的一人流报警阈值进行比较，如超过该阔 值即通知报警装置进行净艮警；
根据监测目标的运动信息并判断是否有异常行为发生，包括根据监测 目标的运动方向判断是否有逆行情况发生，和/或根据监测目标所在位置判断 是否有人进行危险区域，如有异常行为发生则进行报警。
进一步地，在获取监测目标图像时，对差分值进行加权值变换的公式如
下
<formula>formula see original document page 9</formula>)
式中
i表示图像坐标点；
A表示第i坐标点的前景值；
5,.表示第i坐标点的背景值；
cr表示抗噪平滑参数，通常根据图像噪声大小确定; exp表示为指数运算符。
本发明提供的一种具有对目标的辅助监测功能的视频监控系统，包括依 次连^:的数据采集装置、初始处理装置、综合统计分析装置以及^L警装置， 其中
数据采集装置，由一组摄像头组成，用于拍摄目标区域的图像并输出到 相应的初始处理装置。
初始处理装置，用于对收到的目标区域图像进行监测目标即人的识别和 跟踪处理，并得到的监测目标信息并输出到综合统计分析装置；
综合统计分析装置，用于才艮据收到的监测目标信息对监测目标进行各种 行为分析。进一步地，初始处理模块包括依次连接的背景建模单元、前景目标检测
单元以及目标跟踪单元，其中
背景建模单元用于对目标区域图像进行过滤，得到背景图像并进行更新；
前景目标检测单元用于从当前帧图像中减去当前背景图像并根据相减后 得到的像素点的差分值选择监测目标图像的像素点，获取作为前景的监测目 标图像；
目标跟踪单元用于先对监测目标图像中的监测目标进行识别，然后对识 别出的监测目标进行跟踪。
进一步地，背景建模单元在进行背景建模时，是对目标区域图像进行多 帧中值滤波，并且判断中值变化是否超过一预设的阈值，如杲没有超过，则 将滤波后的图像更新为新的背景图像，如杲超过，则不对背景图像进行更新。
进一步地，前景目标检测单元进一步包括
初始目标获取子单元，用于接收运动区域图像和背景图像，从当前帧图 像中减去当前背景图像后，对获取的两幅图像上的每一像素点，先对相减后 的差分值进行加权值的变换，再判断变换后的值是否大于或大于等于一预设 的阈值，只在该条件成立时，将该像素点作为监测目标图像中的像素点，对 各像素点处理完后输出得到的监测目标图像；
噪声及干扰消除子单元，用于接收初始目标获取子单元输出的所述监测 目标图像，采用形态学的腐蚀膨胀方法进一步消除其中的噪声及目标干扰后， 作为监测目标图像输出到目标跟踪单元。
进一步地，目标跟踪单元进一步包括
流量判定子单元，用于根据对收到的监测目标图像中的监测目标进行识 别，获取图像中监测目标的数目并与一设定的阈值进行比较，当大于或大于 等于该阈值时，触发小流量目标跟踪子单元进行处理，否则，触发大流量目 标跟踪子单元进行处理，同时将监测目标的数目信息发送到综合统计分析装 置；
小流量目标跟踪子单元，用于釆用均值迁移方法对监测目标图像中的运 动目标进行跟踪分析，获取监测目标的运动信息并发送到综合统计分析装置；大流量目标跟踪子单元，用于采用前景目标椭圓化方法，即用多个椭圓 近似所有的前景目标进行跟踪分析，获取监测目标的运动信息并发送到综合
i
统计分析装置。
进一步地，本发明的系统还包括#^警装置，其中
综合统计分析装置进行行为分析后，如判断符合设定条件时，通知该净艮 警装置；
所述:J艮警装置，用于在收到所述通知后进行净艮警。
进一步地，本发明的系统还包括一报警装置，且综合统计分析装置进一 步包括
流量分析单元，用于接收监测目标的数目信息，与预设的一人流"^艮警阈 值进行比较，如超过该阔值即通知报警装置进行报警并指示报警原因为监测 目标的流量过大；
异常行为分析单元，用于接收监测目标的运动信息并判断是否有异常行 为发生，包括根据监测目标的运动方向判断是否有逆行情况发生，和/或根据 监测目标所在位置判断是否有人进行危险区域，如有异常行为发生时通知报 警装置进行纟艮警并指示有异常行为；
小流量目标跟踪子单元和大流量目标跟踪子单元获取的监测目标的运动 信息包括监测目标的位置信息和/或运动方向信息。
进一步地，该视频监控系统为轨道交通站台的视频监控系统，所述目标 区域包括上下车门处，所迷监测目标为人。
本发明能够智能化地辅助安全管理员进行管理，从而有效地减少安全隐 患，同时能够节省大量的管理人力。进一步地，通过独特的背景更新机制， 对轨道交通站台、商场门口、通道门口等等人流量很大的场景的应用更可靠； 另外针对不同人流量区分进行目标跟踪处理，既简化了现有的过于细化的跟 踪算法，也〗吏得处理效果更佳。
图1为本发明实施例视频监控系统的结构框图2为图1中初始处理装置的单元框图3为本发明实施例视频监控方法的流程图。
具体实施例方式
本发明采集目标区域的图像后进行目标检测和跟踪处理，并根据检测及 跟踪结果对监测目标进行各种行为分析，当分析出异常状况时，通过才艮警装 置发出相应的报警信号，以提示安全管理人员涉入管理。
下面以轨道交通站台的视频监控系统为例，结合附图对本发明的^t支术方 案进行更详细的阐述。
如图1所示，为本发明实施例的结构才匡图。该系统包括依次连接的数据 采集装置、初始处理装置、综合统计分析装置以及报警装置；其中
数据采集装置，由一組摄像头(1 N)组成，该组摄像头安装在各自对 应的目标区域的上方， 一般采用俯拍方式，用于拍摄目标区域如上下车门处 或一些禁止区域内的图像并输出到相应的初始处理装置。
初始处理装置，由对应于N个掘J象头的一组初始处理^^莫块组成，用于对 收到的目标区域图像进行监测目标即人的识别和跟踪处理，并得到的监测目 标信息如监测目标的数量、运动方向等输出到综合统计分析装置；
综合统计分析装置，用于根据收到的监测目标信息对监测目标进行各种 行为分析并在符合预定条件时通知报警装置，如有人逆行时，人流量过大时， 危险区域中有人时等等。
报警装置，用于在收到通知后进行报警，以提醒安全管理员涉入管理。
图2给出了本发明的上述系统的初始处理装置中的各个初始处理模块的 框图。该初始处理才莫块100包括依次连接的背景建才莫单元110、前景目标检 测单元120以及目标跟踪单元130，其中
背景建才莫单元110，用于对目标区域图像进行多帧中值滤波，并且判断中值变化是否超过一预设的阈值，如果没有超过，则将滤波后的图像更新为 新的背景图像，并输出到前景目标检测模块，如果超过，则对不对背景图像
进行更新。
所谓多帧中值滤波即对图像上的各个像素点，根据各帧中的该像素点的 值进行排序，以排在中间的像素点的值作为滤波后图像中该像素点的值。由 于站台这种特殊的场景会出现一会人流非常大， 一会人流较少的情况，如果 直接使用多帧中值滤波不是很适合，因为这种更新方式在人流量大且持续时 间较长时会把人当作背景。通过增加一个对应于中值变化的阈值，在中值变 化超过该阈值即变化较大时，说明有人经过，此时并不对背景进行更新，只 有当取得的中值变化不超过这个阈值时才更新背景。
前景目标检测单元120,用于接收运动区域图像和背景图像，从当前帧 图像中减去当前背景图像并根据相减后得到的像素点的差分值选择监测目标 图像的像素点，获取作为前景的监测目标图像。该单元进一步包括
初始目标获取子单元1201，用于接收运动区域图像和背景图像，从当前 帧图像中减去当前背景图像后，对获取的两幅图像上的每一像素点，先对相 减后的差分值进行加权值的变换，再判断变换后的值是否大于或大于等于一 预设的阈值，只在该条件成立时，将该像素点作为监测目标图像中的像素点， 对各像素点处理完后输出得到的监测目标图像。
一种加4又变换的7>式如下
>/2;rcr
2ct2
(1)
式中
i表示图像坐标点；
《表示第i坐标点的前景值；
A表示第i坐标点的背景值；
a表示抗噪平滑参数，通常根据图像噪声大小确定;exp表示为指数运算符。
噪声及干扰消除子单元1202，用于接收所述监测目标图像，采用形态学 的腐蚀膨胀方法进一步消除其中的噪声及目标干扰后，作为监测目标图像输 出到目标跟踪单元。
目标跟踪单元130，用于对收到的监测目标图像中的监测目标即人进行 识别和跟踪，获取监测目标信息如数目、运动方向等发送到综合统计分析装 置。其进一步包括
流量判定子单元1301,用于根据对收到的监测目标图像中的监测目标进 行识别，获取图像中监测目标的数目并与一设定的阈值进行比较，当大于或 大于等于该阈值时，触发小流量目标跟踪子单元1302进^f亍处理，否则，触发 大流量目标跟踪子单元1303进行处理，同时将监测目标的数目信息发送到综 合统计分析装置。
小流量目标跟踪子单元1302，用于采用均值迁移Meanshift方法对监测 目标图像中的运动目标进行跟踪分析，获取监测目标的运动信息如位置信息、 运动方向信息并发送到综合统计分析装置。
大流量目标跟踪子单元1303，用于采用前景目标椭圓化方法，即用多个 椭圓近似所有的前景目标进行跟踪分析，获取监测目标的运动信息并发送到 综合统计分析装置。
综合统计分析装置可以设置在轨道交通总控室内的工控机上，进一步包 ^括以下单元
流量分析单元，用于接收监测目标的数目信息，与预设的一人流冲艮警阈 值进行比较，如超过该阈值即通知报警装置进行报警并指示报警原因为监测 目标的流量过大。
异常行为分析单元，用于接收监测目标的运动信息并判断是否有异常行 为发生，如根据监测目标的运动方向判断是否有逆行情况发生，根据监测目 标所在位置判断是否有人进行危险区域等，在有异常行为发生时通知报警装 置进行^^警并指示有异常行为。
净良警装置，用于在收到上述通知后进行报警，并可给出相应的提示信息，以提醒安全管理员涉入管理。
本实施例视频监控方法的流程如图3所示。该流程包括如下步骤 210:对目标区域图像进行采集；
220:对目标区域图像中的监测目标进行识别和跟踪处理，获取监测目标 的数目和运动信息(或其中之一)；
该步骤可分为背景建模，获取监测目标图像，以及对监测目标进行识别 和跟踪等处理，其中
背景建才莫时，是对目标区域图像进行多帧中值滤波，并且判断中值变化 是否超过一预设的阈值，如果没有超过，则将滤波后的图像更新为新的背景 图像，如果超过，则不对背景图像进行更新。
获取监测目标图像时，是从当前帧图像中减去当前背景图像并根据相减 后得到的像素点的差分值选择监测目标图像的像素点，获取作为前景的监测 目标图像。具体地，对图像上的每一像素点，可以先对相减后的差分值进行 加权值的变换，再判断变换后的值是否大于一预设的阈值，如果大于，则判 定其为监测目标图像中的像素点，对各像素点处理完后即可得到监测目标图 像，对该监测目标图像还可以釆用形态学的腐蚀膨胀方法进一步消除其中的 噪声及目标干扰后再用于监测目标的识别和跟踪。
对监测目标进行识别和跟踪时，先对监测目标图像中的监测目标进行识 别，获取图像中监测目标的数目并与一设定的阈值进行比较，当大于或大于 等于该阈值时，采用均值迁移Meanshift方法对监测目标图像中的运动目标进 行跟踪分析，否则用多个椭圓近似所有的前景目标进行跟踪分析，跟踪分析 后需要获取监测目标的运动信息如位置信息、运动方向信息等。
230:根据获取的监测目标的数目和运动信息进行人流状况综合统计及分 析，如符合设定的报警条件则发出相应的报警，提醒安全人员涉入管理。
具体地，可以将监测目标的数目信息与预设的一人流报警阈值进行比较， 如超过该阈值即通知报警装置进行报警；或者根据监测目标的运动信息并判 断是否有异常行为发生，如根据监测目标的运动方向判断是否有逆行情况发生，根据监测目标所在位置判断是否有人进行危险区域等，在有异常行为发 生时通知报警装置进行4艮警并指示有异常行为。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本 领域的技术人员来说，本发明可以有各种更改和变化，譬如本发明的初始处
理装置可以不分单元，通it^各个摄像头识别码ID，来获取各才聂像头采集的 图像数据，并进行相应的初始处理。凡在本发明的精神和原则之内，所作的 任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
权利要求
1.一种具有对目标的辅助监测功能的视频监控方法，包括以下步骤(a)对目标区域图像进行采集；(b)对目标区域图像中的监测目标进行识别和跟踪处理，获取监测目标的数目和/或运动信息；(c)根据获取的监测目标的数目和/或运动信息进行人流状况综合统计及分析。
2. 如权利要求l所述的方法，其特征在于，步骤(b)进一步分为以下步骤背景建模，对目标区域图像进行过滤，得到背景图像并进行更新；获取监测目标图像，从当前帧图像中减去当前背景图像并根据相减后得 到的像素点的差分值选择监测目标图像的像素点，获取作为前景的监测目标 图像；识别和跟踪，先对监测目标图像中的监测目标进行识别，然后对识别出 的监测目标进行跟踪。
3. 如权利要求2所述的方法，其特征在于在进行背景建才莫时，是对目标区域图像进行多帧中值滤波，并且判断中 值变化是否超过一预设的阈值，如果没有超过，则将滤波后的图像更新为新 的背景图像，如果超过，则不对背景图像进行更新。
4. 如权利要求2所述的方法，其特征在于在获取监测目标图像时，从当前帧图像中减去当前背景图像，对图像上 的每一像素点，先对相减后的差分值进行加权值变换，再判断变换后的值是 否大于一预设的阈值，如果大于，则判定其为监测目标图像中的像素点，对 各像素点处理完后，再采用形态学的腐蚀膨胀方法进一步消除其中的噪声及 目标干扰，得到监测目标图像。
5. 如权利要求2所述的方法，其特征在于对监测目标进行识别和跟踪时，先对监测目标图像中的监测目标进行识 别，获取图像中监测目标的数目并与一设定的阈值进行比较，当大于或大于 等于该阈值时，采用均值迁移方法对监测目标图像中的运动目标进行跟踪分 析，否则用多个椭圓近似所有的前景目标进行跟踪分析，跟踪分析后获取监 测目标的运动信息。
6. 如权利要求1至5中任一权利要求所述的方法，其特征在于步骤(c)进行综合统计及分析后，如符合设定的报警条件则进行报警， 包才舌以下处理中的 一种或多种将监测目标的数目信息与预设的一人流报警阈值进行比较，如超过该阈 值即通知报警装置进行纟艮警；根据监测目标的运动信息并判断是否有异常行为发生，包括根据监测 目标的运动方向判断是否有逆行情况发生，和/或根据监测目标所在位置判断 是否有人进行危险区域，如有异常行为发生则进行报警。
7. 如权利要求4所述的方法，其特征在于，在获取监测目标图像时， 对差分值进行加权值变换的公式如下<formula>formula see original document page 3</formula>(1)式中i表示图像坐标点；x,.表示第i坐标点的前景值；A表示第i坐标点的背景值；CT表示抗噪平滑M，通常根据图像噪声大小确定；exp表示为指数运算符。
8. —种具有对目标的辅助监测功能的视频监控系统，其特征在于，包 括依次连接的数据采集装置、初始处理装置、综合统计分析装置以及才艮警装置，其中所述数据采集装置，由一组摄像头组成，用于拍摄目标区域的图像并输 出到相应的初始处理装置。所述初始处理装置，用于对收到的目标区域图像进行监测目标即人的识 别和跟踪处理，并得到的监测目标信息并输出到综合统计分析装置；所述综合统计分析装置，用于根据收到的监测目标信息对监测目标进行 各种行为分析。
9. 如权利要求8所述的视频监控系统，其特征在于，所述初始处理才莫 块包括依次连接的背景建模单元、前景目标检测单元以及目标跟踪单元，其 中所述背景建模单元用于对目标区域图像进行过滤，得到背景图像并进行 更新；所述前景目标检测单元用于从当前帧图像中减去当前背景图像并根据相 减后得到的像素点的差分值选择监测目标图像的像素点，获取作为前景的监 测目标图像；所述目标跟踪单元用于先对监测目标图像中的监测目标进行识别，然后 对识别出的监测目标进行跟踪。
10. 如权利要求9所述的视频监控系统，其特征在于所述背景建模单元在进行背景建模时，是对目标区域图像进行多帧中值 滤波，并且判断中值变化是否超过一预设的阈值，如果没有超过，则将滤波 后的图像更新为新的背景图像，如果超过，则不对背景图像进行更新。
11. 如权利要求9所述的视频监控系统，其特征在于，所述前景目标检 测单元进一步包括初始目标获取子单元，用于接收运动区域图像和背景图像，从当前帧图 像中减去当前背景图像后，对获取的两幅图像上的每一像素点，先对相减后 的差分值进行加权值的变换，再判断变换后的值是否大于或大于等于一预设 的阈值，只在该条件成立时，将该像素点作为监测目标图像中的像素点，对各像素点处理完后输出得到的监测目标图像；噪声及干扰消除子单元，用于接收初始目标获取子单元输出的所述监测 目标图像，釆用形态学的腐蚀膨胀方法进一步消除其中的噪声及目标干扰后， 作为监测目标图像输出到目标跟踪单元。
12. 如权利要求9所述的视频监控系统，其特征在于，所述目标跟踪单 元进一步包^":流量判定子单元，用于根据对收到的监测目标图像中的监测目标进行识 别，获取图像中监测目标的数目并与一设定的阈值进行比较，当大于或大于 等于该阈值时，触发小流量目标跟踪子单元进行处理，否则，触发大流量目 标跟踪子单元进行处理，同时将监测目标的数目信息发送到综合统计分析装 置；小流量目标跟踪子单元，用于采用均值迁移方法对监测目标图像中的运 动目标进行跟踪分析，获取监测目标的运动信息并发送到综合统计分析装置；大流量目标跟踪子单元，用于采用前景目标椭圓化方法，即用多个椭圓 近似所有的前景目标进行跟踪分析，获取监测目标的运动信息并发送到综合 统计分析装置。
13. 如权利要求8至12中任一权利要求所述的视频监控系统，其特征在 于，还包括报警装置，其中所述综合统计分析装置进行行为分析后，如判断符合设定条件时，通知 所述报警装置；所述才艮警装置，用于在收到所述通知后进行才艮警。
14. 如权利要求12所述的视频监控系统，其特征在于，还包括一报警装 置，且所述综合统计分析装置进一步包括流量分析单元，用于接收监测目标的数目信息，与预设的一人流净艮警阈 值进行比较，如超过该阈值即通知报警装置进行报警并指示报警原因为监测 目标的流量过大；异常行为分析单元，用于接收监测目标的运动信息并判断是否有异常行为发生，包括根据监测目标的运动方向判断是否有逆行情况发生，和/或根据 监测目标所在位置判断是否有人进行危险区域，如有异常行为发生时通知报警装置进行^^警并指示有异常行为；所述小流量目标跟踪子单元和大流量目标跟踪子单元获取的监测目标的 运动信息包括监测目标的位置信息和/或运动方向信息。
15.如权利要求8所述的视频监控系统，其特征在于该视频监控系统为轨道交通站台的视频监控系统，所述目标区域包括上 下车门处，所述监测目标为人。
全文摘要
一种具有对目标的辅助监测功能的视频监控方法，包括以下步骤a)对目标区域图像进行采集；b)对目标区域图像中的监测目标进行识别和跟踪处理，获取监测目标的数目和/或运动信息；c)根据获取的监测目标的数目和/或运动信息进行人流状况综合统计及分析。本发明能够智能化地辅助安全管理员进行管理，从而有效地减少安全隐患，同时能够节省大量的管理人力。并且通过独特的背景更新机制，对轨道交通站台、商场门口、通道门口等人流量很大的场景的应用更可靠；针对不同人流量区分进行目标跟踪处理，既简化了现有的过于细化的跟踪算法，也使得处理效果更佳。
文档编号G08B21/02GK101320427SQ20081011599
公开日2008年12月10日 申请日期2008年7月1日 优先权日2008年7月1日
发明者谌安军 申请人:北京中星微电子有限公司