基于时空聚类的动目标检测方法与流程

1.本发明属于运动目标探测技术领域，提出了一种快速区分动态目标和静态目标的目标提取算法。


背景技术：

2.动目标检测是指在指定区域能识别图像的变化，检测运动目标的存在并避免光线变化带来的干扰。运动检测如mpeg1是对编码后产生的关键帧进行比较分析。原理是将图像序列分为关键帧(i)，预测帧(p帧)和双插内向帧(b帧)。对编码的数据进行处理比较。数据处理的常用的方法包括：
3.(1)背景减法：背景减法是一种最常用的方法，利用当前图像与背景图像的差分检测运动区域。它一般能够提供最完全的特征数据，但对于动态场景的变化，如光照和外来干扰比较敏感。
4.(2)时间差分：时间差分是在连续的图像序列中采用基于像素的时间差分并且阈值化来提取图像中的运动区域。时间差分对动态环境有较强的适用性，但一般不能完全提取出所有相关的特征像素点，无法对不同的目标进行区分。
5.(3)光流：基于光流方法的运动检测采用了运动目标随时间变化的光流特性，该方法的优点是在摄像机运动存在的前提下也能检测出独立的运动目标。然而，该方法抗噪性能差。
6.运动检测的其他方法，如运动向量检测法，适合于多维变化的环境，是某一方向的运动对象更加突出的显示出来，但也对无规则运动物体的检测有一定的局限性。
7.总之，现有技术存在的问题是：抗噪性能差、无法对不同的目标进行区分、算法复杂度高。


技术实现要素：

8.本发明的目的在于提供一种基于时空聚类的动目标检测方法，能够兼顾计算速度和检测稳定性，从图像序列中快速区分动态目标和静态目标，并对动态目标进行跟踪以确定目标在图像中的位置。
9.实现本发明目的的技术解决方案为：
10.一种基于时空聚类的动目标检测方法，包括如下步骤：
11.(10)图像特征点提取：在初始帧对目标进行角点检测，提取图像特征点；
12.(20)特征点航迹关联：对提取到的图像特征点进行跟踪检测，并用航迹进行关联；
13.(30)航迹位移量聚类：根据背景运动与目标运动在图像坐标中位移的不同，通过聚类切割出运动特征点和背景特征点；
14.(40)运动特征点空间聚类：根据不同目标在图像中的空间差异，将同一目标上的特征点航迹进行组合，不同目标上的特征点航迹进行区分，同时记录每个运动目标的航迹状态。
15.本发明与现有技术相比，其显著优点为：
16.1、抗噪性能得到提升：本方法对目标上的特征点进行检测，受到干扰的点会被删除，不影响整体的检测效果。当目标被部分遮挡时，根据未遮挡部分的目标特征实现对目标的持续检测，克服部分目标交汇与遮挡问题。
17.2、多目标识别：该方法对检测到的特征点做精确分类，利用不同目标的空间差异将运动目标分割为不同的个体，可以实现多目标识别。
18.3、算法复杂度低：本方法从工程应用角度，只检测图像中运动目标，不对目标进行具体识别，降低算法复杂度的同时，保证算法稳定性。
19.下面结合附图和具体实施方式对本发明作进一步的详细描述。
附图说明
20.图1是本发明基于时空聚类的动目标检测方法的主流程图。
21.图2是图像特征点提取得到的图像surf角点示例。
22.图3是航迹的速度表示。
23.图4是航迹的位移表示。
24.图5是对背景点和目标点进行时间聚类的区分结果。
25.图6是运动目标切割，区分不同目标。
26.图7是交汇时的航迹判别结果。
具体实施方式
27.如图1所示，本发明基于时空聚类的动目标检测方法，包括如下步骤：
28.(10)图像特征点提取：在初始帧对目标进行角点检测，提取图像特征点；
29.所述(10)图像特征点提取步骤具体为：
30.对初始帧图像做surf角点检测，获取图像初始特征点信息，并获取特征点的surf 特征向量，得到特征点的向量描述。
31.采用surf角点检测，提取图像的所有特征点并记录特征点的特征向量用于与后续图像帧进行匹配。surf角点是sift的加速版，在角点检测过程中使用盒子滤波器对 log滤波器进行近似，用积分图加快运算过程，用haar特征对特征点进行描述，提取到的特征向量具有角度不变性和尺度不变性。
32.图像特征点提取到的角点如图2所示。
33.(20)特征点航迹关联：对提取到的图像特征点进行跟踪检测，并用航迹进行关联；
34.利用特征向量匹配对检测到的点进行匹配，记录其在下一帧中的坐标值。
35.所述(20)特征点航迹关联步骤包括：
36.(21)提取目标点疑似范围：
37.根据前一帧目标点的图像坐标[u,v]，在当前帧中选取范围为 x∈(u
‑
win,u+win],y∈(v
‑
win,v+win+的图像区域为疑似目标区域；
[0038]
(22)提取特征点的surf特征向量:
[0039]
按照surf特征向量的定义，提取区域内每个点特征向量。
[0040]
(23)匹配特征点：
[0041]
将(22)得到的特征向量分别与前一帧特征点的特征向量进行匹配，求取特征向量的相似度；选取相似度最高的特征点作为该点在当前帧的跟踪结果，将特征点坐标进行记录。
[0042]
将(22)得到的特征向量分别与前一帧特征点的特征向量进行匹配，求取特征向量的相似度，相似度运算公式如下：
[0043][0044]
即：以向量的夹角为考量角度，以向量的内积(各对应元素相乘求和)比两个向量的模的积为计算结果。相似度越高，sim值越大。选取相似度最高的特征点作为该点在当前帧的跟踪结果，将特征点坐标进行记录。
[0045]
(30)航迹位移量聚类：根据背景运动与目标运动在图像坐标中位移的不同，通过聚类切割出运动特征点和背景特征点；
[0046]
基于背景运动大致相同，而目标运动方式与背景存在较大差异的原理，利用两者在图像坐标中位移的不同，通过聚类切割出占比较小的运动点；
[0047]
所述(30)航迹位移量聚类步骤包括：
[0048]
(31)航迹速度与位移表示：
[0049]
对于所有的特征点，记录相邻帧匹配特征点的坐标差值为特征点的帧间速度，定义当前帧与参考帧特征点的坐标差值为位移，公式描述如下：
[0050][0051][0052]
其中，i表示特征点序号，frame表示当前帧序号，refer表示参考帧序号，也就是初始帧序号。
[0053]
(32)mean shift聚类算法
[0054]
假设在一个多维空间中有很多数据点需要进行聚类，mean shift的过程如下：
[0055]
(321)、在未被标记的数据点中随机选择一个点作为中心点，标记为center；
[0056]
(322)、找出离center距离在阈值bandwidth之内的所有点，记做集合m，认为这些点属于簇c，同时，把这些求内点属于这个类的概率加1，这个参数将用于最后步骤的分类；
[0057]
(323)、以center为中心点，计算从center开始到集合m中每个元素的向量，将这些向量相加，得到向量shift；
[0058]
(324)、center沿着shift的方向移动，移动距离是||shift||，即center＝center+shift；
[0059]
(325)、重复步骤322、323、324，直到shift的大小很小，记住此时的center；
[0060]
(326)、如果收敛时当前簇c的center与其它已经存在的簇c2中心的距离小于阈值，那么把c2和c合并；否则，把c作为新的聚类，增加1类；
[0061]
(327)、重复321、322、323、324、325直到所有的点都被标记访问；
[0062]
(328)、根据每个类，对每个点的访问频率，取访问频率最大的那个类，作为当前点
集的所属类；
[0063]
根据定义，特征点的速度表示如图3所示，位移表示如图4所示。
[0064]
简单的说，mean shift就是沿着密度上升的方向寻找同属一个簇的数据点。
[0065]
(33)位移聚类：根据背景特征点与目标特征点运动方式的不同区分背景与运动点。
[0066]
图4中标记的曲线表示在参考帧检测时，位于目标范围内的特征点所组成的航迹的位移表示。根据图3图4可知，速度表示相邻帧的位移量，目标特征点在背景特征点中并不明显，而通过积分后，运动目标与背景差异较为明显，而且目标运动越快，目标上的特征点与背景特征点的差异性也越大。这一区别为通过位移辨别运动目标提供了可能。
[0067]
由图4可以看到，虽然背景特征点在图像不同位置的位移跨度较大，但是鉴于特征点数目较多，分布较广，其位移具有一定的联系性，在经过一定数量的帧数之后，能够和目标特征点进行区分。但是对于非特定的图像序列，我们并不能提前设置区分阈值，因此对所有数据采取密度聚类的方式，设置一个较高的分类阈值，将所有特征点分为背景点和疑似目标点两类。
[0068]
图5为根据航迹位移值利用meanshift聚类算法区分背景点与运动点的实验结果，运动点由圆圈标出。
[0069]
(40)运动特征点空间聚类：根据不同目标在图像中的空间差异，将多个运动目标上的特征点进行区分，同时记录每个运动目标的航迹状态。
[0070]
由(33)得到的动态点是图像中所有与背景运动存在差异的特征点，因此需要进一步对目标在特征点在空间上进行聚类，以区分不同的目标。
[0071]
所述(40)运动目标空间聚类步骤包括：
[0072]
(41)图像阈值分割：将所有的特征点分为背景特征点、疑似特征点、目标特征点三大类；当一个特征点被判定为疑似动目标特征点，并且连续存在若干帧后，即判断为目标特征点；之后对所有动目标点进行空间聚类切割成不同的目标；
[0073]
实际上将所有的特征点分为背景点，疑似点，目标点三大类。当一个特征点被判定为疑似动目标特征点，并且连续存在若干帧后，即判断为目标特征点。之后对所有动目标点进行空间聚类切割成不同的目标。切割结果如图6所示，目标由圆圈标出。
[0074]
(42)动目标航迹的更新：
[0075]
随着帧数增长，记录到的特征点航迹逐渐减少，当航迹数量减少到设定的阈值后，重新对图像进行特征点检测，记录新产生的特征点航迹，将未消亡的航迹位移量清零，并与新产生的特征点航迹一起进行聚类。由于检测到的新特征点可能存在于已检测到的目标上，或者更新时不同的目标相隔较近，被识别为同一目标上的特征点，因此需要对产生的航迹进行合并拆分管理，航迹的合并与拆分规则如下：
[0076]
(a)新产生的动目标特征点航迹与记录的航迹在空间上无法合并时，判定为产生新的航迹；
[0077]
(b)新产生的动目标特征点航迹与记录的航迹在空间上始终一致时，判定为同一运动目标上新产生的特征点；
[0078]
(c)当两条原本存在的航迹，在空间上无法通过聚类进行判别时，认为不同的航迹发生交汇，依旧各自保存原先的航迹；
[0079]
(d)当一条原本的航迹发生变换，不在能够在空间上保持一致时，认为目标分裂为两种目标，分别进行标记。
[0080]
对于图像序列中有多个动目标时，目标数目可能随着时间发生变换，产生新的目标，原先存在的目标消亡，或者在运动过程中，不同的目标发生交汇使得目标航迹无法从空间上进行区分，在这些情况下则需要对记录下的特征点航迹进行更新。
[0081]
在不同目标进行交汇时，航迹判断较为复杂，本文在不同目标交汇时的航迹判断结果如图7所示，不同目标的运动点由圆圈标出。
[0082]
本方法既考虑了目标的空间分布特性，也考虑了目标的时域运动特性，本例结果显示航迹检测准确。