基于信息融合的交通波实时检测与跟踪方法

基于信息融合的交通波实时检测与跟踪方法
【专利摘要】本方法涉及一种基于信息融合的交通波实时检测与跟踪方法。首先获取交通视频图像，然后采用Kalman滤波技术，根据前一时刻交通波状态最优估计值获取当前时刻的交通波状态预测值；然后得到当前时刻交通波位置测量值，在相向摄像机之间的可视区域内，每台摄像机采用融合Adaboost分类器的复式伸缩窗算法；在相背摄像机之间的盲区内，基于特征点跟踪法及交通波估计法进行估计；最后，采用加权平均一致性信息融合算法获得当前时刻交通波状态最优估计值，为下一时刻交通波状态预测做准备，在此过程中通过引入各摄像机测量噪声权重，并动态调整各摄像机检测结果可信度来提高交通波定位精度。
【专利说明】基于信息融合的交通波实时检测与跟踪方法
【技术领域】
[0001]本发明属于机器视觉与智能控制领域，具体涉及一种利用计算机技术、图像处理技术、机器学习技术和模式识别技术等对交通视频监控目标进行检测的发明。
【背景技术】
[0002]交叉口路段上车辆排队与消散过程会产生停车波与启动波这两种交通波，停车波为在信号交叉口处红灯亮时，车辆在停车线前依次停车排队，队尾位置从停车线开始逐步向后移动，形成与车流运动方向相反的波。启动波为绿灯亮后，队头车辆开始启动，队头位置从停车线开始逐步向后移动，形成与车流运动相反的波。准确而实时跟踪包括早晚高峰时段内的交通波有利于效计算车道排队长度和停车延误等交通参数，对进一步优化信号配时方案以缓解交通拥挤具有重要的意义。以往的基于单台摄像机来检测和跟踪排队车辆的队尾和队头位置来获取交通参数的方法存在一些固有缺陷，由于摄像机架设高度有限以及车辆本身的高度会使车辆图像反投影到道路平面上时出现失真。车辆偏离摄像机中心轴程度越大，其检测结果误差越大。目标离摄像机越远，获得的视频图像信息质量越差。同时由于交叉口停车线后车辆相互遮挡严重，使得检测到的队尾或队头实际位置误差会随着排队车辆的增加而增大。虽然卫星遥感图像检测车辆排队可以有效解决车辆遮挡问题，但是由于卫星图像中每辆车所占像素很少并且车辆边缘信息比较模糊，用该方法检测出来的车辆排队长度也不准确，且实时性受到卫星遥感数据采集和传输的限制。提高车辆队头和队尾跟踪精度的方法之一是采用高空垂直拍摄，但在实现上存在困难。另外，通过架设在高位置处摄像机跟踪每辆车的运行轨迹来识别交通波和估计排队长度的检测方法也存在一些缺陷，当周围环境光线比较暗时，很难跟踪每辆车的运行轨迹，并且摄像机架设高度在许多交通路口也会受到限制。另一种方法是在路段上架设多台低视角的摄像机，从而构成视频网络，并在此基础上进行信息融合，既可达到路段全覆盖监视，又可克服摄像机架设高度限制产生的问题，但由于该方法中决策层是最高层次的融合，并且两摄像机之间没有协作，通过两摄像机分别检测的队尾消散点无法达成一致，同时各个摄像机对队尾或者队头位置的检测精度下降也会影响最终的融合结果。

【发明内容】

[0003]为了使对交通波的跟踪具有更高的精度和鲁棒性，克服现有交通波检测与跟踪精度低、鲁棒性差及视频网络决策层融合的缺点，本发明在单视频交通波检测基础上提出基于视频网络加权一致性信息融合的交通波(主要包括停车波或启动波)实时跟踪方法，从而使任何一台分布式摄像机都可以对本视野范围以内及视野范围以外的交通波进行实时鲁棒检测与跟踪，对进一步优化交通信号配时方案提供决策依据。具体内容如下:
[0004]一种基于信息融合的交通波实时检测与跟踪方法，基于分布式摄像机网络，所述的分布式摄像机网络是由一系列按一定方式通信相连的摄像机组成，分布式网络共η台摄像机，从道路交叉口开始依次从I到η编号。每两台相邻的摄像机间存在相向关系或相背关系，具有相向关系的两个摄像机为视野范围存在重置区域的相向摄像机对，具有相背关系的两个摄像机为架设在同一位置的视野范围没有重叠的相背摄像机对，即二者间存在盲区；每台摄像机采用I台计算机作为处理单元，具有独立运算功能。Ni表示可向摄像机i传递信息的摄像机编号集合，当i=l时，&=2，当l〈i〈n时,Ni=U-1, i+Ι},当i=n时,Nn= {n_l}。基于信息融合的交通波实时检测与跟踪方法其特征在于包括以下步骤:
[0005]I)分布式摄像机网络中的所有摄像机同时拍摄交通视频；
[0006]2)每台摄像机采用Kalman滤波预测得到t时刻各自跟踪到的交通波的状态预测值以及对应的信息矩阵，计算公式如下，其中，所述的交通波状态是由交通波的位置与波速构成的向量，
【权利要求】
1.基于信息融合的交通波实时检测与跟踪方法，基于分布式摄像机网络，所述的分布式摄像机网络是由一系列按一定方式通信相连的摄像机组成，分布式网络共有η台摄像机，从道路交叉口开始依次从I到η编号；每两台相邻的摄像机间存在相向关系或相背关系，具有相向关系的两台摄像机为视野范围存在重叠区域的相向摄像机对，具有相背关系的两个摄像机为架设在同一位置的视野范围没有重叠的相背摄像机对，即二者间存在盲区；每台摄像机采用I台计算机作为处理单元，具有独立运算功能；队表示可向摄像机i传递信息的摄像机编号集合，当i=l时，&=2，当l〈i〈n时,Ni=U-1, i+Ι},当i=n时,Nn= {n_l}，其特征在于包括以下步骤: 1)分布式摄像机网络中的所有摄像机冋时拍摄交通视频； 2)每台摄像机采用Kalman滤波预测得到t时刻各自跟踪到的交通波状态预测值以及对应的预测信息矩阵，计算公式如下，其中，所述的交通波包括停车波或启动波，交通波状态是由交通波的位置与波速构成的向量， 其中，場为第i台摄像机采用Kalman滤波预测得到的t时刻的交通波状态预测值， W,{t)为第i台摄像机在t时刻计算得到的预测信息矩阵，为第i台摄像机计算得到的t-ι时刻的交通波状态最优估计值， 命(I)为第i台摄像机计算得到的t-Ι时刻的最优信息矩阵， Φ= O I为状态转换矩阵， Q为状态转换噪声的协方差矩阵； 3)计算每台摄像机t时刻的交通波位置测量值Zi(t)，具体为: 当第i台摄像机预测得到的t时刻的交通波状态预测值无⑴在该摄像机可视区域内时，则采用融合Adaboost分类器的复式伸缩窗算法获取摄像机i在可视范围内在t时刻的交通波位置测量值Zi (t)； 当第i台摄像机在t时刻预测得到的交通波状态预测值巧⑴在第i台摄像机所属的相背摄像机对形成的盲区内时，根据Adaboost分类器检测出的车辆头部和尾部候选区域内的特征点，对特征点进行分组，将时空特性相同的特征点分在一组，并对相同组内特征点进行三角剖分形成网格图，采用特征点跟踪方法对车辆进行跟踪，计算感兴趣车辆进入与驶出盲区的速度变化，进而根据交通波估计法估计盲区内t时刻的交通波位置测量值Zi (t)； .4)采用加权平均一致性信息融合方法，通过迭代得到t时刻的交通波状态最优估计值 和最优信息矩阵旁⑴，具体如下: .4.1)计算摄像机t时刻检测结果可信度a(t)，在分布式网络中，第奇数(2m+l)台摄像机为其视野范围内面对车辆头部的摄像机，第偶数(2m+2)台为其视野范围内面对车辆尾部的摄像机，t时刻面对车辆头部的摄像机检测结果可信度为a2m+1 (t),面对车辆尾部的摄像机检测结果可信度为a2m+2 (t)，m从O开始取值；在初始时刻将所有摄像机检测结果可信度设为缺省值I，如果根据权利要求步骤3)中通过某台摄像机无法获取初始时刻停车波位置测量值，则将这台摄像机的检测结果可信度设为O ;动态调整摄像机检测结果可信度过程中，只调节视野范围内面对车辆尾部的摄像机检测结果可信度a2m+2(t)，包含以下步骤:第一步，提取第2m+2台摄像机视野范围内队尾静止车辆不被后面的车辆遮挡时该车尾部的特征点网格图及停车波位置测量值； 第二步，比较当前时刻车辆尾部特征点网格图结构与未发生遮挡时特征点网格图结构是否相同，判断是否有新车加入队尾，以调整第2m+2台摄像机t时刻的检测结果可信度a2m+2(t)，判断过程分以下两种情况: 第I种情况:特征点网格图的结构未发生变化，说明没有新车加入队尾，调整方法分以下几步: 第一步，设可信度a2ni+2(t)的调整范围为[1，10]，调节步长用I表示； 第二步，判断t时刻停车波位置测量值相对于t-Ι时刻停车波位置测量值的移动方向与t-Ι时刻停车波状态最优估计值相对于t-2时刻停车波状态最优估计值的移动方向是否相同；相同，则减小a2m+2(t)，调节步长大于0，小于0.5 ;不相同则增大a2m+2(t)，调节步长大于0，小于0.5; 第2种情况:特征点网格图的结构发生变化，说明有新车即将加入队尾，并对原来队尾静止车辆产生遮挡，调整方法分以下几步: 第一步，设可信度a2ni+2(t)的调整范围为[0.1, I],调节步长用I表示； 第二步，判断当前停车波位置测量值是否比未发生遮挡时停车波位置测量值减小，是则减小a2m+2 (t),调节步长大于O,小于0.1 ;否则增大a2m+2 (t),调节步长大于O,小于0.1 ； `4.2)初始化一致性信息向量4(0和一致性信息矩阵<(O，计算公式如下:
【文档编号】G06K9/62GK103440499SQ201310389154
【公开日】2013年12月11日 申请日期:2013年8月30日 优先权日:2013年8月30日
【发明者】张媛, 杨德亮, 陈阳舟, 辛乐 申请人:北京工业大学