一种可定位的大型车辆运行管理系统及其运行方法_3

文档序号:9453743阅读:来源:国知局
90] 所述FPGA视频控制器4的型号为EP4CE30F23C6 ;所述存储模块6是指型号为 MT47H64M16HR的DDR2内存储器;所述语音警示模块8是指型号为NY3P087BS8S0P-8的语 首1C。
[0091] 所述多路摄像头7包括前视摄像头、后视摄像头、左视摄像头、右视摄像头、顶视 摄像头。
[0092] 实施例1所述一种可定位的大型车辆运行管理系统的结构示意图如图1所示。
[0093] 实施例2
[0094] 根据实施例1所述的一种可定位的大型车辆运行管理系统的运行方法,具体步骤 包括:
[0095] 所述北斗定位模块2实时获取车辆的位置信息,同时,当车辆行驶速度低于V时, 所述多路摄像头7周期性拍摄图像,否则,所述多路摄像头7实时进行视频摄像,实时获取 的视频经FPGA视频控制器4全景拼接处理后输出至显示屏5,供驾驶员实时监控车辆内情 况;所述FPGA视频控制器4还对所述多路摄像头7拍摄的图像进行采集控制、全景拼接、图 像识别及障碍物的判别,检测出有障碍物离车辆距离小于1.5m时,所述语音警示模块8发 出警示音;经过所述FPGA视频控制器4处理后的所述多路摄像头7拍摄的图像及其对应的 车辆的位置信息通过所述3G/4G通信模块3周期性上传至后台管理平台。
[0096] 所述全景拼接,具体步骤包括:
[0097] (1)图像预处理:对图像依次进行图像去噪、几何校正处理;对失真的图像进行几 何校正,把存在几何失真的图像校正为无几何失真的图像;以免影响图像拼接后续环节的 精度。
[0098] (2)图像配准;
[0099] A、SIFT特征提取
[0100] a、构造高斯差分尺度空间D0G,检测尺度空间极值点:为了得到多尺度空间内的 稳定关键点,利用不同尺度的高斯差分与图像进行卷积,构成高斯差分尺度空间D0G,如式 (I)所示:
[0101] D(x, y, 〇) = (G(x, y, k 〇 )-G(x, y, 〇 ))*I (x, y) = L (x, y, k 〇 )-L (x, y, 〇 ) (I )
[0102] 式(I )中
是指图像中任一像素点的尺度坐标, (x,y)是指图像中任一像素点的空间坐标,L(x,y,〇)是指通过所述多路摄像头拍摄的二 维图像的尺度空间;D(x,y,〇)为尺度空间函数,G(x,y,k〇)为尺度可变高斯函数,k为相 邻两个尺度空间倍数的常数;I (x,y)是指原始图像;
[0103] 检测式(I )得到的高斯差分尺度空间D0G的极值点,将每个检测点和与其同尺 度的8个相邻点、上下相邻尺度的点进行比较;确保在尺度空间和二维空间都能检测到极 值点。
[0104] b、极值点精确定位
[0105] 通过拟合三维二次函数精确定位极值点的位置和尺度,同时去除低对比度的点和 不稳定的仂緣相应点,诵讨式(H )、式(TTT)去除不稳宙的仂緣相应点:
[0106]
[0107]
[0108] 式(II )、式(III)中,H为Hessian矩阵,r为控制特征值大小的参数,Dxx是指某 一尺度的图像在x轴方向求导后又在x轴方向求导后得到的结果;D yy是指某一尺度的图像 在y轴方向求导后又在y轴方向求导后得到的结果;Dxy是指某一尺度的图像在x轴方向求 导后又在y轴方向求导后得到的结果;stability是指稳定值;
[0109] c、分配关键点方向
[0110] 为使得SIFT特征点具备局部旋转不变性,利用关键点邻域梯度像素的分布特性 为每个关键点分配方向参数,关键点处梯度的幅度和方向如式(IV )、式(V )所示:
[0111]
[0112]
[0113] 式(IV )、式(V )中,m(x,y)是指梯度幅度,0 (x,y)是指梯度方向;
[0114] d、生成特征点描述符
[0115] 首先,将坐标轴旋转为关键点方向,以确保旋转不变性;然后,将以关键点为中心 取的窗口均匀的分为16个小块,在每个小块的8个不同方向的梯度直方图上绘制不同方向 的累加值,形成一个种子点,则每个种子点含8个方向的信息向量,一个特征点用16个种子 点描述;
[0116] B、特征点匹配
[0117] 对需要拼接的图像,按照步骤A所述的SIFT特征提取,分别得到需要拼接的图像 的特征点集,记为:
[0118] P = {p.j= (p .n,p.j2)T| j = 1,2,…m}
[0119] Q = {q.j= (q.n, q.j2)T| j = 1,2, ."m}
[0120] P是指需要拼接的图像一的特征点集;Q是指需要拼接的图像二的特征点集;则集 合P和Q之间由仿射变换(A,t)关联;A是旋转变量,t是平移变量;
[0121] 定义匹配矩阵M,其元素mjk满足如下条件:
[0122] 如果点Pj对应于qk,则mjk= 1 ;否则,m_jk= 0 ;
[0123] 求仿射变换(A,t)或匹配矩阵M,使得匹配达到最优,求取公式如式(VI)所示:
?.=j
[0124]
[0125]
[0126] 2) g (A) = y (a2+b2+c2)
[0127] 式(VI)中,t是平移变量,A被分解成如下形式:A = 其 中
K 0 )是标准的旋转矩阵,a是 匹配误差的阈值,按照不同的匹配要求确定,E(M,t,A)为目标函数;
[0128] 式(VI)中,对匹配矩阵M的行和列约束不等式,通过引入松弛变量,将不等式约 束转化为等式约束,如式(W )所示:
[0129]
[0130] .m十1 m+1.
[0131] 引入阻尼项F = H气,其中T是控制模拟温度,将匹配矩阵的等式约束 j^lk=l 式和阻尼项加到目标函数式中,得到新的特征匹配问题的目标函数,如式(W)所示:
[0132]
[0133] 式(VID)中,mjk是匹配矩阵M的元素,E(M, t, A)为目标函数,y」和v #Lagrange 因子,通过最小化目标函数得到匹配矩阵和点集P和Q之间的变换参数;
[0134] (3)图像融合
[0135] 为了得到过渡区域平滑的拼接图,利用加权平均法进行图像融合,即图像重叠区 域中f像素点的灰度值由两幅图像fl和f2中对应点的灰度值加权平均得到,如式(IX ) 所示:
[0136]
[0137] 式(IX)中,dl、d2为渐变因子,设定fl和f2重叠区域的最大宽度为d_,如式 (X)所示:
[0138]
【主权项】
1. 一种可定位的大型车辆运行管理系统,其特征在于,包括通信定位系统及视频图像 处理系统,所述通信定位系统对车辆进行实时定位,获取车辆的位置信息,所述视频图像处 理系统对多路摄像头拍摄的图像进行全景拼接后,并通过通信定位系统将全景拼接后多路 摄像头拍摄的图像及其对应的车辆的位置信息周期性上传至后台管理平台,所述位置信息 包括:经度坐标、缔度坐标。2. 根据权利要求1所述的一种可定位的大型车辆运行管理系统,其特征在于,所述通 信定位系统包括主控MCU及分别与所述主控MCU连接的北斗定位模块、3G/4G通信模块。3. 根据权利要求2所述的一种可定位的大型车辆运行管理系统,其特征在于,所述北 斗定位模块用于实时获取车辆的位置信息,所述3G/4G通信模块用于将全景拼接后多路摄 像头拍摄的图像及其对应的车辆的位置信息周期性上传至后台管理平台。4. 根据权利要求2所述的一种可定位的大型车辆运行管理
当前第3页1 2 3 4 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1