专利名称：全景辅助泊车系统的图像配准方法
技术领域：
本发明涉及图像处理技术，具体为一种图像配准方法，应用于辅助泊车系统中经过校正后的鱼眼图像拼接。
背景技术：
图像配准是确定在相同或不同时间、相同或不同传感器拍摄的两幅或多幅图像之间最佳匹配关系的过程。配准结果给出了两幅图像之间相对位置关系。图像配准是图像分析、图像拼接、图像融合、虚拟现实等许多应用的一个重要步骤。传统的泊车辅助系统分为两种，一种为在汽车的车尾安装倒车雷达，以超声波传感器探测汽车周围障碍物，以声音报警。这种方式的缺点为不直观，易误报。一种为在汽车车尾安装摄像头，以驾驶室显示器观察汽车与障碍物的距离。这种方式只能覆盖汽车后方有限的区域，而车两侧和前方区域为盲区，存在安全隐患。在拥塞的情况下容易出现事故。 为了扩大驾驶员的视野范围，必须感知汽车四周全景范围，需要多个摄像头之间图像配准和融合。
发明内容
本发明针对现有技术的不足，提供一种全景辅助泊车系统中鱼眼图像校正后的图像配准的一种方法，该方法计算量较小，精度较高，在拼接过程中鲁棒性较高。为实现以上的技术目的，本发明将采取以下的技术方案一种全景辅助泊车系统的图像配准方法，包括以下步骤(1)采集基准图与待配准图的图像数据；( 分别对步骤(1)所采集到的基准图和配准图的图像数据依次进行直方图均衡、高斯平滑滤波预处理；C3)分别采用Harris角点提取法对经过步骤( 所述预处理的基准图和配置图进行特征点选取，并将获取到的特征点对应的角点坐标分别存储； (4)采用Taylor多项式对步骤所提取到的待配准图像的特征点进行亚像素校正，并将获取到的亚像素校正特征点存储；(5)首先在基准图上选取欧式距离大于50像素的特征点作为候选角点，接着在每一个基准图特征点的位置，搜索其对应匹配图的特征点坐标的欧式距离为50像素内的亚像素校正特征点，完成基准图与待配准图的粗匹配；(6)首先采用 Carmy算子分别对经过步骤( 所述粗匹配的基准图以及待配准图进行边缘提取二值化， 然后采用部分Hausdorff距离算法进行基准图与待匹配图的精确匹配；(7)采用仿射变换模型对经过步骤(6)所述精确匹配后的待匹配图像点进行空间变换处理，获取待匹配图各图像点相对应的仿射变换坐标；(8)将步骤(7)获取到的待匹配图各图像点相对应的仿射变换坐标与步骤(6)中经过精确匹配的基准图进行融合处理，以输出配准图像。根据以上的技术方案，可以实现以下的有益效果(1)本发明运用了亚像素校正方法，对图像进行坐标纠正，提高了匹配精度；(2) 部分Hausdorff距离对有严重遮掩或者退化的图像中的部分图像可以产生较好的效果； (3)以角点为中心构建匹配作为Hausdorff距离输入点集大大减少了搜索时间，提高了搜索效率。
图1是本发明图像采集及预处理流程图；图2是本发明图像配准算法流程图；图3是本发明应用于全景辅助泊车系统的结构示意图。
具体实施例方式附图非限制性地公开了本实用新型所涉及优选实施例的结构示意图；以下将结合附图详细地说明本实用新型的技术方案。如图1至3所示，本发明所述的全景辅助泊车系统的图像配准方法，通过安装在汽车前后左右四路摄像头采集图像，如图3所示。四路摄像头将360°划分为8个区域，其中需要配准的区域有4个，分别为ABCD。采集到数据进行预处理并存储待配准的区域，如图1 所示。如图2所示，首先选取AB⑶中任意一个区域，提取出邻近的两路摄像头配准图像， 一幅作为基准图，一幅作为匹配图，分别采用改进的Harris角点提取算法，将获取到的角点坐标分别存储。然后使用Taylor多项式对角点进行亚像素校正，存储坐标。接着采用粗匹配策略，比较基准图存储的角点坐标的欧氏距离，如果其欧氏距离在50像素以内的角点坐标保留，在50像素以外的坐标删除，然后比较与待匹配图角点之间角点坐标欧氏距离，50像素以内的坐标保留，以外的删除。粗略匹配过后，留下了大于50坐标间距的强角点。然后采用改进的Hausdorff距离进行精确匹配。先对两幅要处理的图像进行Carmy边缘提取，较小的阈值取50，较大的阈值取150，并且标出角点的位置，取出匹配图中每个角点为中心，25像素为半径的区域，分别在基准图每个角点为中心，25像素为半径的区域进行Hausdorff距离测度计算。距离小于阈值的两图中心的角点为匹配点。将精确匹配后的角点存储。最后使用最小二乘法对获取到的精确匹配的角点对拟合出仿射变换的参数。利用该参数对匹配图进行仿射变换，并与基准图融合，输出配准结果。其中预处理算法包括直方图均衡与高斯平滑滤波，表述如下A.设灰度级为归一化至范围W，l]内的连续量，令Pr(r)表示某给定图像中的灰度级概率密度函数，其下标区分输入图像与输出图像的概率密度函数。若对输入灰度级执行如下变换，得到输出灰度级S χ = Γ(Γ) = ￡Λ(ΜΟ&。可知输出灰度级概率密度函数是均
勻的，即该变换使图像的灰度级均衡化，结果为获取到一幅动态范围的图像，有较高的对比度。
X2+ V2Γ2B. 二维高斯函数G(x，少卩，当 r= 士 σ 时，G(r) =Ae"2 = 0. 6A ;r < 3 σ时，G < 0. 01用宽度小于2 σ 2的滤波器，即m = 2X2 σ 2+1，当σ2 = 1/2时，
η 2 η
丄 16
2 4 2 ν1 2
由连续Gaussian分布求离散模板，需采样、量化，并使模板归一化。L0020」 步骤⑶特祉点提取米用改进的Harris用点提取算法，表还如卜A.使用ー个高斯窗或矩形窗在图像上移动，由模板窗ロ取得原图像生成2*2的图 像ニ阶导数自相关矩阵C U，y)，定义如下
权利要求
1.一种全景辅助泊车系统的图像配准方法，其特征在于，包括以下步骤(1)采集基准图与待配准图的图像数据；( 分别对步骤(1)所采集到的基准图和配准图的图像数据依次进行直方图均衡、高斯平滑滤波预处理；(3)分别采用Harris角点提取法对经过步骤(2) 所述预处理的基准图和配置图进行特征点选取，并将获取到的特征点对应的角点坐标分别存储；(4)采用Taylor多项式对步骤所提取到的待配准图像的特征点进行亚像素校正，并将获取到的亚像素校正特征点存储；(5)首先在基准图上选取欧式距离大于50像素的特征点作为候选角点，接着在每一个基准图特征点的位置，搜索其对应匹配图的特征点坐标的欧式距离为50像素内的亚像素校正特征点，完成基准图与待配准图的粗匹配；(6) 首先采用Carmy算子分别对经过步骤( 所述粗匹配的基准图以及待配准图进行边缘提取二值化，然后采用部分Hausdorff距离算法进行基准图与待匹配图的精确匹配；(7)采用仿射变换模型对经过步骤(6)所述精确匹配后的待匹配图像点进行空间变换处理，获取待匹配图各图像点相对应的仿射变换坐标；(8)将步骤(7)获取到的待匹配图各图像点相对应的仿射变换坐标与步骤(6)中经过精确匹配的基准图进行融合处理，以输出配准图像。
2.根据权利要求1所述全景辅助泊车系统的图像配准方法，其特征在于，步骤(3)所述的Harris角点提取法为A)、首先使用模板窗口在原图像上移动，该模板窗口为高斯窗或矩形窗，接着将模板窗口取得的原图像生成2*2的图像二阶导数自相关矩阵^ky入C(x,y) = G(s)0 ;x IJy_ ^ y ^其中，G(s)为高斯模板，Ix为该点在χ方向的梯度，Iy为该点在y方向的梯度；8)、求取(0^，7)的特征值λ” λ 2，并建立度量函数R1:R1 = det (C) -k (trace (C))2 ；其中 det (C) = X1X 2，trace (C) = λ ^ λ 2，k = 0. 04 ；C)、再建立度量函数&:R2 = HiinU1,入2)，求取平均值1 :1 =(礼+1 2)/2D)、选取阈值Y:Y = (Rlmax+R2max) /20，其中I lmax、R2max分别为度量函数礼、&的最大值；E)、判断R与Y的关系，如果R> Y，则为角点，否则不为角点。
3.根据权利要求1所述全景辅助泊车系统的图像配准方法，其特征在于，步骤(6) 所述的精确匹配包括以下步骤①、计算图像的局部梯度函数M和边缘方向函数0:使用2x2的模板作为二维高斯函数的χ和y方向偏微分的一阶近似，则局部梯度函数 M(U) = OGy2]1^边缘方向函数0(x，y) = arctan(Gy/Gx)；②、对梯度进行非极大抑制首先，将每个像素点的8邻域分为4个编号为0-3的扇形区域，其中，O号扇形区域的梯度方向为-22.5° 22. 5°和-157. 5° 157.5°，1号扇形区域的梯度方向为22.5° 67.5°和-157.5° -112.5°，2号扇形区域的梯度方向为67. 5 ° 112.5°和-112.5° -67. 5 °，3号扇形区域的梯度方向为112. 5 ° 157. 5 ° 和-67.5° -22.5° ；接着，设中心区域像素为S[i，j]，将其分别与0-3号扇形区域的两个像素梯度值进行比较，若S[i，j]的梯度值不比这两个像素的梯度值大，则令S[i，j]= 0，将S[i，j]存储于N(i，j)中，N(i，j)则为非极大抑制后的图像；③、使用两个阈值Tl和 T2对N(i，j)做阈值处理，其中Tl < T2，值大于T2的边缘像素称为强边缘像素点，则该点为边缘点，Tl和T2之间的边缘像素称为弱边缘像素点，再根据边缘连通性进一步判断其是否为边缘点；如果弱边缘像素点的邻接像素中有边缘点，则认为该弱边缘像素点也为边缘点，否则，认为该点为非边缘点；获取到的基准图与待配准图的边缘图像点分别存入A，B 两个点集中；④、Hu (A，B)为部分 Hausdorff 距离
全文摘要
本发明公开了一种全景辅助泊车系统的图像配准方法，包括以下步骤(1)采集基准图与待配准图的图像数据；(2)依次进行直方图均衡、高斯平滑滤波预处理；(3)分别采用Hrris角点提取法进行特征点选取；(4)采用Taylor多项式进行亚像素校正；(5)基准图与待配准图的粗匹配；(6)采用Canny算子、Hausdorff距离算法进行基准图与待匹配图的精确匹配；(7)采用仿射变换模型对待匹配图像点进行空间变换处理；(8)将步骤(7)获取到的待匹配图各图像点相对应的仿射变换坐标与步骤(6)中经过精确匹配的基准图进行融合处理，以输出配准图像。因此，本发明计算量较小，精度较高，在拼接过程中鲁棒性较高。
文档编号G06T5/00GK102298779SQ20111023402
公开日2011年12月28日 申请日期2011年8月16日 优先权日2011年8月16日
发明者夏宇, 徐诚, 朱智超, 陈日清 申请人:淮安盈科伟力科技有限公司