专利名称：结合多尺度双边滤波与方向滤波的多模图像融合方法
技术领域：
本发明属于信息处理技术领域，具体涉及一种结合多尺度双边滤波与方向滤波的 多模图像融合方法。
背景技术：
图像融合技术是将多传感器采集到的关于同一场景的或同一目标的多幅图像进 行一定的处理，综合成一幅图像，是多传感器信息融会中可视信息的融合。它利用各种成 像传感器不同的成像方式为不同的图像提供互补信息的特点，使得融合图像的信息更加丰 富，更加准确、可靠地反映场景或目标的信息。图像融合技术能提高图像的时空覆盖范围、 降低不确定性、提高系统的可靠性和鲁棒性，它是一门综合了传感器、图像处理、信号处理 和人工智能等的新兴技术。近年来，图像融合已成为一种十分重要的图像理解与计算机视 觉技术，它在自动目标识别、目标跟踪、遥感、医学辅助诊断和军事应用等领域有着广泛的 应用前景。在图像融合方法中，具有代表性的方法是基于多尺度变换的图像融合方法。其基 本思想是将源图像分解到不同频率子带图像上，然后分别对它们进行融合运算得到一个融 合的不同频率的图像表示，再经相应的逆多尺度变换获得融合图像。然而现有的基于多尺 度变换的图像融合方法，在多尺度变换过程中对每个像素都以相同的方式处理，并没有考 虑它们的特异性，这样不能准确地反映图像的局部信息。另外，方向信息是图像的一种重要 特征，在图像融合中应该把方向特征也考虑进去。在以往的融合算法中，这两方面都有所涉 及，但并没有将它们有效地结合起来，不能准确、可靠地衡量图像局部特征的重要程度。
发明内容
本发明的目的在于针对现有技术的不足，提供一种结合多尺度双边滤波与方向滤 波的多模图像融合方法，该方法能够提高融合图像的质量。为实现这样的目的，本发明将多尺度双边滤波与方向滤波相结合对图像进行多尺 度分解并作相应的融合处理。本发明首先采用多尺度双边滤波对源图像进行分解得到图像 的低通图像表示与高通图像表示，然后利用方向滤波器组对高通图像进行方向滤波得到源 图像的多尺度多方向表示，再按照一定的融合规则对这些子带图像进行融合运算得到一组 新的融合的子带图像，最后通过方向滤波重构与逆多尺度双边变换得到最终的融合图像。本发明的方法包括如下具体步骤(1)采用多尺度双边滤波对已配准的源图像进行多尺度分解得到高通频带上的细 节信息和低通频带上的近似信息表示；(2)利用方向滤波器组对高通频带进行方向滤波得到图像多尺度、多方向表示；(3)计算各方向子带的活跃度，以方向子带系数的绝对值或平方作为它们的活跃 度；(4)对方向子带与低通近似子带分别做融合处理，对于方向子带，选择活跃度大的
3系数作为融合后的系数；对于低通近似子带，对所有源图像同一位置的系数平均得到融合 系数；(5)重构融合图像，首先对融合的方向子带图像进行方向滤波重构，得到高通细节 子带图像，与融合的低通近似子带图像一起构成图像的多尺度表示，再对它们进行多尺度 双边逆变换即可得到最终的融合图像。本发明采用双边滤波来实现多尺度分解，由于其在平滑图像时还能保持边缘，使 得融合图像的边缘与细节更丰富；多尺度双边滤波的重构不涉及到卷积运算，不需要对边 界做专门处理；源图像经多尺度双边分解得到的高通细节图像再送入方向滤波器组来捕获 其方向信息，而方向信息是图像的重要特征，因此能更加有效地捕获图像的重要特征。本 发明中采用的多尺度双边滤波与方向滤波都是非下采样的，因而具有平移不变性，在融合 时可减少融合系数的错误选取及配准误差对融合结果的影响，另外，由于具有平移不变性， 使得融合结果避免了振铃效应的出现；由于多尺度双边滤波与方向滤波都是可以完全重构 的，因此它们的结合变换也是完全重构的；双边滤波是一种空间自适应的滤波，它与方向滤 波相结合能更好地捕获图像的几何结构。本发明提出的结合双边滤波与方向滤波的图像融 合方法优于传统的基于多尺度变换的图像融合方法，实验结果也证明了这一点。
图1为本发明方法的流程框图。图2为本发明的方向滤波器组，其中，图2(a)为利用二通道扇形滤波器组构造的 四通道非下采样的方向滤波器组，图2(b)为对应的频率分割图。图3为本发明的仿真实验源图像，其中，图3(a)为可见光图像，图3(b)为红外图像。图4为各种融合方法所得到的融合图像，其中，图4(a)到图4(e)分别是基于离 散小波变换(DWT)、静态小波变换(SWT)、双树复小波变换(DTCWT)、非下采样轮廓波变换 (NSCT)和多尺度双边滤波(MBF)方法所得融合图像，图4(f)为本发明方法所得的融合图像。
具体实施例方式为了更好地理解本发明的技术方案，下面结合附图和实施例对本发明作进一步详 细的描述。参见图1，是本发明方法的流程框图。首先分别对两幅源图像^和Ib实施多尺度 双边分解和方向滤波分解，得到它们的多尺度、多方向子带图像，对这些子带图像进行融合 得到融合的多尺度、多方向子带图像，再对它们实施方向滤波重构与逆多尺度双边变换就 能获得融合图像IF。其具体实施如下一、参见图3(a)和图3(b)，对源图像Ia和Ib实施多尺度双边分解，得到它 们的低通子带图像、CblJi, j)和高通子带图像{Cf(i,j\n = 1,2,...,l}、
{cf{ij\n = \X...,L}，其中(i，j)为子带图像的空间位置，L表示分解层数。双边滤波是一种空间变化的滤波，它根据像素之间的几何相近性及亮度相似性结
4合像素值，在平滑图像的同时还能保持边缘。多尺度双边滤波将双边滤波扩展到多尺度，它 分解图像为高通频带上的细节子带和低通频带上的近似子带，这些子带的大小与原图像大 小是一样的。对于图像I，利用式(1)可得到滤波图像序列
权利要求
1. 一种结合多尺度双边滤波与方向滤波的多模图像融合方法，其特征在于包括如下顺 序的步骤(1)采用多尺度双边滤波对已配准的源图像进行多尺度分解得到高通频带上的细节信 息和低通频带上的近似信息表示；(2)利用方向滤波器组对高通频带进行方向滤波得到图像多尺度、多方向表示；(3)计算各方向子带的活跃度，以方向子带系数的绝对值或平方作为它们的活跃度；(4)对方向子带与低通近似子带分别做融合处理，对于方向子带，选择活跃度大的系 数作为融合后的系数；对于低通近似子带，对所有源图像同一位置的系数平均得到融合系 数；(5)重构融合图像，首先对融合的方向子带图像进行方向滤波重构，得到高通细节子带 图像，与融合的低通近似子带图像一起构成图像的多尺度表示，再对它们进行多尺度双边 逆变换即可得到最终的融合图像。
全文摘要
本发明属于信息处理技术领域，具体涉及一种结合多尺度双边滤波与方向滤波的多模图像融合方法。本发明用以融合同一场景或同一目标的不同传感器的图像，首先，利用多尺度双边滤波对源图像进行分解得到一个低通图像与一系列高通图像，然后对高通图像进行方向滤波得到图像的方向表示，再按照一定的融合规则对这些低通图像与方向子带图像分别进行融合得到融合的低通图像与方向子带图像，最后通过方向滤波重构与逆多尺度双边滤波得到融合图像。本发明获得了较好的融合效果，优于传统的多尺度几何分析方法，融合图像的质量得到了较大的提高。
文档编号G06T5/50GK102005037SQ20101054293
公开日2011年4月6日 申请日期2010年11月12日 优先权日2010年11月12日
发明者李树涛, 胡建文 申请人:湖南大学