基于彩色传递的图像融合方法与流程

本发明涉及图像融合技术领域，是一种基于彩色传递的图像融合方法。

背景技术：

多源遥感图像的融合其实是信息融合的一个重要的分支，它兴起于20世纪70年代是综合了信号处理、图像处理、传感器理论、计算机技术等学科而形成的一门新兴的图像处理技术。多源遥感图像融合就是将由相同或不同的传感器在同一时间或不同时间所获得的关于同一个目标的多幅图像信息加以综合，以达到对场景和目标的综合描述，能对人进一步的应用和识别该目标和场景提供更加丰富和有效的信息。尤其是街景地图中，需要同时处理海量的图像，现有技术不能兼顾同时处理全色图像细节信息的清晰度和多光谱图像的色彩信息。

技术实现要素：

本发明提供了一种基于彩色传递的图像融合方法，克服了上述现有技术之不足，其能有效解决现有的图像处理时存在全色图像细节信息的清晰度和多光谱图像的色彩信息不能同时兼顾处理的问题。

本发明的技术方案是通过以下措施来实现的：一种基于彩色传递的图像融合方法,包括以下步骤：

步骤一：将原始低分辨率多光谱图像p光采用加权平均法进行彩色图像灰度化，得到对应灰度图像p灰；

步骤二：将待融合的原始高分辨率全色图像p全和经过灰度化后的灰度图像p灰进行直方图匹配，获得新的全色图像p全新；

步骤三：对灰度图像p灰和全色图像p全新分别进行拉普拉斯金字塔变换，采用绝对值取大的融合方法，对灰度图像p灰和全色图像p全新的系数进行融合，得到融合灰度图像p融灰；

步骤四：进行彩色传递，将原始低分辨率多光谱图像p光和融合灰度图像p融灰从rgb空间转换到lαβ彩色空间，原始低分辨率多光谱图像p光转换结果为is(ls，αs，βs)，融合灰度图像p融灰转换结果为it(lt，αt，βt)，将多光谱图像p光的彩色通道中表示颜色信息的(αs，βs)传递给灰度图像；

步骤五：将lαβ彩色空间的(lt，αs，βs)转换到rgb空间，即得到最终的融合结果图像p终。

下面是对上述发明技术方案的进一步优化或/和改进：

上述第三步还包括对灰度图像p灰和全色图像p全新比较灰度差，判断|p灰－p全新|是否小于灰度差值阈值ζ，若|p灰－p全新|＜ζ，则将原始低分辨率多光谱图像p光中的对应点直接输出，之后进入步骤五；若|p灰－p全新|≥ζ，则将将原始低分辨率多光谱图像p光中的剩余像素点按步骤四继续进行彩色传递。

本发明对原始高分辨率全色图像和原始低分辨率多光谱图像进行融合，使得最终融合结果图像既具有全色图像的细节信息又具有多光谱图像的色彩信息，提高了图像的可用价值。采用了基于彩色传递的方法，将图像进行了rgb-lαβ彩色空间变换，将多光谱图像的光谱信息传递给全色图像，实现了彩色传递。对原始低分辨率图像灰度化后和原始高分辨率全色图像进行直方图匹配，调整了整个全色图像的灰度直方图(亮度)分布，减少了结果图像的颜色失真。使用拉普拉斯金字塔变换综合了两幅图像的细节信息，提高了融合结果图像的细节、色彩保真度。

附图说明

附图1为本发明实施例1的方法流程图。

附图2为本发明实施例2的原始低分辨率多光谱图像。

附图3为本发明实施例2的双线性插值放大后的原始低分辨率多光谱图像。

附图4为本发明实施例2的原始高分辨率全色图像。

附图5为本发明实施例2的拉普拉斯金字塔变换后的图像。

附图6为本发明实施例2的最终融合结果图像。

具体实施方式

本发明不受下述实施例的限制，可根据本发明的技术方案与实际情况来确定具体的实施方式。

下面结合实施例及附图对本发明作进一步描述：

实施例1：如附图1、2所示，该基于彩色传递的图像融合方法包括以下步骤：

步骤一：将原始低分辨率多光谱图像p光采用加权平均法进行彩色图像灰度化，得到对应灰度图像p灰；

步骤二：将待融合的原始高分辨率全色图像p全和经过灰度化后的灰度图像p灰进行直方图匹配，获得新的全色图像p全新；

上述将原始低分辨率多光谱图像p光经过灰度化后的灰度图像p灰和原始高分辨率全色图像p全进行直方图匹配，是为了调整全色图像的灰度直方图分布，使全色图像p全的灰度直方图与灰度化后的灰度图像p灰直方图相同，等同于调整全色图像p全的亮度分布，可避免出现实验结果图像颜色的轻微失真。

步骤三：对灰度图像p灰和全色图像p全新分别进行拉普拉斯金字塔变换，采用绝对值取大的融合方法，对灰度图像p灰和全色图像p全新的系数进行融合，得到融合灰度图像p融灰；

上述采用拉普拉斯金字塔变换的目的是消除灰度图像p灰和全色图像p全新的分辨率差异，对非彩色(亮度)分量进行重新提取，综合两幅图像之内的细节信息加权得到最后的结果图像。如果不对细节进行重新提取，会造成结果图像色彩失真严重，同时细节清晰度也受到影响。

步骤四：进行彩色传递，将原始低分辨率多光谱图像p光和融合灰度图像p融灰从rgb空间转换到lαβ彩色空间，原始低分辨率多光谱图像p光转换结果为is(ls，αs，βs)，融合灰度图像p融灰转换结果为it(lt，αt，βt)，将多光谱图像p光的彩色通道中表示颜色信息的(αs，βs)传递给灰度图像；

上述lαβ彩色空间中的l通道表示非彩色通道，α通道是表示黄-蓝颜色相关值的通道，β通道表示的是红-绿颜色相关值的通道。

步骤五：将lαβ彩色空间的(lt，αs，βs)转换到rgb空间，即得到最终的融合结果图像p终。

可根据实际需要，对上述基于彩色传递的图像融合方法作进一步优化或/和改进：

如附图1所示，第三步还包括对灰度图像p灰和全色图像p全新比较灰度差，判断|p灰－p全新|是否小于灰度差值阈值ζ，若|p灰－p全新|＜ζ，则将原始低分辨率多光谱图像p光中的对应点直接输出，之后进入步骤五；若|p灰－p全新|≥ζ，则将将原始低分辨率多光谱图像p光中的剩余像素点按步骤四继续进行彩色传递。

上述的灰度差值阈值ξ是与融合图像p融灰中的内容及细节所占整体图像的比例有关系。同时作为对细节信息保留度的考虑，直接保留的像素点应该不高于图像像素数目的10％，否则会影响细节信息的传递，从而导致结果图像p终中边缘信息的不连续或边缘模糊。

实施例2：如附图2、3、4、5、6所示，设存在理想的高分辨率多光谱图像d，则在最理想的情况下将d灰度化之后的结果无疑就应该是原始高分辨率全色图像p。那么在一定程度上，对原始的低分辨率多光谱图像进行灰度化的结果若是和p相等或是在一定尺度范围(ζ)内相近似，就可以将多光谱图像中的该像素点的值直接保留在结果图像中。而对于不符合此类特征的点则可以采用彩色传递的方法将多光谱图像中的各个像素点的彩色信息直接传递给全色图像中相对应的点。

将经过配准的图片为例(图片尺寸比例为1:4)，采用实施例1中的方法进行图像处理，原始低分辨率多光谱图像p光如附图2所示，将附图2中的图像进行双线性插值放大后的原始低分辨率多光谱图像如附图3所示，原始高分辨率全色图像p全如附图4所示，拉普拉斯金字塔变换后的融合灰度图像p融灰如附图5所示，最终融合结果图像p终如附图6所示。

以上技术特征构成了本发明的实施例，其具有较强的适应性和实施效果，可根据实际需要增减非必要的技术特征，来满足不同情况的需求。