一种红外图像与可见光图像融合的方法及系统的制作方法
【专利摘要】本发明提供一种红外图像与可见光图像融合的方法及系统，涉及图像处理技术领域。该方法包括：获取同一视角的红外图像与可见光图像；对可见光图像进行平滑滤波处理；对平滑滤波处理后的可见光图像进行浮雕处理，以获取对应浮雕图像；对浮雕图像与红外图像进行融合处理，得到融合图像。本发明可以使红外图像中的细节显示更加明确，使检修人员可以快速获取设备的温度、位置及形态信息，进而能够快速、准确的识别出设备中超过指定温度极限的部件，提高检修人员对故障部件的检修效率。
【专利说明】
-种红外图像与可见光图像融合的方法及系统
技术领域
[0001] 本发明属于图像处理，尤其设及一种红外图像与可见光图像融合的方法及系统。
【背景技术】
[0002] 红外图像传感器通过获取目标的红外福射进行成像，所W我们可W通过红外图像 获取目标的溫度信息。在利用红外传感器来检测设备是否正常运行的场景中，就是通过红 外溫度显示来判断设备是否正常运行，此时，红外图像传感器所提供的红外图像是设备运 行时红外溫度显示图，用户可从该红外图像中判断设备中是否存在过热的情况，但是由于 红外图像传感器对背景的亮度变化不敏感，成像分辨率低，导致红外图像的分辨率较低、对 边缘不敏感、背景信息模糊不清，进而会使用户可W通过红外图像看见设备中有过热的部 分，但是不能准确的识别出设备中过热的具体部位，即无法快速的分辨出是设备中的哪个 部件出现了故障，运样不仅会耽搁维修进度，而且还可能造成故障部件判断错误。
【发明内容】
[0003] 本发明实施例的目的在于提供一种红外图像与可见光图像融合的方法及系统，旨 在解决上述通过红外传感器提供的红外图像检测设备是否正常运行时，无法快速的分辨出 是设备中的哪个部件出现了故障，运样不仅会耽搁维修进度，而且还可能造成故障部件判 断错误的问题。
[0004] 本发明实施例是运样实现的，一种红外图像与可见光图像融合的方法，包括： 阳0化]获取同一视角的红外图像与可见光图像；
[0006] 对可见光图像进行平滑滤波处理；
[0007] 对平滑滤波处理后的可见光图像进行浮雕处理，W获取对应浮雕图像；
[0008] 对所述浮雕图像与所述红外图像进行融合处理，得到融合图像。
[0009] 在本发明实施例所述的红外图像与可见光图像融合的方法中，所述对可见光图像 进行平滑滤波处理具体包括：
[0010] 若所述可见光图像为灰度图像，则直接使用高斯滤波器对所述可见光图像进行平 滑滤波处理；
[0011] 若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中Ξ个颜色分 量的图像分别进行平滑滤波处理。
[0012] 在本发明实施例所述的红外图像与可见光图像融合的方法中，所述对平滑滤波处 理后的可见光图像进行浮雕处理，W获取对应浮雕图像具体包括：
[0013] 若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见光图像进行浮雕 处理，W获取对应的浮雕图像；
[0014] 若所述可见光图像为彩色图像，则找出所述可见光图像的Ξ个颜色分量中当前像 素点的颜色值与其右下相邻像素点的颜色值之间的差值绝对值最大的颜色分量的图像，采 用浮雕算法对所述差值绝对值最大的颜色分量的图像进行浮雕处理，W获取对应的浮雕图 像。
[0015] 在本发明实施例所述的红外图像与可见光图像融合的方法中，对所述浮雕图像与 所述红外图像进行融合处理，得到融合图像具体包括：
[0016] 提取所述浮雕图像的图像轮廓信息，并将所述图像轮廓信息转移到所述红外图像 上，生成融合图像。
[0017] 在本发明实施例所述的红外图像与可见光图像融合的方法中，在对所述浮雕图像 与所述红外图像进行融合处理，得到融合图像之后还包括：
[0018] 对所述融合图像进行伪彩色处理，W获取对应的伪彩色图像。
[0019] 本发明实施例的另一目的在于提供一种红外图像与可见光图像融合的系统，包 括：
[0020] 图像获取模块，用于获取同一视角的红外图像与可见光图像；
[0021] 滤波处理模块，用于对可见光图像进行平滑滤波处理；
[0022] 浮雕处理模块，用于对平滑滤波处理后的可见光图像进行浮雕处理，W获取对应 浮雕图像；
[0023] 融合处理模块，用于对所述浮雕图像与所述红外图像进行融合处理，得到融合图 像。
[0024] 在本发明实施例所述的红外图像与可见光图像融合的系统中，所述滤波处理模块 具体用于：
[00巧]若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见光图像进行浮雕 处理，W获取对应的浮雕图像；
[00%] 若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中Ξ个颜色分 量的图像分别进行平滑滤波处理。
[0027] 在本发明实施例所述的红外图像与可见光图像融合的系统中，所述浮雕处理模块 包括：
[0028] 浮雕算法处理单元，用于若所述可见光图像为灰度图像，则直接采用浮雕算法对 所述可见光图像进行浮雕处理，W获取对应的浮雕图像；
[0029] 彩色图像颜色分量处理单元，用于若所述可见光图像为彩色图像，则找出所述可 见光图像的Ξ个颜色分量中当前像素点的颜色值与其右下相邻像素点的颜色值之间的差 值绝对值最大的颜色分量的图像；
[0030] 所述浮雕算法处理单元，还用于采用浮雕算法对所述差值绝对值最大的颜色分量 的图像进行浮雕处理，W获取对应的浮雕图像。
[0031] 在本发明实施例所述的红外图像与可见光图像融合的系统中，所述融合处理模块 具体用于：
[0032] 将所述浮雕图像的图像轮廓信息转移到所述红外图像上，生成融合图像。
[0033] 在本发明实施例所述的红外图像与可见光图像融合的系统中，还包括：
[0034] 伪彩色处理模块，用于对所述融合图像进行伪彩色处理，W获取对应的伪彩色图 像。
[0035] 本发明实施例由于首先获取同一视角的红外图像与可见光图像，然后对可见光图 像进行平滑滤波处理、对平滑滤波处理后的可见光图像进行浮雕处理，W获取对应浮雕图 像，最后对浮雕图像与红外图像进行融合处理，得到融合图像，从而可w使红外图像中的细 节显示更加明确，使检修人员可W快速获取设备的溫度、位置及形态信息，进而能够使检修 人员快速、准确的识别出设备中超过指定溫度极限的部件，提高检修人员对故障部件的检 修效率。
【附图说明】
[0036] 图1是本发明实施例提供的红外图像与可见光图像融合的方法的具体实现流程 图；
[0037] 图2是本发明另一实施例提供的红外图像与可见光图像融合的方法的具体实现 流程图；
[0038] 图3是本发明实施例提供的红外图像与可见光图像融合的系统的结构框图；
[0039] 图4是本发明另一实施例提供的红外图像与可见光图像融合的系统的结构框图。
【具体实施方式】 W40] 为了使本发明的目的、技术方案及优点更加清楚明白，W下结合附图及实施例，对 本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用W解释本发明，并 不用于限定本发明。
[0041] 图1是本发明实施例提供的红外图像与可见光图像融合的方法的具体实现流程 图。参见图1所示，本发明实施例提供的一种红外图像与可见光图像融合的方法，包括：
[0042] 在S101中，获取同一视角的红外图像与可见光图像。
[0043] 在本实施例中，为了获取噪声较小的红外图像，可选用非制冷型红外传感器拍摄 红外图像；为了使可见光图像有较好的清晰度，可选用高分辨率的可见光传感器用于拍摄 可见光图像。
[0044] 在S102中，对所述可见光图像进行平滑滤波处理。
[0045] 在本实施例中，采用高斯滤波器GaussfilteHN，δ)对可见光图像进行平滑滤波 处理，W去除可见光图像上的噪声。高斯滤波器GaussfilteHN，δ)对于抑制服从正态分 布的噪声非常有效，其定义为：
[0046]
[0047] 其中，Ν为高斯滤波窗口大小，取值范围为巧，7] ; δ为高斯滤波器的方差系数，取 值范围为[0. 3,0.引；i、j为可见光图像中的二维坐标，取值范围为[-(N-D/2,（N-D/2]。 W48] 进一步的，若所述可见光图像为灰度图像，则直接使用高斯滤波器 GaussfilteHN，δ)对所述可见光图像进行平滑滤波处理，即：
[0049]
[0050] 其中，@为卷积运算符，Img为原始可见图像，X为原始可见光图像中像素点的横 坐标，y为原始可见光图像中像素点的纵坐标，Img_denoise为去噪后的图像。
[0051] 进一步的，若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中 Ξ个颜色分量的图像分别进行平滑滤波处理，即：
[0052]
阳053] 其中，@为卷积运算符，Im曲为原始可见光图像的R分量，ImgG为原始可见光图 像的G分量，Im浊为原始可见光图像的B分量，X为原始可见光图像中像素点的横坐标，y 为原始可见光图像中像素点的纵坐标，Img_denoise为去噪后的可见光图像。
[0054] 在S103中，对平滑滤波处理后的可见光图像进行浮雕处理，W获取对应浮雕图 像。
[0055] 在本实施例中，若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见 光图像进行浮雕处理，W获取对应的浮雕图像，其浮雕算法如下：
[0056] Img_emb(x, y) = Img_denoise(x, y)-Img_denoise(x+1, y+1)+128 ;
[0057] 其中，Img_denoise为去噪后的可见光图像，X为原始可见光图像中像素点的横坐 标，y为原始可见光图像中像素点的纵坐标，Img_emb为生成的浮雕图像。
[0058] 在本实施例中，若所述可见光图像为彩色图像，则找出所述可见光图像的Ξ个颜 色分量中当前像素点的颜色值与其右下相邻像素点的颜色值之间的差值绝对值最大的颜 色分量的图像，采用浮雕算法对所述差值绝对值最大的颜色分量的图像进行浮雕处理，W 获取对应的浮雕图像，其具体实现过程如下：
[0059] a.找出去噪后的可见光图像中Ξ个颜色分量中当前像素点的颜色值与其右下相 邻像素点的颜色值之间的差值绝对值最大的颜色分量的图像：
[0060] [diff, index] = max (|ImgR_deniose(x, y)-ImgR-deniose(x+1, y+1) |,
[0061] |lmgG_deniose(x,y)_ImgG_deniose(x + l,y+l)|, |lmgB_ deniose (X, y) -Im邑B (x+1, y+1) I)
[0062] 其中，ImgR_deniose为去噪后可见光图像的R分量，ImgG_deniose为去噪后可见 光图像的的G分量，ImgB_deniose为去噪后可见光图像的B分量，X为原始可见光图像中像 素点的横坐标，y为原始可见光图像中像素点的纵坐标，diff为最大差值的绝对值，index 为差值绝对值最大的颜色分量，max 0为最大值函数。
[0063] b.选择差值绝对值最大的颜色分量的图像，采用浮雕算法对其进行浮雕处 W64] 理，W获取对应的浮雕图像：
[0065] Img_emb (x, y) = Img_index (x, y) _Img_index (x+1, y+1) +128
[0066] 其中，Img_emb为生成的浮雕图像，X为原始可见光图像中像素点的横坐标，y为原 始可见光图像中像素点的纵坐标，Img_index为上一步中找到的最大颜色分量的图像。
[0067] 在S104中，对所述浮雕图像与所述红外图像进行融合处理，得到融合图像。 W側在本实施例中，红外传感器所获取的红外图像是灰度图像，步骤S103中所获取的 浮雕图像也为灰度图像，为了将浮雕图像上的图像轮廓信息转移到红外图像上，采用了 W 下处理方式：
[0069] Img_mix (x, y) = Img_IR (x, y) +Img_emb (x, y) -128
[0070] 其中，Img_mix为生成的融合图像，Img_IR为红外图像，Img_emb为浮雕图像，X为 原始可见光图像中像素点的横坐标，y为原始可见光图像中像素点的纵坐标。
[0071] 本发明实施例提供的红外图像与可见光图像融合的方法由于首先获取同一视角 的红外图像与可见光图像，然后对可见光图像进行平滑滤波处理、对平滑滤波处理后的可 见光图像进行浮雕处理，W获取对应浮雕图像，最后对浮雕图像与红外图像进行融合处理， 得到融合图像，从而可W使图像中的细节显示更加明确，使检修人员可W快速获取设备的 溫度、位置及形态信息，进而能够使检修人员快速、准确的识别出设备中超过指定溫度极限 的部件，提高检修人员对故障部件的检修效率。
[0072] 图2是本发明另一实施例提供的红外图像与可见光图像融合的方法的具体实现 流程图。参见图2所示，相对于上一实施例，本实施例中在S204之后还包括：
[0073] 在S205中，对所述融合图像进行伪彩色处理，W获取对应的伪彩色图像。
[0074] 本实施例中的S201~S204与上一实施例中的S101~S104完全相同，因此，运里 不再详细阐述。相对于上一实施例，本实施例中进一步将融合图像转化为伪彩色图像，更能 表现出溫度差异的变化，进一步提高了检测人员检修人员识别出设备中超过指定溫度极限 的部件的速度与准确率，提高检修人员对故障部件的检修效率。
[0075] 图3示出了本发明实施例提供的红外图像与可见光图像融合的系统的结构框图， 该系统用于执行本发明图1实施例所述的红外图像与可见光图像融合的方法。为了便于说 明，仅示出了与本实施例相关的部分。
[0076] 参见图3所示，本发明实施例提供的红外图像与可见光图像融合的系统包括：
[0077] 图像获取模块1，用于获取同一视角的红外图像与可见光图像；
[0078] 滤波处理模块2,用于对可见光图像进行平滑滤波处理；
[0079] 浮雕处理模块3,用于对平滑滤波处理后的可见光图像进行浮雕处理，W获取对应 浮雕图像；
[0080] 融合处理模块4,用于对所述浮雕图像与所述红外图像进行融合处理，得到融合图 像。
[0081] 进一步的，所述滤波处理模块2具体用于：
[0082] 若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见光图像进行浮雕 处理，W获取对应的浮雕图像；
[0083] 若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中Ξ个颜色分 量的图像分别进行平滑滤波处理。
[0084] 进一步的，所述浮雕处理模块包括：
[00化]浮雕算法处理单元31，用于若所述可见光图像为灰度图像，则直接采用浮雕算法 对所述可见光图像进行浮雕处理，W获取对应的浮雕图像；
[0086] 彩色图像颜色分量处理单元32,用于若所述可见光图像为彩色图像，则找出所述 可见光图像的Ξ个颜色分量中当前像素点的颜色值与其右下相邻像素点的颜色值之间的 差值绝对值最大的颜色分量的图像；
[0087] 浮雕算法处理单元31，还用于采用浮雕算法对所述差值绝对值最大的颜色分量的 图像进行浮雕处理，W获取对应的浮雕图像。
[0088] 进一步的，所述融合处理模块4具体用于：
[0089] 将所述浮雕图像的图像轮廓信息转移到所述红外图像上，生成融合图像。
[0090] 本发明实施例提供的红外图像与可见光图像融合的系统由于首先获取同一视角 的红外图像与可见光图像，然后对可见光图像进行平滑滤波处理、对平滑滤波处理后的可 见光图像进行浮雕处理，W获取对应浮雕图像，最后对浮雕图像与红外图像进行融合处理， 得到融合图像，从而可W使图像中的细节显示更加明确，使检修人员可W快速获取设备的 溫度、位置及形态信息，进而能够使检修人员快速、准确的识别出设备中超过指定溫度极限 的部件，提高检修人员对故障部件的检修效率。
[0091] 图4示出了本发明另一实施例提供的红外图像与可见光图像融合的系统的结构 框图，该系统用于执行本发明图2实施例所述的红外图像与可见光图像融合的方法。为了 便于说明，仅示出了与本实施例相关的部分。
[0092] 参见图4所示，相对于上一实施例本实施例提供的红外图像与可见光图像融合的 系统还包括：
[0093] 伪彩色处理模块5,用于对所述融合图像进行伪彩色处理，W获取对应的伪彩色图 像。
[0094] 相对于上一实施例，本实施例中的伪彩色处理模块5可W进一步将融合图像转化 为伪彩色图像，其更能表现出溫度差异的变化，进一步提高了检测人员检修人员识别出设 备中超过指定溫度极限的部件的速度与准确率，提高检修人员对故障部件的检修效率。
[0095] 上所述仅为本发明的较佳实施例而已，并不用W限制本发明，凡在本发明的精神 和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
【主权项】
1. 一种红外图像与可见光图像融合的方法，其特征在于，包括： 获取同一视角的红外图像与可见光图像； 对所述可见光图像进行平滑滤波处理； 对平滑滤波处理后的可见光图像进行浮雕处理，以获取对应浮雕图像； 对所述浮雕图像与所述红外图像进行融合处理，得到融合图像。2. 如权利要求1所述的红外图像与可见光图像融合的方法，其特征在于，所述对可见 光图像进行平滑滤波处理具体包括： 若所述可见光图像为灰度图像，则直接使用高斯滤波器对所述可见光图像进行平滑滤 波处理； 若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中三个颜色分量的 图像分别进行平滑滤波处理。3. 如权利要求2所述的红外图像与可见光图像融合的方法，其特征在于，所述对平滑 滤波处理后的可见光图像进行浮雕处理，以获取对应浮雕图像具体包括： 若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见光图像进行浮雕处 理，以获取对应的浮雕图像； 若所述可见光图像为彩色图像，则找出所述可见光图像的三个颜色分量中当前像素点 的颜色值与其右下相邻像素点的颜色值之间的差值绝对值最大的颜色分量的图像，采用浮 雕算法对所述差值绝对值最大的颜色分量的图像进行浮雕处理，以获取对应的浮雕图像。4. 如权利要求3所述的红外图像与可见光图像融合的方法，其特征在于，对所述浮雕 图像与所述红外图像进行融合处理，得到融合图像具体包括： 将所述浮雕图像的图像轮廓信息转移到所述红外图像上，生成融合图像。5. 如权利要求4所述的红外图像与可见光图像融合的方法，其特征在于，在对所述浮 雕图像与所述红外图像进行融合处理，得到融合图像之后还包括： 对所述融合图像进行伪彩色处理，以获取对应的伪彩色图像。6. -种红外图像与可见光图像融合的系统，其特征在于，包括： 图像获取模块，用于获取同一视角的红外图像与可见光图像； 滤波处理模块，用于对所述可见光图像进行平滑滤波处理； 浮雕处理模块，用于对平滑滤波处理后的可见光图像进行浮雕处理，以获取对应浮雕 图像； 融合处理模块，用于对所述浮雕图像与所述红外图像进行融合处理，得到融合图像。7. 如权利要求6所述的红外图像与可见光图像融合的系统，其特征在于，所述滤波处 理模块具体用于： 若所述可见光图像为灰度图像，则直接采用浮雕算法对所述可见光图像进行浮雕处 理，以获取对应的浮雕图像； 若所述可见光图像为彩色图像，则使用高斯滤波器对所述彩色图像中三个颜色分量的 图像分别进行平滑滤波处理。8. 如权利要求7所述的红外图像与可见光图像融合的系统，其特征在于，所述浮雕处 理模块包括： 浮雕算法处理单元，用于若所述可见光图像为灰度图像，则直接采用浮雕算法对所述 可见光图像进行浮雕处理，以获取对应的浮雕图像； 彩色图像颜色分量处理单元，用于若所述可见光图像为彩色图像，则找出所述可见光 图像的三个颜色分量中当前像素点的颜色值与其右下相邻像素点的颜色值之间的差值绝 对值最大的颜色分量的图像； 所述浮雕算法处理单元，还用于采用浮雕算法对所述差值绝对值最大的颜色分量的图 像进行浮雕处理，以获取对应的浮雕图像。9. 如权利要求8所述的红外图像与可见光图像融合的系统，其特征在于，所述融合处 理模块具体用于： 提取所述浮雕图像的图像轮廓信息，并将所述图像轮廓信息转移到所述红外图像上， 生成融合图像。10. 如权利要求9所述的红外图像与可见光图像融合的系统，其特征在于，还包括： 伪彩色处理模块，用于对所述融合图像进行伪彩色处理，以获取对应的伪彩色图像。
【文档编号】G06T5/50GK105989585SQ201510098298
【公开日】2016年10月5日
【申请日】2015年3月5日
【发明人】彭志远, 王飞
【申请人】深圳市朗驰欣创科技有限公司