专利名称：基于自适应聚类颜色传递的雾天图像清晰化方法
技术领域：
本发明属于图像恢复技术领域，涉及一种在低对比度低信息量条件下对 图像进行清晰化恢复的方法，具体涉及一种基于自适应聚类颜色传递的雾天 图像清晰化方法。
技术背景随着计算机图像处理技术的不断发展，以及监控，数码摄像等领域的迫 切需要，人们在分析某些低对比度、低信息量照片的时候，要求能够对图像 进行较大程度的清晰化处理，恢复图像中的一些关键信息。在我国，大雾是一种时常出现的天气情况，在大雾天气下，无论应用于 哪个领域的户外视频监视系统，所拍摄到的都是有着大雾干扰的低对比度的 图像。图像信息量很低，其中存在着大量难以看清的画面信息和相当一部分 根本就无法分辨的细节信息，而这些有时却正是一幅图像最需要的内容，所 以，在通常情况下，大雾下图像的利用率相当低，甚至在一些情况下，不得 不被当作废图像，不具有任何的使用和分析的价值。一般情况下，对低对比度的图像进行清晰化处理，采用的是拉伸对比度 的方法，可是由于实际场景中的雾况的不一致性，使得所需要拉伸的程度也 大不相同，并且很难找到雾况与对比度之间的映射关系，因此在很多情况下， 即使是对对比度进行手动的非线性拉伸，也很难取得较好的效果，这就使得 大雾天气下的图像恢复成了一个很棘手的问题。发明内容本发明的目的是，提供一种基于自适应聚类颜色传递的雾天图像清晰化 方法，来对大雾条件下所拍摄的雾天模糊图像进行清晰化处理，恢复出雾天 模糊图像中的有效信息。本发明采用的技术方案是， 一种基于自适应聚类颜色传递的雾天图像清 晰化方法，该方法按照以下步骤实施，步骤l、采集源图像和目标图像信息，通过颜色空间的转换，对源图像 以及目标图像分别进行解耦合处理；步骤2、对步骤1所得的解耦合处理结果，在丄"々颜色空间中，统计出 其三个通道的源图像与目标图像的均值与方差，使源图像的统计特性尽可能 地向目标图像"靠拢"，尽量使源图像与目标图像有相同的或尽量相似的统 计特性；步骤3、将步骤2所得到的在^^颜色空间上的校正源图像再由Z"/ 颜 色空间变换还原到RGB颜色空间，得到一次颜色传递校正结果图像，如果没有颜色失真，进行完步骤3之后，就完成了源图像的处理操作； 如果出现色偏失真，还需要通过以下步骤继续完成对图像颜色的校正； 步骤4、将步骤3所得到的一次颜色传递校正结果图像继续与目标图像 进行颜色聚类；步骤5、对步骤4所得到的结果进行源图像与目标图像的相似类别的査 找与对应；步骤6、根据步骤5所得到的结果，进行二次颜色传递校正；步骤7、用户根据对颜色质量的主观判断，对步骤6所得的二次颜色传递校正图像，调整二次校正的聚类个数，得到最终的校正结果图。本发明的有益效果是，实现了对大雾条件下所拍摄的图像进行清晰化处理，恢复出大部分的细节信息，恢复图像中的一些关键信息，恢复出图像中的景物色彩信息。
具体实施方式
下面结合具体实施方式
对本发明进行详细说明。本发明的工作原理是，采用自适应聚类颜色传递的方法，设置一个晴天 下拍摄的图像作为目标图像(可以是不同场景的图像)，该目标图像可以与 待处理图像不是相同的景物，将待处理图像在解耦合后的颜色空间上，通过 改变待处理图像的统计特性，使之与目标图像的统计特性趋于相似的方式进 行颜色传递。以此达到对雾天图像的清晰化的处理效果，不在图像中留下明 显的不平滑的人为处理过后的痕迹，使图像处于一种自然的状态。本发明中，将有雾天气下拍摄到的图像称为源图像，将晴天天气下拍摄 到的清晰度好的图像称为目标图像。也可以事先在处理之前，将目标图像存 储于系统中，以备处理时使用。本发明的雾天图像清晰化处理方法，按照以下步骤实施，步骤l、采集源图像和目标图像信息，通过颜色空间的转换，对源图像以及目标图像的三个颜色通道RGB分别进行解耦合处理。采用的方法是，将源图像和目标图像分别都从RGB颜色空间转换到丄^ 颜色空间，因为丄"-颜色空间上三个通道间的耦合程度比较低，所以通过空 间转换的方法，能够达到对RGB颜色空间上的图像三通道解耦合的目的。 RGB颜色空间到丄"/ 颜色空间的转换，转换的过程共分两步a、先将RGB颜色空间转换到LMS颜色空间<formula>formula see original document page 11</formula>(1)<formula>formula see original document page 11</formula>(2)步骤2、在Zor/ 颜色空间中，统计出其三个通道的源图像与目标图像的 均值与方差，使源图像的统计特性尽可能地向目标图像"靠拢"，尽量使源-图像与目标图像有相同的或尽量相似的统计特性，具体的方法按照以下步骤 实施a、将源图像和目标图像转换到丄^颜色空间后，在丄"々颜色空间下计算各个通道的总体均值/z和标准差^即源图像的统计参数为乂，W，《，crf;目标图像的统计参数为"，A" ， 乂， 一，《，W;参数的下标s J分别代表源图和目标图。均值和标准差的计算公式如下 1<formula>formula see original document page 11</formula>其中，/(U')表示图像在(/,力点上的灰度值，图像的大小为mx"。b、在源图像中，按照下式每个像素点的各通道都减去该通道的总体均值，<formula>formula see original document page 12</formula>C、对源图像中各个像素点按照下式进行像素值的縮放，(5)<formula>formula see original document page 12</formula>(6)d、源图像的每个像素点各个通道值按照下式加上目标图像相应通道的均值，<formula>formula see original document page 12</formula>(7)步骤3、将所得到的在丄"々颜色空间上的校正源图像再由￡ / 颜色空间 变换到RGB颜色空间，得到的校正图像称为一次颜色传递校正结果图， 从丄"/ 颜色空间到RGB颜色空间的转换，具体过程分为两步 a、将图像画面从丄^空间转换到LMS颜色空间_<formula>formula see original document page 12</formula>b、再将图像画面从LMS颜色空间转换到RGB颜色空间:<formula>formula see original document page 12</formula>经过这样的处理之后，画面的细节能够得到明显的增强，画面的整体清 晰度得到了提高。如果没有颜色失真，迸行到第三步之后，就完成了源图像的处理过程。 但是由于目标图像选择允许与源图像不是同一个季节拍摄的图像，因此，在 经过了上述颜色传递之后，可能出现一定程度的色偏失真，这时，需要通过 下面的步骤完成对颜色的校正。 .步骤4、将一次颜色传递校正后的结果图像继续与目标图像进行颜色聚 类。采用自组织特征映射神经元网络作为聚类器进行颜色的聚类，定义该聚类器的输入神经元个数为3，这三个输入神经元的含义分别为图像中像素的 (/ ，G,巧值，即x^i 、 x2=G、 x3 = 5，输出神经元的个数表示所需要聚类的 类别数，例如，当需要对图像的颜色聚类的类别数为8色时，w = 8。 该SOFM聚类器的学习过程如下a、 初始化，权值矩阵『是一个值为M^ e
的随机数矩阵，学习速率 W,)二/7。(〈1)，这里，；;。=0.01，邻域^ = 3及总学习次数7 = 100。b、 计算欧式(Euclid)距离，<formula>formula see original document page 13</formula> c、 确定获胜神经元，<formula>formula see original document page 13</formula>d、 修正连接权值，以g为中心，确定学习邻域Wg(O，修正权值<formula>formula see original document page 14</formula>其它(12)e、 返回步骤b直到完成所有输入模式，即遍历> =1，2,...,"的训练，f、 更新学习速率;;(O<formula>formula see original document page 14</formula>(13)该聚类器收敛之后，权值阵『=[w,]3x = [w1;，W2"w3y]》 表示的是各个类别的颜色中心，即属于第7'类的颜色中心为<formula>formula see original document page 14</formula>对照聚类中心就可以对一幅图像的颜色，按照"距离哪个颜色中心最近， 就属于明f个颜色类别"的原则进行聚类，获得不同颜色类别所在的颜色区域。 步骤5、相似类别的查找与对应。经过聚类之后，经过一次颜色传递校正后的源图像与目标图像之间类别 所在区域不能""^一对应，因此，需要进行相似类别的判断，具体步骤如下， a、将图像由RGB颜色空间转换到HSV颜色空间，<formula>formula see original document page 14</formula>(14)<formula>formula see original document page 14</formula>(15)<formula>formula see original document page 14</formula>(16)b、 对H、 S分别进行m级量化，统计出各聚类后区域的归一化//5二维直方图，即/f分量为<formula>formula see original document page 15</formula>^分量为<formula>formula see original document page 15</formula>c、 使用修正的Bhattacharyya系数作为二维直方图相似程度的评判，计 算公式如下<formula>formula see original document page 15</formula>(17)' 通过分析/)(p,《)可知两直方图颜色的不匹配程度，Z)(;7,们的值越小 两直方图匹配度越高，表明两个区域越相似。 步骤6、进行二次颜色传递校正。将在步骤4得到的每一个经过一次颜色传递校正图像的聚类区域校正至 找到最相似的目标图像的聚类区域后，利用目标图像的聚类区域的统计特 性，按照前述的一次颜色传递校正相同的方法，对一次校正结果图像中对应 的聚类区域进行颜色传递校正，得到二次颜色传递校正图像。步骤7、用户根据对颜色质量的主观判断，人工调整二次校正的聚类个 数，得到最终的校正结果图。如果用户对颜色的色差能够有比较大的容忍性，例如只关心清晰化后图 像的细节部分，只采用一次校正就可以；如果用户对色差的要求比较苛刻， 则需要进行这一步的操作。由于图像的雾况不同，参照用的目标图像不同，聚类个数的多少会影响 到图像清晰化过程中的颜色恢复效果。聚类经验值选为8个类别的聚类，可以根据图像效果的好坏在此基础上增减聚类类别数，以达到满意的效果屈。本发明的方法在进行图像清晰化时，所选择的自标图像允许与源图像的 画面内容不一致，但是，为了尽可能地保证颜色的恢复效果，要求目标图像 的画面色调尽量与源图像相似。此外，对于摄像头固定的视频监视系统，可 以采集一帧晴好天气下的画面存储起来，作为目标图像，这样当系统训练得 到了聚类类别数之后，存储起来，在系统投入运行之后，直接调用该训练得 到的类别数进行处理，就可实现完全的自动化处理。
权利要求
1. 一种基于自适应聚类颜色传递的雾天图像清晰化方法，其特征在于，该方法按照以下步骤实施，步骤1、采集源图像和目标图像信息，通过颜色空间的转换，对源图像以及目标图像分别进行解耦合处理；步骤2、对步骤1所得的解耦合处理结果，在Lαβ颜色空间中，统计出其三个通道的源图像与目标图像的均值与方差，使源图像的统计特性尽可能地向目标图像“靠拢”，尽量使源图像与目标图像有相同的或尽量相似的统计特性；步骤3、将步骤2所得到的在Lαβ颜色空间上的校正源图像再由Lαβ颜色空间变换还原到RGB颜色空间，得到一次颜色传递校正结果图像，如果没有颜色失真，进行完步骤3之后，就完成了源图像的处理操作；如果出现色偏失真，还需要通过以下步骤继续完成对图像颜色的校正；步骤4、将步骤3所得到的一次颜色传递校正结果图像继续与目标图像进行颜色聚类；步骤5、对步骤4所得到的结果进行源图像与目标图像的相似类别的查找与对应；步骤6、根据步骤5所得到的结果，进行二次颜色传递校正；步骤7、用户根据对颜色质量的主观判断，对步骤6所得的二次颜色传递校正图像，调整二次校正的聚类个数，得到最终的校正结果图。
2、 根据权利要求1所述的图像清晰化方法，其特征在于，所述的步骤1 的解耦合处理方法，具体包括以下步骤a、先将RGB颜色空间按照下面的公式转换到LMS颜色空间，<formula>formula see original document page 3</formula>b、再将LMS颜色空间转换到Z^颜色空间，<formula>formula see original document page 3</formula>将图像转换到Zc^颜色空间之后，就完成了对三个颜色通道的解耦合。
3、根据权利要求1所述的图像清晰化方法，其特征在于，所述的步骤2中统计和处理均值和方差的方法，具体包括以下步骤，a、将源图像和目标图像转换到Z^颜色空间后，在i^/ 颜色空间下计算各个通道的总体均值^和标准差。，即源图像的三个通道的统计参数为乂，《，//f， ^，《，crf，目标图像的三个通道的统计参数为A"，,， 一，《，o/，参数的下标、,分别代表源图像和目标图像，均值和标准差的计算公式如下<formula>formula see original document page 3</formula>其中，/(u')表示图像在("力点上的灰度值，图像的大小为wxn，b、在源图像中，按照下式每个像素点的各通道都减去该通道的总体均值，<formula>formula see original document page 4</formula>c、对源图像中各个像素点按照下式进行像素值的縮放，<formula>formula see original document page 4</formula>d、源图像的每个像素点各个通道值按照下式加上目标图像相应通道的 均值，<formula>formula see original document page 4</formula>
4、根据权利要求1所述的图像清晰化方法，其特征在于，所述的步骤3 中的颜色空间变换还原方法，具体包括以下步骤 a、先将ZM颜色空间转换到LMS颜色空间，<formula>formula see original document page 4</formula>b、再将图像画面从LMS颜色空间转换到RGB颜色空间,<formula>formula see original document page 4</formula>
5、根据权利要求1所述的图像清晰化方法，其特征在于，所述的步骤4中，采用自组织特征映射神经元网络进行颜色聚类，具体包括以下步骤将SOFM颜色聚类器的输入神经元个数设置为3，这三个输入神经元的 含义分别为图像中像素的(及,G，^值，即x,i 、 x2=G、 x3 = JS，输出神经元的个数表示所需要聚类的类别数，该SOFM颜色聚类器的学习过程如下a、 初始化权值矩阵『为一个值为Wv e
的随机数矩阵，学习速率;;(O = 7。(< 1)， 这里，7。 =0.01，邻域^\^(/) = 3及总学习次数7 = 100，b、 计算欧式(Euclid)距离《爿II厂吗2c、 确定获胜神经元《=min《} C/L.局d、 修正连接权值以g为中心，确定学习邻域iVg(r)，修正权值e、 返回步骤b直到完成所有输入模式，即遍历/ = 1,2，...，"的训练，f、 更新学习速率7(0<formula>formula see original document page 5</formula>该聚类器收敛之后，权值阵『=[W々.]3x = [W1;,W2"W3;.];. = 1,2, ， 表示的是各个类别的颜色中心，即属于第7类的颜色中心为[Ay.，G"5y〗=[ ，w 2" w3y] ， ( y' = 1，2"."")，对照聚类中心就可以对一幅图像的颜色，按照"距离哪个颜色中心最近， 就属于哪个颜色类别"为原则进行聚类，获得不同颜色类别所在的颜色区域。
6.根据权利要求l所述的图像清晰化方法，其特征在于，所述的步骤5中源图像与目标图像的相似类别的査找与对应的方法，具体包括以下步骤a、将图像由RGB颜色空间转换到/^r颜色空间，—j[y-min(及,G，剛/F, F>0= 0， r = o'60(G — 5)/SF r = i 60[2 + (s —牟f] 「g60〖4 + (/ —C)/SF〗 j/ = jg0 F = 0// + 360 //<0b、对i/、 S分别进行m级量化，统计出各聚类后区域的归一化//5二维 直方图，即7/分量为"^A,^2，…，P附](f = 1 )，a = i/t = 1c、使用修正的Bhattacharyya系数作为二维直方图相似程度的评判，计算公式如下
7.根据权利要求l所述的图像清晰化方法，其特征在于，所述的步骤6中的二次颜色传递校正的方法，具体包括以下步骤将在步骤4得到的每一个经过一次颜色传递校正图像的聚类区域校正至找到最相似的目标图像的聚类区域后，利用目标图像的聚类区域的统计特 性，按照前述的一次颜色传递校正相同的方法，对一次校正结果图像中对应 的聚类区域进行颜色传递校正，得到二次颜色传递校正图像。
全文摘要
本发明公开了一种基于自适应聚类颜色传递的雾天图像清晰化方法，该方法按照以下步骤实施采集源图像和目标图像信息，通过颜色空间的转换分别进行解耦合处理；统计出源图像与目标图像的均值与方差，使源图像的统计特性尽可能地向目标图像“靠拢”；将所得到的在Lαβ颜色空间上的校正源图像再由Lαβ颜色空间变换还原到RGB颜色空间，得到一次颜色传递校正结果图；将一次颜色传递校正后的结果图像继续与目标图像进行颜色聚类；进行相似类别的查找与对应；进行二次颜色传递校正；人工调整二次校正的聚类个数，得到最终的校正结果图。本发明的方法实现了对大雾条件下所拍摄的图像进行清晰化处理，能够恢复出源图像中的有效信息。
文档编号G06T5/50GK101281642SQ20081001817
公开日2008年10月8日 申请日期2008年5月12日 优先权日2008年5月12日
发明者薇 刘, 虹 朱, 刚 李, 杨向波, 栋 王, 琚宁飞, 袁承兴, 邓颖娜, 楠 邢, 郭馨潞 申请人:西安理工大学