基于视觉显著的图像去模糊方法
【专利摘要】一种基于视觉显著的图像去模糊方法，根据视觉注意机制，首先利用图像是否清晰为显著性条件对待处理图像进行显著性划分，即显著性部分和非显著性部分；然后，对非显著性部分进行模糊核估计得到图像的模糊核K；最后，引入补偿机制，使得到的模糊核应用在整幅待处理图像中，同时使得显著性部分的边缘无振铃效应，进而得到去模糊后图像。本发明基于视觉注意的显著性研究，通过其显著图将模糊图像划分为两部分，显著性部分与非显著性部分，仅估计非显著性部分的模糊核，即仅对模糊图像的模糊部分进行处理，保持其较为清晰的部分。这样就可避免模糊图像因为不同部分的模糊程度及模糊方向的不同，而用同一估计模糊核处理带来的影响。
【专利说明】基于视觉显著的图像去模糊方法【技术领域】
[0001]本发明涉及一种图像复原领域的去模糊方法，具体地说是涉及一种应用在单幅图像，并基于视觉注意机制的显著性研究的图像去模糊方法，能高效快速地实现模糊图像的去模糊。
【背景技术】
[0002]在单幅图像去模糊技术中，模糊图像不止包含了模糊所造成的图像退化部分，还包括噪声所造成的图像退化部分。因此，首先去除噪声就是一大难点，因为图像的细节信息被噪声给掩盖，贸然地去除噪声过程必然会对图像的细节信息造成破坏，导致最终的求解结果的严重退化；与此同时，基于单幅图像的去模糊也要面临两个问题一点扩散函数(模糊核)的估计以及一个高质量的图像去卷积过程。根据实验表明，即便点扩散函数(模糊核)已经评估的非常完美了，如果直接用来去卷积的话，也会造成非常严重的振铃现象；同时当图像各处的模糊轨迹不一样时，也会导致去模糊效果不佳。因此如何快速高效地实现图像的去模糊，同时拥有很好的去模糊效果，是一个值得研究的课题。
[0003]单幅图像去模糊算法是一种病态性的问题。因为我们已知的信息并不足以使得我们获得精确的结果。为快速高效地实现图像的去模糊，已经有很多方法对于运动模糊给了一些限制性的假设，例如假设运动模糊为参数化的线性运动，现在技术中存在以下几种方法:
1)假设运动模糊是各向同性的；
2)利用自然图像统计的变分贝叶斯方法；
3)利用alphamatting获得的模糊信息去估计了每个像素点的模糊核；
4)利用透明度(transparency)变化的alphamatte来估计模糊核。
[0004]5)利用一系列的优化技术做到了很好的去模糊算法。
[0005]上述的这些方法虽然也实现了图像的去模糊，但是在保证普适性和高效性情况下，还存在着相当的缺陷。
【发明内容】
[0006]本发明的目的是提供一种在不影响图像去模糊质量的情况下，有效减少运行时间和具有普适性的基于视觉显著的图像去模糊方法。
[0007]为实现上述目的，本发明采用以下技术方案:
一种基于视觉显著的图像去模糊方法，根据视觉注意机制，首先利用图像是否清晰为显著性条件对待处理图像进行显著性划分，即显著性部分和非显著性部分；然后，对非显著性部分进行模糊核估计得到图像的模糊核最后，引入补偿机制，使得到的模糊核应用在整幅待处理图像中，同时使得显著性部分的边缘无振铃效应，进而得到去模糊后图像。
[0008]对非显著性部分进行模糊核估计得到图像的模糊核#包括以下步骤:
①预测:首先计算真实图像Z沿Z和_7方向梯度映射{/^ Py)，以预测在进行平滑区域抑制噪声后的真实图像Z的显著边缘；其中，初始迭代的真实图像Z由给定的模糊图像i?所获得的，除了初始迭代之外的真实图像Z，为前一次迭代中去卷积步骤之后获得的真实图像L ；
②模糊核#估计:利用预测后的梯度映射{px，Py}以及给定模糊图像A的梯度映射来估计模糊核I;
③去卷积:由所得的模糊核#和给定模糊图像A来获得真实图像Z。
[0009]所述的预测步骤包含双边滤波器处理，冲激滤波器处理以及梯度幅值阈值化处理过程；首先在真实图像Z上运用双边滤波器以减少噪声以及小细节；接着使用冲激滤波器对真实图像Z进行锐利边缘恢复。
[0010]在得到最粗糙的模糊核#的阶段，对给定模糊图像A进行降采样以开始预测步骤；而在得到更加精细的模糊核^的阶段，将粗糙阶段获得的真实图像Z通过双线性内插方式进行升采样，以进行更加精细的阶段的迭代。
[0011]采用上述技术方案的本发明，基于视觉注意的显著性研究，通过其显著图将模糊图像划分为两部分，显著性部分与非显著性部分，仅估计非显著性部分的模糊核，即仅对模糊图像的模糊部分进行处理，保持其较为清晰的部分。这样就可避免模糊图像因为不同部分的模糊程度及模糊方向的不同，而用同一估计模糊核处理带来的影响。另外，在图像非显著性部分模糊核估计步骤中，引入预测机制对模糊图像进行双边滤波器、冲激滤波器及梯度幅值阈值化处理，即可尽可能恢复图像边缘的锐利性以及在平滑区域抑制噪声，减少振铃现象。此外，在对于模糊核估计时，通过利用图像梯度而不是像素值来获得加速的效果，实验表明，该算法能在缩短处理时间上有很大的提高。且引入补偿机制，即使得原有的模糊图像由非空间不变运动模糊转化为空间不变运动模糊，使得预测的模糊核可以在整幅图像中使用，同时使得显著性部分的边缘无振铃效应，进而可以对整幅图像进行去模糊操作。
【专利附图】
【附图说明】
[0012]图1为本发明的基于显著性的图像去模糊算法流程图。
[0013]图2为本发明中快速去模糊算法框图。
[0014]图3为本发明实验结果中原有图像。
[0015]图4为本发明实验结果中显著图。
[0016]图5为本发明实验结果中通过补偿机制获得的全局模糊图。
[0017]图6为本发明实验结果中去模糊后的结果图。
【具体实施方式】
[0018]本发明根据视觉注意机制，首先利用图像是否清晰为显著性条件对待处理图像进行显著性划分，得到显著性部分和非显著性部分。本实施例中，采用基于频率域的显著性提取算法，获得所需显著性图。本发明之所以提出基于视觉显著的图像去模糊方法，是因为图像中的不同分块会有模糊程度上的差异或者模糊方向上的差异，其次即使通过不同模糊中的一个区块估计出了一个模糊核，利用这个模糊核对整幅图像进行去卷积算法也只会使得未模糊的部分的效果变得更差。
[0019]显著性划分后，即可得到去除显著性部分的非显著性部分图像，然后对于该部分就可以运用快速去模糊算法进行模糊核估计，而对于显著性部分在引入补偿机制时用到。由于非显著性部分的模糊是空间不变的且矩形图像是比较好处理的，故可以在此处理该部分最大的矩形连通域，并且由于该部分模糊形式单一，所以可以完全由最大的矩形连通域估算出的模糊核当作整个非显著性部分的模糊核。
[0020]进行模糊核估计是为了逐步精细模糊核I此算法迭代以下三个步骤:预测、模糊核估计以及去卷积，如图2所示。该算法是一种基于单幅图像估算运动模糊核与真实图像的盲去卷积算法，且引入了预测机制以及利用了图像梯度而不是其像素值。
[0021]在预测步骤中，首先计算真实图像Z沿z和方向梯度映射Py)，以预测在进行平滑区域抑制噪声后的真实图像Z的显著边缘。其中，初始迭代的真实图像Z由给定的模糊图像A所获得的，除了初始迭代之外的真实图像Z，为前一次迭代中去卷积步骤之后获得的真实图像h在模糊核估计步骤中，利用预测后的梯度映射{/1/y以及给定模糊图像B的梯度映射来估计模糊核I在去卷积步骤中，由获得的模糊核#和给定的模糊图像沒来获得真实图像h而这里获得的真实图像Z又将在下一次迭代的预测步骤中所运用到。为了使效果更好以及更加有效率地估计模糊核K和真实图像Z，引入一种“由粗糙到精细”的机制。在最粗糙的阶段时，对给定模糊图像A进行降采样以开始预测步骤。而在粗糙阶段获得的Z，通过双线性内插方式进行升采样，以进行更加精细的阶段的迭代。
[0022]预测步骤包含着双边滤波器处理，冲激滤波器处理以及梯度幅值阈值化处理过程。首先在Z上运用双边滤波器以减少噪声以及小细节。接着使用冲激滤波器对Z进行锐利边缘恢复。而经过冲击滤波器后获得的Z Z则包含着强化了的边缘以及加大的了噪声，通过计算和阈值化Z /的梯度映射/ / }，而截断后的梯度映射{px，Py]则给出了预测步骤的最后结果。引入预测机制可以尽可能恢复图像边缘的锐利性以及在平滑区域抑制噪声，减少振铃现象。
[0023]在对于模糊核估计时，通过利用图像梯度而不是像素值来获得加速的效果，实验表明，利用图像梯度能缩短处理所需时间。
[0024]接着引入补偿机制，即使得原有的模糊图像由非空间不变运动模糊转化为空间不变运动模糊，使得预测的模糊核可以在整幅图像中使用，同时使得显著性部分的边缘无振铃效应，进而可以对整幅图像进行去模糊操作。如图1所示，根据非显著性部分(背景)估计的模糊核将显著性部分(前景)模糊，此时和非显著性部分(背景)结合为一整幅模糊图像，然后再用估计的模糊核进行反卷积运算得到去模糊后的图像。
【权利要求】
1.一种基于视觉显著的图像去模糊方法，其特征在于:根据视觉注意机制，首先利用图像是否清晰为显著性条件对待处理图像进行显著性划分，即显著性部分和非显著性部分；然后，对非显著性部分进行模糊核估计得到图像的模糊核I;最后，引入补偿机制，使得到的模糊核应用在整幅待处理图像中，同时使得显著性部分的边缘无振铃效应，进而得到去模糊后图像。
2.根据权利要求1所述的基于视觉显著的图像去模糊方法，其特征在于:对非显著性部分进行模糊核估计得到图像的模糊核K包括以下步骤: ①预测:首先计算真实图像Z沿z和_7方向梯度映射{Px，Py}，以预测在进行平滑区域抑制噪声后的真实图像Z的显著边缘；其中，初始迭代的真实图像Z由给定的模糊图像i?所获得的，除了初始迭代之外的真实图像Z，为前一次迭代中去卷积步骤之后获得的真实图像L ； ②模糊核#估计:利用预测后的梯度映射{Px，Py}以及给定模糊图像A的梯度映射来估计模糊核 ③去卷积:由所得的模糊核#和给定模糊图像A来获得真实图像Z。
3.根据权利要求2所述的基于视觉显著的图像去模糊方法，其特征在于:所述的预测步骤包含双边滤波器处理，冲激滤波器处理以及梯度幅值阈值化处理过程；首先在真实图像Z上运用双边滤波器以减少噪声以及小细节；接着使用冲激滤波器对真实图像Z进行锐利边缘恢复。
4.根据权利要求2所述的基于视觉显著的图像去模糊方法，其特征在于:在得到最粗糙的模糊核#的阶段，对给定模糊图像A进行降采样以开始预测步骤；而在得到更加精细的模糊核^的阶段，将粗糙阶段获得的真实图像Z通过双线性内插方式进行升采样，以进行更加精细的阶段的迭代。
【文档编号】G06T5/00GK103514582SQ201210214195
【公开日】2014年1月15日 申请日期:2012年6月27日 优先权日:2012年6月27日
【发明者】周兵, 王振飞, 吴亚平 申请人:郑州大学