基于非局部均值的视频去噪方法和装置制造方法
【专利摘要】本发明提供了一种基于非局部均值的视频去噪方法，通过图像直方图规范化滤波处理以去除视频中的光照变化。本发明还提供了一种基于非局部均值的视频去噪装置，包括滤波模块，用于通过图像直方图规范化滤波处理以去除视频中的光照变化。本发明能够对光照条件的改变做出自适应的调整。
【专利说明】基于非局部均值的视频去噪方法和装置
【技术领域】
[0001]本发明涉及视频处理领域，具体而言，涉及一种基于非局部均值的视频去噪方法和装置。
【背景技术】
[0002]图像序列间的时域相关性提供了重要的先验信息。在数字视频的去噪研究中，为了能够合理利用图像序列间的时域信息，Buades等人提出一种基于非局部均值滤波的方法。非局部均值的思想是:具有相似结构的图像块在图像空间上相距可能较远，因此可以在整个图像空间内寻找与当前图像块具有相似结构的块来进行加权平均，从而去除当前块中心点的像素噪声。基于非局部均值的思想，随后提出了诸多改进的工作，包括提高计算效率方面，以及考虑图像块的旋转不变性方面。
[0003]然而发明人发现，这些基于非局部均值的方法直接利用图像像素作为局部图像结构特征，这种做法无法对光照条件的改变做出自适应的调整，从而可能忽略掉一大部分具有相似结构的匹配图像块。
【发明内容】
[0004]本发明旨在提供一种基于非局部均值的视频去噪方法和装置，以解决上述的问题。
[0005]在本发明的实施例中，提供了一种基于非局部均值的视频去噪方法，通过图像直方图规范化滤波处理以去除视频中的光照变化。
[0006]在本发明的实施例中，提供了一种基于非局部均值的视频去噪装置，包括滤波模块，用于通过图像直方图规范化滤波处理以去除视频中的光照变化。
[0007]本发明上述实施例的基于非局部均值的视频去噪方法和装置，因为通过图像直方图规范化滤波处理以去除视频中的光照变化，所以能够对光照条件的改变做出自适应的调
難
iF.0
【专利附图】
【附图说明】
[0008]此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中:
[0009]图1示出了根据本发明实施例的局部图像块，搜索窗口和搜索空间的构成示意图；
[0010]图2示出了根据本发明实施例的对三维搜索空间进行直方图规范化滤波处理的示意图；
[0011]图3示出了根据本发明实施例的视频去噪处理的流程图；
[0012]图4示出了根据本发明实施例的在滤波处理后的三维搜索空间内进行图像块匹配和相似度权重计算的示意图；[0013]图5示出了根据本发明实施例的滤波模块的示意图。
【具体实施方式】
[0014]下面将参考附图并结合实施例，来详细说明本发明。
[0015]在本发明的实施例中，提供了一种基于非局部均值的视频去噪方法，通过图像直方图规范化滤波处理以去除视频中的光照变化。
[0016]相关技术中基于非局部均值的方法都隐式地假设在图像序列中，具有相似局部结构的图像序列间保持光照条件的一致性。也就是说，这些传统的方法忽略了图像序列在拍摄过程中可能受到的光照条件改变的影响，例如闪光灯的效果。原本相似的图像局部结构在不同的光照条件下可能无法匹配得很好。因此，在相关技术的方法中，直接利用图像像素作为局部图像结构特征的做法无法对光照条件的改变做出自适应的调整，从而可能忽略掉一大部分具有相似结构的匹配图像块。
[0017]本实施例针对视频图像序列中存在的光照条件发生改变的情况，利用图像直方图规范化的滤波处理，提高了在帧间寻找相似图像块以及计算相似权重时对光照条件发生改变的鲁棒性，从而实现了一种光照不变的非局部均值的视频去噪技术。本发明上述实施例填补了在视频去噪方法中针对光照条件变化进行处理技术的空白，能够更好地去除视频序列中的噪声，尤其在视频拍摄过程中发生光照条件改变如闪光灯效应的情况下，较好地提升现有视频去噪方法的鲁棒性和去噪图像的视觉质量。
[0018]图3示出了根据本发明实施例的视频去噪处理的流程图，优选地，通过图像直方图规范化滤波处理以去除视频中的光照变化包括:
[0019]步骤S10，在当前帧中以待处理像素为中心构造局部图像块，在当前帧中以待处理像素为中心划定搜索区域作为搜索窗`口，对三维搜索空间内的其他各帧的对应区域建立对应的搜索窗口，各个搜索窗口构成三维搜索空间；
[0020]步骤S20，以当前帧的搜索窗口为参考依据，对三维搜索空间内的其他各帧对应的搜索窗口进行直方图规范化滤波处理，以得到具有光照不变性的三维搜索空间。
[0021]本优选实施例在构造三维搜索窗口时，考虑了帧序列间受到光照条件改变对图像整体和局部亮度的影响，通过使用图像直方图规范化方法消除结构十分相似的图像块在匹配时由于光照条件改变所带来的匹配误差，有效地提高了图像块相似匹配和相似权重计算的精度和鲁棒性，从而能够进一步提升整体视频去噪的性能。
[0022]图1示出了根据本发明实施例的局部图像块，搜索窗口和搜索空间的构成示意图，图2示出了根据本发明实施例的对三维搜索空间进行直方图规范化滤波处理的示意图，包括:
[0023]以帧fn的像素i为中心，构造局部图像块；
[0024]以像素i为中心，构造比局部图像块范围更大的搜索窗口 Wn，同时在前后各k帧上的对应位置处，都对应构造一个搜索窗口，得到一组搜索窗口的集合，{wn_k，…，Wn^1, Wn,Wn+1，…，wn+k}，这些搜索窗口构成三维搜索空间Q。
[0025]优选地，步骤S20包括:
[0026]设置voutj = G-1 (T (Vinj));其中，Vinj为三维搜索空间内的其他各帧对应的搜索窗口中各个像素j的图像值，VOUtj为j滤波处理后的图像值；[0027]
【权利要求】
1.一种基于非局部均值的视频去噪方法，其特征在于，通过图像直方图规范化滤波处理以去除视频中的光照变化。
2.根据权利要求1所述的方法，其特征在于，通过图像直方图规范化滤波处理以去除视频中的光照变化包括: 在当前帧中以所述待处理像素为中心构造局部图像块，在当前帧中以待处理像素为中心划定搜索区域作为搜索窗口，对所述三维搜索空间内的其他各帧的对应区域建立对应的搜索窗口，所述各个搜索窗口构成三维搜索空间； 以所述当前帧的搜索窗口为参考依据，对所述三维搜索空间内的其他各帧对应的搜索窗口进行直方图规范化滤波处理，以得到具有光照不变性的三维搜索空间。
3.根据权利要求2所述的方法，其特征在于，在当前帧中以所述待处理像素为中心构造局部图像块，在当前帧中以待处理像素为中心划定搜索区域作为搜索窗口，对所述三维搜索空间内的其他各帧的对应区域建立对应的搜索窗口，所述各个搜索窗口构成三维搜索空间包括: 以帧fn的像素i为中心，构造所述局部图像块； 以像素i为中心，构造比所述局部图像块范围更大的所述搜索窗口 wn，同时在前后各k帧上的对应位置处，都对应构造一个搜索窗口，得到一组搜索窗口的集合，{wn_k，-,Wn^ljWn,Wn+1,…，wn+k},这些搜索窗口构成所述三维搜索空间Q。
4.根据权利要求3所述的方法，其特征在于，以所述当前帧的搜索窗口为参考依据，对所述三维搜索空间内的其他各帧对应的搜索窗口进行直方图规范化滤波处理，以得到具有光照不变性的三维搜索空间包括:
设置 voutj = G-1 (T (Vinj))； 其中，Vinj为所述三维搜索空间内的其他各帧对应的搜索窗口中各个像素j的图像值，VOUtj为j滤波处理后的图像值；
5.根据权利要求4所述的方法，其特征在于，在得到具有光照不变性的三维搜索空间之后还包括: 通过计算4的局部图像块与Q内所有局部图像块之间的结构差异，确定像素i与j之间的相似权重； 根据所述相似权重，基于非局部均值的去噪方法对像素i去噪处理。
6.根据权利要求5所述的方法，其特征在于，通过计算4的局部图像块与Q内所有局部图像块之间的结构差异，确定像素i与j之间的相似权重包括:.、I f 1、’⑷—叫 I;
7.根据权利要求6所述的方法，其特征在于，根据所述相似权重，基于非局部均值的去噪方法对像素i去噪处理包括:
8.一种基于非局部均值的视频去噪装置，其特征在于，包括滤波模块，用于通过图像直方图规范化滤波处理以去除视频中的光照变化。
9.根据权利要求8所述的装置，其特征在于，所述滤波模块包括: 空间模块，用于在当前帧中以所述待处理像素为中心构造局部图像块，在当前帧中以待处理像素为中心划定搜索区域作为搜索窗口，对所述三维搜索空间内的其他各帧的对应区域建立对应的搜索窗口，所述各个搜索窗口构成三维搜索空间； 直方图模块，用于以所述当前帧的搜索窗口为参考依据，对所述三维搜索空间内的其他各帧对应的搜索窗口进行直方图规范化滤波处理，以得到具有光照不变性的三维搜索空间。
10.根据权利要求9所述的装置，其特征在于，所述空间模块用于以帧fn的像素i为中心，构造所述局部图像块，以像素i为中心，构造比所述局部图像块范围更大的所述搜索窗口 wn,同时在前后各k帧上的对应位置处,都对应构造一个搜索窗口，得到一组搜索窗口的集合，{wn_k,…，wn_1; wn, wn+1,…，wn+k},这些搜索窗口构成所述三维搜索空间Q ;所述直方图模块用于设置Voutj = G-1CT(Vinj)),其中，Vinj为所述三维搜索空间内的其他各帧对应的搜索窗口中各个像素j的图像值，VOUtj为j滤波处理后的图像值，
【文档编号】H04N19/56GK103686194SQ201210326076
【公开日】2014年3月26日 申请日期:2012年9月5日 优先权日:2012年9月5日
【发明者】任杰, 刘家瑛, 郭宗明, 卓越 申请人:北京大学, 北大方正集团有限公司, 北京北大方正电子有限公司