用于去除包含在视频中的雾的图像处理装置及其方法

用于去除包含在视频中的雾的图像处理装置及其方法
【专利摘要】本发明公开了用于去除包含在视频中的雾的图像处理装置和方法。所述图像处理装置包括：雾亮度测量单元，所述雾亮度测量单元用于测量包含雾的图像中的雾亮度；透射量估计单元，所述透射量估计单元用于估计用于生成由所述图像的对比度、图像损失和时间损失所导致的最小最终成本函数值的块单元透射量并且基于所述块单元透射量来估计像素单元透射量；以及图像恢复单元，所述图像恢复单元用于使用所述雾亮度和所述像素单元透射量来恢复所述图像。
【专利说明】用于去除包含在视频中的雾的图像处理装置及其方法

【技术领域】
[0001 ] 本公开内容在一个或更多个实施方式中涉及用于去除包含在视频中的雾的图像 处理装置和方法。更具体地，本公开内容涉及用于通过以下步骤来去除包含在视频中的雾 的图像处理装置和方法：基于各个块代表值来测量雾的亮度；估计用于生成能够由视频中 的对比度、图像损失和时间损失计算的最小最终成本函数的按块（blockwise)透射；基于 块单元透射来估计像素单元透射；以及通过使用雾的亮度和像素单元透射来重建图像。

【背景技术】
[0002] 雾是以冷凝液滴的形式漂浮的水蒸气的大气现象。有雾环境通常对不到1km的能 见度的视觉引起遮断。这样的有雾天气引起微粒水液滴进而引起光的散射。光的散射表示 当它与空中微粒碰撞时行进光的方向改变。散射取决于光的波长和微粒尺寸。
[0003] 光散射能够通常划分为瑞利（Rayleigh)散射和米氏（Mie)散射。瑞利散射在引起 散射的微粒的尺寸小于光的波长时适用，其中散射能量与波长的四次幂成反比。这由在空 气分子通过比红色使更多蓝色散射来使光散射时晴天里的天空的蓝色调举例说明。然而， 米氏散射理论在负责微粒的尺寸大于光的波长时适用于光散射。雾遵循米氏散射理论，因 为雾的微粒遍及可见光的400nm?700nm的波长具有和几个μπι至几十个μπι-样大的直 径。根据米氏散射理论，在大气中像水液滴这样的较大散射微粒情况下，散射的量不太受波 长影响以引起可见光区域中的所有光的更近散射（near-even scattering)。因此，当条件 是有雾的时，对象展示模糊图像。这时，生成称作空气光的新的光源。
[0004] 通过雾度失真的校正的图像质量改善可以解决能见度遮断并且锐化模糊图像。另 夕卜，这样的图像改善作为用于通过恢复由于雾而对字母、对象等导致的损坏信息而辨识对 象的预处理步骤是重要的。
[0005] 常规去雾技术可以粗略地分类为非模型方法和模型方法。
[0006] 非模型方法的示例可以包括直方图均衡。直方图均衡是用于分析图像的直方图以 调整分布的方法。直方图均衡是容易的并且提供改善的效果，但是不适合于具有非均匀深 度的有雾图像。另外，直方图均衡适合于改善一般图像质量但是没有令人满意地反映雾对 图像的影响的特性。对于包含厚雾的图像，它提供无意义的改善。
[0007] 模型方法用于对光由于雾而导致的散射现象对图像的影响进行建模。首先，已公 开了用于比较在不同天气下获得的两个或更多个图像以估计和校正场景深度从而校正由 于雾而导致的失真的技术。然而，在这个技术中，在不同天气之下的至少两个图像的输入是 需要的。对于实时实施方式，因此，有必要监测天气改变并且向其提供同数量的图像存储空 间。另外，难以确定存储周期，因为不能够估计天气改变循环。此外，有必要捕获没有误差 的相同场景。因此，移动对象在雾度失真的程度的估计期间频繁地引起误差。
[0008] 接下来，公开了一种用于通过估计并且减去图像的像素值由于雾而导致的改变量 来校正由于雾而导致的失真的技术。这个技术基于雾是均匀的假设，这仅适用于均匀且薄 的雾。然而，大多数真实世界的雾往往是不均匀的。甚至对于均匀雾而言，这个方法也具有 缺点，因为雾影响的程度取决于相机与对象之间的距离。


【发明内容】

[0009] 技术问题
[0010] 因此，本公开内容已被做出努力有效地解决以上描述的局限性，并且提供用于去 除包含在视频中的雾以能够从视频有效地估计和去除雾成分从而改善图像质量的图像处 理装置和方法。
[0011] 另外，本公开内容提供了用于去除包含在视频中的雾以能够基于图像的深度信息 不同地改善对比度的图像处理装置和方法。
[0012] 技术方案
[0013] 根据本公开内容的一些实施方式，用于去除包含在视频中的雾的图像处理装置包 括雾亮度测量器、透射估计器和图像重建器。雾亮度测量器被构造成测量包含雾的图像中 的雾亮度。透射估计器被构造成估计用于生成能够由所述图像的对比度、图像损失和时间 损失计算的最小最终成本函数值的按块透射并且构造成基于所述按块透射来估计按像素 透射。并且图像重建器被构造成通过使用雾亮度和按像素透射来重建图像。
[0014] 雾亮度测量器可以包括图像分割模块、代表值计算模块和像素值选择模块。图像 分割模块被构造成将图像分割为预定第一数目的块。代表值计算模块被构造成计算每块的 像素值的平均值和标准偏差并且构造成通过使用平均值和标准偏差来计算每块的代表值。 像素值选择模块被构造成选择在块中的具有为各个块所获得的代表值中的最大一个代表 值的块，并且，如果所选块具有等于或小于预设面积的面积，则选择所选块的最亮像素值作 为雾亮度。
[0015] 透射估计器可以包括按块透射估计器和第一按像素透射估计器。按块透射估计器 被构造成将包含雾的图像分割为预定第二数目的块并且构造成通过使用由每块的对比度、 图像损失和时间损失所计算的最终成本函数来估计按块透射。第一按像素透射估计器被构 造成通过对保边滤波器应用按块透射来估计第一按像素透射。
[0016] 透射估计器可以进一步包括图像尺度缩小器（down-scalar)，所述图像尺度缩小 器被构造成将包含雾的图像按比例缩小至预定尺寸并且构造成向按块透射估计器发送经 尺度缩小的图像。
[0017] 另外，透射估计器可以进一步包括图像尺度放大器（up-scaler)和第二按像素透 射估计器。图像尺度放大器被构造成将经尺度缩小的图像和第一按像素透射放大至原始图 像的对应大小。第二按像素透射估计器被构造成通过使经放大的第一按像素透射经历保边 滤波器来估计第二按像素透射。
[0018] 按块透射估计器可以包括图像分割模块、成本函数计算模块、最终成本函数计算 模块和按块透射检测模块。图像分割模块被构造成将图像分割为预定第二数目的块。成本 函数计算模块被构造成在按预定比率（ratio)改变预定范围的透射的同时计算每块的对 比度、图像损失和时间损失。最终成本函数计算模块被构造成计算由对比度、图像损失和时 间损失所生成的最终成本函数值。并且按块透射检测模块被构造成检测用于从所计算的最 终成本函数值生成最小最终成本函数值的透射作为按块透射。
[0019] 成本函数计算模块可以将从使用各个像素的亮度值所生成的离差乘以-1来获得 对比度（Ec)。
[0020] 另外，如果按块透射收敛于'0'，则成本函数计算模块可以通过使用具有小于'0' 或大于'255'的像素值的区域的面积来计算图像损失。
[0021] 成本函数计算模块可以对前一帧的按块透射应用用于根据对象的移动来校正透 射的按块校正系数以校正前一帧的按块透射，并且通过使用前一帧的经校正的按块透射和 当前帧的按块透射来计算用于使图像的时间差最小化的时间损失。
[0022] 最终成本函数计算模块可以生成包括对比度、图像损失和时间损失的最终成本函 数，并且在改变在〇至1之间的任何值作为透射的同时计算最终成本函数值。
[0023] 第一按像素透射估计器或第二按像素透射估计器可以包括近似透射计算模块、变 量计算模块和按像素透射检测模块。近似透射计算模块被构造成通过部分地重叠块并且对 各个块应用高斯权重来计算每块的近似透射。变量计算模块被构造成计算用于生成按块透 射与近似透射之间的最小差的变量。按像素透射检测模块被构造成检测基于所计算的变量 的近似透射作为第一按像素透射或第二按像素透射。
[0024] 图像尺度放大器可以通过使用最近邻插值将经尺度缩小的图像放大至原始图像 的对应大小。
[0025] 本公开内容的另一方面提供了由图像处理装置执行以用于去雾和重建包含雾的 视频的方法，该方法包括以下过程：(a)测量包含雾的图像中的雾亮度；(b)估计用于生成 能够由所述图像的对比度、图像损失和时间损失计算的最小最终成本函数值的按块透射并 且基于所述按块透射来估计按像素透射；以及（c)通过使用雾亮度和按像素透射来重建图 像。
[0026] 用于测量雾亮度的过程（a)可以包括：将图像分割为预定第一数目的块；针对已 分割块中的每一个块来计算像素值的平均值和标准偏差；通过使用平均值和标准偏差来计 算每块的代表值；选择在块中的具有为各个块所计算的代表值中的最大一个代表值的块； 确定所选块是否具有等于或小于预设面积的面积；以及在确定所选块的面积等于或小于预 设面积后估计所选块的最亮像素值作为雾亮度。
[0027] 用于估计按块透射的过程（b)可以包括：将包含雾的图像分割为预定第二数目的 块并且通过使用由每块的对比度、图像损失和时间损失所计算的最终成本函数来估计按块 透射；以及通过对保边滤波器应用按块透射来估计第一按像素透射。
[0028] 视频去雾方法可以进一步包括：在按块透射的估计之前，将包含雾的图像尺度缩 小为预定尺寸。
[0029] 视频去雾方法可以进一步包括：在第一按像素透射的估计之后，将经尺度缩小的 图像和第一按像素透射放大至原始图像的对应大小；以及通过对保边滤波器应用经放大的 第一按像素透射来估计第二按像素透射。
[0030] 按块透射的估计可以包括：将图像分割为预定第二数目的块；在按预定比率改变 预定范围的透射的同时计算每块的对比度、图像损失和时间损失；计算由对比度、图像损失 和时间损失所计算的每块的最终成本函数值；以及检测用于从所计算的最终成本函数值生 成最小最终成本函数的透射作为按块透射。
[0031] 第一按像素透射的估计可以包括：通过部分地重叠块并且对各个块应用高斯权重 来计算每块的近似透射；计算用于生成按块透射与近似透射之间的最小差的变量；以及检 测基于所计算的变量的近似透射作为第一按像素透射。
[0032] 有益效果
[0033] 根据如以上所描述的本公开内容，可以从视频有效地估计和去除视频的雾成分， 从而改善图像质量。
[0034] 另外，可以基于图像的深度信息不同地改善对比度。
[0035] 另外，每像素的雾的浓度可以通过透射的计算来估计并且可以按照像素不同地去 除雾，从而从图像中有效地去除雾，而不管雾如何分布在图像中。
[0036] 另外，能够去除可能在从视频中去除雾之后发生的闪烁现象，从而更稳定地去除 雾，这能够通过高速滤波器的引入被实时地处理。

【专利附图】

【附图说明】
[0037] 图1是根据至少一个实施方式的用于去除包含在视频中的雾的图像处理装置的 构造的框图。
[0038] 图2是图1中所示出的雾亮度测量器的详细构造的框图。
[0039] 图3是图1中所示出的按块透射估计器的详细构造的框图。
[0040] 图4是用于例示图像损失最小化的构思的图。
[0041] 图5是图1中所示出的按像素透射估计器的详细构造的框图。
[0042] 图6是用于例示块重叠的图。
[0043] 图7是用于通过使用高斯权重来例示重叠的图。
[0044] 图8是由根据至少一个实施方式的图像处理装置所执行的用于重建包含雾的图 像的方法的流程图。
[0045] 图9是示出了根据至少一个实施方式在保边滤波器基于重叠块应用情况下的示 例画面的图。
[0046] 图10是由根据至少一个实施方式的图像处理装置所执行的用于测量雾亮度的方 法的流程图。
[0047] 图11是由根据至少一个实施方式的图像处理装置所执行的用于检测按块透射的 方法的流程图。
[0048] 图12是由根据至少一个实施方式的图像处理装置所执行的用于估计按像素透射 的方法的流程图。

【具体实施方式】
[0049] 在下文中，将参照附图详细地描述本公开内容的至少一个实施方式。
[0050] 在本公开内容中，雾可以是大气雾或浓雾。另选地，雾可以是黄沙、灰尘或与雾或 浓雾相似的空中物质。
[0051] 图像处理装置通过使用等式1来重建包含雾的图像。
[0052] Ip = Jptp+(l-tp) * A 等式 1
[0053] 这里，Ip是在像素位置p处获得的图像（受雾影响的图像）的亮度值，Jp是在像 素位置P处所获得的图像（不受雾影响的图像）的原始亮度值，t p是在像素位置p处所获 得的图像的透射（深度信息和图像与对应点之间的距离），而A是雾亮度值。
[0054] 图像处理装置基于考虑到对比度的成本Ec、可能在改善对比度时引发的图像损失 和考虑到视频的时间相似性的成本Ε τ来生成成本函数，计算最小成本函数由其生成的透 射't'，并且通过使用等式1来重建包含雾的图像。
[0055] 在下文中，将参照附图描述由图像处理装置使用等式1所执行的包含雾的视频的 重建。
[0056] 图1是根据至少一个实施方式的用于去除包含在视频中的雾的图像处理装置的 构造的框图。图2是图1中所示出的雾亮度测量器的详细构造的框图。图3是图1中所示 出的按块透射估计器的详细构造的框图。图4是用于例示图像损失最小化的构思的图。图 5是图1中所示出的按像素透射估计器的详细构造的框图。图6是用于例示块重叠的图。 图7是用于通过使用高斯权重来例示重叠的图。
[0057] 参照图1，用于去除包含在视频中的雾的图像处理装置100包括雾亮度测量器 110、图像尺度缩小器120、按块透射估计器130、第一按像素透射估计器140、图像尺度放大 器150、第二按像素透射估计器160和图像重建器170。
[0058] 雾亮度测量器110将包含雾的图像分割为预定数目的块以为各个块获得代表值， 选择具有所获得的代表值中的最大一个的块，并且重复以将所选块分割为预定数目的块直 到所选块的面积变得等于或小于预设面积为止并且以获得代表值以及从而获得雾亮度。包 含雾的图像可以是视频。
[0059] 为了获得雾亮度，假定了"雾是从太阳到达的大气光进而具有非常高的亮度值"和 "受雾影响的像素值近似雾亮度"。另外，参照等式1，可以看到获得的图像受雾影响与透射 (深度信息和图像与对象之间的距离）成比例。因此，因为受雾大大地影响的区域的大多数 值分布在雾度值附近，所以标准偏差减小。
[0060] 当组合上述两个假设时，可以看到雾亮度值在图像中具有非常高的亮度值并且能 够从受雾最大影响的区域获得。当可以选择导致问题的白色对象时，雾度可以由最亮像素 值选择。作为解决方案，块逐渐减小至然后被检测到的较小尺寸，以便于将候选雾亮度值缩 小至最低（具有预设面积的块），其中大多数分量像素值能够被视为受雾亮度值影响并且 然后最亮像素值能够不考虑可能的误差而被选择为雾亮度值。因此，雾亮度测量器110可 以选择最亮像素值作为雾亮度值。
[0061] 参照图2,雾亮度测量器110包括图像分割模块112、代表值计算模块114和像素 值选择模块116。
[0062] 图像分割模块112将包含雾的图像分割为预定数目的块。预定数目的块可以是四 个。
[0063] 为了为各个块获得代表值，图像分割模块112使用各个块中的像素值的标准偏差 和平均亮度，这两者可以取决于各个快的尺寸而不同。例如，为了通过使用具有尺寸20X20 的块来获得代表值，代表值可以被选择为在存在明亮对象时为高的，所述明亮对象诸如无 雾区域中的白色建筑物或白色车辆。增加块的尺寸将渲染待选自雾更多侧的代表值同时使 雾亮度值变得难以在块中找到。由于这个原因，通过将图像分割为块，块逐渐减小至较小尺 寸以缩小候选雾亮度值。这时，为了处理视频，在第一帧处或每T帧检测雾亮度值以防止由 于雾亮度值的更新而导致的高光（specularity)。
[0064] 代表值计算模块114为由图像分割模块112所分割的块中的每一个获得像素值的 平均值和标准偏差，并且通过使用在各个块中的平均值和标准偏差的差来获得代表值。
[0065] 雾亮度值在图像中具有非常高的亮度值并且能够从受雾影响最大的区域获得。因 为受雾大大地影响的区域的大多数值分布在雾度值附近，所以标准偏差减小。为了获得雾 亮度值，因此，代表值计算模块114通过使用每一个块的平均值和标准偏差来计算代表值。
[0066] 像素值选择模块116从为各个块所获得的那些代表值中选择具有最大代表值的 块，并且，当所选块的面积等于或小于预设面积时，选择块的最亮像素值作为雾亮度。
[0067] 如上述的，当候选雾亮度值缩小至最终值（具有预设面积的块）时，块中的大多数 像素值能够被视为受雾亮度值影响，这即便在选择最亮像素值作为雾亮度值时也不考虑可 能的误差。因此，当块面积变得等于预设面积或更小时，像素值选择模块116选择最亮像素 值作为雾亮度值。
[0068] 像素值选择模块116选择具有最大代表值的块并且确定所选块的面积是否等于 或小于预设面积。块的预设面积是块的长度乘宽度，其可以是例如200。在确定所选块的面 积变成等于或小于200后，像素值选择模块116选择所选块的最亮像素值并且估计所选像 素值作为雾亮度。
[0069] 在确定所选块的面积大于200后，像素值选择模块116将所选块分割为预定数目 的较小块以为各个块获得代表值，选择在块中的具有最大代表值的一个块，并且确定所选 块的面积是否等于或小于预设面积，这被重复。当这个过程选择具有等于或小于预设面积 的面积的块时，像素值选择模块116估计所选块的最亮像素值作为雾亮度。
[0070] 返回参照图1，图像尺度缩小器120将有雾图像按比例缩小为预定尺寸。例如，图 像尺度缩小器120可以将输入图像按比例缩小为具有320X240的尺寸的图像。在输入视 频照原样的这样的大尺寸情况下考虑大量计算，它最初经历尺度缩小过程。
[0071] 按块透射估计器130将由图像尺度缩小器120所尺度缩小的图像分割为预定数目 的块，获得每块的对比度、每块的图像损失和每块的时间损失，并且通过使用由对比度、图 像损失和时间损失所计算的最终成本函数来估计按块透射。
[0072] 参照图3,按块透射估计器130包括图像分割模块132、成本函数计算模块134、最 终成本函数计算模块136和按块透射检测模块138。
[0073] 图像分割模块132将由图像尺度缩小器120所尺度缩小的有雾图像分割为预定数 目的块。如果各个块的尺寸太小，则对于图像分割模块132来说难以估计透射。由于这个 原因，各个块的最小尺寸被设定为16x16或更大。可以任意地确定块的数目。由图像分割 模块132所执行的图像分割将考虑到非均匀雾的影响来补偿雾成分。可以考虑到硬件复杂 性适当地确定基于图像分割的块的数目。
[0074] 等式1用来重建图像。仅仅关于由雾亮度测量器10所获得的雾亮度值的信息留 下未确定问题，其中等式在针对各个像素计算透射t p和原始亮度值Jp时由未知量过支配。 在块中的透射％是均匀的假设下，因此，对于B (块中像素的数目）个等式，未知量的数目可 以大大地减小至B+1。图像考虑到局部深度信息被分割，因为假定为具有单个均匀透射't' 的整个未分图像根据图像深度信息排除针对图像劣化的自适应补偿。
[0075] 成本函数计算模块134在按预定比率改变预定范围的透射的同时执行对比度、图 像损失和时间损失的按块计算。
[0076] 为了计算透射't'，需要满足以下条件：（1)基于透射't'所确定的输出图像对比 度为大的，（2)基于透射't'所确定的输出图像损失为最低的，以及（3)为了减少视频的闪 烁现象，与前一帧的差为小的。
[0077] 因此，成本函数计算模块134考虑到考虑对比度的成本E。、可能在改善对比度时引 发的图像损失^和考虑到视频的时间相似性的成本Ε τ来生成成本函数，并且通过使用各个 成本函数来计算对比度、图像损失和时间损失。
[0078] 为此目的，成本函数计算模块134包括对比度计算模块134a、图像损失计算模块 134b和时间损失计算模块134c。
[0079] 对比度计算模块134a通过像由等式2所表示的那样使用基于各个像素的亮度值 的离差S 2来计算对比度Ec。
[0080]

【权利要求】
1. 一种用于去除包含在视频中的雾的图像处理装置，所述图像处理装置包括： 雾亮度测量器，所述雾亮度测量器被构造成测量包含雾的图像中的雾亮度； 透射估计器，所述透射估计器被构造成估计用于生成能够由所述图像的对比度、图像 损失和时间损失计算的最小最终成本函数值的按块透射并且构造成基于所述按块透射来 估计按像素透射；以及 图像重建器，所述图像重建器被构造成通过使用所述雾亮度和所述按像素透射来重建 所述图像。
2. 根据权利要求1所述的图像处理装置，其中，所述雾亮度测量器包括： 图像分割模块，所述图像分割模块被构造成将所述图像分割为预定第一数目的块； 代表值计算模块，所述代表值计算模块被构造成计算每块的像素值的平均值和标准偏 差并且构造成通过使用所述平均值和标准偏差来计算每块的代表值；以及 像素值选择模块，所述像素值选择模块被构造成选择在所述块中的具有在为各个块所 获得的所述代表值中的最大代表值的块，并且，如果所选块具有等于或小于预设面积的面 积，则选择所选块的最亮像素值作为所述雾亮度。
3. 根据权利要求1所述的图像处理装置，其中，所述透射估计器包括： 按块透射估计器，所述按块透射估计器被构造成将包含所述雾的所述图像分割为预定 第二数目的块并且构造成通过使用由每块的对比度、图像损失和时间损失所计算的最终成 本函数来估计按块透射；以及 第一按像素透射估计器，所述第一按像素透射估计器被构造成通过对保边滤波器应用 所述按块透射来估计第一按像素透射。
4. 根据权利要求3所述的图像处理装置，所述图像处理装置还包括图像尺度缩小器， 所述图像尺度缩小器被构造成将包含所述雾的所述图像按比例缩小至预定尺寸并且构造 成向所述按块透射估计器发送经尺度缩小的图像。
5. 根据权利要求4所述的图像处理装置，所述图像处理装置还包括： 图像尺度放大器，所述图像尺度放大器被构造成将经尺度缩小的图像和所述第一按像 素透射放大至原始图像的对应大小；以及 第二按像素透射估计器，所述第二按像素透射估计器被构造成通过使经放大的第一按 像素透射经历保边滤波器来估计第二按像素透射。
6. 根据权利要求3所述的图像处理装置，其中，所述按块透射估计器包括： 图像分割模块，所述图像分割模块被构造成将所述图像分割为所述预定第二数目的 块； 成本函数计算模块，所述成本函数计算模块被构造成在按预定比率改变预定范围的透 射的同时计算每块的对比度、图像损失和时间损失； 最终成本函数计算模块，所述最终成本函数计算模块被构造成计算由所述对比度、所 述图像损失和所述时间损失所生成的最终成本函数值；以及 按块透射检测模块，所述按块透射检测模块被构造成检测用于从计算的最终成本函数 值生成最小最终成本函数值的透射作为按块透射。
7. 根据权利要求6所述的图像处理装置，其中，所述成本函数计算模块将从使用每一 个像素的亮度值所生成的离差乘以-1以获得对比度（EC)。
8. 根据权利要求6所述的图像处理装置，其中，如果所述按块透射收敛于'0'，则所述 成本函数计算模块通过使用具有小于'0'或大于'255'的像素值的区域的面积来计算所述 图像损失。
9. 根据权利要求6所述的图像处理装置，其中，所述成本函数计算模块对前一帧的按 块透射应用用于根据对象的移动来校正透射的按块校正系数以校正所述前一帧的按块透 射，并且通过使用所述前一帧的经校正的按块透射和当前帧的按块透射来计算用于使所述 图像的时间差最小化的时间损失。
10. 根据权利要求6所述的图像处理装置，其中，所述最终成本函数计算模块生成包括 所述对比度、所述图像损失和所述时间损失的最终成本函数，并且在将〇至1之间的任何值 改变为透射的同时计算最终成本函数值。
11. 根据权利要求5所述的图像处理装置，其中，所述第一按像素透射估计器或第二按 像素透射估计器包括： 近似透射计算模块，所述近似透射计算模块被构造成通过部分重叠所述块并且对各个 块应用高斯权重来计算每块的近似透射； 变量计算模块，所述变量计算模块被构造成计算用于生成所述按块透射与所述近似透 射之间的最小差的变量；以及 按像素透射检测模块，所述按像素透射检测模块被构造成检测基于计算的变量的所述 近似透射作为所述第一按像素透射或第二按像素透射。
12. 根据权利要求5所述的图像处理装置，其中，所述图像尺度放大器通过使用最近邻 插值将经尺度缩小的图像放大至所述原始图像的对应大小。
13. -种由图像处理装置执行以用于去雾和重建包含雾的视频的方法，所述方法包括 以下步骤： (a) 测量包含雾的图像中的雾亮度； (b) 估计用于生成能够由所述图像的对比度、图像损失和时间损失计算的最小最终成 本函数值的按块透射并且基于所述按块透射来估计按像素透射；以及 (c) 通过使用所述雾亮度和所述按像素透射来重建所述图像。
14. 根据权利要求13所述的方法，其中，测量所述雾亮度的步骤（a)包括： 将所述图像分割为预定第一数目的块； 针对分割块中的每一个块来计算像素值的平均值和标准偏差； 通过使用所述平均值和标准偏差来计算每块的代表值； 选择在所述块中的具有为各个块所计算的所述代表值中的最大代表值的块； 确定所选块是否具有等于或小于预设面积的面积；以及 在确定所选块的面积等于或小于所述预设面积后，估计所选块的最亮像素值作为所述 雾亮度。
15. 根据权利要求13所述的方法，其中，估计所述按块透射的步骤（b)包括： 将包含所述雾的所述图像分割为预定第二数目的块并且通过使用由每块的对比度、图 像损失和时间损失所计算的最终成本函数来估计按块透射；以及 通过对保边滤波器应用所述按块透射来估计第一按像素透射。
16. 根据权利要求15所述的方法，所述方法还包括：在所述按块透射的估计之前，将包 含所述雾的所述图像尺度缩小为预定尺寸。
17. 根据权利要求16所述的方法，在所述第一按像素透射的估计之后，所述方法还包 括： 将经尺度缩小的图像和所述第一按像素透射放大至原始图像的对应大小；以及 通过对保边滤波器应用经放大的第一按像素透射来估计第二按像素透射。
18. 根据权利要求15所述的方法，其中，估计所述按块透射的步骤包括： 将所述图像分割为预定第二数目的块； 在按预定比率改变预定范围的透射的同时计算每块的对比度、图像损失和时间损失； 计算由所述对比度、所述图像损失和所述时间损失所计算的每块的最终成本函数值； 以及 检测用于从计算的最终成本函数值生成最小最终成本函数的透射作为按块透射。
19. 根据权利要求15所述的方法，其中，所述第一按像素透射的估计包括： 通过部分地重叠所述块并且对各个块应用高斯权重来计算每块的近似透射； 计算用于生成所述按块透射与所述近似透射之间的最小差的变量；以及 检测基于所计算的变量的近似透射作为所述第一按像素透射。
【文档编号】G06T5/00GK104303208SQ201380025254
【公开日】2015年1月21日 申请日期:2013年5月3日 优先权日:2012年5月15日
【发明者】朴镕燮, 李东学, 金昌洙, 金镇焕, 张源东 申请人:Sk电信有限公司, 高丽大学校产学协力团