一种基于局部结构检测和对比度的视觉显著图生成方法
【技术领域】
[0001] 本发明实施例涉及图像处理技术，尤其涉及一种基于局部结构检测和对比度的视 觉显著图生成方法。
【背景技术】
[0002] 目前图像的视觉显著性检测方法主要分为两大类：数据驱动的自底向上模型和 任务驱动的自顶向下模型。任务驱动模型的思想是利用已知任务的先验知识对特定对象 在场景中进行视觉搜索，提取相应的显著特征，计算得到的显著图都是与具体的任务相关。 数据驱动的自底向上模型所定义的显著性是指图像中具有差异性、不可预测性、稀少性和 奇异性的对象，其采取的思路是提取图像的底层特征，如亮度、颜色、纹理等，进而通过"中 心-周围"算子的差异性来衡量局部区域的显著度，最后合并所有的特征形成以灰度表示的 显著图。
[0003] 现有的基于底层特征进行显著性检测的方法主要是依赖于像素点（或区域）间的 相互对比，对空间关系的引入不合理，以及缺乏对显著目标自身特性的分析和利用。
【发明内容】
[0004] 针对上述问题和不足，本发明提供一种基于局部结构检测和对比度的视觉显著图 生成方法，以生产全分辨率显著图，使得所获得的显著图更加突出了目标区域，抑制了背景 区域的干扰。
[0005] 本发明提供一种基于局部结构检测和对比度的视觉显著图生成方法，包括：
[0006] 对原始图像进行局部结构特征分析，以获取原始图像中目标区域和背景区域的分 布f目息；
[0007] 根据所述背景区域的分布信息，计算所述原始图像中各像素点的颜色特征与所述 背景区域颜色均值之间的颜色距离值，并基于计算结果生成原始图像的初始显著图；
[0008] 根据所述目标区域的分布信息，计算所述原始图像中各像素点与所述目标区域的 质心坐标之间的空间距离，并基于计算结果生成所述原始图像中各像素点的位置关系权重 值；
[0009] 根据所述原始图像中各像素点的位置关系权重值对所述初始显著图进行优化以 生成所述原始图像的优化显著图。
[0010] 具体地，在上述方案的基础上，所述对原始图像进行局部结构特征分析，以获取原 始图像中目标区域和背景区域的分布信息包括：
[0011] 步骤1、对输入的原始图像进行灰度变换提取灰度特征，并对所述原始图像进行分 块操作，计算以所述原始图像中某一像素点为中心的NXN邻域图块的一阶局部梯度向量 fp.
[0012] 步骤2、定义所述邻域图块的局部结构张量，即局部梯度协方差矩阵T= /识，计 算所述局部梯度协方差矩阵的特征值Ai和入2;
[0013] 步骤3、若max(人丨，人2)彡人则所述像素点属于目标区域，若max(人丨，人2) <入 则所述像素点属于背景区域，其中A为预设的经验阈值；
[0014] 采用步骤1~步骤3遍历分析所述原始图像中所有像素点以获取原始图像中目标 区域和背景区域的分布信息。
[0015] 具体地，在上述方案的基础上，所述对输入的原始图像进行灰度变换提取灰度特 征之后，对所述原始图像进行分块操作之前，还包括：
[0016] 采用高斯滤波方法减少所述原始图像的噪声。
[0017] 具体地，在上述方案的基础上，所述N为40,经验阈值A设定为5X104。
[0018] 具体地，在上述方案的基础上，所述根据所述背景区域的分布信息，计算所述原始 图像中各像素点的颜色特征与所述背景区域颜色均值之间的颜色距离值，并基于计算结果 生成原始图像的初始显著图包括：
[0019] 提取所述原始图像在CIELab颜色空间的三个颜色通道特征，以每个像素点所对 应的1，a，b颜色特征分量作为所述像素点的颜色特征C= (1，a,b);
[0020] 根据所述原始图像中目标区域和背景区域的分布信息建立二值化掩膜Smask，其中 背景区域设为〇,目标区域设为1，利用所述掩膜Smask计算所述背景区域中所有像素点的颜 色均值Cm= (1 m,am,bm);
[0021] 以所述背景区域中所有像素点的颜色均值作为参考衡量标准，计算所述原始图像 中所有像素点的颜色特征与所述颜色均值之间的欧氏距离dMlOT= | |C-Cm| |，并以所述欧氏 距离作为全局颜色对比度显著性度量值；
[0022] 根据所述全局颜色对比度显著性度量值生成原始图像的初始显著图。
[0023] 具体地，在上述方案的基础上，所述根据所述目标区域的分布信息，计算所述原始 图像中各像素点与所述目标区域的质心坐标之间的空间距离，并基于计算结果生成所述原 始图像中各像素点的位置关系权重值包括：
[0024] 根据所述目标区域的分布信息，定义所述原始图像中目标区域的质心位置Pm= (xm，ym)，即目标区域的像素点坐标均值；
[0025] 以所述质心位置为参考点，计算每个像素点的空间距离度量关系dp()sitim= |P-Pm| |。其中P为某个像素点的坐标值；
[0026]生成每个像素点的空间关系权重值w=exp(-1/2 〇dp()siti(J，其中。为衡量空间 距离权重对显著度的影响因子。
[0027] 具体地，在上述方案的基础上，根据所述原始图像中各像素点的位置关系权重值 对所述初始显著图进行优化以生成所述原始图像的优化显著图包括：
[0028]定义优化公式SQptiniizatim=log(l+wdeQlJ，其中SQptiDlizatim为优化的显著性检测结 果，w为空间位置关系权重，dralOT为全局颜色对比度显著性度量值；
[0029]根据所述，为原始图像每个像素点分配显著值，并以此作为灰度值生成 所述原始图像的优化显著图。
[0030] 相对于现有的其他图像视觉显著性进行检测方法，本发明提供的方法在基于图像 的局部结构特征分析基础上，获得了关于图像中目标和背景区域的大致分布信息后，再对 图像的全局颜色对比度进行定义和计算显著性。以像素为单位计算显著性确保了所得到的 显著图具有全分辨率，能反映出更多显著目标的细节。对背景分布信息和目标分布信息的 合理利用和引入，使得所获得的显著图更加突出了目标区域，抑制了背景的干扰。
【附图说明】
[0031] 为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现 有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发 明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以 根据这些附图获得其他的附图。
[0032] 图1为本发明提供的基于局部结构检测和对比度的视觉显著图生成方法实施例 的流程图；
[0033] 图2为软件实验仿真图1的方法与其他方法的客观性能评价图。
【具体实施方式】
[0034] 为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例 中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是 本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员 在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0035] 图1为本发明提供的基于局部结构检测和对比度的视觉显著图生成方法实施例 的流程图，如图1所示，该方法可以包括：
[0036] 步骤101、对原始图像进行局部结构特征分析，以获取原始图像中目标区域和背景 区域的分布信息；
[0037] 步骤102、根据所述背景区域的分布信息，计算所述原始图像中各像素点的颜色特 征与所述背景区域颜色均值之间的颜色距离值，并基于计算结果生成原始图像的初始显著 图；
[0038] 图像中的对比度信息（即颜色距离值）是引起视觉注意的非常重要的一个因素。 自然场景图像中，人们很容易注意到与背景形成鲜明对比的区域，颜色对比度是相对于灰 度信息而言更全面的对物体的表达，基于全局颜色对比度的显著性计算主要考虑突出图像 中与背景对比度差异明显的目标区域。
[0039] 步骤103、根据所述目标区域的分布信息，计算所述原始图像中各像素点与所述目 标区域的质心坐标之间的空间距离，并基于计算结果生成所述原始图像中各像素点的位置 关系权重值；
[0040] 其中，所述目标区域的质心坐标是目标区域的所有像素点的坐标均值。
[0041] 步骤104、根据所述原始图像中各像素点的位置关系权重值对所述初始显著图进 行优化以生成所述原始图像的优化显著图。因上述步骤均是以像素为单位进行计算，因此 生成的所述原始图像的优化显著图具有全分辨率。
[0042] 在从全局计算每个像素的颜色特征相对于背景颜色均值的对比度时，还应该注意 到目标通常在图像中是集中分布的特性，即需要考虑以目标的空间位置为参考的空间关 系，并以此来优化全局颜色对比度显著图。
[0043] 本发明提供的方法在基于图像的局部结构特征分析基础上，获得了关于图像中目 标和背景区域的大致分布信息后，再对图像的全局颜色对比度进行定义和计算显著性。以 像素为单位计算显著性确保了所得到的显著图具有全分辨率，能反映出更多显著目标的细 节。对背景分布信息和目标分布信息的合理利用和引入，使得所获得的显著图更加突出了 目标区域，抑制了背景的干扰。
[0044] 在上述实施例的步骤中，具体地，步骤101可以包括：
[0045] 步骤1、对输入的原始图像进行灰度变换提取灰度特征，并对所述原始图像进行分 块操作，计算以所述原始图像中某一像素点为中心的NXN邻域图块的一阶局部梯度向量 辦，比如设定N为40。
[0046] 步骤2、定义所述邻域图块的局部结构张量，即局部梯度协方差矩阵T= /识，计 算所述局部梯度协方差矩阵的特征值A:和入2
[0047] 特征值的大小反应了图像中相应特征方向上结构变化的程度