基于纹理特征和颜色特征融合的图像显著性检测方法与流程

文档序号:12471966阅读:来源:国知局

技术特征:

1.一种基于纹理特征和颜色特征融合的图像显著性检测方法,包括:

1)输入原始图像I,对其进行去纹理处理,得到去纹理图像S,利用SLIC方法对去纹理图像S进行超像素分割,得到颜色超像素图像SP1

2)输入原始图像I,利用Gabor滤波器函数提取其纹理特征,得到纹理特征图像T,利用SLIC方法对纹理特征图进行超像素分割,得到纹理超像素图像SP2

3)把颜色超像素图像SP1转化到CIE-Lab颜色空间,得到对应的CIE-Lab颜色超像素图像SP3,在CIE-Lab颜色超像素图像SP3中第i个超像素pi和第j个超像素pj,计算颜色距离dapp(pi,pj)1和空间距离dspa(pi,pj);

4)计算CIE-Lab颜色超像素图像SP3中第i个超像素pi的初步对比度Ctr(pi),利用该对比度得到基于颜色特征的颜色显著图SM1

5)把纹理超像素图像SP2转化到CIE-Lab颜色空间,得到对应的CIE-Lab纹理超像素图像SP4,对CIE-Lab纹理超像素图像SP4中第i个超像素pi和第j个超像素pj构建无相权值表,从该无相权值表中得到第i个超像素和第j个超像素的最短路径,计算pi和pj在最短路径的累积权重dgeo(pi,pj);

6)计算CIE-Lab纹理超像素图像SP4中第i个超像素pi的广度面积Area(pi)和pi边界连接函数为BndCon(pi),根据这两个参数计算背景概率

<mrow> <msubsup> <mi>&omega;</mi> <mi>i</mi> <mrow> <mi>b</mi> <mi>g</mi> </mrow> </msubsup> <mo>=</mo> <mn>1</mn> <mo>-</mo> <mi>exp</mi> <mrow> <mo>(</mo> <mo>-</mo> <mfrac> <mrow> <msup> <mi>BndCon</mi> <mn>2</mn> </msup> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> </mrow> <mrow> <mn>2</mn> <msubsup> <mi>&sigma;</mi> <mrow> <mi>B</mi> <mi>C</mi> </mrow> <mn>2</mn> </msubsup> </mrow> </mfrac> <mo>)</mo> </mrow> <mo>,</mo> </mrow>

其中,σBC为比例系数,σBC∈[0.5,2.5];

7)用背景概率作为权值,对初步对比度Ctr(pi)进行加强,得到加强后的对比度ωCtr(pi),利用该对比度ωCtr(pi)得到基于纹理特征的纹理显著图SM2

8)输入纹理显著图SM2,并利用SLIC方法对纹理特征图进行超像素分割,得到纹理超像素显著图SM3,再将SM3转化到CIE-Lab颜色空间,得到对应的CIE-Lab纹理显著图SM4,在SM4中第i个超像素pi和第j个超像素pj,计算颜色距离dapp(pi,pj)2

9)将第i个超像素pi和第j个超像素pj分别在CIE-Lab颜色超像素图像SP3中的颜色距离dapp(pi,pj)1在CIE-Lab纹理显著图SM4中的颜色距离dapp(pi,pj)2及背景概率进行线性融合,得到最终对比度ωCtr(pi)*,利用该对比度得到同时包含颜色特征和纹理特征的最终显著图SM。

2.根据权利要求书1所述的方法,其中步骤(1)中用SLIC方法对原始图像进行超像素分割,是先将原始图像I转化为CIE-LAB颜色空间和XY坐标下的5维特征向量;再对5维特征向量构造距离度量标准,利用该标准对转化后的图像像素进行局部聚类与分割,得到颜色超像素图像SP1

3.根据权利要求书1所述方法,其中步骤(2)中的Gabor滤波器函数,表示如下:,

<mrow> <mi>g</mi> <mrow> <mo>(</mo> <mrow> <mi>x</mi> <mo>,</mo> <mi>y</mi> <mo>;</mo> <mi>&lambda;</mi> <mo>,</mo> <mi>&theta;</mi> <mo>,</mo> <mi>&psi;</mi> <mo>,</mo> <mi>&sigma;</mi> <mo>,</mo> <mi>&gamma;</mi> </mrow> <mo>)</mo> </mrow> <mo>=</mo> <mi>exp</mi> <mrow> <mo>(</mo> <mrow> <mo>-</mo> <mfrac> <mrow> <msup> <mi>x</mi> <mrow> <mo>&prime;</mo> <mn>2</mn> </mrow> </msup> <mo>+</mo> <msup> <mi>&gamma;</mi> <mn>2</mn> </msup> <msup> <mi>y</mi> <mrow> <mo>&prime;</mo> <mn>2</mn> </mrow> </msup> </mrow> <mrow> <mn>2</mn> <msup> <mi>&sigma;</mi> <mn>2</mn> </msup> </mrow> </mfrac> </mrow> <mo>)</mo> </mrow> <mi>exp</mi> <mrow> <mo>(</mo> <mrow> <mi>i</mi> <mrow> <mo>(</mo> <mrow> <mn>2</mn> <mi>&pi;</mi> <mfrac> <msup> <mi>x</mi> <mo>&prime;</mo> </msup> <mi>&lambda;</mi> </mfrac> <mo>+</mo> <mi>&psi;</mi> </mrow> <mo>)</mo> </mrow> </mrow> <mo>)</mo> </mrow> <mo>,</mo> </mrow>

其中(x,y)为Gabor滤波点坐标,x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ,λ为正弦函数波长,θ为Gabor核函数的方向,ψ为相位偏移,σ是高斯函数的标准差,γ为空间宽高比,i为虚数单位。

4.根据权利要求书1所述的方法,其中步骤(3)中计算颜色超像素图像的颜色距离dapp(pi,pj)1和空间距离dspa(pi,pj),按其公式进行:

<mrow> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mn>1</mn> </msub> <mo>=</mo> <msqrt> <msup> <mrow> <mo>(</mo> <msub> <mi>C</mi> <mrow> <mi>i</mi> <mn>1</mn> </mrow> </msub> <mo>-</mo> <msub> <mi>C</mi> <mrow> <mi>j</mi> <mn>1</mn> </mrow> </msub> <mo>)</mo> </mrow> <mn>2</mn> </msup> </msqrt> <mo>,</mo> </mrow>

<mrow> <msub> <mi>d</mi> <mrow> <mi>s</mi> <mi>p</mi> <mi>a</mi> </mrow> </msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <mi>exp</mi> <mrow> <mo>(</mo> <mo>-</mo> <mfrac> <mrow> <msup> <mi>d</mi> <mn>2</mn> </msup> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> </mrow> <mrow> <mn>2</mn> <msubsup> <mi>&sigma;</mi> <mrow> <mi>s</mi> <mi>p</mi> <mi>a</mi> </mrow> <mn>2</mn> </msubsup> </mrow> </mfrac> <mo>)</mo> </mrow> <mo>,</mo> </mrow>

其中Ci1为超像素pi在CIE-Lab颜色超像素图像SP3的颜色值,Cj1为超像素pj在CIE-Lab颜色超像素图像SP3的颜色值,d(pi,pj)表示两个超像素p和q中心的距离,σspa为比例系数,取值为0.25。

5.根据权利要求书1所述的方法,其中步骤(4)中计算第i个超像素的对比度Ctr(pi),其公式如下:

<mrow> <mi>C</mi> <mi>t</mi> <mi>r</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <munderover> <munder> <mi>&Sigma;</mi> <mrow> <mi>i</mi> <mo>&NotEqual;</mo> <mi>j</mi> </mrow> </munder> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mn>1</mn> </msub> <msub> <mi>d</mi> <mrow> <mi>s</mi> <mi>p</mi> <mi>a</mi> </mrow> </msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mo>,</mo> </mrow>

其中,N表示超像素的数目,dapp(pi,pj)1表示第i个超像素到第j个超像素的颜色距离,dspa(pi,pj)表示第i个超像素到第j个超像素的空间距离,i,j∈[1,N]且i≠j。

6.根据权利要求书1所述的方法,其中步骤(5)中计算超像素(pi,pj)在最短路径的累积权重dgeo(pi,pj),按如下公式计算:

<mrow> <msub> <mi>d</mi> <mrow> <mi>g</mi> <mi>e</mi> <mi>o</mi> </mrow> </msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <munder> <mrow> <mi>m</mi> <mi>i</mi> <mi>n</mi> </mrow> <mrow> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>=</mo> <msub> <mi>p</mi> <mn>1</mn> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>=</mo> <msub> <mi>p</mi> <mn>2</mn> </msub> <mo>,</mo> <mo>...</mo> <mo>,</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>=</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> </mrow> </munder> <munderover> <mo>&Sigma;</mo> <mrow> <mi>i</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mrow> <mi>i</mi> <mo>+</mo> <mn>1</mn> </mrow> </msub> <mo>)</mo> </mrow> <mn>1</mn> </msub> <mo>,</mo> </mrow>

当超像素(pi,qj)为同一个超像素时,即在i=j这种特殊情况下,定义dgeo(pi,pj)=0。

7.根据权利要求书1所述的方法,其中步骤(6)中计算第i个超像素的广度面积Area(pi)和边界连接函数BndCon(pi),按如下公式进行:

<mrow> <mi>A</mi> <mi>r</mi> <mi>e</mi> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <munderover> <munder> <mi>&Sigma;</mi> <mrow> <mi>i</mi> <mo>&NotEqual;</mo> <mi>j</mi> </mrow> </munder> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mi>exp</mi> <mrow> <mo>(</mo> <mo>-</mo> <mfrac> <mrow> <msubsup> <mi>d</mi> <mrow> <mi>g</mi> <mi>e</mi> <mi>o</mi> </mrow> <mn>2</mn> </msubsup> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> </mrow> <mrow> <mn>2</mn> <msubsup> <mi>&sigma;</mi> <mrow> <mi>c</mi> <mi>l</mi> <mi>r</mi> </mrow> <mn>2</mn> </msubsup> </mrow> </mfrac> <mo>)</mo> </mrow> <mo>,</mo> </mrow>

<mrow> <mi>B</mi> <mi>n</mi> <mi>d</mi> <mi>C</mi> <mi>o</mi> <mi>n</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <mi>A</mi> <mi>r</mi> <mi>e</mi> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>&CenterDot;</mo> <mi>&delta;</mi> </mrow> <msqrt> <mrow> <mi>A</mi> <mi>r</mi> <mi>e</mi> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> </mrow> </msqrt> </mfrac> <mo>,</mo> </mrow>

其中dgeo(pi,pj)表示第i个超像素到第j个超像素最短路径的累积权重,σclr为比例系数,取值在[5,15]之间,δ表示超像素pi在是否在图像边界上,若在,则δ取1,反之取0。

8.根据权利要求书1所述的方法,其中步骤(7)中计算新对比度ωCtr(pi),其计算公式如下

<mrow> <mi>&omega;</mi> <mi>C</mi> <mi>t</mi> <mi>r</mi> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>=</mo> <munderover> <mo>&Sigma;</mo> <mrow> <mi>i</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mn>1</mn> </msub> <msub> <mi>d</mi> <mrow> <mi>s</mi> <mi>p</mi> <mi>a</mi> </mrow> </msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <msubsup> <mi>&omega;</mi> <mi>i</mi> <mrow> <mi>b</mi> <mi>g</mi> </mrow> </msubsup> <mo>,</mo> </mrow>

是第i个超像素的背景概率。

9.根据权利要求书1所述的方法,其中步骤(8)计算纹理显著图SM4的颜色距离dapp(pi,pj)2,其公式如下:

<mrow> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mn>2</mn> </msub> <mo>=</mo> <msqrt> <msup> <mrow> <mo>(</mo> <msub> <mi>C</mi> <mrow> <mi>i</mi> <mn>2</mn> </mrow> </msub> <mo>-</mo> <msub> <mi>C</mi> <mrow> <mi>j</mi> <mn>2</mn> </mrow> </msub> <mo>)</mo> </mrow> <mn>2</mn> </msup> </msqrt> <mo>,</mo> </mrow>

其中,Ci2为超像素pi在CIE-Lab纹理显著图SM4的颜色值,Cj2为超像素pj在CIE-Lab纹理显著图SM4的颜色值。

10.根据权利要求书1所述的方法,其中步骤(9)计算最终对比度ωCtr(p)*,其公式如下

<mrow> <mi>&omega;</mi> <mi>C</mi> <mi>t</mi> <mi>r</mi> <msup> <mrow> <mo>(</mo> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>)</mo> </mrow> <mo>*</mo> </msup> <mo>=</mo> <munderover> <munder> <mi>&Sigma;</mi> <mrow> <mi>i</mi> <mo>&NotEqual;</mo> <mi>j</mi> </mrow> </munder> <mrow> <mi>j</mi> <mo>=</mo> <mn>1</mn> </mrow> <mi>N</mi> </munderover> <mrow> <mo>&lsqb;</mo> <mrow> <msub> <mi>&alpha;d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <mrow> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> </mrow> <mo>)</mo> </mrow> <mn>1</mn> </msub> <mo>+</mo> <mrow> <mo>(</mo> <mrow> <mn>1</mn> <mo>-</mo> <mi>&alpha;</mi> </mrow> <mo>)</mo> </mrow> <msub> <mi>d</mi> <mrow> <mi>a</mi> <mi>p</mi> <mi>p</mi> </mrow> </msub> <msub> <mrow> <mo>(</mo> <mrow> <msub> <mi>p</mi> <mi>j</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> </mrow> <mo>)</mo> </mrow> <mn>2</mn> </msub> </mrow> <mo>&rsqb;</mo> </mrow> <msub> <mi>d</mi> <mrow> <mi>s</mi> <mi>p</mi> <mi>a</mi> </mrow> </msub> <mrow> <mo>(</mo> <mrow> <msub> <mi>p</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>p</mi> <mi>j</mi> </msub> </mrow> <mo>)</mo> </mrow> <msubsup> <mi>&omega;</mi> <mi>i</mi> <mrow> <mi>b</mi> <mi>g</mi> </mrow> </msubsup> <mo>,</mo> </mrow>

其中dapp(pi,pj)1为第i个超像素与第j个超像素在CIE-Lab颜色超像素图像SP1.1中的颜色距离,dapp(pj,pj)2为第i个超像素与第j个超像素在CIE-Lab纹理显著图SM4中的颜色距离,dspa(pi,pj)为第i个超像素与第j个超像素的空间距离,为第i个超像素的背景概率,α为阻尼因子,α∈[0,1]。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1