基于结构张量全变差的图像视频超分辨率方法与流程

文档序号:11953328阅读:来源:国知局

技术特征:

1.一种基于结构张量全变差的图像视频超分辨率方法,其特征在于,

包括如下步骤:

建立图像降质模型,包括模糊和降采样两个部分,用公式表示为,

<mrow> <mi>y</mi> <mo>=</mo> <mi>D</mi> <mrow> <mo>(</mo> <mi>B</mi> <mo>&CircleTimes;</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>1</mn> <mo>)</mo> </mrow> </mrow>

其中,x表示原始高分辨率图像,B表示模糊核,表示卷积过程,D表示相应倍数的降采样,y表示生产的低分辨率图像;

建立超分辨率模型,包括图像插值和去模糊两个部分,用公式表示为:

<mrow> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>=</mo> <mi>B</mi> <msup> <mo>&CircleTimes;</mo> <mrow> <mo>-</mo> <mn>1</mn> </mrow> </msup> <mrow> <mo>(</mo> <msup> <mi>D</mi> <mrow> <mo>-</mo> <mn>1</mn> </mrow> </msup> <mi>y</mi> <mo>)</mo> </mrow> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>2</mn> <mo>)</mo> </mrow> </mrow>

其中,表示还原的高分辨率图像,B表示模糊核,表示反卷积过程,D-1表示相应倍数的插值过程,y表示低分辨率图像;以及

建立基于结构张量全变差正则化约束的超分辨率模型,用公式表示为,

<mrow> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>=</mo> <munder> <mrow> <mi>arg</mi> <mi>min</mi> </mrow> <mi>x</mi> </munder> <mfrac> <mn>1</mn> <mn>2</mn> </mfrac> <mo>|</mo> <mo>|</mo> <mi>D</mi> <mi>B</mi> <mi>x</mi> <mo>-</mo> <mi>y</mi> <mo>|</mo> <msubsup> <mo>|</mo> <mn>2</mn> <mn>2</mn> </msubsup> <mo>+</mo> <msub> <mi>&mu;STV</mi> <mi>p</mi> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>8</mn> <mo>)</mo> </mrow> </mrow>

其中,μ是一个可以调节的参数,对正则项约束的强度进行控制。

2.根据权利要求1所述的基于结构张量全变差的图像视频超分辨率方法,其特征在于,

所述建立基于结构张量全变差正则化约束的超分辨率模型包括如下步骤:

在观察到所述低分辨率图像y的情况下,求一个高分辨率的图像使其条件概率最大;

<mrow> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>=</mo> <munder> <mrow> <mi>arg</mi> <mi> maqx</mi> </mrow> <mi>x</mi> </munder> <mi>ln</mi> <mi> p</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>|</mo> <mi>y</mi> <mo>)</mo> </mrow> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>3</mn> <mo>)</mo> </mrow> </mrow>

引入真实图像的先验重建最终的结果;以及

基于结构张量的全变差的先验约束对一阶差分项进行约束,保留边缘和拐角的区域,平滑各向同性的部分。

3.根据权利要求2所述的基于结构张量全变差的图像视频超分辨率方法,其特征在于,

通过贝叶斯公式,将所述高分辨率的图像改写为,

<mrow> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>=</mo> <munder> <mi>argmin</mi> <mi>x</mi> </munder> <mo>-</mo> <mi>ln</mi> <mi> </mi> <mi>p</mi> <mrow> <mo>(</mo> <mi>y</mi> <mo>|</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>-</mo> <mi>ln</mi> <mi> </mi> <mi>p</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>4</mn> <mo>)</mo> </mrow> <mo>.</mo> </mrow>

4.根据权利要求3所述的基于结构张量全变差的图像视频超分辨率方法,其特征在于,

假设所述低分辨率图像存在的噪声为高斯噪声,所述后验概率部分-lnp(y|x)表示为,

<mrow> <mo>-</mo> <mi>ln</mi> <mi> </mi> <mi>p</mi> <mrow> <mo>(</mo> <mi>y</mi> <mo>|</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>=</mo> <mi>C</mi> <mo>|</mo> <mo>|</mo> <mi>D</mi> <mi>B</mi> <mi>x</mi> <mo>-</mo> <mi>y</mi> <mo>|</mo> <msubsup> <mo>|</mo> <mn>2</mn> <mn>2</mn> </msubsup> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>5</mn> <mo>)</mo> </mrow> </mrow>

其中,C是一个常系数。

5.根据权利要求2所述的基于结构张量全变差的图像视频超分辨率方法,其特征在于,

所述基于结构张量的全变差的先验约束中,所述结构化张量是指在每个像素点处首先计算结构张量,

<mrow> <mi>J</mi> <mo>=</mo> <msub> <mi>k</mi> <mi>&rho;</mi> </msub> <mo>*</mo> <mo>&dtri;</mo> <msub> <mi>u</mi> <mi>&sigma;</mi> </msub> <mo>&dtri;</mo> <msubsup> <mi>u</mi> <mi>&sigma;</mi> <mi>T</mi> </msubsup> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>6</mn> <mo>)</mo> </mrow> </mrow>

所述结构张量全变差的约束形式为,

<mrow> <msub> <mi>STV</mi> <mi>p</mi> </msub> <mrow> <mo>(</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>=</mo> <munder> <mo>&Sigma;</mo> <mi>i</mi> </munder> <mo>|</mo> <mo>|</mo> <msub> <mrow> <mo>(</mo> <msqrt> <msup> <mi>&lambda;</mi> <mo>+</mo> </msup> </msqrt> <mo>,</mo> <msqrt> <msup> <mi>&lambda;</mi> <mo>-</mo> </msup> </msqrt> <mo>)</mo> </mrow> <mi>i</mi> </msub> <mo>|</mo> <msub> <mo>|</mo> <mi>p</mi> </msub> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>7</mn> <mo>)</mo> </mrow> </mrow>

其中,λ+和λ-分别为该像素点i处的结构张量J的两个特征值,p表示范数的阶数。

6.根据权利要求5所述的基于结构张量全变差的图像视频超分辨率方法,其特征在于,

所述λ+和λ-满足如下关系,

Isotropic:

Line:λ+>>λ-≈0

Corner:λ+≥λ->>0。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1