一种基于局部二值模式的全参考图像质量评价方法
【技术领域】
[0001] 本发明涉及图像质量评价的技术领域，特别是涉及一种基于局部二值模式的全参 考图像质量评价方法。
【背景技术】
[0002] 在图像处理的不同阶段（如采集、编码、传输及后处理）都会引入不同类型的失 真，如何进行有效的图像质量评价成为图像处理领域一项重要的研宄课题。目前图像质量 评价可分为主观评价与客观评价两大类。主观评价通过人类观察者对失真图像进行主观评 分，并通过统计学的方法得到失真图像的最终评价分。主观评价方法最为准确可靠，但步骤 复杂，必须依靠人力给出评价分，不能进行自动的图像质量评价，不易应用到实时图像处理 系统中。而客观评价通过计算模型实现了自动的质量分析，虽然评价准确性不如主观评价， 但由于解放了人力，可以方便地实现大批量的图像质量分析，成为目前图像质量评价研宄 的主流。根据参考图像的可用情况，对失真图像质量分析的客观评价分为全参考、部分参考 或无参考的评价方法。其中全参考的图像质量评价研宄最为广泛。
[0003] 目前应用最广泛的全参考图像质量评价方法是均方误差（MSE)或峰值信噪比 (PSNR)。MSE或PSNR根据参考图像与失真图像所有像素平均意义上的信号误差来测量图像 质量，把所有像素误差孤立看待，没有考虑图像中固有的结构信息，导致评价结果常与主观 评价不一致。之后有学者根据人类视觉系统（HVS)对图像中的结构信息非常敏感的特性， 提出了基于局部结构失真的图像质量评价方法，其中最著名的是2004年王舟等人提出的 结构相似性测量（SSIM)(ZhouWang,A.C.Bovik,H.R.Sheikh,andE.P.Simoncelli，"Image qualityassessment:fromerrorvisibilitytostructuralsimilarity,IEEE TransactionsonImageProcessing,vol. 13,no. 4,pp. 600-612,Apr. 2004.)，SSIM首先对 参考图像与失真图像分块比较亮度、对比度与结构相似性，之后通过平均得到失真图像的 最终评价分。SSM考虑了HVS特性，其评价效果相比MSE与主观评价更为接近。杨春玲等人 认为SSIM对模糊图像的失真不能很好地评价，根据局部梯度信息对SSIM进行改进，提出了 基于梯度与基于边缘的SSIM(杨春玲，陈冠豪，谢胜利.基于梯度信息的图像质量评判方 法的研宄.电子学报，2007, 35 (7) : 1313-1317.)，改进了SSM的质量评价效果。目前图像 质量评价领域的国内专利还比较少，相关的比如2012年黄联芬等人获得授权的发明专利： 基于视觉特性与结构相似度的图像质量评测方法（CN101853504B)，该发明专利基于SSIM， 首先对参考图像与失真图像进行分块，之后分块测量SSIM，最后融合时为不同分块分配不 同权重以表达不同分块的重要性来得到总体评价分。
[0004] 目前这类基于局部结构的图像质量评价方法大多只考虑局部亮度变化的幅度信 息，如使用Sobel算子检测水平与垂直方向的亮度变化，进而得到幅度信息作为质量分析 的依据，而很少利用局部亮度变化的方向信息，因此局部结构信息表达不够充分。而本发明 能够很好地解决上面的问题。
【发明内容】
[0005] 本发明目的在于提供一种基于局部二值模式的全参考图像质量评价方法，该方法 应用于全参考图像质量评价，在进行图像质量评价时利用局部二值模式（即：LBP)来表达 局部结构信息，LBP模式值在计算时不仅利用了 8个方向的亮度变化幅度，还通过为不同方 向的变化幅度设置不同权重有效表达了亮度变化的方向信息，因此更充分地表达了图像每 一像素位置上的局部结构信息，得到了更好的质量评价结果。
[0006] 本发明解决其技术问题所采取的技术方案是：一种基于局部二值模式的全参考图 像质量评价方法，该方法包括如下步骤：
[0007] 步骤1:读入参考图像与失真图像；
[0008] 步骤2:将参考图像与失真图像进行灰度化处理以去除彩色信息，仅保留亮度分 量进行后续的图像质量分析；
[0009] 步骤3:对参考图像与失真图像的亮度分量进行简单的2X2平均低通滤波，2X2 平均低通滤波器定义如下：
[0010]
【主权项】
1. 一种基于局部二值模式的全参考图像质量评价方法，其特征在于，包括如下步骤： 步骤1:读入参考图像与失真图像； 步骤2:将参考图像与失真图像进行灰度化处理以去除彩色信息，仅保留亮度分量进 行后续的图像质量分析； 步骤3 :对参考图像与失真图像的亮度分量进行简单的2X2平均低通滤波，2X2平均 低通滤波器定义如下：
对平均低通滤波后的图像宽度与高度在像素域进行1/2的空间下采样，得到宽高均为 输入图像尺寸一半的对应参考图像R与对应失真图像D进行后续质量分析； 步骤4 :对上述步骤3得到的空间下采样后的参考图像R与失真图像D，分别计算每一 像素位置上的局部二值模式，即：LBP值；采用的LBP模式是近似半径为2的8邻域模式，即 P8R2模式；在计算中心像素的LBP模式值时共涉及周围12个像素，分别包括左、下、右、上 距离为2的4个像素，以及左下、右下、右上、左上的8个像素； 计算中心像素的LBP模式值时需要确定LBP编码的起始位置和顺序；采用中心像素左 边为起始位置，顺序为逆时针，权值依次为21，iG{7, 6, 5, 4, 3, 2, 1，0}; 步骤5 :计算参考图像R与失真图像D每一像素位置上的LBP值差异的绝对值，计算公 式如下：
其中与分别表示参考图像R与失真图像D在像素位置为（i，j)的LBP模 式值，表示参考图像R与失真图像D在像素位置为（i，j)的LBP模式值差异的绝 对值； 步骤6 :计算参考图像R与失真图像D所有像素位置上LBP值差异绝对值的算术平均 来获得失真图像的质量评价分S，其公式为：
S值越小，表示参考图像R与失真图像D所有像素位置上的平均局部结构变化越小，失 真图像的质量越好。
2. 根据权利要求1所述的一种基于局部二值模式的全参考图像质量评价方法，其特征 在于，所述方法的步骤4使用LBP来提取图像每一像素位置的局部结构信息；对中心像素计 算了 8个方向的亮度变化情况，且通过给8个方向的亮度差值分配不同的权重表达了不同 方向亮度差值的影响。
3. 根据权利要求1或2所述的一种基于局部二值模式的全参考图像质量评价方法，其 特征在于，所述方法的步骤步骤4计算每一像素位置的LBP模式值，S卩：近似半径为2的8 邻域模式，包括如下步骤： 1)对空间下采样后的参考图像R与失真图像D在左、下、右、上四个边界分别向外扩充 2个像素，扩充的像素亮度值设为0 ; 2) 对参考图像R与失真图像D原有的，g卩：非扩充的每一像素分别计算8个方向的亮 度差值，以参考图像为例的计算公式如下：
其中RU表示参考图像R在像素位置为（i，j)的亮度值，表示参考图像R在像素 位置为（i，j)的k，ke[0, 7]方向的亮度差值；按同样方法可计算得到失真图像D在像素 位置为（i，j)的k方向的亮度差值 3) 计算参考图像R与失真图像D原有的，S卩：非扩充的每一像素位置上的LBP模式值， 计算公式如下：
其中与分别为参考图像R与失真图像D在像素位置为（i，j)的LBP模式 值。
4. 根据权利要求1所述的一种基于局部二值模式的全参考图像质量评价方法，其特征 在于，所述方法的步骤5直接计算参考图像R与失真图像D每一像素位置上的LBP值差异 的绝对值来表达图像局部结构的差异。
5. 根据权利要求1所述的一种基于局部二值模式的全参考图像质量评价方法，其特征 在于：所述方法的步骤6直接计算各像素LBP值差异绝对值的算术平均来测量失真图像的 质量。
6. 根据权利要求1所述的一种基于局部二值模式的全参考图像质量评价方法，其特征 在于：所述方法利用局部二值模式来提取图像局部结构特征，并通过比较LBP值的差异程 度来描述失真图像的质量下降程度，定量地描述了不同类型失真对图像局部结构信息的影 响。
7. -种如权利要求1所述的基于局部二值模式的全参考图像质量评价方法应用于全 参考图像质量评价。
【专利摘要】本发明公开了一种基于局部二值模式的全参考图像质量评价方法，该方法读入参考图像与失真图像，做灰度化处理以去除彩色信息，仅保留亮度分量进行后续处理；为减小计算复杂度，对亮度分量进行简单的2×2平均低通滤波，之后在像素域进行1/2的空间下采样，获得宽高均为输入图像尺寸一半的对应图像进行质量分析；计算空间下采样后的参考图像与失真图像在每一像素位置的局部二值模式(LBP)值；计算参考图像与失真图像每一像素位置上的LBP值差异；最后通过统计所有像素位置上LBP值差异的算术平均来获得失真图像的质量评价分。
【IPC分类】G06T7-00
【公开号】CN104574381
【申请号】CN201410826667
【发明人】崔子冠, 干宗良, 唐贵进, 刘峰, 朱秀昌
【申请人】南京邮电大学
【公开日】2015年4月29日
【申请日】2014年12月25日