一种输变电巡检图像质量评价方法及系统与流程

本发明涉及电力系统智能分析领域，尤其涉及一种输变电巡检图像质量评价方法及系统。

背景技术：

为保证输电线路与变电站的正常运行，输电线路无人机巡检与变电站机器人智能巡检已成为常规的巡检模式，每次巡检会产生大量的巡检图像。由于光照、雾霾、巡检过程中无人机与机器人平台抖动导致采集图像出现模糊、失焦等情况出现，极大的降低了图像的表征能力，同时提高了后期巡检图像智能分析的难度。为了保证数据的有效性并降低图像智能分析的难度，通常采用人工判读的方式进行图像质量评价并删除低质量的图像，劳动强度大且受工作人员经验的影响使得评价波动较大，无法保证质量评价的一致性。

现阶段图像质量评价主要分为主观评价模式和客观评价模式，主观评价模式依靠人工判读的方式来进行，劳动强度大；客观评价模式主要利用图像视觉相关技术构建图像特征表示，结合相关评价算法来自动的实现图像质量的评价与分析。

现有技术提出利用局部滤波和梯度匹配的方式进行图像质量评价，由于采用了log-gabor进行滤波处理，无法鲁棒的提取图像多类型特征，限制了图像质量评价方法的应用。

现有技术提出采用卷积神经网络的方法来进行图像质量评判，该方法只设计了5层网络，只能够提取到局部的边缘、纹理特性，无法获取图像更深层次的语意及结构信息。

由于输变电巡检图像包含的目标种类多样，且背景复杂，上述方法均无法有效、精确的实现巡检图像质量的评价。

技术实现要素：

本发明为了解决上述问题，提出了一种输变电巡检图像质量评价方法及系统。首先，构建输变电巡检图像质量评判标准样本集；其次，设计深度卷积神经网络结构，并通过调优训练相关参数进行图像质量评判模型训练；最后，进行待评价图像的推理过程，获取图像质量评价参数，完成图像质量评价。

为了实现上述目的，本发明采用如下技术方案：

在一个或多个实施方式中公开的一种输变电巡检图像质量评价方法，包括：

构建输变电巡检图像质量评价标准样本集；

构建深度卷积神经网络，并对各层神经网络进行权重调优训练；

在深度卷积网络模型参数训练过程中，利用公开数据集对网络进行预训练，全连接层参数采用随机初始化的方式进行赋值，采用梯度下降方法进行每层参数的优化；

分别对输变电巡检图像质量评价标准样本集中随机抽取的数据进行至少一次训练，得到至少一个深度卷积神经网络模型；

根据得到的深度卷积神经网络模型，利用前向推理计算对待评价的巡检图像进行质量评价。

进一步地，所述输变电巡检图像质量评价标准样本集包括两部分：第一部分为通用的图像质量评价数据库ava数据集和tid2013数据集；第二部分为人工评价后的输变电巡检图像；

进一步地，

第一部分和第二部分训练数据的比例为1:2。

进一步地，所述构建深度卷积神经网络，具体为：

以vgg19网络结构为参考，构建图像质量评价深度卷积神经网络；深度卷积神经网络包括：卷积层、池化层、全连接层和分类层；

卷积层进行每层的局部区域的特征提取；池化层进行卷积处理后特征数据的降维处理；全连接层进行局部特征的汇总，形成图像统一的特征描述，作为打分分类处理的输入；分类层进行全连接层数据的打分、分类。

进一步地，为了评价图像质量，将vgg19网络的soft-max交叉熵损失函数进行修正，使用归一化的emd距离来度量图像评价的损失，实现了每张图像每个评分等级间的相对距离的计算。

进一步地，归一化的emd距离具体为：

其中，p＝[ps1,ps2,…,psn]，s1＜s2＜sn，表示人工标注的图像质量概率分布，为训练过程中预测的图像质量概率分布；n为标记的评分等级；r为设定的参数。

进一步地，根据得到的深度卷积神经网络模型，利用前向推理计算对巡检图像的质量进行评价，具体为：

分别加载训练好的至少一个深度卷积神经网络模型，并加载每一个深度卷积神经网络模型每层的网络参数；

对输入的图像进行缩放操作，并对图像进行去均值；

对于每一个深度卷积神经网络模型，通过深度卷积神经网络前向推理计算过程，计算输入图像的质量评价得分；在最后的soft-max输出图像数据属于不同等级的得分概率；对得分概率计算平均值和标准差：

分别求取每一个深度卷积神经网络模型计算得到的平均值和标准差的均值，作为图像质量评价指标；根据图像质量评价指标的数值，评价图像质量。

在一个或多个实施方式中公开的一种基于深度卷积神经网络的输变电巡检图像质量评价系统，包括服务器，所述服务器包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的任一种基于深度卷积神经网络的输变电巡检图像质量评价方法。

在一个或多个实施方式中公开的一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时执行上述的任一种基于深度卷积神经网络的输变电巡检图像质量评价方法。

与现有技术相比，本发明的有益效果是：

本发明通过构建深层次的卷积神经网络结构并对各层网络参数进行了调优训练，实现了输变电巡检图像本质特征的获取与质量评价，提高了巡检图像质量评价的鲁棒性能与准确性能，为后期的巡检图像智能分析提供更有效的图像数据。

采用更深层次的卷积神经网络，可以获取深层次的图像特征信息。

附图说明

构成本申请的一部分的说明书附图用来提供对本申请的进一步理解，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。

图1是输变电巡检图像质量评价深度卷积网络结构示意图；

图2是深度卷积神经网络输变电巡检图像质量评价方法流程图。

具体实施方式

应该指出，以下详细说明都是例示性的，旨在对本申请提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本申请所属技术领域的普通技术人员通常理解的相同含义。

需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本申请的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。

实施例一

在一个或多个实施方式中公开的一种基于深度卷积神经网络的输变电巡检图像质量评价方法，如图2所示，包括以下步骤：

步骤一：构建输变电巡检图像质量评价标准样本集，该样本集主要由两部分组成：一部分为通用的图像质量评价数据库ava数据集和tid2013数据集，一部分为人工评价后的输变电巡检图像。

为了保证输变电巡检图像占据相对的主导，在训练过程中使用的两部分训练数据的比例为1:2。

步骤二：构建深度卷积神经网络结构与网络各层功能参数，并对各层网络进行权重调优训练。

(1)以vgg19网络结构为参考，构建图像质量评价深度卷积神经网络。主要的网络层属性有卷积层、池化层、全连接层、分类层。卷积层主要进行每层的局部区域的特征提取；池化层主要进行卷积处理后特征数据的降维处理，以提高特征的表征能力并减少数据量；全连接层主要进行局部特征的汇总，形成图像统一的特征描述，作为打分分类处理的输入；分类层主要进行全连接层数据的打分、分类。根据图像质量评价等级将分类层输出设为10，具体的网络结构及网络属性参数见图1所示。

(2)为了评价图像质量，将vgg19网络的soft-max交叉熵损失函数进行修正，使用归一化的emd距离来度量图像评价的损失：

这里的p＝[ps1,ps2,…,psn],其中s1＜s2＜sn表示人工标注的图像质量概率分布，为训练过程中预测的图像质量概率分布；n为标记的评分等级；通过利用emd距离，实现了每张图像每个评分等级间的相对距离(即损失惩罚)的计算。为了训练过程中便于进行优化计算，在实践中参数r设定为2。

(3)在深度卷积网络模型参数训练过程中，利用imagenet公开数据集对网络进行预训练，以提高网络参数的训练效率与模型鲁棒性；全连接层参数采用随机初始化的方式进行赋值；优化时采用adam梯度下降方法进行每层参数的优化，偏置动量参数设定为0.9，随机丢弃参数设置为0.75；学习效率设置为3*10^-6。

(4)为提高应用中图像质量评价的鲁棒性能，在训练过程时重复上述(2)、(3)，分别对样本库随机抽取的数据进行4次训练，得到4个网络模型。

步骤三：巡检图像质量评价推理。加载构建的深度卷积神经网络结构与各层权重参数，并进行图像质量评价打分。

经过多次训练后得到了图像评价深度卷积网络模型，利用卷积网络的前向推理计算即可实现对巡检图像的质量评价，具体操作如下：

(1)分别加载训练好的4个深度卷积网络结构，并加载每层的网络参数；

(2)预处理输入图像，对输入的图像进行缩放操作(缩放至256*256)，并对图像进行去均值操作：

ii＝ii-meani,i∈(1,3)

其中，i为图像的像素，i表示图像的通道数，图像都是彩色三通道(rgb)图像，三通道为彩色图像的基本属性。mean表示图像的均值。

(3)通过卷积网络前向推理过程，计算质量评价得分。在最后的soft-max输出图像数据1～10个等级的得分概率。对得分概率计算平均值和标准差：

其中，si分别为图像的1～10个质量等级，i取值为1,2,3…,10。

(4)执行步骤(3)4次，得到4组网络推理的平均值和标准差，对其求平均值，最终的图像质量评价指标：

以平均值作为主要评价指标，均值越高图像质量越好；均值相同，标准差越小图像质量越好。

实施例二

在另外一些实施方式中公开了一种基于深度卷积神经网络的输变电巡检图像质量评价系统，包括服务器，所述服务器包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现实施例一中所述的基于深度卷积神经网络的输变电巡检图像质量评价方法。

实施例三

在另外一些实施方式中公开了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时执行实施例一中所述的基于深度卷积神经网络的输变电巡检图像质量评价方法。

上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。