图片检测方法、装置、电子设备及可读取存储介质与流程

本发明涉及视频处理技术领域，具体而言，涉及一种图片检测方法、装置、电子设备及可读取存储介质。

背景技术：

在一些手机应用中，每条会引入大量的视频量，现有技术中通过人工方式从视频中选取图片作为视频的封面图片，但是这种选取方式大大提高人工的成本，而且需要人员去播放视频，然后对视频进行截图来作为封面图片，其实际成本也比较高，对于媒体上万的入库视频则将不可设想，再者，通过人工选取的封面图片很可能不清晰或者图片内容不丰富，导致视频的封面图片质量不高的问题，由于封面图片较为模糊，用户在选取视频时体验效果较差。

技术实现要素：

有鉴于此，本发明实施例的目的在于提供一种图片检测方法、装置、电子设备及可读取存储介质，以改善视频的封面图片质量低造成用户体验差的问题。

第一方面，本发明实施例提供了一种图片检测方法，所述方法包括：对待检测图片进行边缘检测，其中，所述待检测图片为目标视频中的一帧；当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为所述目标视频的当前封面图片。

第二方面，本发明实施例提供了一种图片检测装置，所述装置包括：边缘检测模块，用于对待检测图片进行边缘检测，其中，所述待检测图片为目标视频中的一帧；封面图片选取模块，用于当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为所述目标视频的当前封面图片。

第三方面，本发明实施例提供了一种电子设备，所述电子设备包括处理器以及存储器，所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述电子设备执行以下操作：对待检测图片进行边缘检测，其中，所述待检测图片为目标视频中的一帧；当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为所述目标视频的当前封面图片。

第四方面，本发明实施例提供了一种可读取存储介质，所述可读取存储介质存储于计算机内，所述可读取存储介质包括多条指令，所述多条指令被配置成使得计算机执行所述图片检测方法。

本发明实施例提供一种图片检测方法、装置、电子设备及可读取存储介质，首先通过对待检测图片进行边缘检测，然后当当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为视频的当前封面图片，本方法与现有技术中通过人工选取视频封面图片的方式相比，有效提高了视频封面图片质量，进而提高了用户体验。

本发明的其他特征和优点将在随后的说明书阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明实施例了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了一种可应用于本发明实施例中的电子设备的结构框图；

图2为本发明实施例提供的一种图片检测方法的流程图；

图3为本发明实施例提供的一种采用roberts算子进行边缘检测的图像示意图；

图4为本发明实施例提供的一种图片检测装置的结构框图；

图5为本发明实施例提供的一种边缘检测模块的结构框图。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本发明的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

图1示出了一种可应用于本发明实施例中的电子设备100的结构框图。如图1所示，电子设备100包括存储器101、存储控制器102，一个或多个(图中仅示出一个)处理器103、外设接口104、射频模块105等。这些组件通过一条或多条通讯总线/信号线106相互通讯。

存储器101可用于存储软件程序以及模块，如本发明实施例中的页面切换处理方法以及装置对应的程序指令/模块，处理器103通过运行存储在存储器101内的软件程序以及模块，从而执行各种功能应用以及数据处理，如本发明实施例提供的页面切换处理方法。

存储器101可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。处理器103以及其他可能的组件对存储器101的访问可在存储控制器102的控制下进行。

外设接口104将各种输入/输入装置耦合至处理器103以及存储器101。在一些实施例中，外设接口104，处理器103以及存储控制器102可以在单个芯片中实现。在其他一些实例中，他们可以分别由独立的芯片实现。

射频模块105用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。

可以理解，图1所示的结构仅为示意，电子设备100还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。

于本发明实施例中，电子设备100中安装有客户端，该客户端可以是浏览器也可以是第三方应用软件，与服务器(server)端相对应，为用户提供服务，例如电子书阅读服务，用于播放本地文档或者电子书。

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参照图2，图2为本发明实施例提供的一种图片检测方法的流程图，所述方法应用于上述的电子设备，所述方法包括如下步骤：

步骤s110：对待检测图片进行边缘检测。

其中，所述待检测图片为目标视频中的一帧，即所述待检测图片为从所述目标视频中根据预设策略获取的图片或者为所述目标视频的当前已有的封面图片。

当对目标视频进行视频封面图片选取时，可以从该目标视频中选取一张图片，即一帧来作为该目标视频的当前封面图片，但是为了选取合适的图片作为目标视频的当前封面图片，可以根据预设策略从所述目标视频获取图片作为待检测图片，并对待检测图片进行边缘检测处理，从而获得符合条件的当前封面图片。

所述预设策略，可以设置为，采用ffmpeg工具对该目标视频进行关键帧提取，即预设策略为从所述目标视频中获取满足预设灰度阈值和预设颜色阈值的关键帧，将关键帧作为待检测图片，关键帧为目标视频中比较能代表目标视频内容的一些帧数的图片，即目标视频的代表帧，能代表目标视频、镜头的主要内容，一个镜头可以有一个或多个关键帧。

ffmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序，它提供了录制、转换以及流化音视频的完整解决方案。其可以对视频进行截图，对于选定的视频，截取指定时间的缩略图，抓取视频中的相关帧图片。

作为一种方式，采用ffmpeg工具从所述目标视频中获取关键帧的步骤如下：

(1)对目标视频每帧产生灰度直方图。

(2)计算两帧的灰度直方图相似度，同预设的灰度阈值进行比较以提取候选关键帧。

在实际应用中，可根据需要将灰度阈值设置为60％。

(3)将提取出的候选关键帧转换为h，s，v模式，通过将h分为16个等级，s分为8个等级，计算颜色直方图。

(4)使用相差系数法计算两帧的颜色相似度，同预设的颜色阈值进行比较以提取关键帧。

在实际应用中，可根据需要将颜色阈值设置为80％。

作为一种方式，采用ffmpeg工具从所述目标视频中获取关键帧的过程还可以如下所示：

首先获取目标视频的相关信息，其可以通过如下程序代码实现目标视频的获取：

[ffprobe]-vquiet-print_formatjson-show_format-show_streams[input]ffprobeffmpeg中ffprobe文件的路劲(windows下是ffprobe.exe文件)input视频文件

对目标视频的关键帧截取可以通过如下程序代码实现：

[ffmpeg]-i[input]-b[vbitrate]-r[framerate]-vfselect＝'eq(pict_type\\,i)'-vsync2-s[size]-fimage2[output]/thumbnails-％02d.jpeg

参数解释：

ffmpegffmpeg执行文件的路径(windows下面是ffmpeg.exe)

input视频文件

vbitrate视频流码率

framerate视频流帧率

size视频流帧的大小

另外，作为一种方式，获取目标视频中的关键帧还可以通过像素帧平均法或直方图帧平均法。像素帧平均法是取目标视频中所有帧的某位置上的像素值求其平均俩作为比较的标准，将目标视频中此位置像素值最为接近平均值的帧，作为该目标视频的关键帧。直方图帧平均法是选取所有帧直图的平均值作为标准，将直方图最接近平均值的帧作为该目标视频的关键帧。

需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取其视频中的关键帧的实现方式，均应包含在本发明的保护范围内。

通过上述方法获取目标视频中的关键帧后，其中获取的关键帧可能会有多张，将这些关键帧作为待检测图片，将待检测图片进行边缘检测，图片检测边缘检测的方法有多种，如sobel算子、roberts算子、canny算子、prewitt算子等。

在本实施例中，通过roberts边缘检测算法对待检测图片进行边缘检测，即通过roberts算子对待检测图片进行边缘检测，由于从目标视频中获取的待检测图片为彩色图片，该图片可能边缘会比较模糊，这将损害图像的视觉效果，所以，可以先对待检测图片进行锐化处理，获得锐化后的锐化图片。

图片锐化可以消除图片中模糊的边缘，增强图像中的高频成分，使边缘锐化，使图像原有的信息变换到有利于人们观看的指令，改善图像的视觉效果，从而使得图像中的对象边缘变得轮廓分明。在实际应用中，对待检测图片进行锐化的方法可以有空域微分法和高通滤波法，其中空域微分法又包括梯度锐化法和拉普拉斯锐化法，可以任意选取上述方法对待检测图片进行锐化，从而获得锐化后的锐化图片。

然后对锐化后的锐化图片采用上述的roberts算子、sobel算子、canny算子或prewitt算子进行边缘检测，从而获得边缘检测后的边缘图片，

下面以采用roberts算子进行边缘检测为例进行说明。roberts算子是由roberts提出的，该算子是一种利用局部差分算子寻找边缘的算子，它主要有检测两个对角线方向和水平与垂直方向两种方式。

roberts算子检测两个对角线方向，公式为：

其中，g(x,y)表示待检测图片处理后的灰度值，f(x,y)表示待检测图片处理前的灰度值。

roberts算子检测水平与垂直方向，公式为：

roberts算子检测两个对角线方向的卷积模板为：

roberts算子检测水平与垂直方向的卷积模板为：

请参照图3，图3为本发明实施例提供的一种采用roberts算子进行边缘检测的图像示意图，图中，图3a为原始图像，即待检测图片进行锐化后的锐化图片，图3b为roberts算子检测对角线方向后的图像，图3c为roberts算子检测水平与垂直方向后的图像。

roberts算子进行边缘检测采用两相邻两像素之差表示信号的突变，这种算法对于图像定位精度比较高，对噪声敏感，检测出的边缘较细。

需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何对图片进行边缘检测的实现方式，均应包含在本发明的保护范围内。

步骤s120：当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为所述目标视频的当前封面图片。

在上述步骤中对待检测图片进行边缘检测后获得边缘图片，为了检测边缘图片中的图像轮廓情况，还需判断边缘图片中的黑色像素点占比是否小于一预设值，则首先对边缘图片中的黑色像素点占比进行计算，通过获取边缘图片中的黑色像素点的个数以及总像素点个数，该边缘图片为二值黑白图片，0表示为黑色像素点，255为白色像素点，上述的电子设备可通过相关java程序获取边缘图片中的黑色像素点个数以及总像素点个数，黑色像素点占比等于黑色像素点个数与总像素点个数的比值。

电子设备中预先存储有一预设值，该预设值可以用户需求自行设定，在实际操作中，一般可设置为0.03，如在获得的边缘图片的黑像素占比小于0.03时，则表示该边缘图片的轮廓比较丰富，即内容较为丰富，则将该待检测图片作为目标视频的当前封面图片，若获得的边缘图片的黑像素点占比大于或等于0.03时，则认为该边缘图片对应的待检测图片为纯色背景图片，则直接舍弃该待检测图片。

需要说明的是，当待检测图片为多张时，可以从获取的多张边缘图片中选取其中黑色像素点占比最小的一张边缘图片对应的待检测图片作为所述目标视频的当前封面图片，当然，若有几张相同黑像素占比最小且相同的边缘图片，则可随机选取一张边缘图片对应的待检测图片作为该目标视频的当前封面图片，提高了视频的封面图片质量，进而用户在选取视频时，通过质量高的视频封面图片，提高了用户体验。

另外，作为一种方式，当所述目标视频已经有当前封面图片时，但是有时候该目标视频的当前封面图片并不清晰，或者图像轮廓不丰富，无法代表该目标视频，从而用户体验较差，所以首先对该目标视频的当前封面图片进行检测，即将目标视频的当前封面图片作为待检测图片，即所述待检测图片为所述目标视频的当前已有的封面图片，对所述目标视频的当前封面图片进行边缘检测，对目标视频的当前封面图片进行边缘检测方法请参照上述相关描述，在此不再过多赘述。

对所述目标视频的当前封面图片进行边缘检测后获得当前封面图片的边缘图片，判断该边缘图片的黑色像素点占比是否小于一预设值，如预设值为0.03，若边缘图片的黑色像素点占比大于或等于0.03，则表示该边缘图片对应的当前封面图片轮廓不丰富且不清晰，则重新从目标视频中选取图片作为该目标视频的当前封面图片，即根据预设策略从所述目标视频中获取图片作为待检测图片，然后执行步骤s110，从而选取合适的待检测图片替换该目标视频的当前封面图片；若边缘图片的黑色像素点占比小于0.03，则表示该边缘图片对应的当前封面图片轮廓丰富且清晰，则不重新替换该目标视频的当前封面图片，提高了视频的封面图片质量，进而用户在选取视频时，通过质量高的视频封面图片，提高了用户体验。

请参照图4，图4为本发明实施例提供的一种图片检测装置200的结构框图，所述装置包括：

边缘检测模块210，用于对待检测图片进行边缘检测，其中，所述待检测图片为目标视频中的一帧。

封面图片选取模块220，用于当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为所述目标视频的当前封面图片。

其中，所述待检测图片为从所述目标视频中根据预设策略获取的图片或者为所述目标视频的当前已有的封面图片。

作为一种方式，当待检测图片为所述目标视频的当前已有的封面图片时，所述边缘检测模块210，还用于对所述目标视频的所述当前已有的封面图片进行边缘检测.

所述封面图片选取模块220，还用于判断所述目标视频的当前已有的封面图片的边缘图片中的黑色像素点占比是否小于一预设值；在所述目标视频的当前已有的封面图片的边缘图片中的黑色像素点占比是否大于或等于一预设值时，则根据所述根据预设策略从所述目标视频中获取图片作为待检测图片。

作为一种方式，所述预设策略为从所述目标视频中获取满足预设灰度阈值和预设颜色阈值的关键帧，将所述关键帧作为待检测图片。

作为一种方式，请参照图5，所述边缘检测模块210包括：

锐化单元212，用于对待检测图片进行锐化，获得锐化后的锐化图片。

检测单元214，用于对所述锐化图片进行采用roberts算子进行边缘检测，以获得边缘检测后的边缘图片。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置的具体工作过程，可以参考前述方法中的对应过程，在此不再过多赘述。

综上所述，本发明实施例提供一种图片检测方法、装置、电子设备及可读取存储介质，首先通过对待检测图片进行边缘检测，其中，所述待检测图片为目标视频中的一帧，然后当所述待检测图片的边缘图片中的黑色像素点占比小于一预设值时，将所述待检测图片作为目标视频的当前封面图片，本方法与现有技术中通过人工选取视频封面图片的方式相比，有效提高了视频封面图片质量，进而提高了用户体验。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。