图像效果生成方法、装置和电子设备与流程

本公开涉及图像处理领域，尤其涉及一种图像效果生成方法、装置、电子设备及计算机可读存储介质。

背景技术：

随着计算机技术的发展，智能终端的应用范围得到了广泛的提高，例如可以通过智能终端听音乐、玩游戏、上网聊天和拍照等。对于智能终端的拍照技术来说，其拍照像素已经达到千万像素以上，具有较高的清晰度和媲美专业相机的拍照效果。

目前在采用智能终端进行拍照时，不仅可以使用出厂时内置的拍照软件实现传统功能的拍照效果，还可以通过从网络端下载应用程序(application，简称为：app)来实现具有附加功能的拍照效果，例如可以实现暗光检测、美颜相机和超级像素等功能的app。智能终端目前可以对人脸进行识别或者进一步对人脸的表情进行识别，比如在安全领域中对特性的人脸进行识别以通过验证，在图像中识别出人脸并对人脸进行优化处理，对人脸的表情进行识别来判断人的情绪等。

然而目前的表情识别，只能判断人脸的表情类型，而无法判断人脸表情的程度；在图像中存在多个人脸时，也无法快速得到达到目标表情的人脸；因此如何快速提示用户人脸表情的程度成为亟待解决的问题。

技术实现要素：

第一方面，本公开实施例提供一种图像效果生成方法，包括：获取第一图像，所述第一图像中包括人脸图像；识别所述人脸图像的人脸表情；判断所述人脸表情的等级；当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述获取第一图像，所述第一图像中包括人脸图像，包括：获取第一视频，所述第一视频中的至少一个视频帧中包括人脸图像。

进一步的，所述识别所述人脸图像的人脸表情，包括：识别所述第一图像中的人脸图像；在所述人脸图像中提取人脸表情特征；根据所述人脸表情特征对人脸表情进行识别。

进一步的，所述判断所述人脸表情的等级，包括：将所述人脸表情与预设的模板表情进行对比；将与所述人脸表情的匹配度最高的模板表情的等级作为所述人脸表情的等级。

进一步的，所述当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果，包括：当所述人脸表情的等级达到预定的等级，获取与所述预定的等级对应的图像效果配置文件；根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

进一步的，所述获取第一图像，所述第一图像中包括人脸图像，包括：获取第一图像，所述第一图像中包括至少两个人脸图像。

进一步的，所述识别所述人脸图像的人脸表情，包括：识别所述至少两个人脸图像中的每一个人脸图像的人脸表情。

进一步的，在所述识别所述至少两个人脸图像中的每一个人脸图像的人脸表情之后，还包括：针对每一个人脸图像的人脸表情，生成对应的图像效果配置文件。

进一步的，所述判断所述人脸表情的等级，包括：判断所述每一个人脸图像的人脸表情的等级。

进一步的，所述当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果，包括：获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果，包括：获取所有达到预定等级的人脸表情；获取与所述达到预定等级的人脸表情对应的图像效果配置文件；根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

第二方面，本公开实施例提供一种图像效果生成装置，包括：

第一图像获取模块，用于获取第一图像，所述第一图像中包括人脸图像；

表情识别模块，用于识别所述人脸图像的人脸表情；

等级判断模块，用于判断所述人脸表情的等级；

图像效果生成模块，用于当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述第一图像获取模块，还包括：

第一视频获取模块，用于获取第一视频，所述第一视频中的至少一个视频帧中包括人脸图像。

进一步的，所述表情识别模块，还包括：

人脸图像识别模块，用于识别所述第一图像中的人脸图像；

表情特征提取模块，用于在所述人脸图像中提取人脸表情特征；

表情识别子模块，用于根据所述人脸表情特征对人脸表情进行识别。

进一步的，所述等级判断模块，包括：

对比模块，用于将所述人脸表情与预设的模板表情进行对比；

等级判断子模块，用于将与所述人脸表情的匹配度最高的模板表情的等级作为所述人脸表情的等级。

进一步的，所述图像效果生成模块，包括：

配置文件获取模块，用于当所述人脸表情的等级达到预定的等级，获取与所述预定的等级对应的图像效果配置文件；

渲染模块，用于根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

第三方面，本公开实施例提供一种图像效果生成装置，包括：

第二图像获取模块，用于获取第一图像，所述第一图像中包括至少两个人脸图像；

第一表情识别模块，用于识别所述至少两个人脸图像中的每一个人脸图像的人脸表情；

第一等级判断模块，用于判断所述每一个人脸图像的人脸表情的等级；

第一图像效果生成模块，用于获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述装置，还可以包括：

图像效果配置文件生成模块，用于针对每一个人脸图像的人脸表情，生成对应的图像效果配置文件。

进一步的，所述第一图像效果生成模块，包括：

预定等级人脸表情获取模块，用于获取所有达到预定等级的人脸表情；

对应配置文件获取模块，用于获取与所述达到预定等级的人脸表情对应的图像效果配置文件；

第一渲染模块，用于根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

第四方面，本公开实施例提供一种电子设备，包括：至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有能被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行前述第一方面中的任一所述图像效果生成方法。

第五方面，本公开实施例提供一种非暂态计算机可读存储介质，其特征在于，该非暂态计算机可读存储介质存储计算机指令，该计算机指令用于使计算机执行前述第一方面中的任一所述图像效果生成方法。

本公开公开了一种图像效果生成方法、装置、电子设备和计算机可读存储介质。其中该图像效果生成方法包括：获取第一图像，所述第一图像中包括人脸图像；识别所述人脸图像的人脸表情；判断所述人脸表情的等级；当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。本公开实施例通过显示不同人脸表情的等级所对应的图像效果，解决了现有技术中无法快速获取人脸表情程度的技术问题。

上述说明仅是本公开技术方案的概述，为了能更清楚了解本公开的技术手段，而可依照说明书的内容予以实施，并且为让本公开的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图，详细说明如下。

附图说明

为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本公开实施例提供的图像效果生成方法实施例一的流程图；

图2a-2g为本公开实施例提供的图像效果生成方法的具体实例示意图；

图3为本公开实施例提供的图像效果生成方法实施例二的流程图

图4为本公开实施例提供的图像效果生成装置实施例一的结构示意图；

图5为本公开实施例提供的图像效果生成装置实施例二的结构示意图；

图6为根据本公开实施例提供的电子设备的结构示意图。

具体实施方式

以下通过特定的具体实例说明本公开的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本公开的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。

需要说明的是，下文描述在所附权利要求书的范围内的实施例的各种方面。应显而易见，本文中所描述的方面可体现于广泛多种形式中，且本文中所描述的任何特定结构及/或功能仅为说明性的。基于本公开，所属领域的技术人员应了解，本文中所描述的一个方面可与任何其它方面独立地实施，且可以各种方式组合这些方面中的两者或两者以上。举例来说，可使用本文中所阐述的任何数目个方面来实施设备及/或实践方法。另外，可使用除了本文中所阐述的方面中的一或多者之外的其它结构及/或功能性实施此设备及/或实践此方法。

还需要说明的是，以下实施例中所提供的图示仅以示意方式说明本公开的基本构想，图式中仅显示与本公开中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。

另外，在以下描述中，提供具体细节是为了便于透彻理解实例。然而，所属领域的技术人员将理解，可在没有这些特定细节的情况下实践所述方面。

图1为本公开实施例提供的图像效果生成方法实施例一的流程图，本实施例提供的该图像效果生成方法可以由一图像效果生成装置来执行，该图像效果生成装置可以实现为软件，或者实现为软件和硬件的组合，该图像效果生成装置可以集成设置在图像处理系统中的某设备中，比如图像处理服务器或者图像处理终端设备中。如图1所示，该方法包括如下步骤：

步骤s101，获取第一图像，所述第一图像中包括人脸图像；

在一个实施例中，所述获取第一图像，包括从本地存储空间中获取第一图像或者从网络存储空间中获取第一图像，无论从哪里获取第一图像，首选需要获取第一图像的存储地址，之后从该存储地址获取第一图像，所述第一图像可以是视频图像也可以是图片，或者是带有动态效果的图片，在此不再赘述。

在一个实施例中，所述获取第一图像，包括获取第一视频，所述第一视频中的至少一个视频帧中包括人脸图像。在该实施例中，所述第一视频可以通过图像传感器来获取，图像传感器指可以采集图像的各种设备，典型的图像传感器为摄像机、摄像头、相机等。在该实施例中，所述图像传感器可以是移动终端上的摄像头，比如智能手机上的前置或者后置摄像头，摄像头采集的视频图像可以直接显示在手机的显示屏上，在该步骤中，获取图像传感器所拍摄的视频，用于在下一步进一步识别图像。

在该步骤中，所述第一图像中包括人脸图像，人脸图像是人脸表情的基础，在该实施例中，如果所述第一图像为图片，则图片中至少包括一个人脸图像，如果所述第一图像为视频，则所述第一图像中的视频帧中至少有一个视频帧中包括至少一个人脸图像。

步骤s102，识别所述人脸图像的人脸表情；

在一个实施例中，识别所述人脸图像的人脸表情，包括：识别所述第一图像中的人脸图像；在所述人脸图像中提取人脸表情特征；根据所述人脸表情特征对人脸表情进行识别。

首先需要对图像中的人脸进行检测，人脸检测是任意给定一个图像或者一组图像序列，采用一定策略对其进行搜索，以确定所有人脸的位置和区域的一个过程，从各种不同图像或图像序列中确定人脸是否存在，并确定人脸数量和空间分布的过程。通常人脸检测的方法可以分为4类：(1)基于先验知识的方法，该方法将典型的人脸形成规则库对人脸进行编码，通过面部特征之间的关系进行人脸定位；(2)特征不变方法，该方法在姿态、视角或光照条件改变的情况下找到稳定的特征，然后使用这些特征确定人脸；(3)模板匹配方法，该方法存储几种标准的人脸模式，用来分别描述整个人脸和面部特征，然后计算输入图像和存储的模式间的相互关系并用于检测；(4)基于外观的方法，该方法与模板匹配方法相反，从训练图像集中进行学习从而获得模型，并将这些模型用于检测。在此可以使用第(4)种方法中的一个实现方式来说明人脸检测的过程：首先需要提取特征完成建模，本实施例使用haar特征作为判断人脸的关键特征，haar特征是一种简单的矩形特征，提取速度快，一般haar特征的计算所使用的特征模板采用简单的矩形组合由两个或多个全等的矩形组成，其中特征模板内有黑色和白色两种矩形；之后，使用adaboost算法从大量的haar特征中找到起关键作用的一部分特征，并用这些特征产生有效的分类器，通过构建出的分类器可以对图像中的人脸进行检测。在人脸检测过程中，可以检测到多个人脸特征点，典型的可以使用106个特征点来识别人脸。

在检测到人脸图像之后，可以进一步对所述人脸图像做预处理，以便下一步识别人脸的表情。图像预处理的好坏直接影响表情特征提取的准确性和表情分类的效果，从而影响表情识别的准确率。人脸图像预处理主要包括去噪，进行尺度、灰度的归一化等。输入的图像通常具有比较复杂的场景，由人脸检测获取的人脸图像大小、长宽比例、光照条件、局部是否遮、头部偏转通常是不一样的，为了后续提取特征的统一处理，就需要将它们的尺寸、光照、头部姿态的矫正等进行归一化处理，改善图像质量，为进一步分析和理解面部表情做好准备。

在预处理之后，对人脸表情特征进行提取。面部表情特征提取的方法很多，根据图片的来源是否为静态还是动态的分为基于运动和基于形变的表情特征提取。基于运动的特征提取方法，主要根据序列图像中面部特征点的相对位置和距离的变动来描述表情变化，具体有光流法、运动模型、特征点跟踪等，此类方法鲁棒性好；基于形变的特征提取方法，主要用于静态图片提取特征，依靠与自然表情模型的外观或纹理对比获取模型特征，典型的算法有基于活动外观模型(aam)和点分布模型(pdm)、基于纹理特征gabor变换和局部二进制模式lbp。

提取人脸表情特征之后，进行人脸表情分类。表情分类即把前一阶段提取到的表情特征送入训练好的分类器或回归器，让分类器或回归器给出一个预测的值，判断表情特征所对应的表情类别。目前常见的表情分类的算法主要有线性分类器、神经网络分类器、支持向量机svm、隐马尔可夫模型等分类识别方法。

可以理解的是，上述提到的人脸检测、人脸图像预处理、表情特征提取以及人脸表情分类的方法均为便于理解的举例，实际上任何可以识别人脸表情的方法均可以用到本公开的技术方案中，在此不再赘述。

步骤s103，判断所述人脸表情的等级；

在该步骤中，所述判断所述人脸表情的等级，包括：将所述人脸表情与预设的模板表情进行对比；将与所述人脸表情的匹配度最高的模板表情的等级作为所述人脸表情的等级。判断在步骤s102中识别出的人脸表情的等级，所述的等级为表情的程度，可选的所述表情为笑脸，可以将所述笑脸分为多个等级，如可以分为100个等级，每个等级有一个标准的模板人脸表情图像与之对应，在判断所述人脸表情的等级时，将步骤s102中的表情与这100个等级的模板人脸表情图像作对比，将匹配度最高的模板人脸表情图像所对应的等级作为所述人脸表情的等级。

可选的，所述判断所述人脸表情的等级，包括：将所述人脸表情与预设的模板表情进行对比；将所述人脸表情与预设的模板表情相似度作为所述人脸表情的等级。在该实施例中，所述模板人脸表情图像可以只有1个，将步骤s102中所识别出的人脸表情与所述模板人脸表情图像作对比，所述对比的结果为一个相似度百分比，如对比之后得到人脸表情与所述模板人脸表情图像的相似度为90％，则可以得到所述人脸表情的等级为90级。

可以理解的，上述判断人脸表情的等级的具体实例仅为举例，不构成对本公开的限制，任何能够对人脸表情进行等级判断的方法，均可以应用到本公开中来，典型的，可以使用分类器的方法，将人脸表情的等级对应为不同的类别，使用样本对分类器进行训练，之后将识别出的人脸表情输入分类器中直接得出人脸表情的等级，其他方式在此不再赘述。

步骤s104，当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。

在该步骤中，当判断所述人脸表情达到了一个约定的等级，则在第一图像中的预定位置上生成与所述预定等级对应的图像效果。可选的，所述图像效果可以是显示分数，显示动画等等。

在一个实施例中，所述当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果，包括：当所述人脸表情的等级达到预定的等级，获取与所述预定的等级对应的图像效果配置文件；根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。其中所述图像效果配置文件，用于配置图像效果的显示属性，如显示位置、显示大小、颜色、透明度等等。

可选的，所述显示位置可以由人脸特征点决定，所述图像效果配置文件中包括显示位置的关联参数，所述关联参数描述图像效果序列帧关联哪几个人脸特征点，默认可以关联所有特征点，也可以设置跟随其中的几个特征点。除了关联参数外，图像效果配置文件中还包括图像效果与特征点的位置关系参数"point"，"point"中可以包括两组关联点，"point0"表示第一组关联点，"point1"表示第二组。对于每一组关联点，"point"描述了camera中的锚点位置，通过对若干组特征点及其权重，求加权平均得到；举例来说，设置图像效果跟随人脸的4个特征点，分别为9号、10号、11号和12号特征点，且每个特征点的权重为0.25，其中每个特征点的坐标分别为(x9，y9)，(x10，y10)，(x11，y11)，(x12，y12)，则可以得到图像效果所跟随的锚点的x轴坐标为xa＝x9*0.25+x10*0.25+x11*0.25+x12*0.25，锚点的y轴坐标为ya＝y9*0.25+y10*0.25+y11*0.25+y12*0.25。可以理解的是，"point"中可以包括任一组关联点，并不局限于两组。在上述具体实例中，可以得到两个锚点，图像效果跟随这两个锚点的位置发生移动。而实际上，锚点可以不止两个，这与所使用的关联点的组数有关。其中每个特征点的坐标可以有步骤s102中所获取的人脸特征点中获得。

可选的，所述显示大小可以是固定的大小，在图像效果配置文件中直接配置图像效果的作用区域以及该区域的大小；在另一个可选的实施例中，所述显示大小可以是动态的，根据人脸的位置对图像效果的作用区域进行缩放，此时所述图像效果配置文件中还可以包括图像效果的缩放程度与特征点的关系，使用参数"scalex"和"scaley"分别描述了x和y方向的缩放需求。对于每个方向，都包括两个参数"start_idx"和"end_idx"，其对应了两个特征点，这两个特征点之间的距离乘以"factor"的值后得到缩放的强度。其中factor为预先设置的值，可以为任意值。对于缩放来说，如果"position"中只有一组关联点"point0"，那么x方向就是实际的水平向右方向；y方向为实际垂直向下方向；"scalex"和"scaley"都会生效，如果任一有缺失，则按照存在的那个参数保持图像效果原始长宽比进行缩放。如果"position"中"point0"和"point1"都有，那么x方向为point1.anchor-point0.anchor得到的向量方向；y方向由x方向顺时针旋转90度确定；"scalex"无效，x方向的缩放由锚点跟随决定。"scaley"会生效，若"scaley"缺失，则保持图像效果原始长宽比进行缩放。

可选的，所述图像效果的颜色和透明度可以直接在所述图像效果配置文件中配置，典型的，可以配置所述图像效果的uv图，根据所述uv图中的颜色对应渲染图像效果的颜色，默认可以设置所述图像效果不透明，这样图像效果的区域完全覆盖第一图像中的对应区域即可；可选的，所述动画行为配置文件中还可以包括渲染混合模式，所述渲染混合是指将两种颜色混合在一起，具体到本公开中是指将某一像素位置的颜色与将要画上去的颜色混合在一起，从而实现特殊效果，而渲染混合模式是指混合所使用的方式，一般来说混合方式是指将源颜色和目标颜色做计算，得出混合后的颜色，在实际应用中常常将源颜色乘以源因子得到的结果与目标颜色乘以目标因子得到的结果做计算，得到混合后的颜色，以加法为例，则blendcolor＝src_color*scr_factor+dst_color*dst_factor，其中0≤scr_factor≤1，0≤dst_factor≤1，其中blendcolor为混合后的颜色，src_color为源图像上的源颜色，dst_color为目标图像上的目标颜色，scr_factor为源因子，表示源颜色在混合颜色中的权重，dst_factor为目标因子，表示目标颜色在混合颜色中的权重。根据上述运算公式，假设源颜色的四个分量(指红色，绿色，蓝色，alpha值)是(rs,gs,bs,as)，目标颜色的四个分量是(rd,gd,bd,ad)，又设源因子为(sr,sg,sb,sa)，目标因子为(dr,dg,db,da)。则混合产生的新颜色可以表示为：(rs*sr+rd*dr,gs*sg+gd*dg,bs*sb+bd*db,as*sa+ad*da)，其中alpha值表示透明度，0≤alpha≤1。上述混合方式仅仅是举例，实际应用中，可以自行定义或者选择混合方式，所述计算可以是加、减、乘、除、取两者中较大的、取两者中较小的、逻辑运算(和、或、异或等等)。上述混合方式仅仅是举例，实际应用中，可以自行定义或者选择混合方式，所述计算可以是加、减、乘、除、取两者中较大的、取两者中较小的、逻辑运算(和、或、异或等等)。

通过上述图像效果配置文件，可以在人脸的表情达到某个程度时，显示与该表情对应的图像效果，且该图像效果可以随着人脸表情的变化以及人脸位置的变化而变化。典型的，利用上述实施例中的技术方案，可以设计一种给人脸图像中的笑脸打分的图像效果，可以在人脸的头顶显示一个记分牌，当人脸的笑容达到一定的程度之后，比如微笑，给出当前的分数，比如20分，当人脸笑容继续变成大笑，可以继续显示分数，比如80，等等。

如图2a-2g所示，为上述实施例的一个具体实例。如图2a所示，获取第一图像，所述第一图像中包括人脸图像，在该实例中，所述第一图像为通过图像传感器采集到的视频图像帧，所述视频图像帧中包括人脸图像；如图2a所示，识别所述人脸图像的人脸表情，判断所述人脸表情的等级当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果，在该实例中，所述人脸表情为笑容，根据人脸笑容的程度生成对人脸打分的图像效果，如图2a所示，刚开始人脸笑容为微笑，渲染出的图像效果为30分的打分牌，且打分牌上的笑脸的嘴巴为一条直线，表示笑容等级不高，之后当人脸的笑容发生变化，如图2b-2e所示，随着人脸笑容等级越来越高，打分牌上的分数越来越高，且打分牌的笑脸的嘴巴嘴角上翘的程度越来越高，之后当人脸的笑容等级变低，如图2f-2g所示，随着人脸笑容等级越来越低，打分牌上的分数也越来越低。由上述实施例可以实现一种对人脸笑容进行打分的图像效果。可以方便的使用户知道自己的笑容的程度或等级。

图3为本公开实施例提供的图像效果生成方法实施例二的流程图，本实施例提供的该图像效果生成方法可以由一图像效果生成装置来执行，该图像效果生成装置可以实现为软件，或者实现为软件和硬件的组合，该图像效果生成装置可以集成设置在图像处理系统中的某设备中，比如图像处理服务器或者图像处理终端设备中。如图3所示，该方法包括如下步骤：

步骤s301，获取第一图像，所述第一图像中包括至少两个人脸图像；

步骤s302，识别所述至少两个人脸图像中的每一个人脸图像的人脸表情；

步骤s303，判断所述每一个人脸图像的人脸表情的等级；

步骤s304，获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果。

该实施例中，涉及多个人脸的识别，也就是第一图像中包括了多个人脸图像，这时候，对每个人脸图像均进行如实施例一中所述的处理，在第一图像中可以方便的看出哪些人脸的表情达到的哪一个等级。

进一步的，在所述步骤s302，识别所述至少两个人脸图像中的每一个人脸图像的人脸表之后，还可以包括：

步骤s305，针对每一个人脸图像的人脸表情，生成对应的图像效果配置文件。

在该步骤中，针对每个人脸的每种表情，均生成一个独立的图像效果配置文件。比如当识别到第一图像中包括3个人脸，则将人脸编号为face1、face2和face3，检测到face1人脸的表情为笑脸，将该表情对应的图像效果配置文件命名为face1.id1，之后根据该图像效果配置文件中的配置参数来显示图像效果；检测到face2人脸的表情为愤怒，则将该表情对应的图像效果配置文件命名为face2.id2，之后根据该图像效果配置文件中的配置参数来显示图像效果；检测到face3人脸的表情为笑脸，将该表情对应的图像效果配置文件命名为face3.id1，之后根据该图像效果配置文件中的配置参数来显示图像效果。这样对于每个人脸的每种表情来说，其配置文件都是独立的，可以对每个人脸的表情进行独立的配置，以产生对多个人脸的多个表情产生不同图像效果的效果。

进一步的，所述步骤s304，获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果，包括：获取所有达到预定等级的人脸表情；获取与所述达到预定等级的人脸表情对应的图像效果配置文件；根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

可以理解的，对于单个人脸的表情识别、等级判断以及图像效果的生成，可以使用实施例一中的技术方案，在此不再赘述。

本公开公开了一种图像效果生成方法、装置、电子设备和计算机可读存储介质。其中该图像效果生成方法包括：获取第一图像，所述第一图像中包括人脸图像；识别所述人脸图像的人脸表情；判断所述人脸表情的等级；当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。本公开实施例通过显示不同人脸表情的等级所对应的图像效果，解决了现有技术中无法快速获取人脸表情程度的技术问题。

图4为本公开实施例提供的图像效果生成装置实施例一的结构示意图，如图4所示，该装置400包括：第一图像获取模块401、表情识别模块402、等级判断模块403和图像效果生成模块404。其中，

第一图像获取模块401，用于获取第一图像，所述第一图像中包括人脸图像；

表情识别模块402，用于识别所述人脸图像的人脸表情；

等级判断模块403，用于判断所述人脸表情的等级；

图像效果生成模块404，用于当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述第一图像获取模块401，还包括：

第一视频获取模块，用于获取第一视频，所述第一视频中的至少一个视频帧中包括人脸图像。

进一步的，所述表情识别模块402，还包括：

人脸图像识别模块，用于识别所述第一图像中的人脸图像；

表情特征提取模块，用于在所述人脸图像中提取人脸表情特征；

表情识别子模块，用于根据所述人脸表情特征对人脸表情进行识别。

进一步的，所述等级判断模块403，包括：

对比模块，用于将所述人脸表情与预设的模板表情进行对比；

等级判断子模块，用于将与所述人脸表情的匹配度最高的模板表情的等级作为所述人脸表情的等级。

进一步的，所述图像效果生成模块404，包括：

配置文件获取模块，用于当所述人脸表情的等级达到预定的等级，获取与所述预定的等级对应的图像效果配置文件；

渲染模块，用于根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

图4所示装置可以执行图1所示实施例的方法，本实施例未详细描述的部分，可参考对图1所示实施例的相关说明。该技术方案的执行过程和技术效果参见图1所示实施例中的描述，在此不再赘述。

图5为本公开实施例提供的图像效果生成装置实施例二的结构示意图，如

图5所示，该装置500包括：第二图像获取模块501、第一表情识别模块502、第一等级判断模块503和第一图像效果生成模块504。其中，

第二图像获取模块501，用于获取第一图像，所述第一图像中包括至少两个人脸图像；

第一表情识别模块502，用于识别所述至少两个人脸图像中的每一个人脸图像的人脸表情；

第一等级判断模块503，用于判断所述每一个人脸图像的人脸表情的等级；

第一图像效果生成模块504，用于获取所有达到预定等级的人脸表情，在所述第一图像中生成与所述预定等级对应的图像效果。

进一步的，所述装置500，还可以包括：

图像效果配置文件生成模块505，用于针对每一个人脸图像的人脸表情，生成对应的图像效果配置文件。

进一步的，所述第一图像效果生成模块504，包括：

预定等级人脸表情获取模块，用于获取所有达到预定等级的人脸表情；

对应配置文件获取模块，用于获取与所述达到预定等级的人脸表情对应的图像效果配置文件；

第一渲染模块，用于根据所述图像效果配置文件，在第一图像中渲染出所述图像效果。

上述图5中实施例二中的装置可以执行图3所示实施例的方法，本实施例未详细描述的部分，可参考对图3所示实施例的相关说明。该技术方案的执行过程和技术效果参见图3所示实施例中的描述，在此不再赘述。

下面参考图6，其示出了适于用来实现本公开实施例的电子设备600的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、pda(个人数字助理)、pad(平板电脑)、pmp(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字tv、台式计算机等等的固定终端。图6示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图6所示，电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601，其可以根据存储在只读存储器(rom)602中的程序或者从存储装置608加载到随机访问存储器(ram)603中的程序而执行各种适当的动作和处理。在ram603中，还存储有电子设备600操作所需的各种程序和数据。处理装置601、rom602以及ram603通过总线604彼此相连。输入/输出(i/o)接口605也连接至总线604。

通常，以下装置可以连接至i/o接口605：包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置606；包括例如液晶显示器(lcd)、扬声器、振动器等的输出装置607；包括例如磁带、硬盘等的存储装置608；以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。

特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置609从网络上被下载和安装，或者从存储装置608被安装，或者从rom602被安装。在该计算机程序被处理装置601执行时，执行本公开实施例的方法中限定的上述功能。

需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、rf(射频)等等，或者上述的任意合适的组合。

上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。

上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：获取第一图像，所述第一图像中包括人脸图像；识别所述人脸图像的人脸表情；判断所述人脸表情的等级；当所述人脸表情的等级达到预定的等级，在所述第一图像中生成与所述预定等级对应的图像效果。

可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。

以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。