图像处理方法及装置的制造方法
【专利摘要】本发明公开了一种图像处理方法及装置，其中，该图像处理方法包括：获取待处理的图像；识别所述图像中的人脸区域；确定所述人脸区域中的待处理位置，其中，所述待处理位置为脸部异物所在的位置；以所述人脸区域的脸部中轴线为对称轴，确定所述待处理位置的对称位置；将所述待处理位置的图像块替换为所述对称位置的图像块，得到处理后的图像；输出所述处理后的图像。本发明提供的技术方案能够有效提高图像中脸部异物的消除效果。
【专利说明】
图像处理方法及装置
技术领域
[0001]本发明涉及图像处理技术领域，具体涉及一种图像处理方法及装置。
【背景技术】
[0002]随着智能终端(例如智能手机、平板电脑等)的快速发展，目前基本上所有智能终端都具备拍照功能，并且，智能终端的像素也越来越高，某些智能终端的拍照效果甚至不亚于卡片相机，相比于卡片相机、单反相机等专业摄像仪器，带有拍照功能的智能终端携带及使用都更为便捷，因此，大众更乐意于使用智能终端的拍照功能进行拍照。
[0003]目前，当用户使用智能终端拍摄人物之后，通常会对拍摄所得的照片中的人物进行美颜处理，以便将美颜处理后的照片发送至社交网络平台与好友、家人分享。现有的美颜处理过程中，仅能通过磨皮的方式对人物脸部的异物(例如斑点、痘或者痣)进行处理，由于磨皮不能过度(磨皮过度会导致人物脸部的细节都无法看清)，因此，通过磨皮的方式仅能实现对人物脸部的异物的淡化，而无法完全消除人物脸部的异物。
【发明内容】
[0004]本发明提供一种图像处理方法及装置，用于提高图像中脸部异物的消除效果。
[0005]本发明第一方面涉及一种图像处理方法，包括:
[0006]获取待处理的图像；
[0007]识别上述图像中的人脸区域；
[0008]确定上述人脸区域中的待处理位置，其中，上述待处理位置为脸部异物所在的位置；
[0009]以上述人脸区域的脸部中轴线为对称轴，确定上述待处理位置的对称位置；
[0010]将上述待处理位置的图像块替换为上述对称位置的图像块，得到处理后的图像；
[0011]输出上述处理后的图像。
[0012]基于本发明第一方面，在第一种可能的实现方式中，上述确定上述人脸区域中的待处理位置，包括:
[0013]接收在上述人脸区域中输入的位置选择操作；
[0014]将上述位置选择操作所选择的位置确定为上述人脸区域中的待处理位置。
[0015]基于本发明第一方面，在第二种可能的实现方式中，上述确定上述人脸区域中的待处理位置，包括:
[0016]确定上述人脸区域中的非五官区域；
[0017]将上述非五官区域中满足异物条件的图像区域所在的位置确定为上述人脸区域中的待处理位置；
[0018]其中，上述异物条件为:图像区域的像素平均值在预设的阈值范围内。
[0019]基于本发明第一方面，或者本发明第一方面的第一种可能的实现方式，或者本发明第一方面的第二种可能的实现方式，在第三种可能的实现方式中，上述将上述待处理位置的图像块替换为上述对称位置的图像块，得到处理后的图像，包括:
[0020]拷贝上述对称位置的图像块；
[0021]将上述对称位置的图像块粘贴至上述待处理位置上后合成图像，得到处理后的图像。
[0022]基于本发明第一方面，或者本发明第一方面的第一种可能的实现方式，或者本发明第一方面的第二种可能的实现方式，在第四种可能的实现方式中，上述识别上述图像中的人脸区域，具体为:
[0023]当接收到输入的脸部异物消除指令时，识别上述图像中的人脸区域。
[0024]本发明第二方面涉及一种图像处理装置，包括:
[0025]图像获取单元，用于获取待处理的图像；
[0026]识别单元，用于识别上述图像获取单元获取的图像中的人脸区域；
[0027]第一确定单元，用于确定上述人脸区域中的待处理位置，其中，上述待处理位置为脸部异物所在的位置；
[0028]第二确定单元，用于以上述人脸区域的脸部中轴线为对称轴，确定上述第一确定单元所确定的待处理位置的对称位置；
[0029]图像块替换单元，用于将上述第一确定单元所确定的待处理位置的图像块替换为上述第二确定单元所确定的对称位置的图像块，得到处理后的图像；
[0030]图像输出单元，用于输出上述处理后的图像。
[0031]基于本发明第二方面，在第一种可能的实现方式中，上述第一确定单元包括:
[0032]子接收单元，用于接收在上述人脸区域中输入的位置选择操作；
[0033]第一子确定单元，用于将上述位置选择操作所选择的位置确定为上述人脸区域中的待处理位置。
[0034]基于本发明第二方面，在第二种可能的实现方式中，上述第一确定单元包括:
[0035]第二子确定单元，用于确定上述人脸区域中的非五官区域；
[0036]第三子确定单元，用于将上述第二子确定单元确定的非五官区域中满足异物条件的图像区域所在的位置确定为上述人脸区域中的待处理位置；
[0037]其中，上述异物条件为:图像区域的像素平均值在预设的阈值范围内。
[0038]基于本发明第二方面，或者本发明第二方面的第一种可能的实现方式，或者本发明第二方面的第二种可能的实现方式，在第三种可能的实现方式中，上述图像块替换单元包括:
[0039]拷贝单元，用于拷贝上述第二确定单元所确定的对称位置的图像块；
[0040]粘贴合成单元，用于将上述拷贝单元拷贝的上述对称位置的图像块粘贴至上述第一确定单元所确定的待处理位置上后合成图像，得到处理后的图像。
[0041]基于本发明第二方面，或者本发明第二方面的第一种可能的实现方式，或者本发明第二方面的第二种可能的实现方式，在第四种可能的实现方式中，上述图像处理装置还包括:美颜指令接收单元，用于接收输入的脸部异物消除指令；
[0042]上述识别单元具体用于:当上述美颜指令接收单元接收到上述脸部异物消除指令时，识别上述图像获取单元获取的图像中的人脸区域。
[0043]由上可见，本发明实施例中通过识别待处理图像中的人脸区域，并在确定待处理位置(即脸部异物所在的位置)之后，以该人脸区域的脸部中轴线为对称轴，确定该待处理位置的对称位置，将该待处理位置的图像块替换为该对称位置的图像块，以此消除待处理位置的脸部异物，一方面，由于待处理位置的对称位置的图像块与待处理位置的图像块有一定的相似度，因此，将待处理位置的图像块替换为其对称位置的图像块，能够提高图像的契合度，另一方面，采用替换的方式而非淡化的方式处理待处理位置的脸部异物，能够有效消除脸部异物，提高图像中脸部异物的消除效果。
【附图说明】
[0044]为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0045]图1为本发明提供的图像处理方法一个实施例流程示意图；
[0046]图2为本发明提供的图像处理装置一个实施例结构示意图。
【具体实施方式】
[0047]为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而非全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0048]本发明实施例提供一种图像处理方法，请参阅图1，本发明实施例中的图像处理方法包括:
[0049]步骤101、获取待处理的图像；
[0050]本发明实施例中，可以从照片库中获取待处理的图像，或者，也可以获取实时拍摄得到的图像作为待处理的图像，此处不作限定。
[0051]步骤102、识别上述图像中的人脸区域；
[0052]本发明实施例中，对步骤101获取的图像进行人脸识别，以识别出上述图像中的人脸区域。具体地，通过对图像进行人脸识别并识别出图像中的人脸区域的过程可以参照已有技术实现，此处不再赘述。
[0053]可选的，在步骤101获取待处理的图像之后，等待用户输入指令，在接收到用户输入的指令之后，再根据用户输入的指令对步骤101获取的图像进行处理。步骤102具体为:当接收到输入的脸部异物消除指令时，识别步骤101获取的图像中的人脸区域。具体地，可以提供人脸异物消除控件，以便用户通过触发该人脸异物消除控件输入上述脸部异物消除指令。当然，也可以在步骤101获取待处理的图像之后，即执行步骤102，此处不作限定。
[0054]步骤103、确定上述人脸区域中的待处理位置；
[0055]其中，上述待处理位置为脸部异物所在的位置。
[0056]本发明实施例中，脸部异物包括但不限于:斑点、痘和痣。
[0057]在一种应用场景中，接收在上述人脸区域中输入的位置选择操作;将上述位置选择操作所选择的位置确定为上述人脸区域中的待处理位置。可选的，上述位置选择操作具体为点击操作，即，用户可以通过点击上述人脸区域中的脸部异物所在的位置的方式选择待处理位置，以便在步骤103中将用户点击的位置确定为上述人脸区域中的待处理位置。当然，也可以通过其它方式输入上述位置选择操作，例如可通过触发实体按键来移动选择框，将选择框移动至上述人脸区域中的脸部异物所在的位置后输入“确定”指令，将此时该选择框所选定的位置确定为上述人脸区域中的待处理位置。
[0058]在另一种应用场景中，由于在上述图像的人脸区域中，脸部异物的亮度相对于非脸部异物的亮度会偏暗，因此，本应用场景中可以依据该原理采用自动识别脸部异物的方式确定上述人脸区域中的待处理位置。具体地，步骤103包括:确定上述人脸区域中的非五官区域;将上述非五官区域中满足异物条件的图像区域所在的位置确定为所述人脸区域中的待处理位置;其中，上述异物条件为:图像区域的像素平均值在预设的阈值范围内。需要说明的是，上述人脸区域中的非五官区域是指上述人脸区域中除眼、耳、鼻、舌、口以外的区域，通过已有的人脸识别技术可确定上述人脸区域中的五官区域，进而可将上述人脸区域中除上述五官区域以外的区域确定为上述人脸区域的非五官区域。上述阈值范围可以通过大量实验数据统计得到，本发明实施例不对上述阈值范围进行具体限定。
[0059]步骤104、以上述人脸区域的脸部中轴线为对称轴，确定上述待处理位置的对称位置；
[0060]本发明实施例中，脸部中轴线是指将人脸区域平均分割为左半区域和由半区域的直线，人脸的鼻子和嘴巴位于该脸部中轴线上，且人脸的左眼和右眼分别位于该脸部中轴线的两侧。
[0061 ] 在步骤104中，以上述人脸区域的脸部中轴线为对称轴，确定步骤103所确定的待处理位置的对称位置。应理解，该待处理位置的中心点到上述脸部中轴线的距离等于其对称位置的中心点到上述脸部中轴线的距离，且该待处理位置的形状和大小与其对称位置的形状和大小一致。
[0062]步骤105、将上述待处理位置的图像块替换为上述对称位置的图像块，得到处理后的图像；
[0063]可选的，在步骤105中，拷贝上述对称位置的图像块，并将上述对称位置的图像块粘贴至上述待处理位置上后合成图像，得到处理后的图像。或者，也可以遍历上述对称位置中各个像素点的像素值，并将上述待处理位置的各个像素点的像素值逐一修改为上述对称位置中相应像素点的像素值，以此实现将上述待处理位置的图像块替换为上述对称位置的图像块。当然，本发明实施例中，也可以通过其它方式将上述待处理位置的图像块替换为上述对称位置的图像块，此处不作限定。
[0064]步骤106、输出上述处理后的图像；
[0065]本发明实施例中，输出步骤105处理得到的图像。
[0066]具体地，步骤106包括但不限于:输出显示上述处理后的图像和输出存储上述处理后的图像。
[0067]需要说明的是，本发明实施例中的图像处理方法具体可以由图像处理装置实现，该图像处理装置可以集成在智能终端中。上述智能终端具体为智能手机、平板电脑或其它具备图像处理能力的终端，此处不作限定。
[0068]由上可见，本发明实施例中通过识别待处理图像中的人脸区域，并在确定待处理位置(即脸部异物所在的位置)之后，以该人脸区域的脸部中轴线为对称轴，确定该待处理位置的对称位置，将该待处理位置的图像块替换为该对称位置的图像块，以此消除待处理位置的脸部异物，一方面，由于待处理位置的对称位置的图像块与待处理位置的图像块有一定的相似度，因此，将待处理位置的图像块替换为其对称位置的图像块，能够提高图像的契合度，另一方面，采用替换的方式而非淡化的方式处理待处理位置的脸部异物，能够有效消除脸部异物，提高图像中脸部异物的消除效果。
[0069]实施例二
[0070]本发明实施例还提供一种图像处理装置，请参阅图2，本发明实施例中的图像处理装置200包括:
[0071]图像获取单元201，用于获取待处理的图像；
[0072]识别单元202，用于识别图像获取单元201获取的图像中的人脸区域；
[0073]第一确定单元203，用于确定所述人脸区域中的待处理位置，其中，所述待处理位置为脸部异物所在的位置；
[0074]第二确定单元204，用于以所述人脸区域的脸部中轴线为对称轴，确定所述第一确定单元所确定的待处理位置的对称位置；
[0075]图像块替换单元205，用于将第一确定单元203所确定的待处理位置的图像块替换为第二确定单元204所确定的对称位置的图像块，得到处理后的图像；
[0076]图像输出单元206，用于输出所述处理后的图像。
[0077]可选的，第一确定单元203包括:子接收单元，用于接收在所述人脸区域中输入的位置选择操作;第一子确定单元，用于将所述位置选择操作所选择的位置确定为所述人脸区域中的待处理位置。
[0078]可选的，第一确定单元203包括:第二子确定单元，用于确定所述人脸区域中的非五官区域;第三子确定单元，用于将所述第二子确定单元确定的非五官区域中满足异物条件的图像区域所在的位置确定为所述人脸区域中的待处理位置;其中，所述异物条件为:图像区域的像素平均值在预设的阈值范围内。
[0079]可选的，本发明实施例中的图像块替换单元包括:拷贝单元，用于拷贝第二确定单元204所确定的对称位置的图像块;粘贴合成单元，用于将所述拷贝单元拷贝的所述对称位置的图像块粘贴至第一确定单元203所确定的待处理位置上后合成图像，得到处理后的图像。
[0080]可选是，本发明实施例中的图像处理装置还包括:美颜指令接收单元，用于接收输入的脸部异物消除指令;所述识别单元具体用于:当所述美颜指令接收单元接收到所述脸部异物消除指令时，识别图像获取单元201获取的图像中的人脸区域。
[0081]需要说明的是，本发明实施例中的图像处理装置可以集成在智能终端中。上述智能终端具体为智能手机、平板电脑或其它具备图像处理能力的终端，此处不作限定。
[0082]应理解，本发明实施例中的图像处理方法及装置的各个功能模块的功能可以根据上述方法实施例中的方法具体实现，其具体实现过程可参照上述方法实施例中的相关描述，此处不再赘述。
[0083]由上可见，本发明实施例中的图像处理装置通过识别待处理图像中的人脸区域，并在确定待处理位置(即脸部异物所在的位置)之后，以该人脸区域的脸部中轴线为对称轴，确定该待处理位置的对称位置，将该待处理位置的图像块替换为该对称位置的图像块，以此消除待处理位置的脸部异物，一方面，由于待处理位置的对称位置的图像块与待处理位置的图像块有一定的相似度，因此，将待处理位置的图像块替换为其对称位置的图像块，能够提高图像的契合度，另一方面，采用替换的方式而非淡化的方式处理待处理位置的脸部异物，能够有效消除脸部异物，提高图像中脸部异物的消除效果。
[0084]在本申请所提供的几个实施例中，应该理解到，所揭露的系统和方法，可以通过其它的方式实现。
[0085]需要说明的是，对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本发明所必须的。
[0086]在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
[0087]以上为对本发明所提供的一种图像处理方法及装置的描述，对于本领域的一般技术人员，依据本发明实施例的思想，在【具体实施方式】及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。
【主权项】
1.一种图像处理方法，其特征在于，包括: 获取待处理的图像； 识别所述图像中的人脸区域； 确定所述人脸区域中的待处理位置，其中，所述待处理位置为脸部异物所在的位置； 以所述人脸区域的脸部中轴线为对称轴，确定所述待处理位置的对称位置； 将所述待处理位置的图像块替换为所述对称位置的图像块，得到处理后的图像； 输出所述处理后的图像。2.根据权利要求1所述的图像处理方法，其特征在于，所述确定所述人脸区域中的待处理位置，包括: 接收在所述人脸区域中输入的位置选择操作； 将所述位置选择操作所选择的位置确定为所述人脸区域中的待处理位置。3.根据权利要求1所述的图像处理方法，其特征在于，所述确定所述人脸区域中的待处理位置，包括: 确定所述人脸区域中的非五官区域； 将所述非五官区域中满足异物条件的图像区域所在的位置确定为所述人脸区域中的待处理位置； 其中，所述异物条件为:图像区域的像素平均值在预设的阈值范围内。4.根据权利要求1至3任一项所述的图像处理方法，其特征在于，所述将所述待处理位置的图像块替换为所述对称位置的图像块，得到处理后的图像，包括: 拷贝所述对称位置的图像块； 将所述对称位置的图像块粘贴至所述待处理位置上后合成图像，得到处理后的图像。5.根据权利要求1至3任一项所述的图像处理方法，其特征在于，所述识别所述图像中的人脸区域，具体为: 当接收到输入的脸部异物消除指令时，识别所述图像中的人脸区域。6.—种图像处理装置，其特征在于，包括: 图像获取单元，用于获取待处理的图像； 识别单元，用于识别所述图像获取单元获取的图像中的人脸区域； 第一确定单元，用于确定所述人脸区域中的待处理位置，其中，所述待处理位置为脸部异物所在的位置； 第二确定单元，用于以所述人脸区域的脸部中轴线为对称轴，确定所述第一确定单元所确定的待处理位置的对称位置； 图像块替换单元，用于将所述第一确定单元所确定的待处理位置的图像块替换为所述第二确定单元所确定的对称位置的图像块，得到处理后的图像； 图像输出单元，用于输出所述处理后的图像。7.根据权利要求6所述的图像处理装置，其特征在于，所述第一确定单元包括: 子接收单元，用于接收在所述人脸区域中输入的位置选择操作； 第一子确定单元，用于将所述位置选择操作所选择的位置确定为所述人脸区域中的待处理位置。8.根据权利要求6所述的图像处理装置，其特征在于，所述第一确定单元包括: 第二子确定单元，用于确定所述人脸区域中的非五官区域； 第三子确定单元，用于将所述第二子确定单元确定的非五官区域中满足异物条件的图像区域所在的位置确定为所述人脸区域中的待处理位置； 其中，所述异物条件为:图像区域的像素平均值在预设的阈值范围内。9.根据权利要求6至8任一项所述的图像处理装置，其特征在于，所述图像块替换单元包括: 拷贝单元，用于拷贝所述第二确定单元所确定的对称位置的图像块； 粘贴合成单元，用于将所述拷贝单元拷贝的所述对称位置的图像块粘贴至所述第一确定单元所确定的待处理位置上后合成图像，得到处理后的图像。10.根据权利要求6至8任一项所述的图像处理装置，其特征在于，所述图像处理装置还包括:美颜指令接收单元，用于接收输入的脸部异物消除指令； 所述识别单元具体用于:当所述美颜指令接收单元接收到所述脸部异物消除指令时，识别所述图像获取单元获取的图像中的人脸区域。
【文档编号】G06T5/00GK106067167SQ201610396947
【公开日】2016年11月2日
【申请日】2016年6月6日 公开号201610396947.8, CN 106067167 A, CN 106067167A, CN 201610396947, CN-A-106067167, CN106067167 A, CN106067167A, CN201610396947, CN201610396947.8
【发明人】康健, 孙剑波
【申请人】广东欧珀移动通信有限公司