信息处理装置和存储介质的制作方法
【专利摘要】本公开涉及信息处理装置和存储介质。根据本公开的信息处理装置包括：检测单元，其检测图像中的脸图像区域；确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
【专利说明】信息处理装置和存储介质
【技术领域】
[0001]本公开涉及信息处理装置和存储介质。
【背景技术】
[0002]因为大量数据以高速率进行传输随同通信技术近年来的进展一起已成为可能，所以已提供了各种种类的信息通信服务。例如，用户可以在诸如社交网络服务(SNS)网站之类的社交关系网站上共享他们的摄影图像，或者可以在网络虚拟游戏中经由预定网络将他们的摄影图像传送到传输目的地。在这样的情况下，当用户不想暴露他或她自己的脸或其它部位时，摄影图像的一部分可以被处理，然后在网络上传输，以便保护隐私。
[0003]作为被用来保护图像中出现的人的肖像权的涉及保护隐私的技术，例如已提议了日本待审专利申请公布第2001-127990号。日本待审专利申请公布第2001-127990号公开了这样一种技术，在所述技术中，当拍摄的肖像图像被实时传送到期望的传输目的地时，图像识别装置将图像中的人和背景拆散为单独的对象，并且图像处理单元针对每个对象将它们转换成其它图像。该公布描述了其它图像例如是复合草图或面部漫画的图像。
[0004]另外，日本待审专利申请公布第2005-236464号公开了这样一种技术，在所述技术中，在监视摄影机的视频分发系统中，人和无人区域被分开，并且在货物的视频图像被包括的同时，不包括到商店的参观者的图像的视频图像(其中参观者被马赛克处理的视频图像)被分发。因此，在保护到商店的参观者的肖像权和隐私的同时，使得商店的势态能够得以查明的视频图像分发是可能的。
【发明内容】
[0005]然而，在日本待审专利申请公布第2001-127990号和第2005-236464号中公开的技术中，即使可以保护隐私，实际的视频图像也会由于其中包括的那种马赛克部分、复合草图或漫画等而显得不自然，这造成感觉不适。
[0006]因此，希望提议一种新颖且改进的信息处理装置和存储介质，其可以在不造成感觉不适的情况下通过转换人的脸图像来保护隐私。
[0007]根据本公开的实施例，提供了一种信息处理装置，该信息处理装置包括:检测单元，其检测图像中的脸图像区域；确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
[0008]根据本公开的实施例，提供了一种其中存储有程序的非暂态计算机可读存储介质，所述程序使计算机作为以下单元来操作:检测单元，其检测图像中的脸图像区域；确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
[0009]根据上面描述的本公开的实施例，可以在不造成感觉不适的情况下通过转换人的脸图像来保护隐私。
【专利附图】
【附图说明】
[0010]图1是用于描述根据本公开的实施例的图像处理系统的概况的示图；
[0011]图2是举例说明用于脸图像的一般隐私保护方法的示图；
[0012]图3是图示根据实施例的服务器的内部配置例子的框图；
[0013]图4是示出根据实施例的第一脸图像替换过程的流程图；
[0014]图5是用于详细地描述根据实施例的脸图像替换的示图；
[0015]图6是示出根据实施例的第二脸图像替换过程的流程图；
[0016]图7是示出根据实施例的第三脸图像替换过程的流程图；以及
[0017]图8是图示根据实施例的从服务器向用户终端呈现的每个图像的显示例子的示图。
【具体实施方式】
[0018]在下文中，参考附图来详细地描述本公开的优选实施例。注意，在本说明书和附图中，具有基本上相同的功能和结构的结构性元件用相同的标号来指示，并且省略对这些结构性元件的重复说明。
[0019]另外，按照以下顺序来提供描述。
[0020]1.根据本公开的实施例的图像处理系统的概况
[0021]2.服务器的内部配置例子
[0022]3.脸图像替换过程
[0023]3-1.第一脸图像替换过程
[0024]3-2.第二脸图像替换过程
[0025]3-3.第三脸图像替换过程
[0026]4.结论
[0027]〈1.根据本公开的实施例的图像处理系统的概况〉
[0028]首先，参考图1来描述根据本公开的实施例的图像处理系统的概况。如图1所示，根据本公开的实施例的图像处理系统包括服务器I和用户终端2。另外，服务器I和用户终端2可以经由网络3相互连接。
[0029]用户终端2是用户使用的通信终端，并且可以以无线或有线的方式连接到网络3。另外，用户终端2可以是移动电话终端、数字摄影机、视频摄影机、个人数字助理(PDA)、个人计算机(PC)或便携式游戏装置等，而不是如图1所示的智能电话。用户可以经由网络3在用于SNS或博客服务的服务网站上上传使用用户终端2拍摄的实际图像(摄影图像)或用户终端2中包括的摄影图像。
[0030]这里，当用户不想将摄影图像中出现的他或她的脸暴露给公众时，或者当另一个人的脸出现在摄影图像中时，用户通常试图通过以下来保护隐私:对图像执行处理，然后将其上传，以便使得脸不可识别。例如，如图2所示，为了保护摄影图像60中出现的人的隐私，如被处理图像62中那样用审查条遮蔽示出人眼睛的部分，或者如被处理图像64中那样马赛克处理人脸是已知的。[0031]然而，如果对实际的图像执行这样的处理，那么尽管可以使用这样的审查条和马赛克来保护隐私，但是图像看起来不自然，造成感觉不适。
[0032]因此，集中于上面描述的境况，已创造了根据本公开的每个实施例的图像处理系统。依据根据本公开的每个实施例的图像处理系统，可以通过转换人的脸图像来保护隐私，以便不造成感觉不适。
[0033]具体而言，如图1所示，在服务器I中，通过根据人的人类属性用另一个自然的脸图像来替换从用户终端2传输的摄影图像30中出现的人的脸图像，生成图像36。人类属性例如是人的年龄或性别，并且通过用与摄影图像30中出现的人相同的性别的另一个自然的脸图像进行替换，服务器I可以生成引起很小感觉不适的自然图像36。如描述的那样，通过根据人类属性用另一个自然的脸图像来替换人的脸图像，可以生成引起很小不自然的感觉的图像，同时保护摄影图像中出现的人的隐私。
[0034]注意，在本说明书中，自然的脸图像指的是通过如实地拍摄现有人的脸而获得的实际图像(自然图像)或根据多个现有人的脸的实际图像而生成的平均脸图像(合成图像)。
[0035]在上文中已描述了根据本公开的实施例的图像处理系统的概况。接下来参考图3详细地描述图像处理系统中包括的服务器I的内部配置例子。
[0036]〈2.服务器的内部配置例子〉
[0037]图3是图示根据当前实施例的服务器I的配置的框图。如图3所示，服务器I具有中央处理单元(CPU) 10、只读存储器(ROM) 11、随机存取存储器(RAM) 12、自然脸图像数据库(DB) 13、脸区域检测单元14、确定单元16、脸图像替换单元18和网络接口(I/F) 19。在下文中，将会描述每个单元的配置。
[0038](自然脸图像DB13)
[0039]自然脸图像DB13是其中存储有自然脸图像的存储单元。在如上所述的本说明书中，自然脸图像可以是实际的图像，或者可以是根据多个实际图像生成的平均脸图像(合成图像)。实际图像是通过拍摄允许他或她的脸暴露给公众的人的脸而获得的摄影图像。另夕卜，平均脸图像可以是针对诸如性别、年龄、种族、皮肤颜色、头发颜色、眼睛颜色和身体类型之类的每个人类属性而生成的平均脸图像。另外，佩戴或者不佩戴诸如眼镜、帽子、耳套、头戴受话器或耳机之类的附件(在下文中称之为佩戴或者不佩戴眼镜等)可以被添加到人类属性。这是因为人在他或她的脸之上以及在他或她的头上佩戴这样的附件会影响他或她的面部表情。
[0040]另外，在自然的脸图像上，可以对是替换图像的指示进行标记。例如可以通过在脸图像上的预定位置处添加黑点来表达是替换图像。
[0041]另外，自然的脸图像可以是至少包括脸的一部分的图像，或者可以是脸部如眼睛、鼻子或嘴巴的自然图像。
[0042]注意，稍后参考图5来描述自然脸图像DB13中存储的自然脸图像的例子。
[0043](脸区域检测单元14)
[0044]脸区域检测单元14检测从用户终端2传输的图像中的脸图像区域。具体而言，脸区域检测单元14例如通过分析图像来识别脸，并从而检测至少包括脸的一部分的图像区域。另外，脸区域检测单元14可以检测以等于或大于预先设置为脸图像区域的预定尺寸的尺寸拍摄的脸。另外，脸区域检测单元14可以从用户指定的图像中的区域中检测脸图像区域。
[0045](确定单元16)
[0046]确定单元16确定脸区域检测单元14检测的脸图像区域中的至少一个脸图像的人类属性。具体而言，确定单元16可以基于脸图像或者基于整体图像(包括脸图像的身体的图像)来确定人类属性。这里，人类属性是人的性别、年龄(世代)、种族、皮肤颜色、头发颜色、眼睛颜色、国籍或身体类型等，并且可以向其添加佩戴或者不佩戴眼镜等。另外，确定单元16可以以这样的方式来确定人类属性:从图像中提取脸或身体的图像，对图像执行与预先登记的用于属性确定的模式的模式匹配，然后对脸和服装等进行分析。
[0047](脸图像替换单元18)
[0048]脸图像替换单元18根据确定单元16确定的人类属性用另一个人的自然脸图像来替换脸区域检测单元14检测的脸图像区域。具体而言，例如，脸图像替换单元18从自然脸图像DB13中提取具有与确定单元16确定的人类属性相同的属性(例如具有相同的性别、年龄、种族、皮肤颜色、头发颜色或眼睛颜色)的人的自然脸图像，并且用自然脸图像来替换图像中的脸图像区域。以这种方式，由于图像的脸图像区域被转换成另一个自然脸图像，使得图像中出现的人未被指定，所以自然脸图像也被称为匿名脸图像。另外，通过用具有与确定单元16确定的人类属性相同的属性的人的自然脸图像来替换脸图像区域，脸图像替换单元18可以生成更加自然并且引起很小感觉不适的替换图像。注意，当脸图像的人在图像中佩戴眼镜时，脸图像替换单元18可以用佩戴眼镜的脸图像来替换图像，或者可以用没有眼镜等的脸图像来替换图像，然后对其执行图像处理，以便使得人佩戴眼镜等。
[0049]另外，通过脸图像替换单元18进行的替换过程可以是在从用户终端2传输的图像数据(原始图像)上重写自然脸图像的方法，或者可以是管理作为与原始图像分开的层而在脸区域上叠加的自然脸图像的方法。
[0050]另外，除了人类属性之外，脸图像替换单元18还可以根据拍摄原始图像期间的照明状态、拍摄的地点和图像质量等在替换期间提取看起来更加自然并且引起很小感觉不适的自然脸图像。具体而言，例如当自然光被用于拍摄时的照明并且环境非常明亮时，脸图像替换单元18提取同样地在其中使用自然光的明亮环境中拍摄的自然脸图像。
[0051]另外，脸图像替换单元18用这样的自然脸图像来替换脸图像，在所述自然脸图像中，尺寸、取向和面部表情等中的至少一个与原始图像(摄影图像)中出现的脸图像相匹配，以便从使用自然脸图像进行的替换中获得的图像造成很小的感觉不适。
[0052]另外，根据居住在拍摄地点(具有拍摄地点的国籍)的大多数种族，脸图像替换单元18可以提取该种族(国籍)的自然脸图像。这样一来，例如当有人在周游中参观国家B并且拍摄其中来自不同国家(国家A)的人被拍摄的图像时，通过用国家B本地人的自然脸图像替换来自国家A的人的图像，可以保护被拍摄的人的隐私，并且将会明显的是，在国家B的参观地方拍摄替换图像。在这样的情况下，通过提取具有与原始图像中拍摄的来自国家A的人相同的人类属性如性别和年龄等的国家B本地人的自然脸图像，脸图像替换单元18可以生成看起来更加自然并且引起很小感觉不适的图像。
[0053]注意，关于拍摄期间的照明状态、拍摄的地点和图像质量等的信息可以通过分析原始图像来确定，或者可以根据添加到原始图像的元数据来确定。
[0054](网络I/F19)[0055]网络I/F19是通信模块，用于经由网络3在用户终端2之间执行数据的传输与接收。例如，根据当前实施例的网络I/F19从用户终端2接收摄影图像。另外，通过经由网络3在预定服务网站上通过服务器I对脸图像执行替换过程，网络I/F19还可以上传从服务器I获得的图像。
[0056](CPU10，ROMll 和 RAM12)
[0057]CPUlO是控制服务器I的每个构成元件的控制单元。CPUlO根据ROMll中存储的软件程序来控制每个构成元件。具体而言，CPUlO执行控制，以例如在预定服务网站上上传已经历通过脸图像替换单元18进行的替换过程的图像。另外，ROMll存储对于CPUlO执行控制而言所必须的软件程序等。另外，RAM12用作当CPUlO根据ROMll中存储的软件程序执行控制时的工作区。
[0058]在上文中已详细地描述了根据当前实施例的服务器I的配置。接下来描述根据当前实施例的脸图像替换过程的几个例子。
[0059]<3.脸图像替换过程〉
[0060](3-1.第一脸图像替换过程)
[0061]图4是示出根据当前实施例的第一脸图像替换过程的流程图。如图4所示，服务器I在步骤S103中从用户终端2获取(接收)图像数据。
[0062]接下来，服务器I的脸区域检测单元14在步骤S106中从图像数据中检测脸图像区域。在这种情况下，脸区域检测单元14可以检测尺寸等于或大于预定尺寸的脸图像区域，而不用检测太小而不能对人进行指定的脸图像。在此，图5图示了用于详细地描述根据当前实施例的脸图像替换的示图。如图5所示，脸区域检测单元14检测从用户终端2传输的摄影图像30中的脸图像区域32。
[0063]然后，服务器I的CPUlO在步骤S109中确定图像是否要用自然脸图像来替换。具体而言，当存在来自用户的替换指令时，或者当打算上传图像的服务网站上的匿名未被可靠地确保时，CPUlO可以确定用自然脸图像来替换。
[0064]接下来，当确定不执行替换(在S109中为否)时，服务器I在步骤S112中不执行自然脸图像的替换，然后在步骤S119中在预定服务网站上上传从用户终端2传输的图像而不进行改变。
[0065]另一方面，当确定用自然脸图像来替换(在S109中为是)时，确定单元16在步骤S115中确定脸区域检测单元14检测的脸图像区域中的人的人类属性。具体而言，如图5所示，确定单元16确定从摄影图像30中检测的脸图像区域32中的人4的人类属性。在这种情况下，确定单元16例如提取人4的脸或身体的图像，执行与预先登记的用于属性确定的模式的模式匹配，并从而可以确定诸如“国家A”、“女性”和“成年人”之类的人类属性。
[0066]接下来，在步骤S118中，脸图像替换单元18根据确定单元16确定的人类属性从自然脸图像DB13中提取自然脸图像，并且用提取的自然脸图像替换脸区域检测单元14检测的脸图像区域。具体而言，如图5所示，从自然脸图像DB13中存储的多个自然脸图像数据131中，提取具有与确定单元16确定的人类属性相同的属性的自然脸图像。如图5所示，针对每个人类属性分类自然脸图像数据131，并且脸图像替换单元18提取满足包括“国家A”、“女性”和“成年人”的人4的全部人类属性的自然脸图像34。然后，脸图像替换单元18用提取的自然脸图像34替换摄影图像30的脸图像区域32，并从而生成图像36。如图5所示，脸图像的替换可以通过以下来执行:如实地使用原始图像(摄影图像30)中出现的人4的头部(包括整个发型)，用自然脸图像34仅替换脸，或者用包括整个发型的自然脸图像来替换图像。
[0067]进一步，脸图像替换单元18可以用包括脸和身体的自然肖像图像来替换包括身体的整个人4。例如当摄影图像30的拍摄地点是国家B时，并且当人4被确定具有国家A的人的属性时，脸图像替换单元18可以用国家B本地人的自然肖像图像来替换整个人4。
[0068]接下来，在步骤S119中，服务器I在预定服务网站上上传通过脸图像替换单元18执行的用自然脸图像进行替换而获得的图像。
[0069](3-2.第二脸图像替换过程)
[0070]在上面描述的第一脸图像替换过程中，确定单元16自动确定脸图像区域的人的人类属性，然而，根据当前实施例的脸图像替换过程不限于此，并且例如，用户可以任意地指定人类属性。在下文中，参考图6来详细地描述其中用户可以任意地指定人类属性的脸图像替换过程。
[0071]图6是示出根据当前实施例的第二脸图像替换过程的流程图。如图6所示，服务器I在步骤S123中向用户终端2呈现包括脸图像的图像。
[0072]接下来，在步骤S126中，服务器I接收用户对单个或多个特定脸图像的选择。换言之，用户操作用户终端2，以从呈现的包括脸图像的图像中针对用户想要替换的脸图像选择脸图像区域。
[0073]接下来，在步骤S129中，服务器I确定脸图像是否要用自然脸图像替换。具体而言，当存在来自用户的替换指令时，CPUlO可以确定要用自然脸图像替换脸图像。
[0074]接下来，当确定不执行替换(在S129中为否)时，服务器I在步骤S132中不用自然脸图像替换脸图像，然后在步骤S142中在预定服务网站上上传包括脸图像的图像。
[0075]另一方面，当确定用自然脸图像来替换脸图像(在S129中为是)时，CPUlO在步骤S135中确定是否要执行自动替换。具体而言，CPUlO在没有来自用户的指令时确定要执行自动替换，自动替换被确定，并且在存在来自用户的手工替换的指令时确定要执行手工替换。
[0076]接下来，当确定自动替换(在S135中为是)时，在步骤S138中，确定单元16如上所述自动地确定用户在S126中选择的脸图像区域中的人的人类属性。
[0077]接下来，在步骤S141中，脸图像替换单元18根据确定单元16确定的人类属性从自然脸图像DB13中提取自然脸图像，并且用提取的自然脸图像来替换脸区域检测单元14检测的脸图像区域。
[0078]然后，在步骤S142中，服务器I在预定服务网站上上传通过脸图像替换单元18用自然脸图像进行替换而获得的图像。
[0079]另一方面，当确定手工替换(在S135中为否)时，CPUlO在步骤S144中接收用户对人类属性的选择。换言之，用户操作用户终端2，以例如选择国籍、年龄和性别等作为用于替换所选脸图像区域的人类属性。
[0080]接下来，在步骤S147中，脸图像替换单元18根据用户选择的人类属性从自然脸图像DB13中提取自然脸图像，并且用提取的自然脸图像来替换用户选择的脸图像区域。
[0081]然后，在步骤S142中，服务器I在预定服务网站上上传通过脸图像替换单元18用自然脸图像进行替换而获得的图像。
[0082]如上所述，自然脸图像替换图像中的脸图像区域可以通过用户手工选择人类属性来指定。
[0083](3-3.第三脸图像替换过程)
[0084]在上面描述的第一和第二脸图像替换过程中，脸图像替换单元18自动执行提取和根据人类属性用自然脸图像来替换，然而，根据当前实施例的脸图像替换过程不限于此。例如，脸图像替换单元18可以根据人类属性提取多个自然脸图像，将它们呈现给用户，然后执行用用户选择的自然脸图像来替换的过程。在下文中，参考图7和8来详细地描述其中多个自然脸图像被呈现给用户的自然脸图像替换过程。
[0085]图7是示出根据当前实施例的第三脸图像替换过程的流程图。如图7所示，在步骤S153中，服务器I向用户终端2呈现包括脸图像的图像。
[0086]接下来，在步骤S156中，服务器I裁剪用自然脸图像进行的替换区域。具体而言，服务器I可以接收根据用户的指令对将要从呈现的包括脸图像的图像中替换的脸图像的区域的选择，或者可以自动地呈现包括脸图像的区域作为裁剪部分。这里，图8是根据当前实施例的由服务器I向用户终端2呈现的每个图像的显示例子的示图。首先，如图8的屏幕40中示出的那样，服务器I向用户终端2呈现区域42，所述区域42在呈现给用户的包括脸图像的图像当中被裁剪为将要替换的脸图像的区域。
[0087]接下来，在步骤S159中，服务器I根据用户操作确定裁剪的区域42是否OK (好的)。例如当图8中图示的区域420K时，用户点击用户终端2中显示的OK按钮(未图示)以执行决策过程。
[0088]接下来，当裁剪的区域OK (在S159中为是)时，脸区域检测单元14在步骤S160中从区域42中检测两个脸图像区域。
[0089]接下来，在步骤S161中，确定单元16确定脸区域检测单元14检测的两个脸图像区域中的每个人的人类属性。
[0090]接下来，在步骤S162中，脸图像替换单元18从自然脸图像DB13中根据确定单元16确定的每个人的人类属性提取一个或多个自然脸图像，然后将图像呈现给用户终端2作为一组候选替换模式。具体而言，如图8的屏幕44中图示的那样，在用户终端2中显示了自然脸图像的候选替换模式组46。
[0091]接下来，在步骤S165中，脸图像替换单元18放大并呈现用户从候选替换模式组46中选择的候选替换模式。具体而言，如图8的屏幕48中图示的那样，当候选替换模式组46当中的候选替换模式46a被选择时，服务器I放大候选替换模式46a，并且将其呈现给用户终端2。注意，候选替换模式46a是至少根据如图8所示的人类属性如性别或年龄(世代)的自然脸图像，并且脸的取向也充当针对区域42中的每个脸图像的候选自然脸图像的属性。
[0092]接下来，在步骤S168中，服务器I根据用户操作确定呈现的候选替换模式是否0K。当图8的屏幕48中图示的候选替换模式46a OK时，用户点击用户终端2中显示的OK按钮(未图示)以执行决策过程。
[0093]接下来，当候选替换模式被决定(在S168中为是)时，在步骤S171中，脸图像替换单元18生成通过执行用如图8的屏幕50中图示的那样的自然脸图像的候选替换模式46a来替换而获得的图像，并且将图像呈现给用户终端2。[0094]然后，在步骤S172中，服务器I在预定服务网站上上传通过脸图像替换单元18用自然脸图像执行替换而获得的图像。
[0095]如上文中描述的那样，在根据当前实施例的脸图像替换过程中，多个自然脸图像被呈现作为一组候选替换模式，并且用户可以选择任何候选替换模式。
[0096]<4.结论〉
[0097]如上所述，在根据当前实施例的图像处理(脸图像替换过程)系统中，通过根据脸区域中的人的人类属性用自然脸图像替换从图像中检测的脸区域，可以生成自然的并且给予很小感觉不适的替换图像，同时保护人的隐私。
[0098]特别地，随着在SNS和博客服务等的服务网站上活跃地上传包括脸图像的摄影图像，这样的隐私保护近来已变得越发重要。
[0099]另外，存在在人不知道的情况下被拍摄的日益增加的可能性，因为监视摄影机已被安装在大多数地方，并且用于显示道路实际图像的地图服务已被分发。在这样的情况下，通过用其它自然脸图像来替换脸图像区域，在保护隐私的同时生成自然的并且给予很小感觉不适的替换图像是有利的。
[0100]进一步，可以期望实现一种新的通信系统是有用的，在所述新的通信系统中，巨量的图像传感器、麦克风和扬声器等遍及世界分布广泛，以便用作用于实现用户的物理能力扩展的手段，因此，个人拥有的通信终端不再成为必要。如果实现了这样的通信系统，则由于这样的图像传感器(摄影机)分布在广泛的范围内，存在在人不知道的情况下被拍摄的日益增加的可能性。在这样的情况下，然而，通过用其它自然脸图像来替换脸图像区域，在保护隐私的同时生成自然的并且给予很小感觉不适的替换图像是有利的。
[0101]在上文中，已参考附图详细地描述了本公开的示例性实施例，但是本公开不限于此。本领域技术人员应当理解的是，取决于设计需要和其它因素，各种修改、组合、再组合和变更都可能发生，它们都处在所附权利要求或其等效涵义的范围之内。
[0102]例如，脸图像替换单元18可以根据将要替换的原始图像(摄影图像)的分辨率和图像质量来提取自然脸图像。
[0103]另外，当难以根据脸图像区域被检测的人的人类属性来提取自然脸图像时，例如，脸图像替换单元18可以从原始图像中删除人的图像，或者用另一个自然肖像图像来替换人的整个图像。
[0104]另外，当满足预定条件时，已经历了用自然脸图像进行的替换过程的图像可以设置成返回到替换之前的原始图像(摄影图像)。预定条件是这样一种情况，在所述情况下，存在来自出现在摄影图像等中的人的将替换图像返回到替换之前的原始图像的指令。
[0105]另外，自然脸图像可以是通过拍摄允许他或她的脸暴露给公众的人的脸而获得的摄影图像(实际图像)。这样一来，服务器I就可以接收想要允许他或她的脸被使用的人的实际脸图像，并且将该图像存储在自然脸图像DB13中。
[0106]另外，在当前实施例中，服务器I用作执行脸图像替换过程的信息处理装置，然而，根据当前实施例的信息处理装置并不限于服务器1，而例如可以是用户终端2。具体而言，通过具有与如图3所示的服务器I的构成元件相对应的构成元件，用户终端2可以执行根据当前实施例的脸图像替换过程。
[0107]另外，本技术还可以配置如下。[0108](I) 一种信息处理装置，包括:
[0109]检测单元，其检测图像中的脸图像区域；
[0110]确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及
[0111]脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
[0112](2)根据(I)所述的信息处理装置，其中，所述人类属性是人的性别、年龄、种族、皮肤颜色和身体类型中的至少一个。
[0113](3)根据(I)所述的信息处理装置，其中，所述人类属性是人对包括眼镜、帽子、耳套、头戴受话器和耳机的附件的佩戴或者不佩戴。
[0114](4)根据(I)至(3)中任何一项所述的信息处理装置，其中，根据所述至少一个脸图像的人的面部表情以及脸的尺寸和取向中的至少一个，所述脸图像替换单元用另一个人的自然脸图像执行替换。
[0115](5)根据(I)至(3)中任何一项所述的信息处理装置，其中，根据所述图像的拍摄期间的照明状态，所述脸图像替换单元用另一个人的自然脸图像执行替换。
[0116](6)根据(I)至(5)中任何一项所述的信息处理装置，其中，根据拍摄所述图像的地点，所述脸图像替换单元用另一个人的自然脸图像执行替换。
[0117](7)根据(I)至(6)中任何一项所述的信息处理装置，其中，通过将所述至少一个脸图像与预先存储的自然脸图像相比较，所述脸图像替换单元用具有相同人类属性的另一个人的自然脸图像执行替换。
[0118](8)根据(I)至(7)中任何一项所述的信息处理装置，其中，所述自然脸图像是摄影图像或合成图像。
[0119](9)根据(8)所述的信息处理装置，其中，所述合成图像是基于多个人的脸图像生成的平均脸图像。
[0120](10)根据(8)所述的信息处理装置，其中，所述摄影图像是允许他或她的脸暴露给公众的人的实际脸图像。
[0121](11)根据(I)至(10)中任何一项所述的信息处理装置，其中，所述自然脸图像是包括脸的至少一部分的图像。
[0122](12)根据(I)至(11)中任何一项所述的信息处理装置，进一步包括:
[0123]存储单元，其存储所述自然脸图像。
[0124](13)根据(I)至(12)中任何一项所述的信息处理装置，进一步包括:
[0125]控制单元，其控制在预定服务网站上上传从所述脸图像替换单元用自然脸图像执行的替换中获得的图像。
[0126](14)根据(I)至(13)中任何一项所述的信息处理装置，其中，所述检测单元从用户指定的所述图像中的区域中检测脸图像区域。
[0127](15)根据(I)至(14)中任何一项所述的信息处理装置，其中，所述检测单元检测尺寸大于或等于预定尺寸的所述图像中的脸图像区域。
[0128](16)根据(I)至(15)中任何一项所述的信息处理装置，其中，用所述自然脸图像是替换图像的指示来标记所述自然脸图像。[0129](17)根据(I)至(16)中任何一项所述的信息处理装置，其中，当所述确定单元不能确定所述人类属性时，所述脸图像替换单元不执行脸图像的替换。
[0130](18) —种其中存储有程序的非暂态计算机可读存储介质，所述程序使计算机作为以下单元来操作:
[0131]检测单元，其检测图像中的脸图像区域；
[0132]确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及
[0133]脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
【权利要求】
1.一种信息处理装置，包括: 检测单元，其检测图像中的脸图像区域； 确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及 脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至少一个脸图像。
2.根据权利要求1所述的信息处理装置，其中，所述人类属性是人的性别、年龄、种族、皮肤颜色、头发颜色、眼睛颜色和身体类型中的至少一个。
3.根据权利要求1所述的信息处理装置，其中，所述人类属性是人对包括眼镜、帽子、耳套、头戴受话器和耳机的附件的佩戴或者不佩戴。
4.根据权利要求1所述的信息处理装置，其中，根据所述至少一个脸图像的人的面部表情以及脸的尺寸和取向中的至少一个，所述脸图像替换单元用另一个人的自然脸图像执行替换。
5.根据权利要求1所述的信息处理装置，其中，根据所述图像的拍摄期间的照明状态，所述脸图像替换单元用另一个人的自然脸图像执行替换。
6.根据权利要求1所述的信息处理装置，其中，根据拍摄所述图像的地点，所述脸图像替换单元用另一个人的自然脸图像执行替换。
7.根据权利要求1所述的信息处理装置，其中，通过将所述至少一个脸图像与预先存储的自然脸图像相比较，所述脸图像替换单元用具有相同人类属性的另一个人的自然脸图像执行替换。
8.根据权利要求1所述的信息处理装置，其中，所述自然脸图像是摄影图像或合成图像。
9.根据权利要求8所述的信息处理装置，其中，所述合成图像是基于多个人的脸图像生成的平均脸图像。
10.根据权利要求8所述的信息处理装置，其中，所述摄影图像是允许他或她的脸暴露给公众的人的实际脸图像。
11.根据权利要求1所述的信息处理装置，其中，所述自然脸图像是包括脸的至少一部分的图像。
12.根据权利要求1所述的信息处理装置，进一步包括: 存储单元，其存储所述自然脸图像。
13.根据权利要求1所述的信息处理装置，进一步包括: 控制单元，其控制在预定服务网站上上传从所述脸图像替换单元用自然脸图像执行的替换中获得的图像。
14.根据权利要求1所述的信息处理装置，其中，所述检测单元从用户指定的所述图像中的区域中检测脸图 像区域。
15.根据权利要求1所述的信息处理装置，其中，所述检测单元检测尺寸大于或等于预定尺寸的所述图像中的脸图像区域。
16.根据权利要求1所述的信息处理装置，其中，用所述自然脸图像是替换图像的指示来标记所述自然脸图像。
17.根据权利要求1所述的信息处理装置，其中，当所述确定单元不能确定所述人类属性时，所述脸图像替换单元不执行脸图像的替换。
18.—种其中存储有程序的非暂态计算机可读存储介质，所述程序使计算机作为以下单元来操作: 检测单元，其检测图像中的脸图像区域； 确定单元，其确定所述检测单元检测的脸图像区域中的至少一个脸图像的人类属性；以及 脸图像替换单元，其根据所述确定单元确定的人类属性，用另一个人的自然脸图像来替换所述至 少一个脸图像。
【文档编号】G06F21/60GK103778376SQ201310484914
【公开日】2014年5月7日 申请日期:2013年10月16日 优先权日:2012年10月23日
【发明者】佐古曜一郎, 丹下明, 中村隆俊, 渡边一弘, 浅田宏平, 迫田和之, 今孝安, 甲贺有希, 大沼智也, 花谷博幸, 竹原充, 林和则, 鎌田恭则 申请人:索尼公司