用于提供虚拟整形手术社交网络服务的方法和装置的制造方法
【专利说明】用于提供虚拟整形手术社交网络服务的方法和装置
[0001]相关申请的交叉引用
[0002]本申请以申请日为2014年3月31日的韩国专利申请N0.10-2014-0038190为基础，并且请求该申请的优先权，其全部公开内容并入本文作为参考。
技术领域
[0003]本发明涉及一种用于提供虚拟整形手术(plastic surgery)服务的方法和装置，尤其涉及一种服务方法和装置，用于从由诸如智能手机等的便携式相机或者数码单反(DSLR)相机捕获的一系列图像中创建三维脸部模型、与用户的朋友或者专家共享该脸部模型、以及实施虚拟整形手术模拟同时允许用户将该模拟结果与朋友分享或者向专家咨询。
【背景技术】
[0004]已经存在这种服务，通过通信网络将信息和人(用户)的脸部照片发送至专家，以由此允许用户向专家咨询整形手术后他们的容貌。然而，由于在线提供的咨询通常基于二维照片，所以对用户来说对于整形手术的结果在线进行充分的咨询是困难的。
[0005]为了获得三维(3D)虚拟整形手术的咨询以看到在整形手术前和之后的变化，用户需要去整形手术专科医院，并且在那里向专家咨询，这样很麻烦并且发生费用。而且，实际上几乎不可能向其他医院的其他专家就该虚拟整形手术的咨询结果咨询。另外，从专业医院的角度，由于他们需要购买高价的设备用于生成3D脸部模型，所以这需要高的成本。
【发明内容】
[0006]针对上述问题，本公开提供了一种服务方法和装置，用于从一系列由诸如智能手机等的便携式相机或者DSLR相机捕获的一系列图像创建三维脸部模型，与用户的朋友或者专家共享该脸部模型，并且实施虚拟整形手术模拟，同时允许用户将该模拟结果与朋友分享或者向专家咨询。
[0007]然而，本公开要解决的问题不限于上述的描述和从以下的描述中本领域技术人员可清楚地理解的其它的问题。
[0008]根据本发明的示例性的实施例，一种虚拟整形手术社交网站(SNS)服务装置，用于提供虚拟整形手术服务，该装置包括:三维(3D)脸部模型生成单元，配置成通过使用来自便携式相机的图像产生3D脸部模型；3D脸部模型数据库管理单元，配置成存储和管理所述3D脸部模型和虚拟整形手术的结果，使得在SNS (社交网络服务)上与人共享所述3D脸部模型和所述虚拟整形手术的结果；虚拟整形手术模拟单元，配置为允许用户通过使用朋友的共享的脸部模型的某脸部部分，或者通过使用已知的艺人的某脸部部分直接实施虚拟整形手术的模拟；以及社交网络服务单元，配置成允许用户在SNS上与人共享模拟的结果，或者将用户连接至想要咨询的专家。
[0009]根据本发明的另一示例性实施例，一种通过使用虚拟的整形手术SNS服务装置提供虚拟整形手术服务的方法，所述方法包括:通过使用来自便携式相机的图像生成3D脸部模型；存储所述生成的3D脸部模型；设置所述用户的3D脸部模型的开放范围使得所述3D脸部模型可与整形外科的专家或者用户的朋友共享；通过使用所述共享的3D脸部模型向整形手术的专家就虚拟整形手术进行咨询；实施虚拟的整形手术，其中用户采用共享的其他人的3D脸部模型的相应部分或者基本上由所述装置提供的3D脸部模型的相应部分替换用户的某部分；以及在社交网络服务上与朋友共享所述虚拟整形手术的结果。
[0010]根据上述的用于提供虚拟整形手术服务的方法和装置，用户能够通过使用他/她自己的便携式相机，以低价格容易地为他的/她的3D脸部建模，并且能够通过与专家共享3D脸部模型，向专家就虚拟整形手术的模拟结果咨询，而无需去专科的整形手术医院。因此，与传统的获得二维脸部照片的情况相比，能够获得整形手术的更高质量的模拟结果。
[0011]而且，根据本发明的示例性的实施例，提供一种服务，通过该服务，用户可基于社交网络服务与其他朋友共享3D脸部模型，并且还能够将该3D脸部模型的某脸部部位施加到他/她自己的3D脸部模型的相应部分。而且，用户可以向其他人包括朋友展示模拟的结果。因此，可促进虚拟整形手术服务的使用。
[0012]另外，根据本发明的示例性实施例，离医院很远的病人，或者国外的病人可在他们去医院之前了解或者检查其面部在整形手术之前或者之后的变化，也就是整形手术的结果。因此，医疗服务的质量得以提升，可以防止来自病人的可能的投诉。因此，可以为病人和医院都提供有利的服务。
【附图说明】
[0013]图1是示出了根据本发明的示例性实施例的虚拟整形手术SNS服务装置的视图。
[0014]图2是用于描述根据本发明的示例性实施例的虚拟整形手术SNS服务过程的流程图。
[0015]图3是用于描述根据本发明的示例性实施例的，用于个别的脸部部分的虚拟整形手术模拟方法的流程图。
[0016]其中，附图标记说明如下:
[0017]100:3D脸部模型生成单元
[0018]200:3D脸部模型数据库管理单元
[0019]300:虚拟整形手术模拟单元
[0020]400:社交网络服务单元
【具体实施方式】
[0021]本发明的优点和特点以及实现其的方法将从下文中结合附图给出的示例性实施的描述中变得清楚。示例性实施例将被详细描述使得本领域技术人员将容易地实施发明构思。
[0022]然而，应当注意，示例性实施例的意图绝不是用于限定，在不脱离本发明的技术构思的范围内，可作出多种修正。本发明构思的范围由所附的权利要求而不是由示例性实施例的详细描述来限定。
[0023]在整个文件中，术语“第一”以及“第二”用于指定不同的元件。然而，元件不应当被术语限定，并且术语应当仅仅用于将一个元件与其它元件区分的目的。作为示例，不脱离权利要求的范围，第一元件可被称作第二元件，同样的，第二元件也可被称为第一元件。此夕卜，术语“和/或”用于指定多个相关项目的结合或者这些相关项目中的任何一个。
[0024]在整个文件中，术语“连接至“或者”耦合至“用于指定一个元件连接或者耦合至另一个元件，并且同时包括元件直接连接或者耦合至另一个元件的情形，以及一个元件通过另外一个元件间接地连接或者耦合至另一个元件的情形。同时，当使用术语“直接地连接至”或者“直接地耦合至”时，应当理解在两个元件之间不存在其它元件。
[0025]本申请中使用的多个术语用于描述具体的示例性实施例，无论如何不意味着限制。除非本文中有相反的限定，单数形式包括复数形式。在整个文件中，术语“包括”或者“具有”用于表示
[0026]在整个文件中，文件中使用的术语“包含或者包括”，和/或“包含或者包括”意味着除了描述的部件、步骤、操作和/或元件外，不被排除一个或者多个其它特征、数值、部件、步骤、操作和/或元件的存在或者添加。
[0027]除非另外限定，该文件中使用的所有包括技术的和科学的名词的术语具有与本领域技术人员通常理解的相同的含义。在常用的词典中定义的术语应当被解释为具有相关领域语境中理解的相同的含义，并且除非在该文件中清楚限定，其不应当被解释为具有不切实际的或者过度刻板的含义。
[0028]下文中，将结合附图详细地描述本公开的示例性实施例，附图形成作为本公开的一部分。在整个附图和下面的描述中，类似的部分将标记为类似的附图标记，并且将省略其多余的描述以便于理解本公开。
[0029]图1是示出了根据本发明的示例性实施例的虚拟整形手术SNS服务装置的视图。
[0030]参考图1，示例性实施例的虚拟整形手术SNS服务装置包括3D脸部模型生成单元100,3D脸部模型数据库管理单元200、虚拟整形手术模拟单元300、以及社交网络服务单元400。
[0031]3D脸部模型生成单元100配置成接收从便携式相机中输入的用户脸部的图像，分析用户的一系列脸部图像，生成3D点云，并且随后再次生成3D脸部网格。这里，3D脸部模型生成单元100将3D脸部标准模型(可以逐部分地修改)匹配至3D脸部网格，以由此生成可以逐部分地修改的3D脸部模型。此时，为了展示用户的脸部皮肤，3D脸部模型生成单元100还产生脸部皮肤纹理图。
[0032]随后，3D脸部模型数据库管理单元200在3D脸部模型数据库中存储用户的3D脸部模型和皮肤纹理图以及用户的个人轮廓(profile)，并且管理该数据库。然后，3D脸部模型数据库管理单元200处理该用户的3D脸部模型，使得存储在这里的3D脸部模型可以在之后用于虚拟整形手术模拟单元300和社交网络服务单元400。
[0033]社交网络服务单元400通过3D脸部模型数据库管理单元200设置社交网络上个人的3D脸部模型信息的开放范围。对于个人的3D脸部模型信息的开放范围，可以指定诸如特定医院的专家或者用户的朋友等的特定的人，或者诸如用户的朋友或者家庭群、鼻子整形专家群等的特定的人群，等等。
[0034]随后，虚拟整形手术模拟单元300为用户提供模拟，其中用户的3D脸部模型的某部分可通过使用对用户开放的3D脸部模型信息，或者通过使用由系统提供的模板而被修改。这里，修改可针对单个的脸部部分。作为示例，用户可以用朋友的鼻子或者眼睛改变他/她的