一种基于增强现实的试衣方法和系统与流程

本发明涉及数据处理领域，具体涉及一种基于增强现实的试衣方法和系统。

背景技术：

ar(augmentedreality，增强现实)技术，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3d模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。

虚拟试衣是指利用计算机技术让虚拟模特代替真实用户试穿网络商城上出售的服装，通过虚拟模特试穿呈现的效果对用户选购网上服装形成参考，便于用户购买到合适的服装。目前的虚拟试衣方案主要利用图库中的虚拟试衣模特，由用户选择虚拟试衣模特和衣服，从而可以通过该模特穿着该衣服的效果来挑选服装。

然而这种试衣方式会因为用户体型与模特之间的差异，缺乏真实的细节效果，同时也没有考虑面料、褶皱等效果，无法满足顾客的实际试衣需求。在这种情况下，客户无法获取真实的试穿效果。

技术实现要素：

本发明实施例提供一种基于增强现实的试衣方法和系统，通过虚拟显示服饰来提升用户的试衣效果。

第一方面，本发明实施例提供一种基于增强现实的试衣方法，包括：

获取当前画面，并选取所述当前画面中的人物图像；

从网络商城中确定目标服饰，并生成所述目标服饰对应的虚拟图像；

提取所述目标服饰的虚拟图像中的特征信息；

根据所述特征信息将所述目标服饰的虚拟图像与所述人物图像进行合成，并显示所述合成后的图像。

第二方面，本发明实施例还提供了一种基于增强现实的试衣系统，包括：图像选取模块、图像生成模块、特征提取模块以及合成模块；

所述图像选取模块，用于获取当前画面，并选取所述当前画面中的人物图像；

所述图像生成模块，用于从网络商城中确定目标服饰，并生成所述目标服饰对应的虚拟图像；

所述特征提取模块，用于提取所述目标服饰的虚拟图像中的特征信息；

所述合成模块，用于根据所述特征信息将所述目标服饰的虚拟图像与所述人物图像进行合成，并显示所述合成后的图像。

本发明实施例首先获取当前画面，并选取所述当前画面中的人物图像，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像，提取目标服饰的虚拟图像中的特征信息，根据该特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。本发明可以将用户的人体图像与选中的服饰图像进行合成，据此进行虚拟试衣，可以获得真实的试穿效果。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的基于增强现实的试衣方法的一种流程示意图。

图2为本发明实施例提供的基于增强现实的试衣方法的一种应用场景示意图。

图3为本发明实施例提供的基于增强现实的试衣方法的另一种流程示意图。

图4为本发明实施例提供的基于增强现实的试衣系统的一种结构示意图。

图5为本发明实施例提供的基于增强现实的试衣系统的另一种结构示意图。

图6为本发明实施例提供的基于增强现实的试衣系统的又一种结构示意图。

图7为本发明实施例提供的服务器的结构示意图。

具体实施方式

请参照图式，其中相同的组件符号代表相同的组件，本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例，其不应被视为限制本发明未在此详述的其它具体实施例。

在以下的说明中，本发明的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明，除非另有述明。因此，这些步骤及操作将有数次提到由计算机执行，本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存系统中的位置处，其可重新配置或另外以本领域测试人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实体位置，其具有由该数据格式所定义的特定特性。但是，本发明原理以上述文字来说明，其并不代表为一种限制，本领域测试人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。

本发明的原理使用许多其它泛用性或特定目的运算、通信环境或组态来进行操作。所熟知的适合用于本发明的运算系统、环境与组态的范例可包括(但不限于)手持电话、个人计算机、服务器、多处理器系统、微电脑为主的系统、主架构型计算机、及分布式运算环境，其中包括了任何的上述系统或装置。

以下将分别进行详细说明。

本实施例将从基于增强现实的试衣系统的角度进行描述，该系统具体可以集成在终端中。

请参阅图1，图1为本发明实施例一提供的一种基于增强现实的试衣方法的流程示意图，本实施例的基于增强现实的试衣方法包括：

步骤s101，获取当前画面，并选取当前画面中的人物图像。

本发明的目的是根据人物图像与服饰图像结合来实现虚拟试衣，因此在当前画面当中只是需要人物图像部分，而背景图像则是多余的，因此，通过获取人物图像部分，而非直接获取整个当前画面的图像，这样就可以降低图像数据量，减少存储空间，提高图像数据存取速度，特别是针对于高分辨率的摄像头来说，上述处理后数据量的减少效果更为明显。

其中，选取上述人物图像的具体实现方式，可以是获取具有数字图像格式(例如bmp、jpg等)的人物照片，也可以由数码相机或手机即时拍照生成人物照片。本领域技术人员易于想到的是，还可以通过视频截图、照片扫描等方式获取人物图像，本发明实施例对此不加以限定。

考虑到若当前画面中存在多个人物，还需进一步确定上述多个人物中的目标人物，进而选取该目标人物的人物图像。具体可以通过人脸识别技术来进行选取，人脸识别是基于人的脸部特征信息进行身份识别的一种生物识别技术。用摄像机或摄像头采集含有人脸的图像或视频流，并自动在图像中检测和跟踪人脸，进而对检测到的人脸进行脸部的一系列相关技术，通常也叫做人像识别或面部识别等等。另外，上述人脸识别技术可以采用基于haar特征的adaboost(adaptiveboosting，自适应增强)算法对原始图像中的人脸进行检测，或者采用其他算法对原始图像中的人脸进行检测，本实施例对此不做限定。

在一实施例中，若上述通过摄像头采集的图像当中存在多个人物图像，则可以分别提取上述多个人物图像的特征信息，根据该特征信息确定多个人物图像当中的目标人物图像。其中，上述特征信息可以为面部特征、虹膜特征等具有唯一性的人体特征信息。

步骤s102，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像。

在一实施例中，上述目标服饰对应的虚拟图像也可以由试衣者通过移动终端的摄像头拍照获取，也可以由试衣者通过移动终端从网络上下载获取，或者由试衣者从移动终端的本地存储文件中读取获得。在具体的应用中，上述目标服饰对应的虚拟图像从网络上下载获得的情况适用于用户通过移动终端访问购物网站等情况，即用户可以直接利用在购物网站上浏览到的衣服进行试衣，以此来决定是否购买。

由于衣服具有明显的袖子、领口等形状特征，因此可以通过特征识别、模板匹配等图像分析方法，获取包含服饰的原始图像中提取出该服饰的轮廓，并利用该轮廓，从原始图像中获取出仅包含衣服的目标图像。

步骤s103，提取目标服饰的虚拟图像中的特征信息。

在本发明实施例中，可以提取目标服饰对应的虚拟图像中的特征点，然后根据特征点将目标服饰对应的虚拟图像和人物图像进行合成。比如，可以首先对目标服饰对应的虚拟图像进行分割，将该图像至少分割为躯干、左右手臂、左右腿5个模型部分，然后从分割出的部分中至少得到裆底点、左右肩部点、左右腋下点及脖子基准点六个特征点，然后根据上述六个特征点将目标服饰对应的虚拟图像和人物图像进行合成。

在一实施例当中，由于衣服穿在人身上之后与人体的位置是一一对应的，例如衣服的领口对应人体的脖子，衣服的袖子对应人体的手臂，因此目标服饰对应的虚拟图像与人物图像之间会具备一一对应的相同特征位置。同时，由于每个人具有不同的高矮胖瘦等身材比例，同一件衣服穿在不同的人身上，均会因为身材比例的不同而呈现不同的效果，因此，需要根据人物图像中所体现出来的身材特征，对目标服饰对应的虚拟图像在相同特征位置进行大小的局部调整，生成调整后的服饰虚拟图像，以使调整后的服饰虚拟图像和人物图像的大小匹配。

在一实施例中，还可以通过检测用户的多点触控操作，根据多点触控操作局部调整目标服饰对应的虚拟图像的大小。由于直接根据人物图像对目标服饰对应的虚拟图像进行相同特征位置的大小调整，存在调整精度不高，细节部分不完全匹配的情况，因此允许用户在察看了试衣效果图之后，手动地对叠加在人物图像之上的服饰的虚拟图像进行局部调整。

在具体的实现中，可以通过检测用户的双击操作或者多点拖动操作，对用户指定区域范围内的图片进行局部放大，再通过检测用户对其指定位置的放大缩小操作来对该部分进行局部的大小调整，具体实现可以依照多点触控的各种操作方法，在此不再赘述。

步骤s104，根据特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。

在一实施例中，根据特征信息将目标服饰的虚拟图像与人物图像进行合成后，还可以对合成后的图像进行图像预处理，该预处理可以包括图像增强、平滑处理、降噪处理等等。比如，在得到合成图像之后，可以对图像中的信息有选择地加强和抑制，以改善图像的视觉效果，或将图像转变为更适合于机器处理的形式，以便于数据抽取或识别。例如一个图像增强系统可以通过高通滤波器来突出图像的轮廓线，从而使机器能够测量轮廓线的形状和周长。图像增强技术有多种方法，反差展宽、对数变换、密度分层和直方图均衡等都可用于改变图像灰调和突出细节。

如图2所示，用户可以在右侧的网络商城中选取不同的服饰(图中的21-26等)，并于左侧的人物图像10进行合成，使用户能够直观地看到试穿效果，大大增强用户体验。

由上可知，本发明实施例提供的基于增强现实的试衣方法可以获取当前画面，并选取所述当前画面中的人物图像，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像，提取目标服饰的虚拟图像中的特征信息，根据该特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。本发明可以将用户的人体图像与选中的服饰图像进行合成，据此进行虚拟试衣，可以获得真实的试穿效果。

根据上一实施例的描述，以下将以具体的实施例来说明本发明的基于增强现实的试衣方法。

首先，在实际应用当中，

请参阅图3，图3为本发明实施例提供的另一种基于增强现实的试衣方法的流程示意图，以智能手机为例进行说明，包括：

步骤s201，获取当前画面，并获取当前画面中的人物轮廓信息。

本发明的目的是根据人物图像与服饰图像结合来实现虚拟试衣，因此在当前画面当中只是需要人物图像部分，而背景图像则是多余的，因此，通过获取人物图像部分，而非直接获取整个当前画面的图像，这样就可以降低图像数据量，减少存储空间，提高图像数据存取速度，特别是针对于高分辨率的摄像头来说，上述处理后数据量的减少效果更为明显。

步骤s202，根据人物轮廓信息确定当前画面中的人物图像。

本发明实施例可以通过获取当前画面中的人物轮廓信息进而确定当前画面中的人物图像。其中，确定上述人物图像的具体实现方式，可以是获取具有数字图像格式(例如bmp、jpg等)的人物照片，也可以由数码相机或手机即时拍照生成人物照片。本领域技术人员易于想到的是，还可以通过视频截图、照片扫描等方式获取人物图像，本发明实施例对此不加以限定。

步骤s203，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像。

在一实施例中，上述目标服饰对应的虚拟图像也可以由试衣者通过移动终端的摄像头拍照获取，也可以由试衣者通过移动终端从网络上下载获取，或者由试衣者从移动终端的本地存储文件中读取获得。

在一实施例中，可以通过特征识别、模板匹配等图像分析方法，获取包含服饰的原始图像中提取出该服饰的轮廓，并利用该轮廓，从原始图像中获取出仅包含衣服的目标图像。

步骤s204，提取目标服饰的虚拟图像中的特征点的位置信息。

步骤s205，根据特征点的位置信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。

比如，可以首先对目标服饰对应的虚拟图像进行分割，将该图像至少分割为躯干、左右手臂、左右腿5个模型部分，然后从分割出的部分中至少得到裆底点、左右肩部点、左右腋下点及脖子基准点六个特征点，然后根据上述六个特征点将目标服饰对应的虚拟图像和人物图像进行合成。

步骤s206，接收用户输入的服饰调整指令。

上述服饰调整指令可以包含服饰的参数信息，比如颜色、尺码等等，用户可以根据步骤s205中显示的图像来进一步调整。

步骤s207，根据服饰调整指令对目标服饰的虚拟图像进行调整。

步骤s208，将调整后的虚拟图像与人物图像进行合成，并显示合成后的图像。

在一实施例中，用户在看到上述合成后的图像之后，还可以进一步查看详情，比如生成查看指令，根据该查看指令获取上述服饰的属性信息，该属性信息可以包括：价格、生产厂家、出厂日期等等。

在一实施例中，用户也可以在看到合成后的图像之后进行购买，也即在显示合成后的图像之后，所述方法还可以包括：

接收用户对目标服饰的购买指令；

根据购买指令从预设数据库中提取目标服饰所关联的供应商链接；

根据供应商链接生成购买信息并显示。

由上可知，本发明实施例提供的基于增强现实的试衣方法可以获取当前画面，并获取当前画面中的人物轮廓信息，根据人物轮廓信息确定当前画面中的人物图像，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像，提取目标服饰的虚拟图像中的特征点的位置信息，根据特征点的位置信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像，接收用户输入的服饰调整指令，根据服饰调整指令对目标服饰的虚拟图像进行调整，将调整后的虚拟图像与人物图像进行合成，并显示合成后的图像。本发明可以将用户的人体图像与选中的服饰图像进行合成，据此进行虚拟试衣，可以获得真实的试穿效果。

为了便于更好的实施本发明实施例提供的基于增强现实的试衣方法，本发明实施例还提供了一种基于上述基于增强现实的试衣方法的系统。其中名词的含义与上述基于增强现实的试衣方法中相同，具体实现细节可以参考方法实施例中的说明。

请参阅图4，图4为本发明实施例提供的一种基于增强现实的试衣系统的结构示意图，该基于增强现实的试衣系统30包括：图像选取模块301、图像生成模块302、特征提取模块303以及合成模块304；

图像选取模块301，用于获取当前画面，并选取当前画面中的人物图像；

图像生成模块302，用于从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像；

特征提取模块303，用于提取目标服饰的虚拟图像中的特征信息；

合成模块304，用于根据特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。

在一实施例中，如图5所示，图像选取模块301具体包括：轮廓获取子模块3011和图像确定子模块3012；

轮廓获取子模块3011，用于获取当前画面中的人物轮廓信息；

图像确定子模块3012，用于根据人物轮廓信息确定当前画面中的人物图像。

其中，所述目标服饰的虚拟图像中的特征信息包括特征点的位置信息；

所述合成模块304，具体用于根据所述特征点的位置信息将所述目标服饰的虚拟图像与所述人物图像进行合成。

在一实施例中，如图6所示，该基于增强现实的试衣系统30还包括：调整指令接收模块305和调整模块306；

调整指令接收模块305，用于在显示所述合成后的图像之后，接收用户输入的服饰调整指令；

调整模块306，用于根据所述服饰调整指令对所述目标服饰的虚拟图像进行调整；

合成模块304，还用于将所述调整后的虚拟图像与所述人物图像进行合成，并显示所述合成后的图像。

在一实施例中，该基于增强现实的试衣系统30还包括：购买指令接收模块、链接提取模块和生成模块；

购买指令接收模块，用于在显示所述合成后的图像之后，接收用户对所述目标服饰的购买指令；

链接提取模块，用于根据所述购买指令从预设数据库中提取所述目标服饰所关联的供应商链接；

生成模块，用于根据所述供应商链接生成购买信息并显示。

由上可知，本发明实施例提供的基于增强现实的试衣系统可以获取当前画面，并选取所述当前画面中的人物图像，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像，提取目标服饰的虚拟图像中的特征信息，根据该特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。本发明可以将用户的人体图像与选中的服饰图像进行合成，据此进行虚拟试衣，可以获得真实的试穿效果。

相应的，本发明实施例还提供一种服务器500，如图7所示，该服务器500包括射频(rf，radiofrequency)电路501、包括有一个或一个以上计算机可读存储介质的存储器502、输入单元503、电源504、无线保真(wifi，wirelessfidelity)模块505、包括有一个或者一个以上处理核心的处理器506等部件。本领域技术人员可以理解，图7中示出的移动终端结构并不构成对移动终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

射频电路501可用于收发信息，或通话过程中信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器506处理；另外，将涉及上行的数据发送给基站。通常，射频电路501包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(sim，subscriberidentitymodule)卡、收发信机、耦合器、低噪声放大器(lna，lownoiseamplifier)、双工器等。此外，射频电路501还可以通过无线通信与网络和其他设备通信。该无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(gsm，globalsystemofmobilecommunication)、通用分组无线服务(gprs，generalpacketradioservice)、码分多址(cdma，codedivisionmultipleaccess)、宽带码分多址(wcdma，widebandcodedivisionmultipleaccess)、长期演进(lte，longtermevolution)、电子邮件、短消息服务(sms，shortmessagingservice)等。

存储器502可用于存储应用程序和数据。存储器502存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器506通过运行存储在存储器502的应用程序，从而执行各种功能应用以及数据处理。存储器502可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据移动终端的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器502可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器502还可以包括存储器控制器，以提供处理器506和输入单元503对存储器502的访问。

输入单元503可用于接收其他设备发送的信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。再将输入的信息送给处理器506，并能接收处理器506发来的命令并加以执行。输入单元503还可以包括其他输入设备。具体地，其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、鼠标、操作杆等中的一种或多种。

服务器还包括给各个部件供电的电源504(比如电池)。优选的，电源可以通过电源管理系统与处理器506逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源504还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

无线保真(wifi)属于短距离无线传输技术，终端通过无线保真模块505可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图7示出了无线保真模块505，但是可以理解的是，其并不属于服务器的必须构成部分，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器506是控制中心，利用各种接口和线路连接各个部分，通过运行或执行存储在存储器502内的应用程序，以及调用存储在存储器502内的数据，执行各种功能和处理数据，从而进行整体监控。可选的，处理器506可包括一个或多个处理核心；优选的，处理器506可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器506中。

处理器506用于实现以下功能：

获取当前画面，并选取所述当前画面中的人物图像，从网络商城中确定目标服饰，并生成目标服饰对应的虚拟图像，提取目标服饰的虚拟图像中的特征信息，根据该特征信息将目标服饰的虚拟图像与人物图像进行合成，并显示合成后的图像。

具体实施时，以上各个模块可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个模块的具体实施可参见前面的方法实施例，在此不再赘述。

需要说明的是，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于计算机可读存储介质中，如存储在终端的存储器中，并被该终端内的至少一个处理器执行，在执行过程中可包括如信息发布方法的实施例的流程。其中，存储介质可以包括：只读存储器(rom，readonlymemory)、随机存取记忆体(ram，randomaccessmemory)、磁盘或光盘等。

以上对本发明实施例提供的一种基于增强现实的试衣方法和系统进行了详细介绍，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。