一种增强现实的处理方法、装置及移动终端与流程

本发明实施例涉及增强现实技术领域，尤其涉及一种增强现实的处理方法、装置及移动终端。

背景技术：

增强现实技术(Augmented Reality，AR)是将现实世界中的一定时间空间范围内很难体验到的信息(如视觉信息、声音、味道、触觉等)叠加融合到真实的环境中被人类感官所感知，从而增强使用者在真实环境中的感知能力，加深沉浸感的体验。

随着手机等智能终端上的拍照功能越来越成熟，用户使用手机拍照的频率越来越高，增强现实功能也开始慢慢集成到手机等智能终端上。

在现有拍照过程中，现有增强现实技术只是简单地将特定的增强现实内容叠加到现实图像中，提供的增强现实内容与用户的需求匹配度较低，无法满足用户的需求。

技术实现要素：

本发明实施例提出一种增强现实的处理方法、装置及移动终端，以实现根据用户心情提供相应的增强现实内容，提高增强现实内容与用户需求的匹配度，满足用户需求。

第一方面，本发明实施例提供了一种增强现实的处理方法，包括：

获取现实图像中的目标对象；

确定用户的心情的类别；

根据所述用户的心情的类别，对所述目标对象进行增强现实处理。

第二方面，本发明实施例还提供了一种增强现实的处理装置，包括：

目标对象获取单元，用于获取现实图像中的目标对象；

用户心情确定单元，用于确定用户的心情的类别；

增强现实处理单元，用于根据所述用户的心情的类别，对所述目标对象进行增强现实处理。

第三方面，本发明实施例还提供了一种移动终端，包括第二方面提供的增强现实的处理装置。

本发明实施例提供的增强现实的处理方法、装置及移动终端，获取现实图像中的目标对象，确定用户的心情的类别，根据所述用户的心情类别，对所述目标对象进行增强现实处理。增强现实处理的过程与用户的心情关联，根据用户心情提供相应的增强现实处理，提高增强现实处理与用户需求的匹配度，满足用户需求。

附图说明

图1是本发明实施例一提供的一种增强现实的处理方法的流程示意图；

图2是本发明实施例二提供的一种增强现实的处理方法的流程示意图；

图3是本发明实施例三提供的一种增强现实的处理方法的流程示意图；

图4a是本发明实施例四提供的一种增强现实的处理方法的流程示意图；

图4b-图4e是本发明实施例四提供的在拍照过程中使用增强现实的处理方法对图像处理的示意图；

图5a是本发明实施例五提供的一种增强现实的处理方法的流程示意图；

图5b-图5d是本发明实施例五提供的在拍照过程中使用增强现实的处理方法对图像处理的示意图；

图6是本发明实施例六提供的一种增强现实的处理装置的结构示意图。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各项步骤的顺序可以被重新安排。当其步骤完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

实施例一

图1是本发明实施例一提供的一种增强现实的处理方法的流程示意图。该方法可以由增强现实的处理装置执行，其中该装置可由软件和/或硬件实现，一般可集成在移动终端中。如图1所示，该方法包括：

S110、获取现实图像中的目标对象。

现实图像为摄像部件拍摄到的真实现实世界中景象，目标对象可以是现实图像中能够对其进行增强现实操作的物体，也可以是用户想要获取其增强现实内容的物体。例如，在移动终端的摄像头开启之后，对摄像头取景范围内的目标对象进行识别检测，获取识别出的目标对象。也可以是对已拍摄完成后存储的现实图像中的目标对象进行识别检测，获取识别出的目标对象。在本实施例中，目标对象可为现实图像中的人物的图像。

在本实施例中，移动终端也可将现实图像展示给用户，用户从该现实图像中选择用户想要增强的目标对象。例如，将包含人物的现实图像呈现给用户，用户点击图像中人物时，获取人物的图像信息作为目标对象。

S120、确定用户的心情的类别。

例如可以获取用户的特征信息，将特征信息传输至服务器，进行大数据处理确定用户的心情。其中，用户的特征信息可以为用户的表情、动作和声音等信息。用户的心情的类别可包括正常心情、愉悦心情或者负面心情。

其中，用户的特征信息既可以为现实图像中的人物的特征信息，也可以为当前使用移动终端拍摄现实图像的用户的特征信息。

S130、根据所述用户的心情的类别，对所述目标对象进行增强现实处理。

在确定用户的心情的类别之后，可以获取与用户的心情关联的增强现实内容，对目标图像进行增强现实处理。增强现实过程可以是对目标对象进行二维或三维渲染，也可是将增强现实内容与目标对象进行叠加或者混合，还可以是将增强现实内容融合到现实图像的场景中。例如在确定用户的心情比较愉悦时，可以获取与愉悦心情关联的增强现实内容，对目标对象进行增强处理。例如在确定用户的心情比较愉悦时，可以获取具有阳光特效的增强现实内容，将该增现实内融合到现实图像中。

本实施例提供的技术方案，获取现实图像中的目标对象，确定用户的心情的类别，根据所述用户的心情的类别，对所述目标对象进行增强现实处理。增强现实处理与用户的心情关联，根据用户心情获取相应的增强现实内容，提高增强现实处理与用户需求的匹配度，满足用户需求。

实施例二

图2是本发明实施例二提供的增强现实的处理方法的流程示意图。本实施例以上述实施例一为基础进行优化，参见图2，本实施例提供的增强现实的处理方法包括：

S210、获取现实图像中的目标对象。

S220、获取所述现实图像中的用户的特征信息。

所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。

S230、根据所述用户的特征信息确定用户的心情的类别。

具体地，识别出现实图像中的人物图像，获取该人物的脸部特征信息和肢体特征信息，或者通过语音识别识别获取现实图像中的人物的语音特征之后，将该人物的脸部特征信息、肢体特征信息、语音特征信息或者生物特征信息与预设脸部特征信息、预设肢体特征信息或者预设语音特征信息进行匹配，确定用户的心情的类别。

例如获取到用户的肢体特性信息后，识别出用户正在摆出“剪刀手”的造型，可以确定用户的心情比较愉悦。例如获取到用户的语音中包含歌词信息时，一般可确定用户的心情比较愉悦。

S240、根据所述用户的心情的类别，对所述目标对象进行增强现实处理。

在本实施例的另一种实施方式中，还可以获取当前拍照用户的特征信息；根据所述当前拍照用户的特征信息确定用户的心情。例如通过前置摄像头获取当前拍照用户的脸部特征信息和肢体特征信息，通过语音输入获取语音特征信息。

即获取当前拍照用户的特征信息，确定当前拍照用户的心情。可以确保与当前用户拍出与其心情匹配的图像。当前用户可以根据其心情拍摄出与其心情符合的图像。

在本实施例的另一种实施方式中，还可以根据用户的输入信息确定用户的心情的类别。例如，在移动终端界面向用户提供输入关键词的对话框，当用户输入“开心”、愉悦等词汇时候，可以确定用户的心情为愉悦心情，当用户输入“烦躁”、“伤心”等词汇的时候，可以确定用户的心情为负面心情。当用户想要拍摄出与心情的类别关联的增强现实图像时，可以输入相应的信息，移动终端根据用户输入的信息确定用户的心情类别，并根据用户的心情对目标对象进行增强现实处理。

本实施例提供的技术方案，通过获取现实图像中人物的特征信息、获取当前拍照用户的特征信息或者根据用户的输入信息，确定用户的心情的类别，获取与用户心情关联的增强现实内容，使用该增强现实内容增强目标对象。可以准确地确定用户的心情，并根据用户的心情对现实图像进行增强现实处理，可以提高拍照图像与用户需求的匹配程度，提高用户体验。

实施例三

图3是本发明实施例三提供的增强现实的处理方法的流程示意图。本实施例以上述实施例一为基础进行优化，参见图3，本实施例提供的增强现实的处理方法包括：

S310、获取现实图像中的目标对象。

S320、确定用户的心情的类别。

其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。

移动终端本地或者服务器存储有用户当前的心情以及用户心情的类别，获取用户的特征信息之后，可以根据用户的特征信息确定用户心情的类别。

S330、在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容。

其中，负面心情可以是心情低落或者生气、愤怒时的状态。在用户的心情为愉悦心情或者负面心情时，获取相应的增强现实内容，对目标对象进行增强。在用户的心情为正常心情时，对目标对象不进行增强现实的操作。

S340、使用所述增强现实内容对所述目标对象进行增强现实处理。

例如可以将增强现实内容的对目标对象进行渲染、将增强现实内容叠加得到目标对象的场景中或者使用增强现实内容替换目标对象等。

本实施例提供的技术方案，通过确定用户心情的类别，根据用户心情的类别确定是否对目标对象进行增强现实操作，可以实现在用户心情愉悦或者心情低落时，对目标对象进行增强现实处理，提高用户使用增强现实功能的体验。

实施例四

图4a是本发明实施例四提供的增强现实的处理方法的流程示意图。本实施例以上述实施例三为基础进行优化，参见图4a，本实施例提供的增强现实的处理方法包括：

S410、获取现实图像中的目标对象。

S420、确定用户的心情的类别。

其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。

S430、在所述心情的类别为非正常心情时，基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。

在确定用户的心情为愉悦心情或者负面心情之后，可确定用户心情的愉悦程度或者负面程度。例如可以识别出用户的表情，根据用户的表情是微笑还是大笑确定用户心情的愉悦程度；根据用户的动作幅度的大小确定用户愉悦的程度。根据用户的哭声的分贝大小确定用户心情的负面程度；根据用户的表情确定用户的愤怒程度。可以通过预先在服务器建立用户表情、动作、语言内容、和语言大小等与用户心情的愉悦程度或者负面程度的对应关系。

确定用户的心情愉悦程度或者负面程度之后，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。

S440、使用所述增强现实内容对所述目标对象进行增强现实处理。

示例性的用户打开拍照软件后进入拍照模式，图4b和图4c是通过移动终端摄像头获取到的两个现实图像，获取的目标对象为图像中的人物，通过识别该人物的表情和/或动作确定用户的心情为负面心情。可以看到图4b中人物的负面心情的负面程度大于图4c中人物的负面心情的负面程度。基于目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容，对应图4b，获取的增强现实内容为下雨场景，对于图4c，获取的增强现实内容为乌云场景。使用相应的增强场景形成的增强后的图像分别如图4d和图4e所示。

本发明实施例提供的技术方案，获取现实图像中的目标对象，确定用户的心情的类别，基于目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容，使用所述增强现实内容对所述目标对象进行增强现实处理。可以根据用户的心情对增强现实进行程度控制，根据用户开心或者不开心的程度向用户提供不同的增强现实效果的图像，提高用户体验。

实施例五

图5a是本发明实施例五提供的增强现实的处理方法的流程示意图。本实施例以上述实施例三为基础进行优化，参见图5a，本实施例提供的增强现实的处理方法包括：

S510、获取现实图像中的目标对象。

S520、确定用户的心情的类别。

其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。

S530、在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的多个增强现实内容。

在确定用户的心情为愉悦心情或者负面心情之后，可以获取与用户的心情以及目标对象关联的多个增强现实内容。例如，获取的目标对象为现实图像中的用户，确定用户的心情为愉悦心情，此时可以获取与用户的心情以及目标对象关联的多个增强现实内容，获取的增强现实内容可以为太阳、彩虹等内容。

S540、每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。

对目标对象进行增强现实处理可以将增强现实内容的对目标对象进行渲染、将增强现实内容叠加得到目标对象的场景中或者使用增强现实内容替换目标对象等处理。

例如获取的多个对象中为太阳、彩虹、白云时，可以选择太阳叠加至现实图像形成第一个增强后的图像，选择太阳和彩虹叠加至现实图像形成第二个增强后的图像，选择太阳、彩虹和白云叠加至现实图像形成第三个增强后的图像。其中，在现实图像中叠加的增强现实内容越多，对现实图像的增强效果越强。

示例性的，用户打开拍照软件后进入拍照模式，图5b是通过移动终端摄像头获取到的现实图像，获取目标对象为图像中的人物，通过识别该人物的表情和/或动作确定用户的心情为愉悦心情。获取与用户的心情以及目标对象关联的两个增强现实内容，两个增强现实内容分别为太阳和彩虹。选择彩虹叠加至现实图像形成如图5c所示的图像，选择太阳和彩虹叠加至现实图像形成如图5d所示的图像。

S550、将所述形成的多个增强后的图像显示；

可以将形成的多个增强后的图像同时显示，供用户选择。

S560、保存用户从所述形成的多个增强后的图像中选择的图像。

当用户选择显示多个增强后的图像中的一个或者多个时，将用户选择的图像保存。

本发明实施例提供的技术方案，在获取与用户的心情以及目标对象关联的多个增强现实内容，每次选择多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像，可以形成多个不同增强程度效果的图像，用户可以从增强处理后的图像中选择自己喜欢的图像，并将用户选择的增强图像保存，提高提供的增强现实内容与用户需求的匹配程度，提高用户体验。

实施例六

图6是本发明实施例六提供的增强现实的处理装置的结构示意图，该装置可由软件和/或硬件实现，一般集成在移动终端中，可通过执行增强现实的处理方法来实现。参见图6，该装置包括：

目标对象获取单元610，用于获取现实图像中的目标对象；

用户心情确定单元620，用于确定用户的心情的类别；

增强现实处理单元630，用于根据所述用户的心情的类别，对所述目标对象进行增强现实处理。

进一步的，所述用户心情确定单元620包括：

第一特征信息获取子单元621，用于获取所述现实图像中的用户的特征信息；

第一用户心情确定子单元622，用于根据所述用户的特征信息确定用户的心情的类别。

进一步的，所述用户心情确定单元620包括：

第二特征信息获取子单元623，用于获取当前拍照用户的特征信息；

第二用户心情确定子单元624，用于根据所述当前拍照用户的特征信息确定用户的心情的类别。

其中，所述用户的特征信息包括用户的脸部特征信息、肢体特征信息、语音特征信息、和生物特征信息中的至少一种信息。

进一步的，所述用户心情确定单元620具体用于：

根据用户的输入信息确定用户的心情的类别。

进一步的，所述增强现实处理单元630包括：

增强现实内容获取子单元631，用于在所述心情的类别为非正常心情时，获取与所述用户的心情以及所述目标对象关联的增强现实内容；

图像增强子单元632，用于使用所述增强现实内容对所述目标对象进行增强现实处理；

其中，所述用户的心情的类别包括正常心情、愉悦心情或者负面心情。

进一步的，所述增强现实内容获取子单元631用于：

基于所述目标对象，获取与用户的心情的愉悦程度或者负面程度匹配的增强现实内容。

进一步的，所述增强现实内容获取子单元631用于：

获取与所述用户的心情以及所述目标对象关联的多个增强现实内容；

所述图像增强子单元632用于：

每次选择所述多个增强现实内容中至少一个对所述目标对象进行增强现实处理以形成多个增强后的图像。

进一步的，所述装置还包括：

图像显示单元640，用于在所述使用所述增强现实内容对所述目标对象进行增强现实处理之后，将所述形成的多个增强后的图像显示；

图像保存单元650，用于保存用户从所述形成的多个增强后的图像中选择的图像。

上述装置可执行本发明任意实施例所提供增强现实的处理方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明实施例所提供的方法。

另外，本发明实施例还提供了一种移动终端，包括本发明实施例六所提供的装置，能够执行本发明任意实施例所提供的方法。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。