增强现实投影与现实交互的方法和装置的制造方法
【专利摘要】本发明公开了一种增强现实投影与现实交互的方法，包括：对至少一个可穿戴设备进行三维图像节点配置；根据三维图像节点建立图像模型；获取至少一个可穿戴设备的构建的动作姿态模型；将图像模型与动作姿态模型合并计算，获取图像显示姿态。上述方法根据可穿戴设备从肢体以及躯干传来的运动数据，构建或简单或复杂的人体模型，在此人体模型的基础上构造衣物以及盔甲的三维图像模型；模型建立完毕后当智能显示设备的输入模块输入该处设备信息时，相应的显示该图像，与此同时，当人体运动时，通过动作采集、解析以及图像化，实现衣物跟随人体运动而运动，具有很好的用户体验性与易用性。本发明还公开了一种增强现实投影与现实交互的装置。
【专利说明】
増强现实投影与现实交互的方法和装置
技术领域
[0001]本发明属于三维智能领域，特别涉及一种增强现实投影与现实交互的方法和装置。
【背景技术】
[0002]众所周知，增强现实技术(Augmented Reality，AR)是随着虚拟现实技术(VirtualReality，VR)迅速发展和实际应用需要而出现的一种将真实世界信息和虚拟世界信息“无缝”集成的新技术。AR技术最终实现的目标为:借助计算机图形技术和可视化技术、交互技术、显示技术等产生显示环境中不存在的虚拟对象，并通过注册技术将虚拟对象准确地设置在真是环境中，让用户出于一种虚拟世界无缝融合的环境中。目前，将AR技术和计算机建模结合在一起，尚属于首例。
【发明内容】
[0003]本发明的目的是提供一种增强现实投影与现实交互的方法和装置，本发明对人体运动轨迹位置与相关于人体运动轨迹位置的图像的形变进行建模，通过上述建模实现了在游戏场景或者购物场景中的社交型体验，具有易用性。
[0004]为实现上述目的，本发明的一个方面提供了一种增强现实投影与现实交互的方法，该方法包括:对至少一个可穿戴设备进行三维图像节点配置;根据所述三维图像节点建立图像模型；获取所述至少一个可穿戴设备的构建的动作姿态模型;将所述图像模型与所述动作姿态模型合并计算，获取图像显示姿态。
[0005]在其中一个实施例中，在对至少一个可穿戴设备进行三维图像节点配置之前包括:判断至少一个可穿戴设备是否佩戴于人体;若是，则对至少一个可穿戴设备进行三维图像节点配置。
[0006]在其中一个实施例中，所述根据所述三维图像节点建立图像模型包括:智能显示设备预设待显示的三维图像；智能显示设备通过内置的图像输入模块对外部图像进行扫描;判断扫描的所述外部图像是否有标识;如果扫描的所述外部图像具有标识，则在标识处结合所述三维图像节点建立图像模型。
[0007]在其中一个实施例中，所述获取所述至少一个可穿戴设备的构建的动作姿态模型包括:每个所述可穿戴设备监测人体运动轨迹;通过每个所述可穿戴设备内置的通信模块将监测到的所述人体运动轨迹数据发送至所述智能显示设备;所述智能显示设备根据所述人体运动轨迹数据，建立动作姿态模型。
[0008]在其中一个实施例中，根据获取的所述图像显示姿态进行三维图像的显示。
[0009]为实现上述目的，本发明的另一个方面提供了一种增强现实投影与现实交互的装置，该装置包括:配置模块，用于对至少一个可穿戴设备进行三维图像节点配置;模型建立模块，用于根据所述三维图像节点建立图像模型;获取模块，用于获取所述至少一个可穿戴设备的构件的动作姿态模型;计算模块，用于将所述图像模型与所述动作姿态模型合并计算，获取图像显示姿态。
[0010]在其中一个实施例中，还包括:判断模块，用于判断至少一个可穿戴设备是否佩戴于人体。
[0011]在其中一个实施例中，所述模型建立模块包括:待显示单元，用于智能显示设备预设待显示的三维图像;扫描单元，用于智能显示设备通过内置的图像输入模块对外部图像进行扫描;判断单元，用于判断扫描的所述外部图像是否有标识;第一模型建立单元，用于如果扫描的所述外部图像具有标识，则在标识处结合所述三维图像节点建立图像模型。
[0012]在其中一个实施例中，所述获取模块包括:监测单元，用于每个所述可穿戴设备监测人体运动轨迹;发送单元，用于通过每个所述可穿戴设备内置的通信模块将监测到的所述人体运动轨迹数据发送至所述智能显示设备；第二模型建立单元，用于所述智能显示设备根据所述人体运动轨迹数据，建立动作姿态模型。
[0013]在其中一个实施例中，还包括:显示模块，用于根据获取的所述图像显示姿态进行三维图像的显示。
[0014]如上所述，本发明公开的增强现实投影与现实交互的方法和装置，该方法包括:对至少一个可穿戴设备进行三维图像节点配置;根据三维图像节点建立图像模型；获取至少一个可穿戴设备的构建的动作姿态模型；将图像模型与动作姿态模型合并计算，获取图像显示姿态。上述方法根据可穿戴设备从肢体以及躯干传来的运动数据，构建或简单或复杂的人体模型，在此人体模型的基础上构造衣物以及盔甲的三维图像模型；模型建立完毕后当智能显示设备的输入模块输入该处设备信息时，相应的显示该图像，与此同时，当人体运动时，通过动作采集、解析以及图像化，实现衣物跟随人体运动而运动，具有很好的用户体验性与易用性。
【附图说明】
[0015]图1是本发明中的一种增强现实投影与现实交互的方法的步骤流程图；
[0016]图2是本发明中的一种增强现实投影与现实交互的装置的结构示意图。
【具体实施方式】
[0017]为使本发明的目的、技术方案和优点更加清楚明了，下面结合【具体实施方式】并参照附图，对本发明进一步详细说明。应该理解，这些描述只是示例性的，而并非要限制本发明的范围。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本发明的概念。图1是本发明中的一种增强现实投影与现实交互的方法的步骤流程图。
[0018]步骤102，对至少一个可穿戴设备进行三维图像节点配置。
[0019]本实施例中，在对至少一个可穿戴设备进行三维图像节点配置之前包括:判断至少一个可穿戴设备是否佩戴于人体;若是，则对至少一个可穿戴设备进行三维图像节点配置。
[0020]步骤104，根据三维图像节点建立图像模型。
[0021]本实施例中，根据三维图像节点建立图像模型包括:智能显示设备预设待显示的三维图像;智能显示设备通过内置的图像输入模块对外部图像进行扫描;判断扫描的外部图像是否有标识;如果扫描的外部图像具有标识，则在标识处结合三维图像节点建立图像模型。
[0022]步骤106，获取至少一个可穿戴设备的构件的动作姿态模型。
[0023]本实施例中，获取至少一个可穿戴设备的构建的动作姿态模型包括:每个可穿戴设备监测人体运动轨迹;通过每个可穿戴设备内置的通信模块将监测到的人体运动轨迹数据发送至智能显示设备;智能显示设备根据人体运动轨迹数据，建立动作姿态模型。
[0024]步骤108，将图像模型与动作姿态模型合并计算，获取图像显示姿态。
[0025]本实施例中，通过对图像模型与动作姿态模型根据预设算法结合合并进行计算，不仅可以获取图像的运动轨迹，还可以获取动作姿态的运动轨迹，从而完成一次完整的获取图像显示姿态的过程。此外，本发明公开的一种增强显示投影与现实交互的方法还包括:根据获取的图像显示姿态进行三维图像的显示。
[0026]需要说明的是，根据可穿戴设备从肢体以及躯干传来的运动数据，可以构建或简单或复杂的人体模型，在此人体模型的基础上便可构造衣物以及盔甲的3D图像模型。模型建立完毕后当智能显示设备的输入模块输入该处设备信息时，相应的显示该图像；同时，当人体运动时，通过动作采集、解析以及图像化，实现衣物跟随人体运动而运动。
[0027]当然，由于设备都戴在用户身上，只有当用户通过镜子或者低头看时，看能看到自己身上的虚拟现实衣物以及盔甲。而通过区域互联，虚拟现实社交的方式，使用者A可以直接看到使用者B身上的衣物以及盔甲。由此实现在游戏场景或购物中全新的社交型体验。
[0028]如上所述，本发明公开的一种增强现实投影与现实交互的方法包括:对至少一个可穿戴设备进行三维图像节点配置;根据三维图像节点建立图像模型；获取至少一个可穿戴设备的构建的动作姿态模型;将图像模型与动作姿态模型合并计算，获取图像显示姿态。上述方法根据可穿戴设备从肢体以及躯干传来的运动数据，构建或简单或复杂的人体模型，在此人体模型的基础上构造衣物以及盔甲的三维图像模型；模型建立完毕后当智能显示设备的输入模块输入该处设备信息时，相应的显示该图像，与此同时，当人体运动时，通过动作采集、解析以及图像化，实现衣物跟随人体运动而运动，具有很好的用户体验性与易用性。
[0029]可以理解的是，本发明公开的一种增强现实投影与现实交互方法应用场景具有广泛的易用性。例如，在RPG游戏时，人物需要装备盔甲，盔甲可通过本技术即时显示在用户身体上，同时同玩游戏的人也可以看到此装备盔甲。于此同时，可以给盔甲增加一些盔甲耐久度和护甲值等参数值，在游戏中因为打斗对盔甲造成损耗时，盔甲会随该情景作一些形变或老化。使用户的体验大大提高。
[0030]此外，在购物场景中，顾客可以直接选择衣物模型通过设备进行试穿，通过镜子或额外图像展示显示自己与自己穿的衣物，同时可以模拟所在场景例如宴会，旅游，运动等。
[0031]进一步的，在T台上，用户可以通过智能头戴显示设备观看，模特只需身着简单带标识的衣物便可完成走秀，衣物更换迅速。与此同时，演出也可快速更换服装。
[0032]基于同样的原理，图2是本发明中的一种增强现实投影与现实交互的装置的结构示意图。具体的，一种增强现实投影与现实交互的装置10包括:配置模块120、模型建立模块140、获取模块160和计算模块180。
[0033]其中，配置模块120用于对至少一个可穿戴设备进行三维图像节点配置;模型建立模块140用于根据三维图像节点建立图像模型;获取模块160用于获取至少一个可穿戴设备的构件的动作姿态模型;计算模块180用于将图像模型与动作姿态模型合并计算，获取图像显示姿态。
[0034]本实施例中，模型建立模块140包括待显示单元141、扫描单元142、判断单元143和第一模型建立单元144。具体的，待显示单元141(图中未示出)用于智能显示设备预设待显示的三维图像;扫描单元142(图中未示出)用于智能显示设备通过内置的图像输入模块对外部图像进行扫描;判断单元143(图中未示出)用于判断扫描的外部图像是否有标识;第一模型建立单元144(图中未示出)用于如果扫描的外部图像具有标识，则在标识处结合三维图像节点建立图像模型。
[0035]进一步的，本实施例中，获取模块160包括:监测单元161、发送单元162和第二模型建立单元163。具体的，监测单元161(图中未示出)用于每个可穿戴设备监测人体运动轨迹；发送单元162(图中未示出)用于通过每个可穿戴设备内置的通信模块将监测到的人体运动轨迹数据发送至智能显示设备;第二模型建立单元163(图中未示出)用于智能显示设备根据人体运动轨迹数据，建立动作姿态模型。
[0036]此外，该增强现实投影与现实交互的装置10还包括判断模块110(图中未示出)用于判断至少一个可穿戴设备是否佩戴于人体。
[0037]更进一步的，该增强现实投影与现实交互的装置10还包括显示模块190(图中未示出)用于根据获取的图像显示姿态进行三维图像的显示。
[0038]如上所述，本发明公开的一种增强现实投影与现实交互的装置包括:通过配置模块120对至少一个可穿戴设备进行三维图像节点配置;再通过模型建立模块140根据三维图像节点建立图像模型;再通过获取模块160获取至少一个可穿戴设备的构建的动作姿态模型；最后通过计算模块180将图像模型与动作姿态模型合并计算，获取图像显示姿态。上述装置根据可穿戴设备从肢体以及躯干传来的运动数据，构建或简单或复杂的人体模型，在此人体模型的基础上构造衣物以及盔甲的三维图像模型;模型建立完毕后当智能显示设备的输入模块输入该处设备信息时，相应的显示该图像，与此同时，当人体运动时，通过动作采集、解析以及图像化，实现衣物跟随人体运动而运动，具有很好的用户体验性与易用性。
[0039]应当理解的是，本发明的上述【具体实施方式】仅仅用于示例性说明或解释本发明的原理，而不构成对本发明的限制。因此，在不偏离本发明的精神和范围的情况下所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。此外，本发明所附权利要求旨在涵盖落入所附权利要求范围和边界、或者这种范围和边界的等同形式内的全部变化和修改例。
【主权项】
1.一种增强现实投影与现实交互的方法，其特征在于，该方法包括: 对至少一个可穿戴设备进行三维图像节点配置； 根据所述三维图像节点建立图像模型； 获取所述至少一个可穿戴设备的构建的动作姿态模型； 将所述图像模型与所述动作姿态模型合并计算，获取图像显示姿态。2.根据权利要求1所述的方法，其中，在对至少一个可穿戴设备进行三维图像节点配置之前包括:判断至少一个可穿戴设备是否佩戴于人体;若是，则对至少一个可穿戴设备进行三维图像节点配置。3.根据权利要求1所述的方法，其中，所述根据所述三维图像节点建立图像模型包括: 智能显示设备预设待显示的三维图像； 智能显示设备通过内置的图像输入模块对外部图像进行扫描； 判断扫描的所述外部图像是否有标识； 如果扫描的所述外部图像具有标识，则在标识处结合所述三维图像节点建立图像模型。4.根据权利要求1所述的方法，其中，所述获取所述至少一个可穿戴设备的构建的动作姿态模型包括: 每个所述可穿戴设备监测人体运动轨迹； 通过每个所述可穿戴设备内置的通信模块将监测到的所述人体运动轨迹数据发送至所述智能显示设备； 所述智能显示设备根据所述人体运动轨迹数据，建立动作姿态模型。5.根据权利要求1所述的方法，还包括: 根据获取的所述图像显示姿态进行三维图像的显示。6.一种增强现实投影与现实交互的装置，其特征在于，该装置包括: 配置模块，用于对至少一个可穿戴设备进行三维图像节点配置； 模型建立模块，用于根据所述三维图像节点建立图像模型； 获取模块，用于获取所述至少一个可穿戴设备的构件的动作姿态模型； 计算模块，用于将所述图像模型与所述动作姿态模型合并计算，获取图像显示姿态。7.根据权利要求1所述的装置，其中，还包括:判断模块，用于判断至少一个可穿戴设备是否佩戴于人体。8.根据权利要求1所述的装置，其中，所述模型建立模块包括: 待显示单元，用于智能显示设备预设待显示的三维图像； 扫描单元，用于智能显示设备通过内置的图像输入模块对外部图像进行扫描； 判断单元，用于判断扫描的所述外部图像是否有标识； 第一模型建立单元，用于如果扫描的所述外部图像具有标识，则在标识处结合所述三维图像节点建立图像模型。9.根据权利要求1所述的装置，其中，所述获取模块包括: 监测单元，用于每个所述可穿戴设备监测人体运动轨迹； 发送单元，用于通过每个所述可穿戴设备内置的通信模块将监测到的所述人体运动轨迹数据发送至所述智能显示设备； 第二模型建立单元，用于所述智能显示设备根据所述人体运动轨迹数据，建立动作姿态模型。10.根据权利要求1所述的装置，还包括:显示模块，用于根据获取的所述图像显示姿态进行三维图像的显示。
【文档编号】G06F3/01GK106095094SQ201610406009
【公开日】2016年11月9日
【申请日】2016年6月10日
【发明人】王飞
【申请人】北京行云时空科技有限公司