一种增强现实界面的实现方法及头戴显示设备与流程

文档序号:13985268
一种增强现实界面的实现方法及头戴显示设备与流程

本发明涉及头戴式显示领域,尤其涉及一种增强现实界面的实现方法及头戴显示设备。



背景技术:

头戴显示设备(Head Mounted Display,HMD)指的是可以戴在头上的显示设备。HMD分为沉浸式和穿透式。沉浸式HMD可为用户提供观影、虚拟现实(Virtual Reality,VR)等应用场景下的沉浸视觉体验。



技术实现要素:

本发明的目的是提供一种增强现实界面的实现方法及头戴显示设备,以期增强头戴显示设备显示画面的效果。

为了实现上述目的,本发明实施例所提供的增强现实界面的实现方法,适用于头戴显示设备,该方法包括步骤:

建立与目标设备的通信连接;

接收所述目标设备发送的3D视频;

解析所述3D视频以得到所述目标设备当前所处的环境;

根据所述目标设备所处的环境生成与所述环境相关联的增强现实界面;以及

通过所述增强现实界面播放所述3D视频。

第二方面,本发明实施例提供一种头戴显示设备,包括:

通信模块,用于建立与目标设备的通信连接;

接收模块,用于接收所述目标设备发送的3D视频;

解析模块,用于解析所述3D视频以得到所述目标设备当前所处的环境;

界面生成模块,用于根据所述目标设备所处的环境生成与所述环境相关联的增强现实界面;

显示控制模块,用于通过所述增强现实界面播放所述3D视频。

第三方面,本发明实施例提供一种头戴显示设备,包括:处理器、存储器,所述处理器用于执行第一方面所述的方法。

本发明提供的方案头戴显示设备可接收另一设备采集到的3D视频,然后生成一与3D视频关联的增强现实界面,最后在这个增强现实界面上播放这个3D视频。可见,生成的增强现实界面是与另一设备拍摄到的信息关联的,进而可增强现实画面的效果,从而提升用户观看体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明一实施例提供的一种增强现实界面的实现系统所运行的硬件环境的示意图;

图2为本发明一实施例提供的增强现实界面的实现方法的流程示意图,其中,该执行主体为头戴显示设备;

图3为本发明一实施例所提供的增强现实界面的实现方法的流程示意图,其中,该执行主体为目标设备;

图4为本发明一实施例提供的头戴显示设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。

需要说明的是,本发明的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”等是用于区别不同对象,而不是用于描述特定顺序。

本发明所述的一种增强现实界面的实现方法,适用于基于混合显示的空战对战游戏中,该游戏可有多个玩家参与,且参与游戏的每个玩家均至少拥有一个头戴显示设备、一个目标设备,以及能够遥控目标设备的遥控器。以下本发明以一个玩家拥有的设备对增强现实界面的实现方法进行详细描述。请参阅图1,图1是本发明实施例公开的一种增强现实界面的实现系统所运行的硬件环境的示意图。该硬件环境包括一头戴显示设备110上。该头戴显示设备110可通过网络与目标设备120进行通信连接。该目标设备120可接收遥控器130所发送的控制命令。在一实施方式中,该目标设备120为无人机。头戴显示设备110和目标设备120通过无线网进行通信的,这些无线网可以为WIFI、蓝牙、Zigbee、WiMax、LTE、无线电等等,本发明不作限定。目标设备120和遥控器130通过无线方式进行连接。

目标设备120包括至少一个处理器1201,至少一个存储器1202,通信接口1203、收/发装置1204、3D摄相机1205和驱动装置1206。收/发装置1204置于驱动装置1206之上,其中,驱动装置1206可以为驱动电机。处理器1201、存储器1202、通信接口1203、收/发装置1204、3D摄相机1205、驱动装置1206通过通信总线连接并完成相互间的通信。收/发装置1204可以为红外线传感器,用来发送红外信号。当该红外信号被另一物体例如另一用户的目标设备所阻挡时,该红外信号将会被该另一物体反射回来重新被收/发装置1204接收到。如此,当收/发装置1204所发射的红外信号被其他物体阻挡后反射回来时,则认为目标设备120捕捉到该其他物体及该其他物体被目标设备120击中。在一游戏系统中,该其他物体可认定为目标设备120所要击打的对象。3D摄相机1202用来采集实时3D视频。通信接口1203用于建立目标设备120与其他设备之间的通信连接。

头戴显示设备110包括至少一个处理器1101,至少一个存储器1102,通信接口1103以及陀螺仪1104。处理器1101、存储器1102、通信接口1103以及陀螺仪1104通过通信总线连接并完成相互间的通信。

处理器1101和处理器1201可以是通用中央处理器(CPU),微处理器,特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制以上方案程序执行的集成电路。

存储器1102和存储器1202可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器可以是独立存在,通过总线与处理器相连接。存储器也可以和处理器集成在一起。

陀螺仪1104用于获取用户头部转动时的转动参数。

其中,存储器1102用于存储执行本发明第一实施例所述的增强现实界面的实现方法的应用程序代码,并由处理器1101来控制执行。处理器1101用于执行存储器1102中存储的应用程序代码。存储器1102存储的代码可执行以下提供的头戴显示设备执行的本发明实施例提供的增强现实界面的实现方法。

其中,存储器1202用于存储执行本发明第二实施例所述的增强现实界面的实现方法的应用程序代码,并由处理器1201来控制执行。处理器1201用于执行存储器1202中存储的应用程序代码。存储器1102存储的代码可执行以下提供的目标设备120执行的本发明实施例提供的增强现实界面的实现方法。

下面结合图1所示的增强现实界面的实现系统所运行的硬件环境对本发明实施例提供的增强现实界面的实现方法进行详细说明。

请参见图2,所示为本发明第一实施例提供的一种增强现实界面的实现方法的流程示意图。执行主体以头戴显示设备为例进行说明,该增强现实界面的实现方法包括以下步骤:

步骤S201,建立与目标设备的通信连接。

在一实施例中,以上步骤S201的具体实施方式为:头戴显示设备的处理器1101通过通信接口1103向目标设备发送通信连接请求;头戴显示设备的处理器1101通过通信接口1103接收目标设备针对所述通信连接请求而发送的允许通信连接响应,以完成建立与目标设备的通信连接。

步骤S202,接收所述目标设备发送的3D视频。

在一实施例中,以上步骤S202之前,所述方法还包括:头戴显示设备的处理器1101通过通信接口1103向目标设备发送视频信息获取请求,所述视频信息获取请求用于控制目标设备响应所述视频信息获取请求并向头戴显示设备发送获取到的3D视频。

在一实施例中,所述视频信息获取请求还携带所述头戴显示设备控制目标设备周期性向所述头戴显示设备发送3D视频的周期,比如,每隔2s发送一次3D视频,以使得所述头戴显示设备可实时显示目标设备拍摄到的内容。

步骤S203,解析所述3D视频以得到所述目标设备当前所处的环境。

步骤S204,根据所述目标设备所处的环境生成与所述环境相关联的增强现实界面。比如,目标设备当前所处的环境为游乐场,那么生成的增强现实界面与游乐场相关联。

步骤205,通过所述增强现实界面播放所述3D视频。

在一实施例中,图2所示的实现方法还包括:

头戴显示设备的陀螺仪1104获取用户头部的第一转动参数;头戴显示设备110的处理器1101根据所述第一转动参数向所述目标设备120发送控制指令,所述控制指令携带所述第一转动参数,所述控制指令用于控制所述所述目标设备120根据所述第一转动参数采集3D视频。

头戴显示设备上配置有陀螺仪1104,在用户佩戴头戴显示设备时,若用户头部转动,陀螺仪1104能够检测到用户头部转动的位置及角度等信息,然后陀螺仪1104可获取用户头部的转动参数。此时头戴显示设备的处理器1101通过通信接口1103再将陀螺仪1104获取到的转动参数发送给目标设备120,目标设备120的处理器1201根据这个转动参数转动3D摄相机1205,以使得3D摄相机1205获取到另一个视角的3D视频,以及将3D摄相机获取的3D视频发送给头戴显示设备110。如此,通过用户头部的转动,能够获取到不同视角的3D视频。

在一实施例中,图2所示的实现方法还包括:当所述目标设备发送的3D视频中包括有待捕捉对象时,在所述增强现实界面上显示用于标识所述待捕捉对象的十字瞄准线。所述待捕捉对象是目标设备获取到的视频信息中包含的其他目标设备。十字瞄准线是光学瞄准具中使用的一种瞄准标识线,包括两条细线以直角交会在一起。十字瞄准线是用于标识所述待捕捉对象的,也就是说,该十字瞄准线是基于待捕捉对象显示的。

在一实施例中,图2所示的实现方法还包括:

头戴显示设备的陀螺仪1104获取用户头部的第二转动参数;以及头戴显示设备110的处理器1101根据所述第二转动参数移动所述十字瞄准线。

举例来说,假如陀螺仪1104获取到的第一转动参数有:转动角度为90°,转动角速度为5rad/s,转动方向为水平向右,那么十字瞄准线以转动角度为90°,转动角速度为5rad/s,转动方向为水平向右,进行转动。

在一实施例中,图2所示的实现方法还包括:

头戴显示设备的处理器1101通过通信接口1103实时将所述第二转动参数发送给所述目标设备,以使得所述目标设备110根据所述第二转动参数控制驱动装置1206转动,以带动收/发装置1204转动。

举例来说,由于是通过目标设备120捕捉待捕捉对象,因此需要实时将用户头部转动的转动参数发送给目标设备,以使得目标设备120的驱动装置1206转动,以带动目标设备的收/发装置1204转动,进而使得目标设备的收/发装置1204瞄准待捕捉对象,比如,假如陀螺仪1104获取到的第一转动参数有:转动角度为90°,转动角速度为5rad/s,转动方向为水平向右,那么目标设备基于转动角度为90°,转动角速度为5rad/s,转动方向为水平向右的转动参数控制驱动装置1206转动。

在一实施例中,图2所示的方法还包括:

当检测到用户针对捕捉按钮的按压操作时,头戴显示设备的处理器1101通过通信接口1103向所述目标设备发送捕捉指令,所述捕捉指令用于控制所述收/发装置1204发出捕捉信号,以对所述待捕捉对象进行捕捉。

其中,捕捉按钮可以是设置在头戴显示设备外表面的一个用于触发捕捉指令的按钮;也可以是与头戴显示设备连接的用于触发捕捉指令的其他设备上的按钮,比如,与头戴显示设备连接的用于游戏的枪械的扳机。

在一实施例中,所述方法还包括:

头戴显示设备110的处理器1101通过通信接口1103接收所述目标设备120发送的捕捉成功指令,所述捕捉成功指令是所述收/发装置1204在接收到经所述待捕捉对象反射回来的所述捕捉信号时触发的。当头戴显示设备110接收到所述目标设备120发送的捕捉成功指令时,头戴显示设备110的处理器1101生成用于表示所述待捕捉对象已被捕捉的画面,以及在所述增强现实界面上显示所述画面。

其中,用于表示所述待捕捉对象已被捕捉的画面是爆炸画面,或是待捕捉对象中枪的画面等等,本发明不作唯一限定。

在一实施例中,所述方法还包括:

在确定所述待捕捉对象已被捕捉时,头戴显示设备的处理器1101获取用于表示所述待捕捉对象已被捕捉的音频,以及在显示所述画面时播放所述音频。

进一步地,所述获取用于表示所述待捕捉对象已被捕捉的音频的具体实施方式为:头戴显示设备的处理器1101根据所述画面获取用于表示所述待捕捉对象已被捕捉的音频。比如,假设所述画面为爆炸画面,那么获取的所述音频是用于表示爆炸的音频,比如“轰隆隆轰隆隆轰隆隆……”。又如,假设所述画面为爆炸画面,那么获取的所述音频是用于表示爆炸的语音,比如“待捕捉对象已击中”。

在一实施例中,所述转动参数包括转动角、转动方向、转动角速率中的至少一种。

可见,本发明提供的方案头戴显示设备可接收另一设备采集到的3D视频,然后生成一与3D视频关联的增强现实界面,最后在这个增强现实界面上播放这个3D视频。可见,生成的增强现实界面是与另一设备拍摄到的信息关联的,进而可增强现实画面的效果,从而提升用户观看体验。

请参见图3,其所示是以目标设备为执行主体实施该增强现实界面的实现方法的流程示意图。该实现方法包括以下步骤:

步骤S301、建立与头戴显示设备的通信连接。

在一实施例中,以上步骤S301的具体实施方式为:目标设备的处理器1201通过通信接口1203接收头戴显示设备发送通信连接请求;针对所述通信连接请求目标设备的处理器1201通过通信接口1203向头戴显示设备发送的允许通信连接响应,以完成建立与头戴显示设备的通信连接。

步骤S302、接收头戴显示设备所发送的视频信息获取请求及响应该视频信息获取请求采集3D视频。

在一实施例中,以上步骤S502的具体实施方式为:目标设备的处理器1201控制目标设备的3D摄像头1205开启以采集3D视频。

S303、将所述3D视频发送给向所述头戴显示设备。

在一实施例中,图3所示的实现方法还包括:

目标设备的处理器1201通过通信接口1203接收头戴显示设备发送的控制指令,所述控制指令携带所述第一转动参数,所述控制指令用于指示所述所述目标设备根据所述第一转动参数采集3D视频;目标设备的处理器1201根据所述第一转动参数转动3D摄相机1205;通过3D摄相机1205采集另一视角的3D视频,以及目标设备的处理器1201通过通信接口1203将这一3D视频发送给头戴显示设备。

在一实施例中,图3所示的实现方法还包括:

目标设备的处理器1201通过通信接口1203接收头戴显示设备110实时发送的所述第二转动参数;目标设备的处理器1201根据所述第二转动参数控制驱动装置1206转动,以带动收/发装置1204转动。

在一实施例中,图3所示的实现方法还包括:

目标设备的处理器1201通过通信接口1203接收头戴显示设备发送的捕捉指令;目标设备的处理器1201控制所述目标设备的收/发装置1204发出捕捉信号,以对所述待捕捉对象进行捕捉。

在一实施例中,图3所示的实现方法还包括:

当所述收/发装置1204接收到经所述待捕捉对象反射回来的所述捕捉信号时,目标设备的处理器1201通过通信接口1203发送捕捉成功指令。

本发明实施例还提供了一种头戴显示设备400,如图4所示,包括:

通信模块401,用于建立与目标设备的通信连接;

接收模块402,用于接收所述目标设备发送的3D视频;

解析模块403,用于解析所述3D视频以得到所述目标设备当前所处的环境;

界面生成模块404,用于根据所述目标设备所处的环境生成与所述环境相关联的增强现实界面;

显示控制模块405,用于通过所述增强现实界面播放所述3D视频。

可选地,所述头戴显示设备包括陀螺仪,所述陀螺仪用于获取用户头部转动时的转动参数,所述陀螺仪获取用户头部的第一转动参数;所述头戴显示设备还包括:

发送模块406,用于根据所述第一转动参数向所述目标设备发送控制指令,所述控制指令携带所述第一转动参数,所述控制指令用于指示所述所述目标设备根据所述第一转动参数采集3D视频。

可选地,所述显示控制模块405,还用于当所述目标设备发送的3D视频中包括有待捕捉对象时,在所述增强现实界面上显示用于标识所述待捕捉对象的十字瞄准线。

可选地,所述陀螺仪获取用户头部的第二转动参数;所述显示控制模块405,还用于根据所述第二转动参数移动所述十字瞄准线。

可选地,所述目标设备包括驱动装置和置于所述驱动装置上的收/发装置,

所述发送模块406,还用于实时将所述第二转动参数发送给所述目标设备,以使得所述目标设备根据所述第二转动参数控制所述驱动装置转动,以带动所述收/发装置转动。

可选地,所述发送模块406,还用于当检测到用户针对捕捉按钮的按压操作时,向所述目标设备发送捕捉指令,所述捕捉指令用于控制所述收/发装置发出捕捉信号,以对所述待捕捉对象进行捕捉。

可选地,所述接收模块402,还用于接收所述目标设备发送的捕捉成功指令,所述捕捉成功指令是所述收/发装置在接收到经所述待捕捉对象反射回来的所述捕捉信号时触发的;

所述头戴显示设备还包括:

画面生成模块407,用于生成用于表示所述待捕捉对象已被捕捉的画面;

所述显示控制模块405,还用于在所述增强现实界面上显示所述画面。

可选地,所述头戴显示设备还包括:

音频获取模块408,用于在确定所述待捕捉对象已被捕捉时,获取用于表示所述待捕捉对象已被捕捉的音频;

音频播放模块409,用于在显示所述画面时播放所述音频。

可选地,所述转动参数包括转动角、转动方向、转动角速率中的至少一种。

需要说明的是,上述各模块(通信模块401、接收模块402、解析模块403、界面生成模块404、显示控制模块405、发送模块406、画面生成模块407、音频获取模块408和音频播放模块409)用于执行上述方法的相关步骤。

在本实施例中,头戴显示设备400是以模块的形式来呈现。这里的“模块”可以指特定应用集成电路(application-specific integrated circuit,ASIC),执行一个或多个软件或固件程序的处理器和存储器,集成逻辑电路,和/或其他可以提供上述功能的器件。此外,以上通信模块401、解析模块403、界面生成模块404、显示控制模块405、画面生成模块407、音频获取模块408和音频播放模块409可通过图1所示的头戴显示设备的处理器1101来实现,以上接收模块402和发送模块406可通过图1所示的头戴显示设备的处理器1101通信接口1103来实现。

本发明实施例还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时包括上述方法实施例中记载的任何一种增强现实界面的实现方法的部分或全部步骤。

需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。

以上对本发明实施例进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上上述,本说明书内容不应理解为对本发明的限制。

再多了解一些
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1