基于头戴式显示设备的用户操控提示方法及装置与流程

文档序号:14071112阅读:136来源:国知局

本发明涉及智能可穿戴设备与人机交互技术领域,尤其涉及一种基于头戴式显示设备的用户操控提示方法及装置。



背景技术:

虚拟现实(virtualreality,vr)技术通过计算机系统模拟出虚拟的三维世界,借助显示系统和交互系统,向使用者提供视觉、听觉、触觉等感官的模拟体验,同时使用者能够与虚拟场景进行互动交互,带给使用者身临其境的感受。

随着软硬件技术水平的不断提高,虚拟现实系统的体积日渐小型化,头戴式虚拟现实设备成为目前较为常见的虚拟现实系统,使用者通过佩戴头戴式虚拟现实设备,视线与外界的真实环境隔绝,从而沉浸于系统构建的虚拟环境场景中。

虚拟现实系统是涵盖了实时三维图形建模技术、宽视角立体显示技术、实时运动跟踪技术、交互反馈技术等的综合性系统。其中,交互技术是虚拟现实系统实现的关键性技术之一,决定了使用者如何在虚拟世界中与目标进行互动。



技术实现要素:

本发明的目的是提供一种基于头戴式显示设备的用户操控提示方法及装置,能够根据虚拟全景界面中标识控件与预设内容区域之间的相对位置,提示使用者调整屏幕中显示的虚拟全景界面的区域,从而在屏幕显示区域中显示预设内容区域。

有鉴于此,本发明一方面提供一种基于头戴式显示设备的用户操控提示方法,包括以下步骤:在显示界面中显示标识控件;根据所述标识控件与预设内容区域的相对位置,在所述标识控件中显示提示标识。

优选地,判断所述标识控件与所述预设内容区域之间的距离是否大于第一预设阈值,若是,则在所述标识控件中显示所述提示标识。

优选地,所述提示标识包括方向提示标识,所述方向提示标识指示所述预设内容区域相对于所述标识控件的方向。

优选地,还包括:判断所述标识控件与所述预设内容区域之间的距离是否小于第二预设阈值,若是,则调整所述显示界面使所述标识控件位于所述预设内容区域中;或者,判断所述标识控件与所述预设内容区域中的功能控件之间的距离是否小于第三预设阈值,若是,则调整所述功能控件的位置使所述标识控件位于所述功能控件上。

本发明另一方面提供一种基于头戴式显示设备的用户操控提示装置,包括:控件显示模块:用于在显示界面中显示标识控件;位置确定模块:用于确定所述标识控件与预设内容区域的相对位置;所述控件显示模块,还用于在所述标识控件中显示提示标识。

优选地,所述位置确定模块:还用于判断所述标识控件与所述预设内容区域之间的距离是否大于第一预设阈值;以及,所述控件显示模块,还用于当所述位置确定模块判断所述标识控件与所述预设内容区域之间的距离大于第一预设阈值时,在所述标识控件中显示所述提示标识。

优选地,所述基于头戴式显示设备的用户操控提示装置,所述提示标识包括方向提示标识,所述方向提示标识指示所述预设内容区域相对于所述标识控件的方向。

优选地,所述基于头戴式显示设备的用户操控提示装置,还包括:界面调整模块:用于调整所述显示界面,使所述标识控件位于所述预设内容区域中;以及,用于调整所述预设内容区域中的功能控件的位置,使所述标识控件位于所述预设内容区域中的功能控件上。

优选地,所述位置确定模块,还用于判断所述标识控件与所述预设内容区域之间的距离是否小于第二预设阈值,以及判断所述标识控件与所述预设内容区域中的功能控件之间的距离是否小于第三预设阈值。

本发明还提供一种头戴式显示设备,包括上述基于头戴式显示设备的用户操控提示装置。

本发明基于头戴式显示设备的用户操控提示方法及装置,在头戴式显示设备的显示界面中显示标识控件,根据所述标识控件与预设内容区域的相对位置,在所述标识控件中显示提示标识,能够在预设内容区域未显示在当前屏幕显示区域中时,提示使用者通过操控指令,将预设内容区域调整显示至屏幕显示区域中,从而有效地降低了用户操作的复杂度,显著地提升了用户体验,适用于头戴式虚拟现实设备及头戴式增强现实设备。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图:

图1示出了本发明第一实施例的基于头戴式显示设备的用户操控提示方法的流程示意图;

图2示出了本发明实施例的头戴式显示设备的第一种显示界面的示意图;

图3示出了本发明实施例的头戴式显示设备的第二种显示界面的示意图;

图4示出了本发明实施例的头戴式显示设备的第三种显示界面的示意图;

图5a示出了本发明实施例的头戴式显示设备显示界面中预设内容区域的第一示意图;

图5b示出了本发明实施例的头戴式显示设备显示界面中预设内容区域的第二示意图;

图6示出了本发明第二实施例的基于头戴式显示设备的用户操控提示装置的结构示意图。

具体实施方式

为了能够更清楚地理解本发明的目的、特征和优点,下面结合附图和具体实施方式对本发明做进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互结合。

在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,这仅仅是本发明的一些实施例,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。

实施例一

图1示出了本发明第一实施例的基于头戴式显示设备的用户操控提示方法的流程示意图。

根据本发明实施例的基于头戴式显示设备的用户操控提示方法,如图1所示,包括:步骤s101,在显示界面中显示标识控件;步骤s102,根据所述标识控件与预设内容区域的相对位置,在所述标识控件中显示提示标识。

在该技术方案中,头戴式显示设备可以向使用者呈现虚拟的360°全景界面,使用者佩戴头戴式显示设备时,通过头戴式显示设备的显示屏幕,使用者在某一时刻能够看到屏幕显示区域中显示的虚拟全景界面的部分区域,屏幕显示区域中显示的虚拟全景界面的部分区域经头戴式显示设备的光学系统放大后,与人类的自然视野范围相同或近似,从而令使用者感受身处虚拟场景环境的真实感。使用者通过控制指令,包括语音指令、手势指令、动作指令等,可以控制显示屏幕中显示虚拟全景界面中的不同区域,从而浏览完整的虚拟全景界面,例如,使用者转动头部,根据使用者头部的转动方向与转动角度,调整显示屏幕中显示的虚拟全景界面的区域,从而带给使用者置身虚拟环境中的沉浸感。

在上述技术方案中,进一步地,在虚拟全景界面中预设一个或多个内容区域,所述内容区域,可以包含文字、图像、视频等内容,也可以包含功能控件或功能按键,此处不做限定。使用者佩戴头戴式显示设备时,设备显示屏幕中显示虚拟全景界面的某一区域,当显示屏幕当前显示的虚拟全景界面的区域中未包含预设内容区域时,根据使用者的操控指令,例如,检测使用者的头部转动动作,调整显示屏幕中显示的虚拟全景界面的区域,使所述虚拟全景界面中包含预设内容区域的区域显示在显示屏幕中。

在上述技术方案中,优选地,所述步骤s101,具体地,在所述头戴式显示设备显示屏幕的当前显示界面中显示标识控件,所述标识控件显示于所述显示屏幕显示区域的预设位置,例如,所述标识控件可以显示于所述显示屏幕显示区域的中心位置。进一步地,头戴式显示设备根据检测到的使用者头部动作,调整显示所述虚拟全景界面的不同区域的过程中,始终在显示屏幕的当前显示界面中显示所述标识控件,所述标识控件显示于所述显示屏幕显示区域的中心位置。

在该技术方案中,优选地,所述标识控件,可以包括头戴式显示设备中显示的交互控件,例如,视觉锚点,用于标识用户视线对焦在虚拟全景界面上的位置,或者用于标识在虚拟全景界面上的某一位置区域执行用户指令的位置。如图2所示,头戴式显示设备的屏幕显示区域110中,显示虚拟全景界面的部分区域,屏幕显示区域的中心位置显示标识控件111。

在上述技术方案中,优选地,所述步骤s102,具体为:判断所述标识控件与所述预设内容区域之间的距离是否大于第一预设阈值,若是,则在所述标识控件中显示所述提示标识。具体地,第一预设阈值可以根据头戴式显示设备的显示屏幕的尺寸确定,头戴式显示设备的显示屏幕中显示虚拟全景界面的某一区域,所述标识控件显示于屏幕显示区域的中心位置,当所述标识控件与所述预设内容区域之间的距离大于第一预设阈值时,则所述预设内容区域未显示在所述屏幕显示区域中,使用者无法判断所述预设内容区域的位置,因此,在所述标识控件中显示提示标识,提示所述预设内容区域的位置。

在该技术方案中,优选地,所述提示标识包括方向提示标识,所述方向提示标识指示所述预设内容区域相对于所述标识控件的方向。具体地,头戴式显示设备的显示屏幕中当前显示的虚拟全景界面的区域中未包含预设内容区域时,根据所述标识控件与所述预设内容区域的相对位置,在所述标识控件中显示方向提示标识,方向提示标识指示所述预设内容区域相对于所述标识控件的方向,即所述方向提示标识提示使用者通过操控指令沿对应方向调整显示虚拟全景界面中的区域,从而使预设内容区域显示在显示屏幕中。如图3所示,头戴式显示设备的屏幕显示区域110中,显示虚拟全景界面的部分区域,预设内容区域112位于屏幕显示区域110中当前显示的虚拟全景界面区域的左侧,未显示在所述屏幕显示区域110中,则在标识控件111中显示方向提示标识,指示预设内容区域112相对于标识控件111的方向。

在上述技术方案中,优选地,所述步骤s102之后,还包括:判断所述标识控件与所述预设内容区域之间的距离是否小于第二预设阈值,若是,则调整所述预设内容区域的显示位置,使所述标识控件位于所述预设内容区域中。具体地,根据方向提示标识指示的所述预设内容区域相对于所述标识控件的方向,用户可以通过操控指令,调整头戴式显示设备的显示屏幕中显示的虚拟全景界面的区域,从而将预设内容区域显示在显示屏幕中。例如,如图4所示,头戴式显示设备的屏幕显示区域110当前显示虚拟全景界面的第一区域,当所述预设内容区域112位于所述标识控件111左侧,根据所述标识控件111中显示的方向提示标识,使用者头部向左转动,根据检测到的使用者头部转动方向及转动速度,显示屏幕中切换显示虚拟全景界面中第一区域左侧的区域,从而使预设内容区域112显示于所述显示屏幕的显示区域110中。进一步地,判断使用者头部转动过程中,所述标识控件111与所述预设内容区域112之间的距离,若所述标识控件111与所述预设内容区域112之间的距离小于第二预设阈值,则直接调整所述显示界面,使所述标识控件移动至所述预设内容区域中,从而减少使用者的头部转动幅度,降低用户操作的复杂度。

在上述技术方案中,进一步地,如图5a、5b所示,当所述预设内容区域112中包括一个或多个功能控件时,判断使用者头部转动过程中,所述标识控件111与所述预设内容区域112中的功能控件之间的距离,若所述标识控件111与所述预设内容区域112中的功能控件之间的距离小于第三预设阈值,则直接调整所述功能控件的显示位置,使所述标识控件111位于所述预设内容区域112中的功能控件上,使用者可以直接通过操控指令对所述功能控件进行操作,提升用户操作的便捷性。

在上述技术方案中,优选地,预设所述虚拟全景界面中的某一位置区域为初始位置区域,当检测到使用者佩戴头戴式显示设备的动作完成时,在显示屏幕中显示虚拟全景界面的初始位置区域,具体地,虚拟全景界面的初始位置区域中可以包含菜单选项、功能控件等,使用者在佩戴头戴式显示设备后,可以便捷地执行功能操控。同样地,使用者在佩戴使用头戴式显示设备的过程中,可以通过操控指令调整虚拟视角,使头戴式显示设备的显示屏幕中显示虚拟全景界面的不同区域,当显示屏幕中显示虚拟全景界面的非初始位置区域时,根据接收到的预设操控指令,可以将虚拟全景界面的初始位置区域快速切换显示到显示屏幕中,其中,所述操控指令可以是手势指令、语音指令、动作指令等,例如,触摸面板双击指令。

本发明实施例的基于头戴式显示设备的用户操控提示方法,在头戴式显示设备的显示界面中显示标识控件,根据所述标识控件与预设内容区域的相对位置,在所述标识控件中显示提示标识,能够在预设内容区域未显示在当前屏幕显示区域中时,提示使用者通过操控指令,将预设内容区域调整显示至屏幕显示区域中,从而有效地降低了用户操作的复杂度,显著地提升了用户体验。

实施例二

图6示出了本发明第二实施例的基于头戴式显示设备的用户操控提示装置的结构示意图。

根据本发明实施例的基于头戴式显示设备的用户操控提示装置200,如图6所示,包括:控件显示模块201:用于在显示界面中显示标识控件;位置确定模块202:用于确定所述标识控件与预设内容区域的相对位置;控件显示模块201,还用于在所述标识控件中显示提示标识。

在该技术方案中,头戴式显示设备可以向使用者呈现虚拟的360°全景界面,使用者佩戴头戴式显示设备时,通过头戴式显示设备的显示屏幕,使用者在某一时刻能够看到屏幕显示区域中显示的虚拟全景界面的部分区域,屏幕显示区域中显示的虚拟全景界面的部分区域经头戴式显示设备的光学系统放大后,与人类的自然视野范围相同或近似,从而令使用者感受身处虚拟场景环境的真实感。使用者通过控制指令,包括语音指令、手势指令、动作指令等,可以控制显示屏幕中显示虚拟全景界面中的不同区域,从而浏览完整的虚拟全景界面,例如,使用者转动头部,根据使用者头部的转动方向与转动角度,调整显示屏幕中显示的虚拟全景界面的区域,从而带给使用者置身虚拟环境中的沉浸感。

在上述技术方案中,进一步地,在虚拟全景界面中预设一个或多个内容区域,所述内容区域,可以包含文字、图像、视频等内容,也可以包含功能控件或功能按键,此处不做限定。使用者佩戴头戴式显示设备时,设备显示屏幕中显示虚拟全景界面的某一区域,当显示屏幕当前显示的虚拟全景界面的区域中未包含预设内容区域时,根据使用者的操控指令,例如,检测使用者的头部转动动作,调整显示屏幕中显示的虚拟全景界面的区域,使所述虚拟全景界面中包含预设内容区域的区域显示在显示屏幕中。

在上述技术方案中,优选地,所述控件显示模块201,具体地,用于在所述头戴式显示设备显示屏幕的当前显示界面中显示标识控件,所述标识控件显示于所述显示屏幕显示区域的预设位置,例如,所述标识控件可以显示于所述显示屏幕显示区域的中心位置。进一步地,头戴式显示设备根据检测到的使用者头部动作,调整显示所述虚拟全景界面的不同区域的过程中,始终在显示屏幕的当前显示界面中显示所述标识控件,所述标识控件显示于所述显示屏幕显示区域的中心位置。

在该技术方案中,优选地,所述标识控件,可以包括头戴式显示设备中显示的交互控件,例如,视觉锚点,用于标识用户视线对焦在虚拟全景界面上的位置,或者用于标识在虚拟全景界面上的某一位置区域执行用户指令的位置。如图2所示,头戴式显示设备的屏幕显示区域110中,显示虚拟全景界面的部分区域,屏幕显示区域的中心位置显示标识控件111。

在上述技术方案中,优选地,所述位置确定模块202,具体为:还用于判断所述标识控件与所述预设内容区域之间的距离是否大于第一预设阈值,若标识控件与预设内容区域之间的距离大于第一预设阈值,控件显示模块201则在所述标识控件中显示所述提示标识。具体地,第一预设阈值可以根据头戴式显示设备的显示屏幕的尺寸确定,头戴式显示设备的显示屏幕中显示虚拟全景界面的某一区域,所述标识控件显示于屏幕显示区域的中心位置,当所述标识控件与所述预设内容区域之间的距离大于第一预设阈值时,则所述预设内容区域未显示在所述屏幕显示区域中,使用者无法判断所述预设内容区域的位置,因此,在所述标识控件中显示提示标识,提示所述预设内容区域的位置。

在该技术方案中,优选地,所述提示标识包括方向提示标识,所述方向提示标识指示所述预设内容区域相对于所述标识控件的方向。具体地,头戴式显示设备的显示屏幕中当前显示的虚拟全景界面的区域中未包含预设内容区域时,根据所述标识控件与所述预设内容区域的相对位置,在所述标识控件中显示方向提示标识,方向提示标识指示所述预设内容区域相对于所述标识控件的方向,即所述方向提示标识提示使用者通过操控指令沿对应方向调整显示虚拟全景界面中的区域,从而使预设内容区域显示在显示屏幕中。如图3所示,头戴式显示设备的屏幕显示区域110中,显示虚拟全景界面的部分区域,预设内容区域112位于屏幕显示区域110中当前显示的虚拟全景界面区域的左侧,未显示在所述屏幕显示区域110中,则在标识控件111中显示方向提示标识,指示预设内容区域112相对于标识控件111的方向。

在上述技术方案中,优选地,基于头戴式显示设备的用户操控提示装置200,还包括界面调整模块203,用于调整所述预设内容区域的显示位置,使所述标识控件位于所述预设内容区域中。位置确定模块202,还用于判断所述标识控件与所述预设内容区域之间的距离是否小于第二预设阈值,若所述标识控件与所述预设内容区域之间的距离小于第二预设阈值,界面调整模块203则调整所述预设内容区域的显示位置,使所述标识控件位于所述预设内容区域中。具体地,根据方向提示标识指示的所述预设内容区域相对于所述标识控件的方向,用户可以通过操控指令,调整头戴式显示设备的显示屏幕中显示的虚拟全景界面的区域,从而将预设内容区域显示在显示屏幕中。例如,如图4所示,头戴式显示设备的屏幕显示区域110当前显示虚拟全景界面的第一区域,当所述预设内容区域112位于所述标识控件111左侧,根据所述标识控件111中显示的方向提示标识,使用者头部向左转动,根据检测到的使用者头部转动方向及转动速度,显示屏幕中切换显示虚拟全景界面中第一区域左侧的区域,从而使预设内容区域112显示于所述显示屏幕的显示区域110中。进一步地,使用者头部转动过程中,判断所述标识控件111与所述预设内容区域112之间的距离,若所述标识控件111与所述预设内容区域112之间的距离小于第二预设阈值,则直接调整所述显示界面,使所述标识控件移动至所述预设内容区域中,从而减少使用者的头部转动幅度,降低用户操作的复杂度。

在上述技术方案中,进一步地,如图5a、5b所示,当所述预设内容区域112中包括一个或多个功能控件时,判断使用者头部转动过程中,所述标识控件111与所述预设内容区域112中的功能控件之间的距离,若所述标识控件111与所述预设内容区域112中的功能控件之间的距离小于第三预设阈值,则直接调整所述功能控件的显示位置,使所述标识控件111位于所述预设内容区域112中的功能控件上,使用者可以直接通过操控指令对所述功能控件进行操作,提升用户操作的便捷性。

在上述技术方案中,优选地,预设所述虚拟全景界面中的某一位置区域为初始位置区域,当检测到使用者佩戴头戴式显示设备的动作完成时,在显示屏幕中显示虚拟全景界面的初始位置区域,具体地,虚拟全景界面的初始位置区域中可以包含菜单选项、功能控件等,使用者在佩戴头戴式显示设备后,可以便捷地执行功能操控。同样地,使用者在佩戴使用头戴式显示设备的过程中,可以通过操控指令调整虚拟视角,使头戴式显示设备的显示屏幕中显示虚拟全景界面的不同区域,当显示屏幕中显示虚拟全景界面的非初始位置区域时,根据接收到的预设操控指令,可以将虚拟全景界面的初始位置区域快速切换显示到显示屏幕中,其中,所述操控指令可以是手势指令、语音指令、动作指令等,例如,触摸面板双击指令。

本发明实施例的基于头戴式显示设备的用户操控提示装置,在头戴式显示设备的显示界面中显示标识控件,根据所述标识控件与预设内容区域的相对位置,在所述标识控件中显示提示标识,能够在预设内容区域未显示在当前屏幕显示区域中时,提示使用者通过操控指令,将预设内容区域调整显示至屏幕显示区域中,从而有效地降低了用户操作的复杂度,显著地提升了用户体验。

再次声明,本说明书中公开的所有特征,或公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。

本说明书(包括任何附加权利要求、摘要和附图)中公开的任一特征,除非特别叙述,均可被其他等效或具有类似目的的替代特征加以替换。即,除非特别叙述,每个特征只是一系列等效或类似特征中的一个例子而已。

本发明并不局限于前述的具体实施方式。本发明可以扩展到任何在本说明书中披露的新特征或任何新的组合,以及披露的任一新的方法或过程的步骤或任何新的组合。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1