显示控制装置、显示控制方法和记录介质与流程

1.本公开内容涉及显示控制装置、显示控制方法和记录介质。


背景技术：

2.传统上，已经提出了用户在不使用诸如键盘或鼠标的输入装置的情况下操作虚拟对象的技术。例如，专利文献1公开了在识别出的用户的手的形状具有预定形状的情况下根据用户的手的位置的改变来移动操作对象(虚拟对象)的显示位置的技术。
3.引用列表
4.专利文献
5.专利文献1：wo 2014/162762


技术实现要素：

6.技术问题
7.在上述现有技术中，在用用户的双手操作虚拟对象的情况下，由于用户实际上没有握持与虚拟对象相对应的尺寸的对象，所以双手之间的间隔可能容易波动。因此，在现有技术中，难以使用用户的双手的位置作为参考来定位虚拟对象。
8.因此，本公开内容提出了一种即使当用户的双手之间的间隔改变时也能够抑制虚拟对象相对于双手的定位中的不协调感的显示控制装置、显示控制方法和记录介质。
9.技术的解决方案
10.为了解决上述问题，根据本公开内容的实施方式的显示控制装置包括：获取单元，其被配置成获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示用户的左手的位置的左手位置信息；以及显示控制单元，其控制头戴式显示器以基于右手位置信息和左手位置信息来在右手的位置和左手的位置处布置具有特定尺寸的虚拟对象，其中，显示控制单元控制头戴式显示器，以在保持虚拟对象的显示状态的同时独立于右手与左手之间的距离的改变而改变虚拟对象的位置，在显示状态中，所布置的虚拟对象的纵向方向平行于连接右手与左手的虚拟线。
11.此外，根据本公开内容的实施方式的显示控制方法包括通过计算机执行以下步骤：获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示用户的左手的位置的左手位置信息；控制头戴式显示器以基于右手位置信息和左手位置信息在右手的位置和左手的位置处布置具有特定尺寸的虚拟对象；以及控制头戴式显示器以在保持虚拟对象的显示状态的同时独立于右手与左手之间的距离的改变而改变虚拟对象的位置，在显示状态中，所布置的虚拟对象的纵向方向平行于连接右手与左手的虚拟线。
12.此外，根据本公开内容的实施方式的计算机可读记录介质记录用于使计算机实现以下操作的程序：获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示用户的左手的位置的左手位置信息；控制头戴式显示器以基于右手位置信息和左手位置信息在右手的位置和左手的位置处布置具有特定尺寸的虚拟对象；以及控制头戴式显示器，以在
保持虚拟对象的显示状态的同时独立于右手与左手之间的距离的改变而改变虚拟对象的位置，在显示状态中，所布置的虚拟对象的纵向方向平行于连接右手与左手的虚拟线。
附图说明
13.[图1]是用于说明根据实施方式的系统配置的示例的图。
[0014]
[图2]是示出根据实施方式的头戴式显示器的示例的图。
[0015]
[图3]是用于说明根据实施方式的ar眼镜系统的配置的示例的图。
[0016]
[图4]是示出头戴式显示器的叠加区域与虚拟对象之间的关系的示例的图。
[0017]
[图5]是用于说明头戴式显示器的显示示例的图。
[0018]
[图6]是用于说明头戴式显示器的另一显示示例的图。
[0019]
[图7]是示出虚拟对象的叠加位置与用户的手的位置之间的关系的示例的图。
[0020]
[图8]是示出虚拟对象的叠加位置与用户的手的位置之间的关系的另一示例的图。
[0021]
[图9]是用于说明头戴式显示器的第一异常处理的示例的图。
[0022]
[图10]是用于说明头戴式显示器的第二异常处理的示例的图。
[0023]
[图11]是示出由根据实施方式的头戴式显示器执行的处理过程的示例的流程图。
[0024]
[图12]是示出图11所示的第一显示控制处理的示例的流程图。
[0025]
[图13]是示出图11所示的第二显示控制处理的示例的流程图。
[0026]
[图14]是示出图11所示的第三显示控制处理的示例的流程图。
[0027]
[图15]是示出实现显示控制装置的功能的计算机的示例的硬件配置图。
具体实施方式
[0028]
在下文中，将基于附图详细描述本公开内容的实施方式。注意，在以下实施方式中的每一个中，相同部分用相同的附图标记表示，并且将省略冗余的描述。
[0029]
(实施方式)
[0030]
[根据实施方式的信息处理装置的配置]
[0031]
图1是用于说明根据实施方式的系统配置的示例的图。图2是示出根据实施方式的头戴式显示器的示例的图。如图1所示，增强现实(ar)眼镜系统1包括头戴式显示器(hmd)10。hmd 10包括ar hmd和虚拟现实(vr)hmd。ar hmd是将虚拟对象叠加在真实空间的图像上的头戴式可穿戴设备。ar hmd包括光学透视方案和视频透视方案。同时，vr hmd是在虚拟空间中布置虚拟对象的头戴式可穿戴设备。根据本实施方式的hmd 10可以适于用于ar hmd中，在该ar hmd中容易识别真实对象与虚拟对象之间的移位。hmd 10佩戴在用户2的头部3上，并且在用户2的眼睛前方的显示器上显示所生成的图像。
[0032]
ar眼镜系统1还包括检测用户2的手的位置信息的可穿戴设备20。可穿戴设备20是运动传感器的示例。可穿戴设备20包括例如控制器、位置传感器单元等。可穿戴设备20分别佩戴在用户2的右手4和左手5中的一个上。作为可穿戴设备20，可以使用由用户的右手4和左手5中的每一个握持的控制器、手套型控制器等。可穿戴设备20能够与hmd 10通信并且将检测到的手的位置信息提供给hmd。此外，作为运动传感器，例如，可以使用诸如深度相机或飞行时间(tof)相机的成像装置。通过将可穿戴设备20用于运动传感器，即使在成像装置不
能对用户2的手进行成像的状态下，也可以精确地检测手的位置信息。
[0033]
ar眼镜系统1基于对真实空间的环境理解来确定响应，并且响应于所确定的响应在真实空间的图像上叠加和显示虚拟对象。对真实空间的环境的理解包括对从运动传感器获取的用户2的手的位置的估计(确定)。
[0034]
在图2所示的示例中，hmd 10包括多个显示器11和多个成像装置12。显示器11的显示区域通常比成像装置12的视角窄。显示器11和成像装置12布置在用户2的眼球附近。成像装置12的视角的中心和显示器11的显示区域的中心基本上彼此重合，并且通过校准来校正由于布置误差引起的中心之间的偏差。
[0035]
ar眼镜系统1基于上述环境理解，通过将虚拟对象和自身位置与全局坐标系相关联，实现从用户2观看时虚拟对象三维地定位在真实空间中的显示状态。注意，自身位置估计对应于对设备位置和姿势的估计。
[0036]
hmd 10的诸如环境理解、响应确定和叠加显示的功能由hmd 10的处理器执行。hmd 10的至少一些功能可以由诸如智能电话或云服务器的单独设备来执行。
[0037]
[本公开内容的前提]
[0038]
在下文中，将描述用于控制本公开内容中的虚拟对象的显示位置的方法。以下描述基于以下前提：用户2正通过姿势操作或对可穿戴设备20的输入操作给出用双手握持虚拟对象的操作指令。应当注意，例如，当用户2停止用双手握持的操作指令时，虚拟对象根据针对ar内容定义的物理操作结果而移开用户2的至少一只手。
[0039]
此外，在下面的描述中，假定了与游戏内容相关的要用双手握持的虚拟对象，例如武器；然而，本公开内容的发明不限于此。本公开的发明中的虚拟对象仅需要是具有预定尺寸或更大尺寸的对象。更具体地，本公开内容中的虚拟对象可以被认为具有这样的尺寸：在用户2用双手直接或间接握持虚拟对象并且双手与用户2的距离大于或等于10cm的状态下，虚拟对象的纵向方向上的至少一端伸到显示区域外部。
[0040]
例如，在显示由用户2用双手操作的具有固定尺寸(例如长度或宽度)的虚拟对象的情况下，在一些情况下，ar眼镜系统1难以定位该虚拟对象。虚拟对象例如包括诸如步枪或弓的虚拟对象。因此，在本实施方式中，提供了即使用户2的双手之间的间隔改变也能够抑制虚拟对象相对于双手的不协调感的hmd 10等。
[0041]
[根据实施方式的ar眼镜系统的配置示例]
[0042]
接下来，将描述根据实施方式的ar眼镜系统1的配置示例。图3是用于说明根据实施方式的ar眼镜系统1的配置的示例的图。图4是示出头戴式显示器10的叠加区域与虚拟对象200之间的关系的示例的图。
[0043]
[可穿戴设备的配置示例]
[0044]
如图3所示，可穿戴设备20包括运动传感器21、通信单元22和控制单元23。控制单元23与运动传感器21和通信单元22电连接。
[0045]
运动传感器21感测用户2的状态等，并且将感测到的传感器信息提供给控制单元23。运动传感器21包括例如多个传感器，例如惯性测量单元(imu)和方位传感器。imu感测用户2的运动。imu包括例如三轴陀螺仪传感器和三轴加速度传感器，并且将指示三维角速度、加速度等的已检测的传感器信息提供给控制单元23。方位传感器感测用户2的手的方向(取向)。方位传感器包括例如地磁传感器，并且将指示检测到的用户2的手的方向的传感器信
息提供给控制单元23。
[0046]
通信单元22与例如hmd 10等通信。通信单元22经由例如有线或无线网络发送和接收各种类型的数据。通信单元22将传感器信息发送至hmd 10。通信单元22将例如从hmd 10接收的各种类型的数据提供给控制单元23。
[0047]
控制单元23控制可穿戴设备20。控制单元23控制运动传感器21、通信单元22等。控制单元23执行将指示运动传感器21的检测结果的传感器信息发送至hmd 10的控制。
[0048]
上面已经描述了根据本实施方式的可穿戴设备20的功能配置示例。注意，以上参照图3描述的配置仅是示例，并且根据本实施方式的可穿戴设备20的功能配置不限于这样的示例。根据本实施方式的可穿戴设备20的功能配置可以根据规格或用途灵活地修改。
[0049]
[头戴式显示器的配置示例]
[0050]
如图3所示，hmd 10包括显示器11、成像装置12、传感器单元13、通信单元14、扬声器15、存储单元16和控制单元17。控制单元17与显示器11、成像装置12、传感器单元13、通信单元14、扬声器15和存储单元16电连接。
[0051]
显示器11包括例如透视显示器、液晶显示器(lcd)、有机电致发光显示器(oeld)等。显示器11在控制单元17的控制下显示各种类型的信息。各种类型的信息包括例如具有特定尺寸的虚拟对象。具有固定尺寸的虚拟对象包括例如具有固定尺寸的虚拟对象、能够变形为多个不同尺寸的虚拟对象、能够变形的虚拟对象等。例如，当佩戴hmd 10时，每个显示器11显示与用户u的眼睛中的一个相对应的图像，从而使用两只眼睛的视差实现三维显示。由此，显示器11三维地显示虚拟对象。
[0052]
成像装置12获取用于估计用户2的视线方向的信息。成像装置12具有通过在诸如电荷耦合器件(ccd)或互补金属氧化物半导体(cmos)的成像元件上形成图像来对静止图像或运动图像进行成像的功能。成像装置12包括例如外向相机和内向相机。外向相机例如捕获视角内的真实空间的图像，并且将捕获的图像信息提供给控制单元17。例如，内向相机向控制单元17提供捕获用户2的眼睛的图像的图像信息。
[0053]
传感器单元13感测用户2的状态、周围情况等，并且将感测到的传感器信息提供给控制单元17。传感器单元13例如包括多个传感器，例如麦克风、惯性测量单元(imu)和方位传感器。麦克风收集用户2的声音或周围声音(例如环境声音)，并且将收集的声音信息提供给控制单元17。imu感测用户2的运动。imu包括例如三轴陀螺仪传感器和三轴加速度传感器，并且将已被检测到并指示三维角速度、加速度等的传感器信息提供给控制单元17。方位传感器感测hmd 10的方向(取向)。方位传感器包括例如地磁传感器，并且将指示hmd 10的检测方向的传感器信息提供给控制单元17。
[0054]
通信单元14以有线或无线方式与诸如可穿戴设备20的外部电子装置电连接，并且发送和接收数据。通信单元14通过例如有线/无线局域网(lan)、wi-fi(注册商标)、蓝牙(注册商标)等可通信地连接至hmd 10外部的电子装置。通信单元14将接收到的信息提供给控制单元17。通信单元14将控制单元17指示的信息发送至相应的电子装置。
[0055]
扬声器15被配置为例如佩戴在佩戴hmd 10的用户2的头部上的耳机，并且在控制单元17的控制下再现音频信号。替选地，扬声器15不限于耳机类型，并且可以被配置为耳机或骨传导扬声器。
[0056]
存储单元16存储各种类型的数据和各种程序。例如，存储单元16可以存储来自成
像装置12、传感器单元13、通信单元14等的各种类型的信息。存储单元16例如是随机存取存储器(ram)、诸如闪速存储器的半导体存储元件、硬盘、光盘等。注意，存储单元16可以包括在经由网络连接至hmd 10的服务器、电子装置等中。在本实施方式中，存储单元16是记录介质的示例。
[0057]
存储单元16存储例如右手位置信息161、左手位置信息162、视线信息163、姿势信息164等。右手位置信息161包括例如指示用户2的右手4的位置的信息。右手位置信息161包括例如指示用户2的左手5的位置的信息。右手位置信息161和左手位置信息162与基于hmd 10的位置的局部坐标或通过同时定位和映射(slam)技术获取的相对于真实空间的全局坐标相关联地管理。视线信息163例如包括指示用户2的视线方向的信息。姿势信息164包括例如指示用户2的姿势、方向、形状等的信息。
[0058]
控制单元17控制hmd 10。控制单元17例如由中央处理单元(cpu)、微控制单元(mcu)等实现。此外，控制单元17可以由例如诸如专用集成电路(asic)或现场可编程门阵列(fpga)的集成电路来实现。控制单元17可以包括存储要使用的程序、操作参数等的只读存储器(rom)和临时存储适当改变的参数等的ram。在本实施方式中，控制单元17是显示控制装置的示例。
[0059]
控制单元17包括诸如获取单元17a和显示控制单元17b的功能单元。例如，当控制单元17使用ram等作为工作区执行存储在hmd 10内的程序时，实现控制单元17的功能。
[0060]
获取单元17a获取指示hmd 10的用户2的右手4的位置的右手位置信息161和指示用户2的左手5的位置的左手位置信息162。获取单元17a从可穿戴设备20的运动传感器21获取例如指示hmd 10的用户2的右手4的位置的右手位置信息161和指示用户2的左手5的位置的左手位置信息162。例如，获取单元17a基于成像装置12的图像信息通过图像识别来获取右手位置信息161和左手位置信息162。替选地，获取单元17a可以经由通信单元14获取例如由佩戴在用户2的右手4上的可穿戴设备20的传感器信息指示的位置作为右手位置信息161。在这种情况下，获取单元17a经由通信单元14获取由佩戴在用户2的左手5上的可穿戴设备20的传感器信息指示的位置作为左手位置信息162。然后，获取单元17a将已经获取的右手位置信息161和左手位置信息162存储在存储单元16中。
[0061]
获取单元17a获取用户2的视线方向。获取单元17a使用例如已知的视线估计方法来估计用户u的视线。例如，在通过瞳孔中心角膜反射法估计视线的情况下，获取单元17a使用光源和相机。在本实施方式中，获取单元17a从hmd 10的成像装置12获取图像信息。分析通过由成像装置12对用户2的眼睛成像而获得的图像信息，检测亮点或瞳孔，并且生成包括与亮点的位置相关的信息的亮点相关信息以及包括与瞳孔的位置相关的信息的瞳孔相关信息。获取单元17a基于亮点相关信息、瞳孔相关信息等估计用户2的视线方向。获取单元17a获取指示估计视线方向的视线信息163，并且将视线信息存储在存储单元16中。
[0062]
如图4所示，显示控制单元17b基于右手位置信息161和左手位置信息162控制hmd 10以在右手4的位置和左手5的位置处布置具有特定尺寸的虚拟对象200。显示控制单元17b基于显示虚拟对象200的信息，执行在显示器11上显示虚拟对象200的控制。显示控制单元17b控制hmd 10的显示以叠加在hmd 10的叠加区域100内部的用户2的手的位置上。叠加区域100可以是例如显示器11的显示区域或成像装置12的视角区域。例如，显示器11的显示区域是矩形区域，并且是比用户2的视角窄的区域。控制hmd 10包括例如在显示器11上显示虚
拟对象200、从扬声器15输出声音等。在图4所示的示例中，叠加区域100是由两条虚线包围的区域。
[0063]
显示控制单元17b控制hmd 10，以在保持虚拟对象200的显示状态的同时，独立于右手4与左手5之间的距离的改变而改变虚拟对象200的位置，在显示状态中，所布置的虚拟对象200的纵向方向平行于连接右手4和左手5的虚拟线210。即，即使用户2的右手4与左手5之间的距离改变，显示控制单元17b也不改变虚拟对象200的位置。
[0064]
虚拟线210被设定为具有以用户2的一只手为一端并且另一只手为另一端的两端的线段。虚拟对象200布置(显示)在叠加区域100中，使得纵向方向平行于虚拟线210。虚拟对象200具有基本上固定的尺寸。虚拟对象200不限于完全刚性的物体，并且还包括像弓那样柔性的虚拟对象。换言之，如果虚拟对象200是真实对象，“具有基本固定尺寸的虚拟对象”可以被认为是其尺寸通常被用户2识别为不变的虚拟对象200。替选地，“具有基本固定尺寸的虚拟对象”可以被认为是具有小于或等于预定值的变形量的对象。另一方面，不包括在“具有固定尺寸的虚拟对象”中的对象可以包括具有大于或等于预定值的变形率的弹性体(例如可以拉伸到基本上任何尺寸的橡胶带)、无定形流体对象或胶状对象。
[0065]
显示控制单元17b具有控制hmd 10的功能，以基于用户2的视线方向的改变而独立于右手4与左手5之间的距离的改变来改变虚拟对象200的位置。显示控制单元17b基于在视线方向上延伸的线与虚拟线210的交点来确定虚拟对象200相对于右手4或左手5中的至少一个的叠加位置。
[0066]
图5是用于说明头戴式显示器10的显示示例的图。图6是用于说明头戴式显示器10的另一显示示例的示图。图7是示出虚拟对象200的叠加位置与用户2的手的位置之间的关系的示例的曲线图。
[0067]
在图5所示的示例中，用户2将视线l1指向位于hmd 10的叠加区域100内部的右手4，并且将左手5定位在叠加区域100外部。在这种情况下，显示控制单元17b估计视线l1与虚拟线210的交点x的位置，并且根据该交点x与接近视线l1的用户2的右手4之间的距离来确定虚拟对象200的叠加位置。例如，显示控制单元17b执行使虚拟对象200的显示位置改变的显示控制，使得用户2的右手4与交点x之间的距离越短，虚拟对象200的端部与右手4的位置交叠得越多。即，显示控制单元17b控制hmd 10的显示，使得即使当用户2的左手5的位置改变并且左手与右手之间的间隔改变时，虚拟对象200的端部也被固定到叠加区域100内部的右手4。另一方面，在显示控制单元17b中，虚拟对象200的另一端不固定在左手5的叠加区域100外部的位置处。因此，如显示示例m1所示，hmd 10可以使用户2在视觉上识别虚拟对象200的端部稳定地布置在叠加区域100内部的右手4上。注意，在本实施方式中，虚拟对象200的端部例如包括作为虚拟对象200的把握部的部分、实际端部等。
[0068]
在图6所示的示例中，用户2将视线l2指向位于hmd 10的叠加区域100内部的左手5，并且将右手4定位在叠加区域100外部。在这种情况下，显示控制单元17b估计视线l2与虚拟线210的交点x的位置，并且根据该交点x与接近视线l2的用户2的左手5之间的距离来确定虚拟对象200的叠加位置。例如，显示控制单元17b执行改变虚拟对象200的显示位置的显示控制，使得用户2的左手5与交点x之间的距离越短，虚拟对象200的端部与左手5的位置交叠得越多。即，显示控制单元17b控制hmd 10的显示，使得即使当用户2的右手4的位置改变并且左手与右手之间的间隔改变时，虚拟对象200的端部也被固定到叠加区域100内部的左
手5。另一方面，在显示控制单元17b中，虚拟对象200的另一端未被固定在叠加区域100外部的右手4的位置处。因此，如显示示例m2所示，hmd 10可以使用户2在视觉上识别虚拟对象200的端部稳定地布置在叠加区域100内部的左手5上。
[0069]
显示控制单元17b使用用于使用户2视觉地识别在不依赖于双手间的距离的情况下稳定布置的虚拟对象200的计算方法。作为计算方法，例如，使用基于图7所示的曲线图的计算公式。在图7所示的曲线图中，纵轴表示虚拟对象200的叠加位置，并且横轴表示交点x的位置。图7所示的曲线图定义了当交点x的位置与用户2的右手4的位置交叠时虚拟对象200的叠加位置与右手4交叠的位置。图7所示的曲线图定义了当交点x的位置远离用户2的右手4的位置时虚拟对象200的叠加位置从右手4移位的位置。图7所示的曲线图定义了当交点x的位置与用户2的左手5的位置交叠时虚拟对象200的叠加位置与左手5交叠的位置。hmd 10将用于执行上述计算方法的信息存储在例如存储单元16、可访问的外部存储装置等中。显示控制单元17b使用该计算方法根据交点x的位置计算虚拟对象200的叠加位置。
[0070]
在用户2的右手4和左手5位于叠加区域100外部、虚拟线210位于叠加区域100内部的情况下，显示控制单元17b通过参考虚拟线210的交点x的位置来确定虚拟对象200的叠加位置。例如，显示控制单元17b确定通过交点x且与虚拟线210平行的虚拟对象200的叠加位置。显示控制单元17b控制显示器11的显示，使得虚拟对象200布置在所确定的叠加位置处。因此，即使当用户2的双手在叠加区域100外部时，hmd 10也可以抑制虚拟对象200的显示中的不协调感。
[0071]
图8是示出虚拟对象200的叠加位置与用户2的手的位置之间的关系的另一示例的图。根据本实施方式的虚拟对象200的示例包括如图8所示的第一人称视点游戏中的武器对象。武器对象的示例包括在场景sn1中示出的火器和在场景sn2中示出的诸如弓和箭的对象。这些对象是用于指向远点的操作对象。因此，在用户2使用这些对象的情况下，基本上，用户2操作这些对象，使得远端的手落入从用户2观察的视角内。
[0072]
在用户2的视野中，即，在hmd 10的叠加区域100内部，虚拟对象200的纵向方向根据虚拟线210的倾斜而改变。因此，在叠加区域100内部包括用户2的任一只手的情况下，显示控制单元17b使虚拟对象200的端部在虚拟线210上滑动，并且将虚拟对象200的端部叠加在用户2的手的位置处。
[0073]
例如，在场景sn1中，用户2在视觉上识别虚拟对象200的点的方向。在这种情况下，显示控制单元17b识别出相对于右手4位于距用户2较远一侧的左手5位于叠加区域100内部，并且在虚拟线210上滑动虚拟对象200，使得虚拟对象200的端部位于叠加在左手5上的位置处。
[0074]
例如，在场景sn2中，用户2在视觉上将弓的中心附近识别为由右手4握持的虚拟对象200。在这种情况下，显示控制单元17b识别出相对于左手5位于距用户2较远一侧的右手4位于叠加区域100内部，并且在虚拟线210上滑动虚拟对象200，使得虚拟对象200的端部位于叠加在右手4上的位置处。
[0075]
根据本实施方式，由于在用户2的指向操作的处理中虚拟对象200的位置在虚拟线210上平滑地滑动，所以hmd 10可以相对于用户2的双手之间的间隔的改变来减少虚拟对象200的显示中的不协调感。
[0076]
上面已经描述了根据本实施方式的ar眼镜系统1中包括的hmd 10的功能配置示
例。注意，以上参照图3描述的配置仅是示例，并且根据本实施方式的hmd 10的功能配置不限于这样的示例。根据本实施方式的hmd 10的功能配置可以根据规格或用途而灵活地修改。
[0077]
[与头戴式显示器的显示控制相关的异常处理]
[0078]
图9是用于说明头戴式显示器10的第一异常处理的示例的图。图10是用于说明头戴式显示器10的第二异常处理的示例的图。hmd 10具有在不能获取任一只手的位置信息的情况下执行作为异常处理的第一异常处理、以及在整个虚拟对象200在叠加区域100内部的情况下执行作为异常处理的第二异常处理以及其他处理的功能。
[0079]
[第一异常处理]
[0080]
例如，在由成像装置12感测的情况下，安装到hmd 10的成像装置12的视角(例如，约70度的对角)通常具有限制。因此，存在这样的情况：根据用户2的视线方向的改变，一只手不包括在视角中，并且不能准确地获取手的位置信息。例如，在图9所示的示例中，由于用户2的左手5在视角外部，因此hmd 10不能获取左手5的位置信息并且不能根据双手的位置信息来设定虚拟线210。
[0081]
获取单元17a不能从成像装置12的图像信息获取用户2的一只手的位置信息，并且显示控制单元17b识别出用户2的另一只手位于叠加区域100内部。显示控制单元17b基于由获取单元17a获取的另一只手的姿势信息、视线方向、虚拟对象200的类型和形状等来设定虚拟对象200的纵向方向。在这种情况下，显示控制单元17b控制hmd 10，使得虚拟对象200的端部叠加在用户2的另一只手上。显示控制单元17b控制hmd 10以基于位于叠加区域100内部的用户2的一只手的姿势的改变来改变虚拟对象200的纵向方向。在图9所示的示例中，显示控制单元17b在显示器11上显示虚拟对象200，使得虚拟对象200的端部叠加在用户的右手4上，并且虚拟对象200的纵向方向指向与右手4的姿势相对应的方向。
[0082]
[第二异常处理]
[0083]
例如，在整个虚拟对象200包括在叠加区域100内部的情况下，如果虚拟对象200如上所述根据用户2的双手之间的间隔滑动，则这可能不利地给用户2带来不协调感。因此，在第二异常处理中，即使在能够基于双手的位置信息来设定虚拟线210的情况下，也根据叠加区域100内部的一只手的位置或姿势(例如，视角)来改变虚拟对象200的位置或姿势，并且忽略另一只手的位置或姿势的改变。即，第二异常处理是显示要操作的整个虚拟对象200的情况下的异常处理。
[0084]
显示控制单元17b控制hmd 10，以根据位于hmd 10的叠加区域100内部的用户2的一只手的位置或姿势中的至少一个来改变虚拟对象200的位置。显示控制单元17b忽略用户2的与该只手不同的另一只手的位置或姿势的改变。例如，在对虚拟对象200设定了适于握持的手的情况下，显示控制单元17b将适于握持的手设定为该只手。例如，在设定了虚拟对象200的操作所需的手的情况下，显示控制单元17b将虚拟对象200的操作所需的手以外的手设定为该只手。操作所需的手意味着例如位置根据对虚拟对象200的操作而改变的手。在图10所示的示例中，右手4被设定为适于握持虚拟对象200的手。在这种情况下，显示控制单元17b在显示器11上显示虚拟对象200，使得虚拟对象200的端部叠加在用户的右手4上，并且虚拟对象200的纵向方向平行于虚拟线210。因此，由于即使用户2改变左手5的位置或姿势，虚拟对象200的显示也不改变，所以可以抑制虚拟对象200的显示中的不协调感。
[0085]
注意，hmd 10可以组合上述第一异常处理和第二异常处理。hmd 10可以将第一异常处理或第二异常处理中的至少一个与基本显示控制处理组合。
[0086]
[根据实施方式的头戴式显示器10的处理过程]
[0087]
接下来，将描述根据本实施方式的头戴式显示器10的处理过程的示例。图11是示出由根据实施方式的头戴式显示器10执行的处理过程的示例的流程图。图12是示出图11所示的第一显示控制处理的示例的流程图。图13是示出图11所示的第二显示控制处理的示例的流程图。图14是示出图11所示的第三显示控制处理的示例的流程图。注意，图11所示的处理过程由执行程序的hmd 10的控制单元17实现。在虚拟对象200显示在显示器11上的情况下，图11所示的处理过程由hmd 10的控制单元17重复执行。
[0088]
如图11所示，hmd 10的控制单元17获取用户2的双手的位置信息(步骤s10)。例如，控制单元17经由可穿戴设备20获取右手位置信息161和左手位置信息162。例如，控制单元17基于成像装置12的图像信息获取右手位置信息161和左手位置信息162。控制单元17将所获取的位置信息存储在存储单元16中。通过执行步骤s10的处理，控制单元17用作获取单元17a。当步骤s10的处理完成时，控制单元17使处理进行至步骤s20。
[0089]
控制单元17确定是否不能获取一只手的位置信息(步骤s20)。例如，在右手位置信息161或左手位置信息162未存储在存储单元16中的情况下，控制单元17确定不能获取一只手的位置信息。如果确定不能获取一只手的位置信息(步骤s20中的“否”)，则控制单元17进行处理步骤s30，因为已经获取了用户2的双手的位置信息。
[0090]
控制单元17确定在叠加区域100内部是否显示整个虚拟对象200(步骤s30)。如果确定在叠加区域100内部未显示虚拟对象200(步骤s30中为否)，则控制单元17使处理进行至步骤s40。
[0091]
控制单元17执行第一显示控制处理(步骤s40)。第一显示控制处理例如是基于用户2的双手的位置信息和连接双手的虚拟线210来控制显示器11的显示以将虚拟对象200叠加在用户2的双手的位置上的处理。第一显示控制处理包括例如图12所示的处理过程。
[0092]
如图12所示，控制单元17设定连接用户2的双手的虚拟线210(步骤s41)。例如，控制单元17设定连接由右手位置信息161指示的位置和由左手位置信息162指示的位置的虚拟线210。然后，控制单元17获取用户2的视线信息(步骤s42)。例如，控制单元17基于成像装置12的图像信息估计用户2的视线方向，并且获取指示已估计的视线方向的视线信息163。然后，控制单元17基于虚拟线210与视线之间的交点x确定其纵向方向平行于虚拟线210的虚拟对象200的叠加位置(步骤s43)。例如，控制单元17确定其纵向方向平行于虚拟线210并且虚拟对象200的端部叠加在用户2的手上的叠加位置。然后，控制单元17控制显示器11的显示，使得虚拟对象200沿着虚拟线210滑动到叠加位置(步骤s44)。
[0093]
因此，hmd 10可以在保持虚拟对象200的显示状态平行于虚拟线210的同时，将虚拟对象200的端部叠加并显示在位于接近用户2的视线方向并在叠加区域100内部的用户2的手上。此外，即使当用户2的右手4与左手5之间的间隔改变时，hmd 10也可以减少虚拟对象200相对于双手的定位中的不协调感。当完成图12所示的处理过程时，控制单元17返回到图11并结束图11所示的处理过程。
[0094]
替选地，如果控制单元17确定不能获取一只手的位置信息(步骤s20中为是)，则还没有获取用户2的双手的位置信息，并且因此处理进行至步骤s50。
[0095]
控制单元17执行第二显示控制处理(步骤s50)。第二显示控制处理例如包括上述第一异常处理。第二显示控制处理包括例如图13所示的处理过程。
[0096]
如图13所示，控制单元17获取叠加区域100内部的手以外的手的姿势(步骤s51)。例如，控制单元17基于成像装置12的图像信息估计用户2的另一只手的姿势，并且获取指示所估计的姿势的姿势信息164。然后，控制单元17基于获取的姿势估计虚拟对象200的纵向方向(步骤s52)。例如，控制单元17基于获取的另一只手的姿势、视线方向、虚拟对象200的类型和形状等来估计虚拟对象200的纵向方向。然后，控制单元17控制显示器11的显示，使得虚拟对象200的端部沿纵向方向滑动到另一只手的叠加位置(步骤s53)。
[0097]
因此，在不能获取一只手的位置信息的情况下，hmd 10可以在显示器11上显示虚拟对象200，使得虚拟对象200的端部叠加在用户的另一只手上，并且虚拟对象200的纵向方向指向与另一只手的姿势相对应的方向。此外，即使用户2的一只手的位置未知，hmd 10也可以减少虚拟对象200相对于另一只手的定位中的不协调感。当完成图13所示的处理过程时，控制单元17返回到图11并结束图11所示的处理过程。
[0098]
另外替选地，如果确定在叠加区域100内显示虚拟对象200(步骤s30中为是)，则控制单元17使处理进行至步骤s60。
[0099]
控制单元17执行第三显示控制处理(步骤s60)。第三显示控制处理例如包括上述第二异常处理。第三显示控制处理包括例如图14所示的处理过程。
[0100]
如图14所示，控制单元17确定叠加区域100内部的用户2的手用作参考(步骤s61)。例如，控制单元17将适于握持虚拟对象200的手确定为参考。然后，控制单元17获取参考手的位置和姿势(步骤s62)。例如，控制单元17基于成像装置12的图像信息估计用户2的另一只手的位置和姿势，并且获取参考手的位置信息和姿势信息164。然后，控制单元17基于获取的位置和姿势来估计虚拟对象200的纵向方向(步骤s63)。控制单元17估计平行于双手的虚拟线210的纵向方向。然后，控制单元17控制显示器11的显示，使得虚拟对象200沿纵向方向叠加在参考手上(步骤s64)。
[0101]
因此，在整个虚拟对象200显示在叠加区域100内部的情况下，hmd 10可以在显示器11上显示虚拟对象200，使得虚拟对象200的端部叠加在用户的参考手上。此外，即使与用户2的参考手不同的手改变，hmd 10也可以减少虚拟对象200相对于参考手的定位中的不协调感。当完成图14所示的处理过程时，控制单元17返回到图11并结束图11所示的处理过程。
[0102]
在图11所示的处理过程中，已经描述了控制单元17通过执行从步骤s20到步骤s60的处理而用作显示控制单元17b的情况；然而，并不限于此。
[0103]
注意，上述实施方式是示例，并且各种修改和应用是可能的。
[0104]
[硬件配置]
[0105]
通过例如具有如图15所示的配置的计算机1000来实现根据上述实施方式的显示控制装置。在下文中，将作为示例描述对应于根据实施方式的显示控制装置的hmd 10的控制单元17。图15是示出实现显示控制装置的功能的计算机1000的示例的硬件配置图。计算机1000包括cpu 1100、ram 1200、只读存储器(rom)1300、硬盘驱动器(hdd)1400、通信接口1500以及输入和输出接口1600。计算机1000的单元通过总线1050连接。
[0106]
cpu 1100根据存储在rom 1300或hdd 1400中的程序进行操作，并且控制每个单元。例如，cpu 1100将存储在rom 1300或hdd 1400中的程序加载到ram 1200中，并且执行对
应于各种程序的处理。
[0107]
rom 1300存储引导程序，例如当计算机1000被激活时由cpu 1100执行的基本输入输出系统(bios)、依赖于计算机1000的硬件的程序等。
[0108]
hdd 1400是非暂态地记录要由cpu 1100执行的程序、由该程序使用的数据等的计算机可读记录介质。具体地，hdd 1400是记录根据本公开内容的作为程序数据1450的示例的程序的记录介质。
[0109]
通信接口1500是用于计算机1000与外部网络1550(例如，因特网)连接的接口。例如，cpu 1100经由通信接口1500从另一装置接收数据或者将由cpu 1100生成的数据发送至另一装置。
[0110]
输入和输出接口1600是用于连接输入和输出设备1650和计算机1000的接口。例如，cpu 1100经由输入和输出接口1600从诸如键盘和鼠标的输入设备接收数据。cpu 1100还经由输入和输出接口1600将数据发送至诸如显示器、扬声器或打印机的输出设备。此外，输入和输出接口1600可以用作读取记录在预定记录介质中的程序等的介质接口。介质例如是诸如数字多功能盘(dvd)的光记录介质、诸如磁光盘(mo)的磁光记录介质、磁带介质、磁记录介质、半导体存储器等。
[0111]
例如，在计算机1000用作根据本实施方式的信息处理装置的情况下，计算机1000的cpu 1100通过执行加载在ram 1200上的程序来实现包括获取单元17a、显示控制单元17b等的功能的控制单元17。hdd 1400还将根据本公开内容的程序或数据存储在存储单元16中。注意，尽管cpu 1100从hdd 1400读取程序数据1450并执行程序数据1450，但是作为另一示例，这些程序可以经由外部网络1550从另一装置获取。
[0112]
虽然已经参照附图详细描述了本公开内容的优选实施方式，但是本公开内容的技术范围不限于这些示例。明显的是，在本公开内容的技术领域中具有普通知识的人可以在权利要求中描述的技术思想的范围内构思各种修改或变化，并且自然地理解，这些也属于本公开内容的技术范围。
[0113]
此外，本说明书中描述的效果仅是说明性或示例性的，而不是限制性的。即，根据本公开内容的技术可以实现对于本领域技术人员而言从本说明书的描述中明显的其他效果以及或代替上述效果。
[0114]
此外，还可以创建用于使内置在计算机中的诸如cpu、rom和ram的硬件实现与hmd 10的配置等效的功能的程序，并且提供记录该程序的计算机可读记录介质。
[0115]
同时，根据本说明书中的信息处理装置的处理的步骤不必以流程图中描述的顺序按时间序列处理。例如，根据信息处理装置的处理的步骤可以以与流程图中描述的顺序不同的顺序来处理，或者可以并行地处理。
[0116]
(效果)
[0117]
控制单元17包括：获取单元17a，其获取指示hmd 10的用户2的右手4的位置的右手位置信息161和指示用户2的左手5的位置的左手位置信息162；以及显示控制单元17b，其基于右手位置信息161和左手位置信息162控制hmd 10，以在右手4的位置和左手5的位置处布置具有特定尺寸的虚拟对象200。显示控制单元17b控制hmd 10，以在保持虚拟对象200的显示状态的同时，独立于右手4与左手5之间的距离的改变而改变虚拟对象200的位置，在显示状态中，所布置的虚拟对象200的纵向方向平行于连接右手4和左手5的虚拟线210。
[0118]
因此，即使用户2的双手之间的间隔改变，控制单元17也可以保持相对于用户2的双手之间的虚拟线210的平行关系，并且通过参考双手的位置来定位虚拟对象200。这使得实现以下效果：即使用户2的双手之间的间隔改变，也可以实现控制单元17能够抑制虚拟对象200相对于双手的定位中的不协调感。
[0119]
在控制单元17中，获取单元17a获取指示用户2的视线方向的视线信息163，并且显示控制单元17b控制hmd 10以基于视线方向的改变独立于右手4与左手5之间的距离的改变来改变虚拟对象200的位置。
[0120]
因此，即使当用户2的双手之间的间隔改变时，控制单元17也可以通过参考视线方向和用户2的双手的位置来定位虚拟对象200。因此，即使用户2的双手之间的间隔改变，控制单元17也可以将虚拟对象200布置在适合于用户2的视线方向的位置，并且因此可以抑制在虚拟对象200的定位中的不协调感。
[0121]
在控制单元17中，显示控制单元17b基于在视线方向上延伸的线与虚拟线210的交点x来确定虚拟对象200相对于右手4或左手5中的至少一个的叠加位置。
[0122]
因此，控制单元17可以基于连接用户2的双手的虚拟线210上的用户2的视线位置来确定虚拟对象200的叠加位置。因此，即使用户2的双手之间的间隔改变，控制单元17也可以将虚拟对象200布置在虚拟线210上的适合于用户2的视线位置的位置处。因此，可以进一步抑制虚拟对象200的定位中的不协调感。
[0123]
在控制单元17中，在用户的一只手根据视线方向的改变而移动到hmd 10的叠加区域100外部的情况下，显示控制单元17b控制hmd 10，使得平行于虚拟线210的虚拟对象200叠加在位于叠加区域100内部的用户2的另一只手的位置处。
[0124]
因此，在用户2的一只手位于叠加区域100外部并且另一只手位于叠加区域100内部的情况下，控制单元17可以在位于叠加区域100内部的用户2的另一只手的位置上叠加并显示平行于虚拟线210的虚拟对象200。因此，控制单元17可以将虚拟对象200配置在位于叠加区域100内部的用户2的手中，并且因此可以进一步抑制虚拟对象200的定位中的不协调感。
[0125]
在控制单元17中，虚拟对象200包括武器对象或操作对象中的至少一个。
[0126]
因此，通过操作武器对象或操作对象中的至少一个，即使连接用户2的双手的虚拟线210的倾斜度改变，控制单元17也可以在位于叠加区域100内部的用户2的另一只手的位置处叠加并显示平行于虚拟线210的虚拟对象200。因此，控制单元17可以将虚拟对象200配置在位于叠加区域100内部的用户2的手中，并且因此可以进一步抑制对要被操作的虚拟对象200的定位中的不协调感。
[0127]
在控制单元17中，当用户2的右手4和左手5位于叠加区域100外部并且虚拟线210位于hmd 10的叠加区域100内部时，显示控制单元17b通过参考交点x的位置来确定虚拟对象的叠加位置。
[0128]
因此，在用户2的双手位于叠加区域100外部的情况下，控制单元17可以基于叠加区域100内部的虚拟线210和与视线的交点x之间的关系来确定虚拟对象200的叠加位置。因此，即使用户2的双手位于叠加区域100外部，控制单元17也可以将虚拟对象200布置在适合于用户2的视线方向的位置处，并且因此可以抑制在虚拟对象200的定位中的不协调感。
[0129]
在获取单元17a从hmd 10的成像装置12的图像信息获取用户2的手的位置信息并
且显示控制单元17b不能获取用户2的手上的一只手的位置信息而用户2的另一只手位于hmd 10的叠加区域100内部的情况下，控制单元17控制hmd 10，使得虚拟对象200的端部叠加在一只手上而不设定虚拟线210。
[0130]
因此，在不能获取用户2的一只手的位置信息的情况下，控制单元17可以将虚拟对象200的端部叠加在位于叠加区域100内部的另一只手上。因此，即使在不能获取用户2的一只手的位置信息的情况下，控制单元17也可以抑制虚拟对象200的定位中的不协调感。
[0131]
控制单元17控制hmd 10，使得获取单元17a基于图像信息获取用户2的手的姿势信息164，并且显示控制单元17b基于位于叠加区域100内部的用户2的一只手的姿势的改变来改变虚拟对象200的纵向方向。
[0132]
因此，在不能获取用户2的一只手的位置信息的情况下，控制单元17可以根据另一只手的姿势的改变来改变虚拟对象200的纵向方向。因此，控制单元17可以根据另一只手的姿势沿纵向方向叠加并显示虚拟对象200，并且因此可以抑制虚拟对象200的定位中的不协调感。
[0133]
在整个虚拟对象200位于叠加区域100内部的情况下，控制单元17控制hmd 10，使得显示控制单元17b根据位于hmd 10的叠加区域100内部的用户2的一只手的位置或姿势中的至少一个来改变虚拟对象200的位置。
[0134]
因此，在整个虚拟对象200位于叠加区域100内部的情况下，控制单元17可以根据用户2的一只手的位置或姿势中的至少一个来改变虚拟对象200的位置。因此，控制单元17不根据用户2的双手之间的间隔改变虚拟对象200的叠加位置，并且因此可以抑制虚拟对象200的定位中的不协调感。
[0135]
在控制单元17中，显示控制单元17b忽略用户2的与一只手不同的另一只手的位置或姿势的改变。
[0136]
因此，在整个虚拟对象200位于叠加区域100内部的情况下，如果双手位于叠加区域100内部，则控制单元17能够忽略用户2的另一只手的位置或姿势的改变。因此，即使可以基于双手的位置来设定虚拟线210，控制单元17也不会根据叠加区域100内部的一只手的位置或姿势来改变虚拟对象200的位置，并且因此可以进一步抑制虚拟对象200的定位中的不协调感。
[0137]
控制单元17用在包括设置在用户2的眼睛前面的显示器11的hmd 10中。
[0138]
因此，即使用户2的双手之间的间隔改变，控制单元17也可以控制hmd 10的显示器，以保持相对于用户2的双手之间的虚拟线210的平行关系，并且通过参考双手的位置来定位虚拟对象200。这使得实现以下效果：即使hmd 10的用户2的双手之间的间隔改变，控制单元17也可以抑制虚拟对象200相对于双手的定位中的不协调感。
[0139]
一种显示控制方法，包括：通过计算机获取指示hmd 10的用户2的右手4的位置的右手位置信息161和指示用户2的左手5的位置的左手位置信息162；基于右手位置信息161和左手位置信息162控制hmd 10以在右手4的位置和左手5的位置处布置具有特定尺寸的虚拟对象200；以及控制hmd 10以在保持虚拟对象200的显示状态的同时独立于右手4与左手5之间的距离的改变而改变虚拟对象200的位置，在显示状态中，所布置的虚拟对象200的纵向方向平行于连接右手4和左手5的虚拟线210。
[0140]
因此，即使用户2的双手之间的间隔改变，计算机也可以控制hmd 10的显示器，以
保持相对于用户2的双手之间的虚拟线210的平行关系，并且通过参考双手的位置来定位虚拟对象200。这使得实现以下效果：即使hmd 10的用户2的双手之间的间隔改变，计算机也可以抑制虚拟对象200相对于双手的定位中的不协调感。
[0141]
记录介质是记录用于使计算机实现以下操作的程序的计算机可读记录介质：获取指示hmd 10的用户2的右手4的位置的右手位置信息161和指示用户2的左手5的位置的左手位置信息162；基于右手位置信息161和左手位置信息162控制hmd 10以在右手4的位置和左手5的位置处布置具有特定尺寸的虚拟对象200；以及控制hmd 10以在保持虚拟对象200的显示状态的同时独立于右手4与左手5之间的距离的改变而改变虚拟对象200的位置，在显示状态中，所布置的虚拟对象200的纵向方向平行于连接右手4和左手5的虚拟线210。
[0142]
因此，即使用户2的双手之间的间隔改变，记录介质也可以通过计算机控制hmd 10的显示器，以保持相对于用户2的双手之间的虚拟线210的平行关系，并且通过参考双手的位置来定位虚拟对象200。这使得实现以下效果：即使hmd 10的用户2的双手之间的间隔改变，记录介质也可以抑制虚拟对象200相对于双手的定位中的不协调感。
[0143]
注意，以下配置也属于本公开内容的技术范围。
[0144]
(1)
[0145]
一种显示控制装置，包括：
[0146]
获取单元，其被配置成获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示所述用户的左手的位置的左手位置信息；以及
[0147]
显示控制单元，其控制所述头戴式显示器，以基于所述右手位置信息和所述左手位置信息来在所述右手的位置和所述左手的位置处布置具有特定尺寸的虚拟对象，
[0148]
其中，所述显示控制单元控制所述头戴式显示器，以在保持所述虚拟对象的显示状态的同时独立于所述右手与所述左手之间的距离的改变而改变所述虚拟对象的位置，在所述显示状态中，所布置的所述虚拟对象的纵向方向平行于连接所述右手与所述左手的虚拟线。
[0149]
(2)
[0150]
根据(1)所述的显示控制装置，
[0151]
其中，所述获取单元获取指示所述用户的视线方向的视线信息，并且
[0152]
所述显示控制单元控制所述头戴式显示器，以基于所述视线方向的改变而独立于所述右手与所述左手之间的距离的改变来改变所述虚拟对象的位置。
[0153]
(3)
[0154]
根据(2)所述的显示控制装置，
[0155]
其中，所述显示控制单元基于在所述视线方向上延伸的线与所述虚拟线的交点来确定所述虚拟对象相对于所述右手和所述左手中的至少一个的叠加位置。
[0156]
(4)
[0157]
根据(2)或(3)所述的显示控制装置，
[0158]
其中，在所述用户的一只手根据所述视线方向的改变而移动到所述头戴式显示器的叠加区域的外部的情况下，所述显示控制单元控制所述头戴式显示器，以在位于所述叠加区域的内部的所述用户的另一只手的位置处叠加平行于所述虚拟线的所述虚拟对象。
[0159]
(5)
[0160]
根据(4)所述的显示控制装置，
[0161]
其中，所述虚拟对象包括武器对象和操作对象中的至少一个。
[0162]
(6)
[0163]
根据(3)所述的显示控制装置，
[0164]
其中，在所述用户的右手和左手位于所述头戴式显示器的叠加区域的外部并且所述虚拟线位于所述叠加区域的内部的情况下，所述显示控制单元通过参考所述交点的位置来确定所述虚拟对象的叠加位置。
[0165]
(7)
[0166]
根据(1)至(6)中任一项所述的显示控制装置，
[0167]
其中，所述获取单元从所述头戴式显示器的成像装置的图像信息中获取所述用户的手的位置信息，并且
[0168]
在无法获取所述用户的一只手的位置信息并且所述用户的另一只手位于所述头戴式显示器的叠加区域的内部的情况下，所述显示控制单元不设定所述虚拟线并且控制所述头戴式显示器以将所述虚拟对象的端部叠加在所述另一只手上。
[0169]
(8)
[0170]
根据(7)所述的显示控制装置，
[0171]
其中，所述获取单元基于所述图像信息获取所述用户的手的姿势信息，并且
[0172]
所述显示控制单元控制所述头戴式显示器，以基于位于所述叠加区域内部的所述用户的一只手的姿势的改变来改变所述虚拟对象的纵向方向。
[0173]
(9)
[0174]
根据(1)至(6)中任一项所述的显示控制装置，
[0175]
其中，在整个所述虚拟对象位于所述头戴式显示器的叠加区域的内部的情况下，所述显示控制单元控制所述头戴式显示器，以根据位于所述叠加区域的内部的所述用户的一只手的位置和姿势中的至少一个来改变所述虚拟对象的位置。
[0176]
(10)
[0177]
根据(9)所述的显示控制装置，
[0178]
其中，所述显示控制单元忽略所述用户的不同于所述一只手的另一只手的位置和姿势的改变。
[0179]
(11)
[0180]
根据(1)至(10)中任一项所述的显示控制装置，
[0181]
其中，所述显示控制装置用于所述头戴式显示器中，所述头戴式显示器包括设置在所述用户的眼睛的前方的显示器。
[0182]
(12)
[0183]
一种显示控制方法，包括通过计算机执行以下步骤：
[0184]
获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示所述用户的左手的位置的左手位置信息；
[0185]
控制所述头戴式显示器，以基于所述右手位置信息和所述左手位置信息在所述右手的位置和所述左手的位置处布置具有特定尺寸的虚拟对象；以及
[0186]
控制所述头戴式显示器以在保持所述虚拟对象的显示状态的同时独立于所述右
手与所述左手之间的距离的改变而改变所述虚拟对象的位置，在所述显示状态中，所布置的所述虚拟对象的纵向方向平行于连接所述右手与所述左手的虚拟线。
[0187]
(13)
[0188]
一种计算机可读记录介质，其记录用于使计算机实现以下操作的程序：
[0189]
获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示所述用户的左手的位置的左手位置信息；
[0190]
控制所述头戴式显示器，以基于所述右手位置信息和所述左手位置信息在所述右手的位置和所述左手的位置处布置具有特定尺寸的虚拟对象；以及
[0191]
控制所述头戴式显示器，以在保持所述虚拟对象的显示状态的同时独立于所述右手与所述左手之间的距离的改变而改变所述虚拟对象的位置，在所述显示状态中，所布置的所述虚拟对象的纵向方向平行于连接所述右手与所述左手的虚拟线。
[0192]
(14)
[0193]
一种用于使计算机实现以下操作的程序：
[0194]
获取指示头戴式显示器的用户的右手的位置的右手位置信息和指示所述用户的左手的位置的左手位置信息；
[0195]
控制所述头戴式显示器，以基于所述右手位置信息和所述左手位置信息在所述右手的位置和所述左手的位置处布置具有特定尺寸的虚拟对象；以及
[0196]
控制所述头戴式显示器，以在保持所述虚拟对象的显示状态的同时独立于所述右手与所述左手之间的距离的改变而改变所述虚拟对象的位置，在所述显示状态中，所布置的所述虚拟对象的纵向方向平行于连接所述右手与所述左手的虚拟线。
[0197]
附图标记列表
[0198]
1 ar眼镜系统
[0199]
10 头戴式显示器(hmd)
[0200]
11 显示器
[0201]
12 成像装置
[0202]
13 传感器单元
[0203]
14 通信单元
[0204]
15 扬声器
[0205]
16 存储单元
[0206]
17 控制单元
[0207]
17a 获取单元
[0208]
17b 显示控制单元
[0209]
20 可穿戴设备
[0210]
21 运动传感器
[0211]
22 通信单元
[0212]
23 控制单元
[0213]
100 叠加区域
[0214]
200 虚拟对象
[0215]
210 虚拟线