式， 其中，所述实体Π模式提供用于虚拟目标的显示， 所述处理器被进一步配置成: 当所述虚拟目标是3维(3D)目标，并且所述3D目标包括触摸识别表面时，调整所述虚拟目标的显示距离，以便所述触摸识别表面与所述目标的表面重合，以及 基于调整的显示距离，显示所述虚拟目标。
2.根据权利要求1所述的装置，其中，所述处理器调整所述虚拟目标的显示距离，以便当所述3D目标包括多个触摸识别表面时，基于选择信息通过预先确定的方法选择的至少一个触摸识别表面与所述目标的表面重合，以及基于所述调整的显示距离，显示所述虚拟目标。
3.根据权利要求2所述的装置，其中，所述选择信息包括有关显示区的信息、有关使用频率的信息，和有关在所述虚拟目标的前侧和后侧之间距离的信息的至少一个。
4.根据权利要求1所述的装置，其中，所述传感器单元被进一步配置成检测有关所述虚拟目标的用户手势，并且其中，所述处理器被进一步配置成: 当所述3D目标包括多个触摸识别表面时，根据预先确定的显示距离显示所述虚拟目标， 当检测到所述用户手势时，获得在通过所述手势检测到的输入目标和所述多个触摸识别表面之间的距离， 确定是否所获得的距离小于或等于预先确定的距离， 调整所述虚拟目标的显示距离，以便被确定为小于或者等于所述预先确定的距离的所述触摸识别表面与所述目标的表面重合，以及 基于所调整的显示距离，显示所述虚拟目标。
5.根据权利要求1所述的装置，其中，当所述虚拟目标是3D目标，并且所述3D目标包括触摸识别表面时，所述处理器根据预先确定的距离显示所述虚拟目标。
6.根据权利要求1所述的装置，其中，所述处理器被配置成，如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，则应用非实体用户界面(UI)模式， 其中，所述处理器接收通过实际接触所述目标以所述实体Π模式和通过非实际接触所述目标以所述非实体Π模式输入到所述HMD的Π的用户命令。
7.根据权利要求6所述的装置，其中，所述非实体UI模式在其中所述非实体UI不具有与所述目标的实际接触的状态下操作。
8.根据权利要求7所述的装置，其中，所述非实体UI模式包括语音识别用户界面(UI)或者手势用户界面(UI)的至少一个。
9.根据权利要求6所述的装置，其中，如果所述检测到的目标在所述预先确定的距离内并且所述检测到的目标在视角内，则所述处理器选择所述实体UI模式。
10.根据权利要求9所述的装置，其中，如果所述检测到的目标在所述视角之内但不是用户可对接的，则所述处理器变为所述非实体UI模式。
11.根据权利要求6所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，则所述处理器选择所述非实体UI模式。
12.根据权利要求11所述的装置，其中，如果所述检测到的目标不在所述视角内，但在预先确定的时间段内返回所述视角内，则所述处理器变为所述实体Π模式。
13.根据权利要求11所述的装置，其中，如果所述检测到的目标不在所述视角内并且在所述预先确定的时间段内不返回所述视角内，则所述处理器保持所述非实体Π模式。
14.根据权利要求6所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，并且在所述预先确定的时间段内所述检测到的目标不返回所述视角内，则所述处理器选择所述非实体UI模式。
15.根据权利要求6所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离之内但不在所述视角内，并且在特定时间段内在所述预先确定的距离内检测到新的数字设备，则所述处理器将所述新的数字设备的显示功能应用为所述实体UI模式。
16.根据权利要求6所述的装置，其中，如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，并且在特定时间段内在所述预先确定的距离内检测到新的数字设备，则所述处理器将所述新的数字设备的显示器应用为所述实体UI模式。
17.根据权利要求6所述的装置，其中，如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，并且在特定时间段内在所述预先确定的距离内检测到新的数字设备，则所述处理器将所述新的数字设备的显示器应用为所述实体UI模式。
18.—种提供用于头戴式显示器(HMD)的用户界面(UI)的方法，所述方法包括: 检测目标是否存在于所述HMD的附近； 感测在检测到的目标和所述HMD之间的距离； 如果所述目标在离所述HMD预先确定的距离内，则应用实体用户界面(UI)模式，其中，所述实体Π模式提供用于虚拟目标的显示； 当所述虚拟目标是3维(3D)目标并且所述3D目标包括触摸识别表面时，调整所述虚拟目标的显示距离，以便所述触摸识别表面与所述目标的表面重合；以及 基于所调整的显示距离，显示所述虚拟目标。
19.根据权利要求18所述的方法，其中，所述3D目标包括多个触摸识别表面，并且其中，所述调整显示距离的步骤包括调整所述虚拟目标的显示距离，以便基于选择信息使用预先确定的方法选择的触摸识别表面的至少一个与所述目标的表面重合。
20.一种用于头戴式显示器(HMD)的用户界面(UI)装置，包括: 传感器单元，所述传感器单元检测目标是否存在于所述HMD的附近，并且如果检测到所述目标，则感测在所述目标和所述HMD之间的距离；以及 处理器，所述处理器基于所述传感器单元的结果控制所述HMD的用户界面(Π)，使得如果所述检测到的目标在离所述HMD预先确定的距离内，则应用实体用户界面(UI)模式，并且如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，则应用非实体用户界面(UI)模式。
21.根据权利要求20所述的装置，其中，所述实体UI模式在所述检测到的目标的表面上显示假想的用户界面(UI)功能。
22.根据权利要求21所述的装置，其中，所述实体Π模式包括虚拟键盘用户界面(UI)或者绘图用户界面(UI)的至少一个。
23.根据权利要求20所述的装置，其中，所述非实体UI模式在其中所述非实体UI不具有与所述目标的实际接触的状态下操作。
24.根据权利要求23所述的装置，其中，所述非实体UI模式包括语音识别用户界面(UI)或者手势用户界面(UI)的至少一个。
25.根据权利要求20所述的装置，其中，如果所述检测到的目标在所述预先确定的距离内并且所述检测到的目标在视角范围内，则所述处理器选择所述实体Π模式。
26.根据权利要求25所述的装置，其中，如果所述检测到的目标在所述视角内但不是用户可接口的，则所述处理器变为所述非实体UI模式。
27.根据权利要求20所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，则所述处理器选择所述非实体UI模式。
28.根据权利要求27所述的装置，其中，如果所述检测到的目标不在所述视角内，但在预先确定的时间段内返回所述视角内，则所述处理器变为所述实体Π模式。
29.根据权利要求27所述的装置，其中，如果所述检测到的目标不在所述视角内，并且在预先确定的时间段内不返回所述视角内，则所述处理器保持所述非实体Π模式。
30.根据权利要求20所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，并且在预先确定的时间段内所述检测到的目标不返回所述视角内，则所述处理器选择所述非实体Π模式。
31.根据权利要求20所述的装置，其中，如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，并且在特定时间段内在所述预先确定的距离内检测到新的数字设备，则所述处理器将所述新的数字设备的显示功能应用为所述实体UI模式。
32.根据权利要求20所述的装置，其中，如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，并且在特定时间段内在所述预先确定的距离内检测到新的数字设备，则所述处理器将所述新的数字设备的显示器应用为所述实体UI模式。
33.一种用于头戴式显示器(HMD)的用户界面(UI)装置，包括: 通信单元，所述通信单元与在所述HMD附近的数字设备执行通信； 传感器单元，所述传感器单元检测所述数字设备是否存在于所述HMD的附近，并且如果检测到所述数字设备，则感测在所述数字设备和所述HMD之间的距离；以及 处理器，所述处理器基于所述传感器单元的结果，控制所述HMD的用户界面(UI)，其中，如果所述检测到的数字设备在离所述HMD预先确定的距离内，则所述数字设备的显示功能被应用为实体用户界面(UI)模式，并且如果所述数字设备没有被检测到或者不在离所述HMD预先确定的距离内，则应用非实体用户界面(UI)模式。
34.—种提供用于头戴式显示器(HMD)的用户界面(UI)的方法，所述方法包括: 检测目标是否存在于所述HMD的附近； 如果检测到所述目标，则确定在所述检测到的目标和所述HMD之间的距离；以及 如果所述目标在离所述HMD预先确定的距离内，则应用实体用户界面(UI)模式，并且如果所述目标没有被检测到或者不在离所述HMD预先确定的距离内，则应用非实体Π模式。
35.根据权利要求34所述的方法，包括如果所述检测到的目标在离所述HMD预先确定的距离内并且在所述视角内，则选择所述实体UI模式。
36.根据权利要求35所述的方法，包括如果所述检测到的目标在所述视角内但不是用户可接口的，则变为所述非实体UI模式。
37.根据权利要求34所述的方法，包括如果所述检测到的目标在离所述HMD预先确定的距离内但不在所述视角内，则选择所述非实体UI模式。
38.根据权利要求37所述的方法，包括如果所述检测到的目标不在所述视角内，但在预先确定的时间段内返回所述视角内，则变为所述实体Π模式。
39.根据权利要求37所述的方法，包括如果所述检测到的目标不在所述视角内，并且在预先确定的时间段内不返回所述视角内，则连续地保持所述非实体Π模式。
【专利摘要】公开了一种在头戴式显示器上提供用户界面(UI)的装置和方法及其头戴式显示器(HMD)。该装置包括：传感器单元，其被配置成检测目标是否存在于HMD的附近，并且如果检测到目标，则感测在目标和HMD之间的距离，和处理器，其被配置成，如果检测到的目标是在离HMD预先确定的距离之内，则应用实体用户界面(UI)模式，其中实体UI模式提供用于虚拟目标的显示，处理器被进一步配置成：当虚拟目标是3维(3D)目标，并且3D目标包括触摸识别表面时，调整虚拟目标的显示距离，以便触摸识别表面与目标的表面重合，和基于调整的显示距离，显示虚拟目标。
【IPC分类】G06F3-01
【公开号】CN104641318
【申请号】CN201380047804
【发明人】金志桓, 李度泳, 千西内, 赵殷亨
【申请人】Lg 电子株式会社
【公开日】2015年5月20日
【申请日】2013年9月13日
【公告号】EP2895911A1, EP2896205A1, US8482527, US20140078043, WO2014042320A1, WO2014042458A1