头戴式显示器及其控制方法
【技术领域】
[0001]本发明涉及头戴式显示器(HMD)及其控制方法相关的系统，并且更具体地，涉及能够检测具有在其中存储的票的外部装置并且将与存储的票相关的增强现实信息显示在与携带外部装置的个人接近的地点(locat1n)中以便检查票的HMD及其控制方法。
【背景技术】
[0002]随着数字装置正变得更加轻重量和更加尺寸小巧，便携式装置的应用和使用范围正在增加。因此，用户可以使用他的(或她的)便携式装置，以便能够更容易地执行无论他(或她)希望在何时和何地想要的操作。例如，用户可以在没有任何时间和空间上的限制的情况下通过使用他的(或她的)便携式装置来使用票务(ticketing)服务。另外，由于可以通过在用户的便携式装置中安装的应用来发放所购买的票，因此用户不需要携带实际的西χΚ ο
[0003]然而，当用户力图通过使用他的(或她的)发放的票进入音乐厅或剧院时，用户需要向检票务代理(agent)(或票务代理)出示他的(或她的)票。因此，用户需要经历必须从他的(或她的)口袋或包中拿出他的(或她的)便携式装置并且向票务代理亲自地出示购买的数字票的不便。
【发明内容】
[0004]技术问题
[0005]因此，本公开涉及基本上消除由于相关技术的局限性和缺点导致的一个或更多个问题的HMD及其控制方法。
[0006]本公开的一个目的在于提供一种能够允许票务代理在不需要用户出示购买的票的情况下检查票的检票系统。
[0007]本公开的另一目的在于提供一种能够检测具有在其中存储的票的外部装置并且将与存储的票相关的增强现实信息显示在与携带外部装置的人接近的地点中的HMD及其控制方法。
[0008]本公开的又一目的在于提供一种基于与票相关的识别信息而不是基于地点或图像而产生的增强现实信息。
[0009]本发明的又一目的在于提供一种能够在人处在与HMD接近的位置时准确地识别携带存储票的便携式装置的人的HMD及其控制方法。
[0010]本公开的另外的优点、目的和特征将部分地在随后的描述中进行阐述并且部分地将对于本领域普通技术人员在查看以下内容时而变得显而易见，或者可以从本公开的实践而得知。可以通过在所撰写的说明书及其权利要求以及附图中具体指出的结构来实现和获得本公开的这些目的和其它优点。
[0011]问题的解决方案
[0012]为了实现这些目的和其它优点并且根据本公开的目的，如本文中实现并且广泛地描述的，一种HMD包括:相机单元，其被配置为拍摄(capture)所述HMD的周围区域的图像；显示单元，其被配置为显示与所拍摄的图像关联的增强现实信息；通信单元，其被配置为向外部装置发送数据以及从外部装置接收数据；传感器单元，其被配置为感测所述HMD的位置，并且将所感测的结果传送给处理器；以及所述处理器，其被配置为控制所述相机单元、所述显示单元、所述通信单元和所述传感器单元。本文中，所述处理器可以向外部装置请求票信息，可以根据所述请求从所述外部装置接收包括所述票信息的响应，可以获取与所述票信息关联的所述增强现实信息，可以检测所拍摄的图像中的、与所述外部装置相关的物体，并且可以将与所述票信息关联的所述增强现实信息显示在所检测的物体的周围区域上。
[0013]在本公开的另一方面，一种用于控制HMD的方法包括以下步骤:向外部装置请求票信息；根据所述请求从所述外部装置接收包括所述票信息的响应；获取与所述票信息关联的增强现实信息；拍摄所述HMD的周围区域的图像；检测所拍摄的图像中的、与所述外部装置相关的物体；以及将与所述票信息关联的所述增强现实信息显示在所检测的物体的周围区域上。
[0014]本发明的有益效果
[0015]根据本公开的实施方式，由于用户不需要取出在他的(或她的)外部装置中存储的票以向票务代理亲自出示所购买的票，因此用户能够具有他的(或她的)更方便地被检查的票。另外，根据本公开的另一实施方式，由于票务代理配备有HMD，因此票务代理能够通过参考增强现实信息来检查票，该增强现实信息在携带具有在其中存储的相应的票的便携式外部装置的人附近的位置处显示。
[0016]此外，根据本公开的又一实施方式，通过提供基于与购买的票关联的识别信息而产生的增强现实信息，只要能够验证票信息，就可以通过使用增强现实信息在任何地方执行检票程序。
[0017]最后，根据本公开的另外的实施方式，当人彼此靠近紧密地挤在一起时，由于根据本公开的HMD能够准确地识别真正携带具有在其中存储的购买的票的便携式外部装置的人，因此可以提高增强现实信息的清晰度(clarity)。
[0018]将在下文中描述更详细的有益效果。
[0019]将要理解的是，前述一般描述和以下详细描述二者是示例性和说明性的，并且旨在提供对所要求保护的本公开的进一步解释。
【附图说明】
[0020]附图被包括进来以提供本公开的进一步理解，并且被并入本申请且构成本申请的一部分，附图示出了本公开的实施方式，并且与本说明书一起用来解释本发明的原理。在附图中:
[0021]图1例示了根据本公开的示例性实施方式的头戴式显示器(HMD)的框图；
[0022]图2例示了根据本公开的示例性实施方式的向HMD和外部装置发送数据以及从HMD和外部装置接收数据的示例；
[0023]图3例示了根据本公开的示例性实施方式的使HMD检测外部装置的地点的示例；
[0024]图4例示了根据本公开的示例性实施方式的使HMD从所拍摄的图像检测与外部装置相关的物体的示例；
[0025]图5例示了根据本公开的示例性实施方式的使HMD根据所拍摄的图像识别物体的示例；
[0026]图6a至图6c分别例示了根据本公开的示例性实施方式的使HMD从所拍摄的图像提取物体并且确定识别区域的示例；
[0027]图7a至图7c分别例示了根据本公开的示例性实施方式的在基于识别区域在图6a至图6c中决定的与外部装置相关的物体的周围区域中显示增强现实信息的示例；
[0028]图8例示了根据本公开的示例性实施方式的与票的识别信息匹配的示例性增强现实信息；
[0029]图9例示了根据本公开的示例性实施方式的显示接收的认证信息的外部装置；
[0030]图10例示了根据本公开的另一示例性实施方式的显示接收的认证信息的外部装置；
[0031]图11例示了根据本公开的示例性实施方式的票务系统的结构的框图；
[0032]图12例示了根据本公开的示例性实施方式的由配置票务系统的元件处理的数据的流；以及
[0033]图13例示了根据本公开的示例性实施方式的示出用于控制HMD的方法的处理步骤的流程图。
【具体实施方式】
[0034]尽管在本公开中使用的术语是从通常已知和使用的术语中选择，然而在本文中使用的术语可以根据任何本领域技术人员的意图或实践或者随着新技术的出现而改变或修改。另选地，在一些特定情况下，在本公开的描述中提到的术语中的一些可能由本申请人根据他或她的判断来选择，其详细含义在本文中的说明书的相关部分中进行描述。此外，要求不能简单地通过所使用的实际术语而是通过每个术语中蕴含的含义来理解本公开。
[0035]此外，现在将详细地参考本公开的优选实施方式，在附图中例示了本公开的这些优选实施方式的示例。然而，本公开的描述将不仅限于本文中提供的示例性实施方式。
[0036]图1例示了根据本公开的示例性实施方式的头戴式显示器(HMD)的框图。然而，图1仅是示例性的。并且，因此，将显而易见的是，可以去除配置模块中的一些或者可以按照任何本领域技术人员的要求将新的配置模块添加到HMD中。
[0037]如图1中所示，根据本公开的实施方式的头戴式显示器(HMD) 100可以包括相机单元110、显示单元120、通信单元130、传感器单元140和处理器150。
[0038]首先，相机单元110可以拍摄HMD 100的周围的图像。例如，相机单元110可以拍摄在与穿戴HMD 100的用户的视野(eyesight)对应的预定区域(以下被称为“视角区域”)内的图像。此后，相机单元110可以将所拍摄的图像提供到处理器150。
[0039]另外，相机单元110可以包括立体相机。例如，相机单元110可以包括至少两个透镜，所述至少两个透镜被配置为彼此分隔开预定距离并且同时拍摄(film)相同的物体。本文中，所述至少两个透镜的聚焦调整、曝光调整和快门操作可以彼此互相联系。因此，在HMD100中，由相机单元110拍摄的图像可以包括立体图像(例如，三维(3D)图像)。
[0040]在这一点上，处理器150可以产生或存储包括在所拍摄的图像中的至少一个物体的深度信息作为对应图像的附加信息。此外，处理器150可以基于通过相机单元110而获取的图像来检测包括票信息的外部装置。在这一点上，处理器150可以使用深度信息。然而，这将在后面进行更详细的描述。
[0041]此外，相机单元110可以作为与传感器单元140分离的单元而包括在HMD 100中，这将在后面进行详细描述。然而，相机单元110也可以与传感器单元140集成，从而被包括在 HMD 100 中。
[0042]显示单元120可以将图像输出在显示屏幕上。在这一点上，显示单元120可以基于由处理器150执行的内容或者基于处理器150的控制命令来输出图像。
[0043]此外，当相机单元110包括立体相机时，显示单元120可以包括显示立体图像的结构，使得穿戴HMD 100的用户能够观看对应的立体图像。
[0044]此外，显示单元120可以显示与从相机单元110获取的图像相关的增强现实信息。增强现实信息可以从外部服务器接收，并且可以预先存储在HMD 100中。将参照图7在后面更详细地描述增强现实信息。
[0045]通信单元130可以通过使用各种协议来与外部装置进行通信，以便向外部装置发送数据以及从外部装置接收数据。另外，通信单元130可以经由有线或无线通信来接入网络，由此能够发送和接收数字数据(诸如票信息、增强现实信息等)。
[0046]因此，通信单元130可以向外部装置发送票信息以及从外部装置接收票信息，该外部装置对应于发放相应的票的便携式装置或服务器。
[0047]此外，传感器单元140可以使用在HMD 100中装备的至少一个传感器，以便感测HMD 100的周围环境并且将所感测的信息以信号的形式传送到处理器150。此外，传感器单元140可以感测用户输入，并且可以根据所感测的结果向处理器150传送输入信号。
[0048]因此，传感器单元140可以包括至少一个感测装置。根据本公开的实施方式，所述至少一个感测装置可以包括以下项中的至少一个:重力传感器、地磁(或地磁学)传感器、运动传感器、陀螺仪传感器、加速度传感器、红外线传感器、倾斜传感器、亮度传感器、高度传感器、气味传感器、温度传感器(或热传感器)、深度传感器、压力传感器、条带(banding)传感器、音频传感器、视频传感器、全球定位系统(GPS)传感器、触摸传感器等。
[0049]此外，当传感器单元140感测HMD 100的位置或方向时，处理器150可以检测HMD100的位置信息或方向信息。这将参照图3进行更加详细的描述。
[0050]此外，传感器单元140集总地表示上述各种传感装置。本文中，在感测到用户的各种输入之后并且通过感测HDM 100的环境，感测单元140可以传送可以传送所感测的结果，使得处理器150能够执行相应的操作