控制耳机装置的方法、耳机装置、计算机可读介质及红外线传感器与流程

各种实施例大致上关于一种控制耳机装置的方法、耳机装置、计算机可读介质及红外线传感器。

背景技术：

当佩戴虚拟现实(virtualreality；vr)耳机时，对真实世界对象的视野会遭遮挡，在未摘除该耳机的情况下妨碍使用者定位及使用各种接口设备，诸如，例如键盘、鼠标以及其他输入设备。因而，可存在提高耳机装置的可用性的需要。

技术实现要素：

根据各种实施例，可提供一种耳机装置。该耳机装置可包括：显示器；红外线传感器，被配置为捕获耳机装置的邻近区的红外线图像；存在确定电路，被配置为基于该红外线图像而确定在耳机装置的邻近区中预定外围装置的存在；以及控制器，被配置为控制显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

根据各种实施例，可提供一种用于控制耳机装置的方法。该方法可包括：捕获耳机装置的邻近区的红外线图像；基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在；以及控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

根据各种实施例，可提供一种计算机可读介质。该计算机可读介质可包括程序指令，该程序指令在由处理器执行时促使处理器执行用于控制耳机装置的方法。

根据各种实施例，可提供一种红外线传感器。该红外线传感器可包括：捕获电路，被配置为捕获耳机装置的邻近区的红外线图像；以及通信电路，被配置为将基于所捕获的红外线图像的数据传送至耳机装置，来基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在，以及来控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

附图说明

在附图中，在全部不同视图中，类似附图标记一般指相同部件。各图未必按比例绘制，相反，重点通常是关注对本发明原理的例示。各种特征或组件的尺寸可出于清晰度任意地扩展或缩减。在以下描述中，本发明的各种实施例参考以下各图来描述。

图1显示根据各种实施例的耳机装置。

图2显示根据各种实施例的耳机装置。

图3显示例示用于控制根据各种实施例的耳机装置的方法的流程图。

图4显示根据各种实施例的红外线传感器。

具体实施方式

以下详细描述参照藉助于例示来显示可实现本发明的特定细节及实施例的附图。足够详细地描述这些实施例以允许本领域技术人员实现本发明。可利用其他实施例，并且可在不脱离本发明的范畴的情况下进行结构及逻辑改变。各种实施例未必互相排斥，如一些实施例可与一个或多个其他实施例组合以形成新的实施例。

在此情境中，如此说明中所描述的耳机装置可包括内存，该内存例如应用于在该耳机装置中进行的处理。应用于实施例的内存可为易失性内存，例如dram(动态随机存取内存)或非易失性内存，例如prom(可程序化只读存储器)、eprom(可擦除prom)、eeprom(电子可擦除prom)，或闪存，例如浮闸内存、电荷捕集内存、mram(磁电阻随机存取内存)或pcram(相变随机存取内存)。

在实施例中，“电路”可理解为任何种类的逻辑实行实体，该逻辑实行实体可为执行储存于内存中的软件、固件或其任何组合的专用电路或处理器。因此，在实施例中，“电路”可为硬联机逻辑电路或可程序化逻辑电路，诸如可程序化处理器，例如微处理器(例如复杂指令集计算机(cisc)处理器或精简指令集计算机(risc)处理器)。“电路”亦可为执行软件的处理器，该软件例如为任何种类的计算机程序，例如使用虚拟机代码(诸如例如java)的计算机程序。将在以下更详细地描述的各个功能的任何其他种类的实行方案亦可理解为根据替代实施例的“电路”。

在说明书中，应了解术语“包含”具有类似于术语“包括”的广义意义，且将了解术语“包含”意指已陈述的整体或步骤或一个以上整体或步骤的组群的集合，但不排斥任何其他整体或步骤或一个以上整体或步骤的组群。此定义亦应用于术语“包含(comprising)”的变体。

此说明书中提及的任何先前技术不视为且不应视为对所提及的先前技术形成在澳大利亚(或任何其他国家)的公知常识的部分的承认或任何形式的建议。

为使本发明可易于理解且获得实际效果，将以举例且非限制的方式并参考附图来描述特定实施例。

针对装置已提供各种实施例，且针对方法已提供各种实施例。将理解的是，装置的基本性质亦适用于方法，且反之亦然。因此，为简洁起见，可省略这些性质的重复描述。

将理解的是，本文针对特定装置所描述的任何性质亦可适用于本文所描述的任何装置。将理解的是，本文针对特定方法所描述的任何性质亦可适用于本文所描述的任何方法。此外，将理解的是，对于本文所描述的任何装置或方法而言，所描述的所有组件或步骤未必必须涵括于装置或方法中，而可仅仅涵括一些(但非所有)组件或步骤。

本文的术语“耦接”(或“连接”)可理解为电气耦接或理解为机械耦接，例如附接或固定或附接，或仅在无任何固定的情况下接触，且将理解的是，可提供直接耦接或间接耦接(换言之，在无直接接触的情况下耦接)。

当佩戴vr(虚拟现实)耳机时，对真实世界对象的视野会遭遮挡，在未摘除该耳机的情况下妨碍使用者定位及使用各种接口设备，诸如，例如键盘、鼠标以及其他输入设备。根据各种实施例，可提供装置及方法以提高耳机装置的可用性。

根据各种实施例，可提供vr的周边产品侦测及可视化。根据各种实施例，可提供头戴显示器(headmounteddisplay；hmd)产品侦测。

根据各种实施例，可将传感器(例如消费级红外线摄录像机)附接至耳机外部且可识别外围产品上的定制指示器(例如传感器贴签(sticker))，可识别该产品且可在相对于该产品的实际位置的vr视野中呈现该产品的三维模型。

图1显示根据各种实施例的耳机装置100(例如vr耳机或头戴显示器)。耳机装置100可包括显示器102。例如，显示器102可显示例如计算机游戏的计算机程序的输出。耳机装置100可进一步包括红外线传感器104，该红外线传感器被配置为捕获耳机装置100的邻近区的红外线图像。耳机装置100可进一步包括存在确定电路106，该存在确定电路被配置为基于该红外线图像而确定在耳机装置100的邻近区中预定外围装置(图1中未显示)的存在。耳机装置100可进一步包括控制器108，该控制器被配置为控制显示器102以基于所确定的预定外围装置的存在而显示该预定外围装置的表示。显示器102、红外线传感器104、存在确定电路106、以及控制器108可彼此耦接，如通过线110所指示，该耦接例如为电气耦接和/或机械耦接，该电气耦接例如使用线或电缆。

换言之，若耳机装置通过使用红外线传感器而确定外围装置位于耳机装置附近，则根据各种实施例的耳机装置可在该耳机装置的显示器中显示表示外围装置的信息，在该显示器中通常展示计算机程序(例如计算机游戏)信息。

根据各种实施例，存在确定电路106可进一步被配置为基于该红外线图像而确定预定外围装置上的红外线记号(换言之，在红外光(例如可为在700纳米至1mm波长范围内的光)下可见的记号，例如在不同于红外光的光下不可见的记号)的存在。根据各种实施例，存在确定电路106可进一步被配置为基于确定该红外线记号(例如基于确定红外线图像中的红外线记号)而确定在耳机装置100的邻近区中预定外围装置的存在。

根据各种实施例，红外线记号可包括或可为或可包括于快速响应码(qr码)中。

根据各种实施例，存在确定电路106可进一步被配置为基于红外线图像而确定预定外围装置相对于耳机装置100的位置。

根据各种实施例，控制器108可进一步被配置为控制显示器102，以基于所确定的预定外围装置的位置而显示该预定外围装置的三维表示。

根据各种实施例，控制器108可进一步被配置为控制显示器102以使用预定外围装置的表示来覆盖耳机装置周围的表示。

根据各种实施例，控制器108可进一步被配置为控制显示器102以使用预定外围装置的表示来覆盖由耳机装置100的使用者所使用的程序的输出。

根据各种实施例，控制器108可进一步被配置为控制显示器102，来基于由耳机装置100的使用者在由使用者所使用的程序中(例如在由使用者所玩的计算机游戏中)所采取的动作而显示预定外围装置的表示。

根据各种实施例，由使用者所采取的动作可包括或可为或可包括于开启计算机程序中的输入单元(例如开启文字盒)中。

根据各种实施例，控制器108可进一步被配置为控制显示器102，以基于进入连接至耳机装置100的输入设备的预定输入而显示预定外围装置的表示。

图2显示根据各种实施例的耳机装置112(例如vr耳机或头戴显示器)。类似于图1中所显示的耳机装置100，耳机装置112可包括显示器102。例如，显示器102可显示例如计算机游戏的计算机程序的输出。类似于图1中所显示的耳机装置100，耳机装置112可进一步包括红外线传感器104，该红外线传感器被配置为捕获耳机装置100的邻近区的红外线图像。类似于图1中所显示的耳机装置100，耳机装置112可进一步包括存在确定电路106，该存在确定电路被配置为基于该红外线图像而确定在耳机装置100的邻近区中预定外围装置(图1中未显示)的存在。类似于图1中所显示的耳机装置100，耳机装置112可进一步包括控制器108，该控制器被配置为控制显示器102来基于所确定的预定外围装置的存在而显示预定外围装置的表示。耳机装置112可进一步包括手势识别电路114，如将在以下更详细地描述。耳机装置112可进一步包括接口116，如将在以下更详细地描述。显示器102、红外线传感器104、存在确定电路106、控制器108、手势识别电路114、以及接口116可彼此耦接，如通过线118所指示，该耦接例如电气耦接和/或机械耦接，该电气耦接例如使用线或电缆。

根据各种实施例，手势识别电路114可被配置为确定由耳机的使用者所进行的手势。根据各种实施例，控制器108可进一步被配置为控制显示器102，以基于所确定的手势而显示预定外围装置的表示。

根据各种实施例，接口116可为至手势识别装置(图2中未显示)的接口，且该手势识别装置可被配置为确定耳机装置的使用者的手势。接口116可被配置为接收指示所确定的手势的信息。根据各种实施例，控制器108可进一步被配置为控制显示器102，以基于所确定的手势而显示预定外围装置的表示。

根据各种实施例，控制器108可进一步被配置为控制显示器102，以显示耳机装置100的使用者与预定外围装置的交互。

根据各种实施例，外围装置可包括或可为或可包括于输入设备中。

根据各种实施例，外围装置可包括或可为或可包括于鼠标、键盘、触摸板、游戏控制器和/或操纵杆中。

图3显示例示用于控制根据各种实施例的耳机装置的方法的流程图120。在步骤122中，可捕获耳机装置的邻近区的红外线图像。在步骤124中，可基于该红外线图像而确定在耳机装置的邻近区中预定外围装置的存在。在步骤126中，可控制耳机装置的显示器以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

根据各种实施例，该方法可进一步包括：基于红外线图像而确定预定外围装置上的红外线记号的存在；以及基于确定该红外线记号而确定在耳机装置的邻近区中预定外围装置的存在。

根据各种实施例，红外线记号可包括或可为或可包括于qr码中。

根据各种实施例，该方法可进一步包括基于红外线图像而确定预定外围装置相对于耳机装置的位置。

根据各种实施例，该方法可进一步包括控制显示器，以基于所确定的预定外围装置的位置而显示预定外围装置的三维表示。

根据各种实施例，该方法可进一步包括控制显示器，以使用预定外围装置的表示来覆盖耳机装置周围的表示。

根据各种实施例，该方法可进一步包括控制显示器，以使用预定外围装置的表示来覆盖由耳机装置的使用者所使用的程序的输出。

根据各种实施例，该方法可进一步包括控制显示器，以基于由耳机装置的使用者在由使用者所使用的程序中所采取的动作而显示预定外围装置的表示。

根据各种实施例，由使用者所采取的动作可包括或可为或可包括于启动(activating)或开启计算机程序中的输入单元(例如文字盒、按钮、滑块或手势)。

根据各种实施例，该方法可进一步包括控制显示器，以基于进入连接至耳机装置的输入设备的预定输入而显示预定外围装置的表示。

根据各种实施例，该方法可进一步包括：确定由耳机的使用者所进行的手势；以及控制显示器，以基于所确定的手势而显示预定外围装置的表示。

根据各种实施例，该方法可进一步包括：接收指示来自手势确定装置的确定的手势的信息；以及控制显示器以基于所确定的手势而显示预定外围装置的表示。

根据各种实施例，该方法可进一步包括控制显示器，以显示耳机装置的使用者与预定外围装置的交互。

根据各种实施例，外围装置可包括或可为或可包括于输入设备中。

根据各种实施例，外围装置可包括或可为或可包括于鼠标、键盘、触摸板、游戏控制器和/或操纵杆中。

根据各种实施例，可提供一种计算机可读介质。该计算机可读介质可包括程序指令，该程序指令在由处理器执行时促使处理器执行用于控制耳机装置的方法，例如用于控制根据如同以上参照图3所描述的各种实施例的耳机装置的方法。

图4显示根据各种实施例的红外线传感器128。红外线传感器128可包括捕获电路130，该捕获电路被配置为捕获耳机装置的邻近区的红外线图像。红外线传感器128可进一步包括通信电路132，该通信电路被配置为将基于所捕获的红外线图像的数据传送至耳机装置，来基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在，以及来控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。捕获电路130与通信电路132可彼此耦接，如通过线134所指示，该耦接例如为电气耦接和/或机械耦接，该电气耦接例如使用线或电缆。例如耳机装置可为如同以上参照图1或图2所描述的耳机装置。例如可将红外线传感器安装于该耳机装置上或整合于该耳机装置中。

根据各种实施例，可提供一种系统，该系统包括具有附接传感器的游戏耳机，该附接传感器例如为附接至耳机外部的消费级红外线摄录像机。该传感器可经由识别符以识别外围装置，该识别符即外围装置上的定制指示器、传感器贴签、消息、文本、几何像素及类似识别符。该系统可提供一处理器，该处理器识别产品，且在相对于外围装置的实际实体位置的虚拟现实视图中呈现该外围装置的3d虚拟模型。该系统可提供外围装置的虚拟图形描绘，以使得可与该产品进行交互。

根据各种实施例，该传感器可通过识别其红外线打印图案以侦测外围装置。该图案可包括qr码及其他专属记号。可将传感器数据转换为3d位置坐标。可基于经编码为qr码或专属记号的独特标识符以区分产品。可将数据匹配至接口设备的3d模型数据库。可呈现处于真实世界对象的相对特殊位置的接口设备的3d模型。最后，可基于例如软件驱动情境的情境而隐藏及取消隐藏外围呈现，该情境包括：使用者开启文本聊天；使用者使用手部运动/手势而启动或停用观察仪；以及基于热键组合的启动及停用。

根据各种实施例，可通过识别附接至外围装置的红外线打印图案而侦测接口设备(换言之，外围装置)。根据各种实施例，红外线打印图案可包括qr码或任何另一种专属记号。

根据各种实施例，可将传感器数据转换为3d位置坐标。根据各种实施例，该3d位置坐标可用以显示使用者的耳机中的外围装置的表示。

根据各种实施例，可基于经编码为qr码或另一专属记号的独特标识符而区分产品(例如各种外围装置)。

根据各种实施例，可将数据匹配至接口设备的3d模型数据库。

根据各种实施例，可呈现处于真实世界对象的相对特殊位置的接口设备的3d模型。

根据各种实施例，可基于情境(例如软件驱动情境)而隐藏及取消隐藏外围呈现(换言之，外围装置的呈现)，例如当使用者开启文本聊天，或当使用者使用手部运动(换言之，手势)而启动或停用观察仪，或该外围呈现可基于热键组合而隐藏或取消隐藏(换言之，启动或停用)。

以下将描述根据各种实施例的叙述式实例。

使用者(例如玩家)可正在例如个人计算机(personalcomputer；pc)上使用计算机程序(例如玩(计算机)游戏(例如精英危险(elitedangerous)))，该使用者使用开放原始码虚拟现实(open-sourcevirtualreality；osvr)耳机及手部传感器，例如跳跃运动手部传感器。使用者可在耳机中(换言之，在抬头显示器中)看到该使用者可用的聊天消息。阅读消息后，使用者可决定其想要打出答复。

当使用者启动文本输入字段时，根据各种实施例的装置或方法可扫描该使用者对接口设备的视场，且可侦测输入设备(例如键盘、鼠标或操纵杆，例如razer键盘、razer鼠标和/或飞行操纵杆)，该接口设备均配备有根据各种实施例的可视化指示器。

输入设备(例如键盘)的3d模型可出现于该使用者的vr耳机中，且当该使用者伸出手触碰该输入设备时，该使用者将其手部放置于书桌上的接口设备上，无需摘除该使用者的耳机。

在该使用者打字时，其可能够看见其正触碰的键的实体位置，给出该使用者正按下正确键的视觉反馈。

当该使用者关闭文本框(该使用者已在该文本框中打出文本)时，3d键盘(换言之，键盘在耳机中的可视化)可淡出且该使用者的鼠标和/或该使用者的操纵杆可以3d呈现，以使得该使用者可再次伸出手并找到该鼠标及该操纵杆。一旦该使用者的手部位于操纵杆及鼠标上，则3d模型可淡出且该使用者可返回至其完全再现的游戏。

以下实例关于其他实施例。

实例1为一种用于控制耳机装置的方法，该方法包含：捕获耳机装置的邻近区的红外线图像；基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在；以及控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

在实例2中，实例1的主题可视需要包括：基于红外线图像而确定预定外围装置上的红外线记号的存在；以及基于确定该红外线记号而确定在耳机装置的邻近区中预定外围装置的存在。

在实例3中，实例2的主题可视需要包括：该红外线记号包含qr码。

在实例4中，实例1至3中的任一者的主题可视需要包括：基于红外线图像而确定预定外围装置相对于耳机装置的位置。

在实例5中，实例4的主题可视需要包括：控制显示器，以基于所确定的预定外围装置的位置而显示预定外围装置的三维表示。

在实例6中，实例1至5中的任一者的主题可视需要包括：控制显示器，以使用预定外围装置的表示来覆盖耳机装置周围的表示。

在实例7中，实例1至6中的任一者的主题可视需要包括：控制显示器，以使用预定外围装置的表示来覆盖由耳机装置的使用者所使用的程序的输出。

在实例8中，实例1至7中的任一者的主题可视需要包括：控制显示器，以基于由耳机装置的使用者在由使用者所使用的程序中所采取的动作而显示预定外围装置的表示。

在实例9中，实例1至8中的任一者的主题可视需要包括：由使用者所采取的动作包含在计算机程序中开启输入单元。

在实例10中，实例1至9中的任一者的主题可视需要包括：控制显示器，以基于进入连接至耳机装置的输入设备的预定输入而显示预定外围装置的表示。

在实例11中，实例1至10中的任一者的主题可视需要包括：确定由耳机的使用者所进行的手势；以及控制显示器以基于所确定的手势而显示预定外围装置的表示。

在实例12中，实例1至11中的任一者的主题可视需要包括：接收指示来自手势确定装置的确定的手势的信息；以及控制显示器，以基于所确定的手势而显示预定外围装置的表示。

在实例13中，实例1至12中的任一者的主题可视需要包括：控制显示器，以显示耳机装置的使用者与预定外围装置的交互。

在实例14中，实例1至13中的任一者的主题可视需要包括：外围装置包含输入设备。

在实例15中，实例1至14中的任一者的主题可视需要包括：该外围装置包含至少一个外围装置，该至少一个外围装置选自由以下组成的一列外围装置：鼠标、键盘、触摸板、游戏控制器以及操纵杆。

实例16为一种耳机装置，该耳机装置包含：显示器；红外线传感器，被配置为捕获耳机装置的邻近区的红外线图像；存在确定电路，被配置为基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在；以及控制器，被配置为控制显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

在实例17中，实例16的主题可视需要包括：该存在确定电路被配置为基于红外线图像而确定预定外围装置上的红外线记号的存在，且被配置为基于确定红外线记号而确定在耳机装置的邻近区中预定外围装置的存在。

在实例18中，实例17的主题可视需要包括：该红外线记号包含qr码。

在实例19中，实例16至18中的任一者的主题可视需要包括：该存在确定电路进一步被配置为基于红外线图像而确定预定外围装置相对于耳机装置的位置。

在实例20中，实例19的主题可视需要包括：该控制器进一步被配置为控制显示器，来基于所确定的预定外围装置的位置而显示预定外围装置的三维表示。

在实例21中，实例16至20中的任一者的主题可视需要包括：该控制器进一步被配置为控制显示器使用预定外围装置的表示来覆盖耳机装置周围的表示。

在实例22中，实例16至21中的任一者的主题可视需要包括：该控制器进一步被配置为控制显示器使用预定外围装置的表示来覆盖由耳机装置的使用者所使用的程序的输出。

在实例23中，实例16至22中的任一者的主题可视需要包括：该控制器进一步被配置为控制显示器，来基于由耳机装置的使用者在由使用者所使用的程序中所采取的动作而显示预定外围装置的表示。

在实例24中，实例16至23中的任一者的主题可视需要包括：由使用者所采取的动作包含在计算机程序中开启输入单元。

在实例25中，实例16至24中的任一者的主题可视需要包括：该控制器进一步被配置为控制显示器，来基于进入连接至耳机装置的输入设备的预定输入而显示预定外围装置的表示。

在实例26中，实例16至25中的任一者的主题可视需要包括：手势识别电路，被配置为确定由耳机的使用者所进行的手势；其中控制器进一步被配置为控制显示器来基于所确定的手势而显示预定外围装置的表示。

在实例27中，实例16至26中的任一者的主题可视需要包括：至手势识别装置的接口，该手势识别装置被配置为确定耳机装置的使用者的手势，该接口被配置为接收指示所确定的手势的信息；其中控制器进一步被配置为控制显示器来基于所确定的手势而显示预定外围装置的表示。

在实例28中，实例16至27中的任一者的主题可视需要包括：该控制器进一步被配置为控制显示器，来显示耳机装置的使用者与预定外围装置的交互。

在实例29中，实例16至28中的任一者的主题可视需要包括：外围装置包含输入设备。

在实例30中，实例16至29中的任一者的主题可视需要包括：该外围装置包含至少一个外围装置，该至少一个外围装置选自由以下组成的一列外围装置：鼠标、键盘、触摸板、游戏控制器以及操纵杆。

实例31为一种计算机可读介质，其包含程序指令，该程序指令在通过处理器执行时促使处理器执行用于控制耳机装置的方法，该方法包含：捕获耳机装置的邻近区的红外线图像；基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在；以及控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

实例32为一种红外线传感器，该红外线传感器包含：捕获电路，被配置为捕获耳机装置的邻近区的红外线图像；以及通信电路，被配置为将基于所捕获的红外线图像的数据传送至耳机装置，来基于红外线图像而确定在耳机装置的邻近区中预定外围装置的存在，以及来控制耳机装置的显示器，以基于所确定的预定外围装置的存在而显示预定外围装置的表示。

虽然已参考特定实施例详细地显示及描述本发明，但本领域技术人员应了解的是，在不脱离由所附权利要求限定的本发明的精神及范畴的情况下，可对该实施例中的形式及细节做出各种改变。本发明的范畴因此通过随附权利要求来指示，且落入权利要求的同类者的含义及范围内的所有改变因此均欲涵盖于本发明中。