交互式标线的制作方法

本公开一般涉及电子ar/vr显示器，并且更特别地涉及利用图像光导并且可操作以显示虚拟和真实世界交互的显示器。

背景技术：

1、头戴式近眼显示系统正被开发用于一系列不同的用途，包括军事、商业、工业、消防和娱乐应用。对于这些应用中的许多应用，在形成可以在视觉上叠加在位于用户视场中的真实世界图像上的虚拟图像方面是有价值的。光学图像光导可以在狭窄的空间中将承载图像的光传送给观看者，用于将虚拟图像引导到观看者的瞳孔并使得能够实现这种叠加功能。

2、头戴式近眼显示系统为操作者提供了各种虚拟图像和图标。向操作者提供与真实世界对象交互的能力也将是有益的，该真实世界对象包括但不限于智能家庭中的网络连接设备。

技术实现思路

1、出于说明的目的而非限制的目的，本公开提供了一种显示和控制虚拟图像标线或对准向导的系统和方法。此外，本公开描述了一种具有虚拟标线的光学系统，该虚拟标线使得操作者能够识别、选择并控制外部系统。

2、标线系统包括具有相机或其他视觉输入设备的可佩戴近眼显示系统和图像源，并且可以包括各种用户输入控制和与其连接的处理单元。标线系统显示虚拟图像标线，诸如十字准线或边界框，并且可以根据用户的偏好配置其颜色、形状、位置和输入元件。该系统还为操作者提供各种手段来使用和控制标线并执行命令。此外，标线的控制可以对于远程用户来说是可操作的。

3、当与可操作以从近眼显示系统接收命令的系统、设备、对象或程序网络连接时，标线系统可以使操作者能够发起命令，并从所述外部系统、对象或程序接收信息。

4、该新颖的标线系统和方法还包括用于与诸如物联网(iot)设备之类的其他设备和系统交互、向其发送命令以及从其接收数据的规范。

5、在一个方面，提供了一种用于利用标线控制网络连接设备的头戴式显示系统。该系统包括可操作以通过通信网络接收改变状态的命令的网络连接设备；用于形成虚拟图像显示的透射波导，其中该虚拟图像显示可操作以生成标线；以及用户输入机构，其用于控制标线以使得其可以在视觉上叠加在网络连接设备上。在另一方面，用户输入机构被配置为当标线在视觉上叠加在网络连接设备上时选择该网络连接设备，从而使得头戴式显示系统能够改变网络连接设备的状态。该系统可以包括在虚拟图像显示上的虚拟菜单，其中该虚拟菜单包括与网络连接设备相关联的多个可选的选项，并且标线可以在视觉上叠加在这些选项中的一个或多个上，并且标线可操作以选择或取消选择这些选项中的一个或多个以改变网络连接设备的状态。

6、在其他方面，当标线在视觉上叠加在所述网络连接设备上达期望的时间段时，网络连接设备改变状态；当预览被禁用时，标线出现在虚拟图像中；标线可以被分配不同的属性，包括颜色、形状、取向、形式等；头戴式显示系统可操作以经由在虚拟图像内定位标线来选择、取消选择、控制、移动或以其他方式影响虚拟菜单或其他可选择的虚拟对象；和/或头戴式显示系统可操作以经由将标线在视觉上叠加在网络连接iot对象上来激活、去激活、控制或以其他方式改变网络连接iot对象的状态。

7、标线可以是表示相关联的相机或其他视觉输入设备的视场的十字准线或边界框的形式。标线可以被分配给真实世界对象，比如手指或触笔，以使得标线的移动对应于手指或触笔的移动。该系统可以包括独立于第一标线进行操作或者与第一标线进行交互的第二标线。用户输入机构可以是用户输入按钮、触摸传感器、语音命令或由面向操作者的相机所捕捉的面部姿态或移动。

技术特征：

1.一种用于控制网络连接设备的头戴式近眼显示系统，包括：

2.根据权利要求1所述的系统，其中，当所述标线在视觉上叠加在所述网络连接设备上达预定时间段时，所述网络连接设备改变状态。

3.根据权利要求1所述的系统，还包括在所述虚拟图像内形成的菜单，所述菜单具有与所述网络连接设备相关联的多个可选选项，其中，所述标线可操作以在视觉上叠加在所述选项中的一个或多个上，并且其中，所述标线可操作以选择或取消选择所述选项中的一个或多个，以改变所述网络连接设备的所述状态。

4.根据权利要求1所述的系统，还包括：

5.根据权利要求1所述的系统，还包括相机或其他视觉输入设备，其中，所述标线是表示所述相机或其他视觉输入设备视场的边界框。

6.根据权利要求5所述的系统，其中，所述边界框与条形码或qr码对齐，以扫描相关联的项目或设备。

7.根据权利要求1所述的系统，其中，所述标线是十字准线。

8.根据权利要求1所述的系统，其中，所述标线被分配给真实世界对象，其中，所述标线的移动对应于所述真实世界对象的移动。

9.根据权利要求1所述的系统，其中，所述标线可操作以选择、取消选择、控制或以其他方式影响虚拟菜单或其他可选择的虚拟对象。

10.根据权利要求1所述的系统，还包括第二标线，其被布置成与所述第一标线一起操作或者独立于所述第一标线操作。

11.根据权利要求1所述的系统，其中，所述标线可操作以激活、去激活、控制或以其他方式改变多个网络连接设备的所述状态。

12.根据权利要求1所述的系统，其中，所述标线的颜色、形状、方向或形式被配置为经由所述用户输入机构来改变。

13.根据权利要求1所述的系统，其中，所述用户输入机构是用户输入按钮、触摸传感器、语音命令或者由面向操作者的相机捕捉的面部姿态或移动。

14.根据权利要求1所述的系统，还包括处理单元，其可操作以映射网络连接设备的坐标，由此，当所述标线在视觉上叠加在所述网络连接设备上时，所述网络连接设备是可识别的。

15.根据权利要求1所述的系统，还包括rfid读取器，其可操作以识别网络连接设备，由此，当所述标线在视觉上叠加在所述网络连接设备上时，所述网络连接设备是可识别的。

16.根据权利要求1所述的系统，还包括处理单元，其可操作以经由计算机视觉技术识别网络连接设备，由此，当所述标线在视觉上叠加在所述网络连接设备上时，所述网络连接设备是可识别的。

17.根据权利要求1所述的系统，还包括相机，以及与所述相机和所述用户输入机构进行信号通信的处理单元，其中，所述处理单元可操作以与远程设备连接，使得远程方能查看由所述相机接收的数据。

18.根据权利要求1所述的系统，还包括处理单元，其可操作以与一个或多个网络连接设备远程连接，其中，波导可操作以传送包括所述一个或多个网络连接设备的虚拟图像，其中，所述用户输入机构可操作以在所述虚拟图像内导航所述标线，使得所述标线在视觉上叠加在所述网络连接设备上，由此，所述网络连接设备的所述状态可操作以被改变。

19.根据权利要求18所述的系统，其中，所述虚拟图像是房间的静态图像，一个或多个网络连接设备位于所述房间内。

20.根据权利要求18所述的系统，其中，所述虚拟图像是房间的实时视频，一个或多个网络连接设备位于所述房间内。

技术总结
一种用于控制网络连接设备的头戴式近眼显示系统，包括图像光导，该图像光导可操作以将承载图像的光束从图像源传送到可在其内观看虚拟图像的眼箱，图像源可操作以在虚拟图像内形成标线。用户输入机构，其可操作以控制所述标线，使得所述标线可以在视觉上叠加在网络连接设备上，其中，网络连接设备可操作以通过网络接收改变状态的命令，并且其中，当标线在视觉上叠加在所述网络连接设备上时，用户输入机构可操作以选择网络连接设备，由此，网络连接设备的状态可操作以被改变。

技术研发人员：B·凯勒,A·C·戈戈尔斯基,P·J·特弗斯
受保护的技术使用者：伊奎蒂公司
技术研发日：
技术公布日：2024/4/8