增强现实（AR）笔/手跟踪的制作方法

本申请涉及技术上有创造性的、非常规的解决方案，其必然植根于计算机技术并且产生具体的技术改进。

背景技术：

1、如本文所理解的，可以使用触觉反馈来增强增强现实(ar)计算机模拟，诸如ar计算机游戏。

技术实现思路

1、一种方法包括从至少图像识别握持对象的手的姿态。该方法还包括至少部分地基于该姿态来识别触觉反馈，以及在对象上实现触觉反馈。

2、在一些实施例中，姿态是第一姿态，触觉反馈是第一触觉反馈，并且该方法还包括识别握持对象的手的第二姿态。该方法可以包括至少部分地基于第二姿态来识别第二触觉反馈，以及在对象上实现第二触觉反馈。在其上实现第二触觉反馈的对象可以是在其上实现第一触觉反馈的同一对象或与其不同的对象。

3、在示例性实现中，该方法可以包括至少部分地基于该姿态来改变至少一个用户界面(ui)。如果需要，该方法可以包括基于对象的尺寸来识别手的尺寸，以及使用手的尺寸在至少一个显示器上呈现手的虚拟化。在一些示例中，该方法可以包括至少部分地基于图像来跟踪图像中被手隐藏的对象的一部分，以及至少部分地基于该跟踪在至少一个显示器上呈现对象的虚拟化。

4、在另一方面，一种装置包括增强现实(ar)头戴式显示器(hmd)。该装置还包括至少一个物理对象，该至少一个物理对象包括至少一个触觉发生器，以及用于对握持该对象的hmd的佩戴者的手进行成像的至少一个相机。图像可以被提供给至少一个处理器以使用触觉发生器根据图像中手的姿态来产生触觉信号。

5、在另一方面，一种设备包括至少一个计算机存储装置，该至少一个计算机存储装置不是瞬态信号并且进而包括指令，这些指令能够由至少一个处理器执行以接收至少第一图像。指令能够执行以从第一图像识别握持第一对象的手的第一姿态，将第一姿态与第一触觉信号相关，并且在第一对象上实现第一触觉信号。

6、本申请的关于其结构和操作的细节可以参考附图得到最好的理解，其中相同的附图标记表示相同的部件，并且其中：

1.一种方法，所述方法包括：

2.根据权利要求1所述的方法，其中所述姿态是第一姿态，所述触觉反馈是第一触觉反馈，并且所述方法还包括：

3.根据权利要求2所述的方法，其中在其上实现所述第二触觉反馈的所述对象是在其上实现所述第一触觉反馈的同一对象。

4.根据权利要求2所述的方法，其中在其上实现所述第二触觉反馈的所述对象是与在其上实现所述第一触觉反馈的所述对象不同的对象。

5.根据权利要求1所述的方法，所述方法包括：

6.根据权利要求1所述的方法，所述方法包括：

7.根据权利要求1所述的方法，所述方法包括：

8.一种装置，所述装置包括：

9.根据权利要求8所述的装置，其中所述姿态是第一姿态，所述触觉信号是第一触觉信号，并且由所述触觉发生器响应于所述手处于第二姿态而产生第二触觉信号。

10.根据权利要求8所述的装置，其中所述姿态引起在所述hmd上呈现的至少一个用户界面(ui)的改变。

11.根据权利要求8所述的装置，其中基于所述图像中所述对象的尺寸来识别所述手的尺寸并且将其用于在所述hmd上呈现所述手的可视化。

12.根据权利要求8所述的装置，其中至少部分地基于所述图像来跟踪所述图像中被所述手隐藏的所述对象的一部分，以在所述hmd上呈现所述对象的虚拟化。

13.一种设备，所述设备包括：

14.根据权利要求13所述的设备，其中所述指令能够执行以：

15.根据权利要求13所述的设备，其中所述器具是所述第一对象。

16.根据权利要求13所述的设备，其中所述器具是与所述第一对象不同的第二对象。

17.根据权利要求13所述的设备，其中所述指令能够执行以：

18.根据权利要求13所述的设备，其中所述指令能够执行以：

19.根据权利要求13所述的设备，其中所述指令能够执行以：

20.根据权利要求13所述的设备，所述设备包括所述至少一个处理器。