使用系统传感器数据的摄像头控制的制作方法

本公开涉及智能眼镜设备中的用户界面，该智能眼镜设备包括用于记录图像和视频的一个或多个摄像头。更具体地，本公开涉及用于基于用户输入和手势、从智能眼镜设备的一个或多个摄像头中、自动选择其设置更适合于采集图像的摄像头的方法。

背景技术：

1、在当今的可穿戴平台中，这些设备包括多个摄像头、多个传感器和多个致动器，这些摄像头、传感器和致动器被配置为执行多种特定功能。在一些实例中，这些附件设备中的多于一个的附件设备可以同时运行，而这些附件设备中只有一个附件设备为正在处理的任务提供最佳使用的功能。然而，这多个设备通常缺乏用于激活或去激活的自动机制，从而导致选择设备来操作所选择任务的麻烦的用户交互，或者在拥有非操作的活动设备时浪费稀缺的电力资源。

技术实现思路

1、在第一实施例中，增强现实头戴式设备包括：第一摄像头和第二摄像头，该第一摄像头和该第二摄像头安装在框架上，该第一摄像头和该第二摄像头分别具有第一视场和第二视场；传感器，该传感器安装在该框架上；存储器，该存储器被配置为存储多个指令；以及一个或多个处理器，该一个或多个处理器被配置为执行这些指令，以使该增强现实头戴式设备执行一种方法。该方法包括以下过程：接收来自所安装的传感器的信号，该信号指示用于采集图像的用户意图；基于根据用户意图对来自传感器的信号进行分类的模型，识别用于采集图像的用户意图；基于第一视场、第二视场和用于采集图像的用户意图，来选择第一摄像头和第二摄像头中的一者；以及使用所选择的摄像头来采集图像。

2、在一些实施例中，该传感器可以是惯性运动单元，并且接收来自传感器的信号包括：识别增强现实头戴式设备相对于固定坐标系的方位。

3、在一些实施例中，为了选择第一摄像头或第二摄像头中的一者，该一个或多个处理器可以执行用于以下操作的指令：在第一摄像头的视场包括用户在增强现实头戴式设备中的视场中的兴趣点时，选择该第一摄像头。

4、在一些实施例中，该一个或多个摄像头可以执行用于以下操作的指令：当基于第二用户意图选择第二摄像头时，去激活第一摄像头。

5、在一些实施例中，传感器可以提供指示该用户指向感兴趣对象的手势的信号。

6、在一些实施例中，传感器是安装在框架上的眼动追踪设备，该传感器被配置为提供指示用户的瞳孔位置的信号。

7、在一些实施例中，传感器可以是惯性运动传感器，该惯性运动传感器被配置为提供指示增强现实头戴式设备的方位的信号，并且该一个或多个处理执行用于以下操作的指令：当第一视场与增强现实头戴式设备的方位对齐时，选择第一摄像头。

8、在一些实施例中，传感器可以是第一摄像头或第二摄像头中的一者，该第一摄像头或第二摄像头中的一者被配置为采集指示感兴趣对象的用户手势。

9、在一些实施例中，传感器可以是传声器，该传声器被配置为收集并识别指示用户意图的语音命令。

10、在一些实施例中，传感器可以是触敏传感器，该触敏传感器被配置为接收来自用户的触摸命令。

11、在第二实施例中，一种计算机实现的方法包括：接收来自安装在用户佩戴的头戴式设备上的传感器的信号，该信号指示用于采集图像的用户意图。该计算机实现的方法还包括：基于根据用户意图对来自传感器的信号进行分类的模型，识别用于采集图像的用户意图；基于头戴式设备中的第一图像采集设备的技术参数和用于采集图像的用户意图，来选择该第一图像采集设备；以及使用该第一图像采集设备来采集图像。

12、在一些实施例中，接收来自传感器的信号可以包括以下中的一者：接收来自惯性运动传感器的惯性信号；接收来自用户语音的声音采集；接收手势；或接收活动按钮按压。

13、在一些实施例中，基于第一图像采集设备的技术参数来选择第一图像采集设备可以包括：当该第一图像采集设备的视场包括用户在头戴式设备中的视场中的兴趣点时，选择该第一图像采集设备。

14、在一些实施例中，该计算机实现的方法还还可以包括：当用户意图与头戴式设备中的第一图像采集设备的技术参数不兼容时，去激活该图像采集设备。

15、在一些实施例中，该计算机实现的方法还可以包括：从头戴式设备中的一个或多个图像采集设备中，选择其技术参数与用户意图最匹配的图像采集设备。

16、在一些实施例中，计算机实现的方法还可以包括：基于第二用户意图，选择第二图像采集设备、并去激活第一图像采集设备。

17、在一些实施例中，第一图像采集设备的技术参数可以是视场，并且其中，选择该第一图像采集设备包括：验证该视场包括在用户意图内识别出的感兴趣对象。

18、在一些实施例中，接收来自安装在头戴式设备的传感器的信号可以包括：识别指示感兴趣对象的用户的手势。

19、在一些实施例中，接收来自传感器的信号可以包括：接收来自安装在头戴式设备上的眼动追踪设备的、用户的瞳孔位置；

20、在一些实施例中，接收来自传感器的信号可以包括：识别头戴式设备的方位，并且选择第一图像采集设备包括选择其视场沿头戴式设备的方位指向的摄像头。

21、在第三实施例中，一种非暂态计算机可读介质存储有多个指令，这些指令在被一个或多个处理器执行时，使得该计算机执行一种方法。该方法包括：接收来自安装在用户佩戴的头戴式设备上的传感器的信号，该信号指示用于采集图像的用户意图。该方法还包括：基于根据用户意图对来自传感器的信号进行分类的模型，识别用于采集图像的用户意图；基于该头戴式设备中的第一图像采集设备的技术参数和用于采集图像的用户意图，来选择该第一图像采集设备；以及使用该第一图像采集设备来采集该图像。

22、应当理解，本文中被描述为适于结合到本公开一个或多个方面或实施例中的任何特征旨在在本公开的任何和所有的方面和实施例中具有普遍性。根据本公开的说明书、权利要求书和附图，本领域技术人员可以理解本公开的其它方面。前面的总体描述和下面的详细描述只是示例性和解释性的，并不对权利要求书进行限制。

技术特征：

1.一种计算机实现的方法，包括：

2.根据权利要求1所述的计算机实现的方法，其中，接收来自传感器的信号包括以下中的一者：接收来自惯性运动传感器的惯性信号；接收来自用户语音的声音采集；接收手势；或接收活动按钮按压。

3.根据权利要求1或2所述的计算机实现的方法，其中，基于所述第一图像采集设备的技术参数来选择所述第一图像采集设备包括：当所述第一图像采集设备的视场包括所述用户在所述头戴式设备中的视场中的兴趣点时，选择所述第一图像采集设备。

4.根据权利要求1、2或3所述的计算机实现的方法，还包括：当所述用户意图与所述头戴式设备中的所述第一图像采集设备的所述技术参数不兼容时，去激活所述图像采集设备。

5.根据前述权利要求中任一项所述的计算机实现的方法，还包括：从所述头戴式设备中的一个或多个图像采集设备中，选择其技术参数与所述用户意图最匹配的图像采集设备。

6.根据前述权利要求中任一项所述的计算机实现的方法，还包括：基于第二用户意图，选择第二图像采集设备、并去激活所述第一图像采集设备。

7.根据前述权利要求中任一项所述的计算机实现的方法，其中，所述第一图像采集设备的所述技术参数是视场，并且其中，选择所述第一图像采集设备包括：验证所述视场包括在所述用户意图内识别出的感兴趣对象。

8.根据前述权利要求中任一项所述的计算机实现的方法，其中，接收来自安装在头戴式设备上的传感器的信号包括以下项中的一项或多项：

9.一种增强现实头戴式设备，包括：

10.根据权利要求9所述的增强现实头戴式设备，其中，所述传感器是惯性运动单元，并且接收来自传感器的信号包括：识别所述增强现实头戴式设备相对于固定坐标系的方位。

11.根据权利要求9或10所述的增强现实头戴式设备，其中，为了选择所述第一摄像头或所述第二摄像头中的一者，所述一个或多个处理器执行用于以下操作的指令：当所述第一摄像头的视场包括所述用户在所述增强现实头戴式设备中的视场中的兴趣点时，选择所述第一摄像头。

12.根据权利要求9、10或11所述的增强现实头戴式设备，其中，所述一个或多个处理器执行用于以下操作的指令：当基于第二用户意图选择所述第二摄像头时，去激活所述第一摄像头。

13.根据权利要求9至12中任一项所述的增强现实头戴式设备，其中，所述传感器提供了指示所述用户指向感兴趣对象的手势的信号。

14.根据权利要求9至13中任一项所述的增强现实头戴式设备，其中，所述传感器是安装在所述框架上的眼动追踪设备，所述传感器被配置为提供指示所述用户的瞳孔位置的信号。

15.根据权利要求9至14中任一项所述的增强现实头戴式设备，其中，所述传感器是以下中的一者或多者：

技术总结
提供了一种使用增强现实头戴式设备中的摄像头的方法。该方法包括：接收来自安装在用户佩戴的头戴式设备上的传感器的信号，该信号指示用于采集图像的用户意图。该方法还包括：基于根据用户意图对来自传感器的信号进行分类的模型，识别用于采集图像的用户意图；基于该头戴式设备中的第一图像采集设备的技术参数和用于采集图像的用户意图，来选择该第一图像采集设备；以及使用该第一图像采集设备采集该图像。还提供了增强现实头戴式设备、存储指令的存储器、以及执行指令以使增强现实头戴式设备进行如上所述的方法的处理器。

技术研发人员：萨普纳·史洛夫,大卫·陶,碧林森,胡均,德米特里奥斯·罗勒·卡拉尼科斯,塞巴斯蒂安·斯图克,张兆年,邝江涛,刘丹尼,李一雷
受保护的技术使用者：元平台技术有限公司
技术研发日：
技术公布日：2024/2/29