用于操作移动相机以用于低功率使用的方法和装置与流程

本公开一般涉及移动计算，并且更具体地涉及操作移动相机以用于低功率使用的方法和装置。

背景技术：

1、数码相机经常集成到手持移动计算设备(例如，蜂窝电话和手持媒体设备)中。数码相机还经常集成到其他类型的计算设备(例如，平板计算设备和膝上型计算机)中。这样的数码相机由用户操作以捕获数字图像和视频。数字图像和视频可以本地存储在集成了数码相机的计算设备的存储器中，或者它们可以通过公共网络(例如，互联网)或通过私有网络被发送到网络可访问的存储位置。不管怎样，数字图像和视频可以随后由那些图像和视频的创建者或者由具有访问权限的其他人访问。

技术实现思路

技术特征：

1.一种移动相机，包括：

2.根据权利要求1所述的移动相机，还包括：

3.根据权利要求1或2中任一项或组合所述的移动相机，还包括所述第一卷积神经网络，其用于在所述音频特征满足特征触发阈值之后生成所述第一元数据。

4.根据权利要求1或2中任一项或组合所述的移动相机，还包括所述第一卷积神经网络，其用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

5.根据权利要求1所述的移动相机，还包括所述第一卷积神经网络，其用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

6.根据权利要求1、2或5中任一项或任何组合所述的移动相机，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

7.根据权利要求1、2或5中任一项或任何组合所述的移动相机，还包括所述第二卷积神经网络，其用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

8.一种装置，包括：

9.根据权利要求8所述的装置，还包括：

10.根据权利要求8或9中任一项或组合所述的装置，还包括所述第一卷积神经网络，其用于在所述音频特征满足特征触发阈值之后生成所述第一元数据。

11.根据权利要求8或9中任一项或组合所述的装置，还包括所述第一卷积神经网络，其用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

12.根据权利要求8所述的装置，还包括所述第一卷积神经网络，其用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

13.根据权利要求8、9或12中任一项或任何组合所述的装置，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

14.根据权利要求8、9或12中任一项或任何组合所述的装置，还包括所述第二卷积神经网络，其用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

15.一种移动相机，包括：

16.根据权利要求15所述的移动相机，还包括：

17.根据权利要求15或16中任一项或组合所述的移动相机，其中，所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为在所述音频特征满足特征触发阈值后生成所述第一元数据。

18.根据权利要求15或16中任一项或组合所述的移动相机，其中，所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

19.根据权利要求15所述的移动相机，其中，所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

20.根据权利要求15、16或19中任一项或任何组合所述的移动相机，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

21.根据权利要求15、16或19中任一项或任何组合所述的移动相机，其中，所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第二卷积神经网络实例化为通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

22.一种计算机可读存储介质，包括指令，所述指令当被执行时，使处理器电路模块至少用于：

23.根据权利要求22所述的计算机可读存储介质，其中，所述指令还用于使所述处理器电路模块在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后，使所述移动相机转换到高分辨率相机特征检测状态。

24.根据权利要求22或23中任一项或组合所述的计算机可读存储介质，其中，所述指令进一步用于使所述处理器电路模块在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机捕获视频。

25.根据权利要求22或23中任一项或组合所述的计算机可读存储介质，其中，所述图像特征是面部，所述指令进一步用于使所述处理器电路模块访问服务以获得关于与所述面部相对应的人的信息。

26.根据权利要求22所述的计算机可读存储介质，其中，所述指令进一步用于使所述处理器电路模块在所述音频特征满足特征触发阈值之后使用所述第一卷积神经网络生成所述第一元数据。

27.根据权利要求22或23中任一项或组合所述的计算机可读存储介质，其中，所述指令进一步用于使所述处理器电路模块通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

28.根据权利要求22所述的计算机可读存储介质，其中，所述指令进一步用于使所述处理器电路模块通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

29.根据权利要求22、26或28中任一项或任何组合所述的计算机可读存储介质，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

30.根据权利要求22或23中任一项或组合所述的计算机可读存储介质，其中，所述指令用于使所述处理器电路模块通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

31.一种用于操作移动相机的系统，所述系统包括：

32.根据权利要求31所述的系统，其中，所述可编程电路模块用于在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机转换到高分辨率相机特征检测状态。

33.根据权利要求31或32中任一项或组合所述的系统，其中，所述可编程电路模块用于在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机捕获视频。

34.根据权利要求31或32中任一项或组合所述的系统，其中，所述图像特征是面部，并且所述可编程电路模块用于访问服务以获得关于与所述面部相对应的人的信息。

35.根据权利要求31所述的系统，其中，所述可编程电路模块用于在所述音频特征满足特征触发阈值之后使用所述第一卷积神经网络生成所述第一元数据。

36.根据权利要求31或32中任一项或组合所述的系统，其中，所述可编程电路模块用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

37.根据权利要求31所述的系统，其中，所述可编程电路模块用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

38.根据权利要求31、35或37中任一项或任何组合所述的系统，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

39.根据权利要求31或32中任一项或组合所述的系统，其中，所述可编程电路模块用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

40.一种用于操作移动相机的方法，所述方法包括：

41.根据权利要求40所述的方法，还包括在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后，将所述移动相机转换到高分辨率相机特征检测状态。

42.根据权利要求40所述的方法，还包括在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机捕获视频。

43.根据权利要求40所述的方法，其中，所述图像特征是面部，并且所述方法还包括访问服务以获得关于与所述面部相对应的人的信息。

44.根据权利要求40所述的方法，还包括在所述音频特征满足特征触发阈值之后使用所述第一卷积神经网络生成所述第一元数据。

45.根据权利要求40所述的方法，还包括通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据，所述参考运动特征定义来自参考运动元数据库。

46.根据权利要求40所述的方法，还包括通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据，所述参考音频特征定义来自参考音频元数据库。

47.根据权利要求40所述的方法，其中，所述音频特征与以下各项中的至少一项相对应：(a)语音，(b)车辆声音，或(c)所述音频数据中反映的音频信号的变化率。

48.根据权利要求40所述的方法，还包括通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据，所述参考视觉特征定义来自参考图像元数据库。

49.一种包括用于执行根据权利要求40-48中任一项或任何组合所述的方法中的任何一个的单元的装置。

50.一种移动相机，包括：

51.根据权利要求50所述的移动相机，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第二特征检测状态中更少的功率。

52.根据权利要求50所述的移动相机，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第一特征检测状态中更多的功率。

53.根据权利要求50、51或52中任一项或任何组合所述的移动相机，其中，所述状态顺序可配置电路模块用于基于输入的第三组合，重新配置所述可配置逻辑电路模块以激活所述状态转换电路中的第二状态转换电路，以将所述移动相机从所述特征检测状态中的第一特征检测状态转换到所述特征检测状态中的第二特征检测状态。

54.根据权利要求50或52中任一项或组合所述的移动相机，其中，所述特征检测状态中的第一特征检测状态是运动特征检测状态，所述特征检测状态中的第二特征检测状态是低分辨率特征检测状态，并且所述特征检测状态中的第三特征检测状态是高分辨率特征检测状态。

55.根据权利要求50或51中任一项或组合所述的移动相机，其中，输入的第二组合包括运动数据和音频数据。

56.根据权利要求50或52中任一项或任何组合所述的移动相机，还包括卷积神经网络，其用于：

57.一种系统，包括：

58.根据权利要求57所述的系统，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第二特征检测状态中更少的功率。

59.根据权利要求57所述的系统，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第一特征检测状态中更多的功率。

60.根据权利要求57、58或59中任一项或任何组合所述的系统，其中，所述可编程电路模块用于基于输入的第三组合，重新配置所述可配置逻辑电路模块以激活所述状态转换电路中的第二状态转换电路，以将所述移动相机从所述特征检测状态中的第一特征检测状态转换到所述特征检测状态中的第二特征检测状态。

61.根据权利要求57或59中任一项或任何组合所述的系统，其中，所述特征检测状态中的第一特征检测状态是音频特征检测状态，所述特征检测状态中的第二特征检测状态是低分辨率特征检测状态，并且所述特征检测状态中的第三特征检测状态是高分辨率特征检测状态。

62.根据权利要求57或58中任一项或任何组合所述的系统，其中，所述输入的第二组合包括音频数据和图像数据。

63.一种移动相机，包括：

64.根据权利要求63所述的移动相机，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第二特征检测状态中更少的功率。

65.根据权利要求63所述的移动相机，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第一特征检测状态中更多的功率。

66.根据权利要求63、64或65中任一项或任何组合所述的移动相机，其中，所述状态顺序可配置电路模块用于基于输入的第三组合，重新配置所述可配置逻辑电路模块以激活所述状态转换电路中的第二状态转换电路，以将所述移动相机从所述特征检测状态中的第一特征检测状态转换到所述特征检测状态中的第二特征检测状态。

67.根据权利要求63或65中任一项或任何组合所述的移动相机，其中，所述特征检测状态中的第一特征检测状态是运动特征检测状态，所述特征检测状态中的第二特征检测状态是音频特征检测状态，并且所述特征检测状态中的第三特征检测状态是高分辨率特征检测状态。

68.根据权利要求63或65中任一项或任何组合所述的移动相机，其中，所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以实例化卷积神经网络以用于：

69.一种计算机可读存储介质，其包括指令，所述指令在被执行时，使处理器电路模块至少用于：

70.根据权利要求69所述的计算机可读存储介质，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第二特征检测状态中更少的功率。

71.根据权利要求69所述的计算机可读存储介质，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第一特征检测状态中更多的功率。

72.根据权利要求69、70或71中任一项或任何组合所述的计算机可读存储介质，其中，所述指令用于使所述处理器电路模块用于基于输入的第三组合，重新配置所述可配置逻辑电路模块以激活所述状态转换电路中的第二状态转换电路，以将所述移动相机从所述特征检测状态中的第一特征检测状态转换到所述特征检测状态中的第二特征检测状态。

73.根据权利要求69或71中任一项或任何组合所述的计算机可读存储介质，其中，所述特征检测状态中的第一特征检测状态是运动特征检测状态，所述特征检测状态中的第二特征检测状态是低分辨率特征检测状态，并且所述特征检测状态中的第三特征检测状态是高分辨率特征检测状态。

74.根据权利要求69或70中任一项或任何组合所述的计算机可读存储介质，其中，输入的第二组合包括运动数据和音频数据。

75.一种方法，包括：

76.根据权利要求75所述的方法，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第二特征检测状态中更少的功率。

77.根据权利要求75所述的方法，其中，所述移动相机用于在所述特征检测状态中的第三特征检测状态中消耗比在所述特征检测状态中的第一特征检测状态中更多的功率。

78.根据权利要求75所述的方法，还包括：基于输入的第三组合，重新配置所述可配置逻辑电路模块以激活所述状态转换电路中的第二状态转换电路，以将所述移动相机从所述特征检测状态中的第一特征检测状态转换到所述特征检测状态中的第二特征检测状态。

79.根据权利要求75所述的方法，其中，所述特征检测状态中的第一特征检测状态是运动特征检测状态，所述特征检测状态中的第二特征检测状态是低分辨率特征检测状态，并且所述特征检测状态中的第三特征检测状态是高分辨率特征检测状态。

80.根据权利要求75所述的方法，其中，所述输入的第二组合包括运动数据和音频数据。

81.一种包括用于执行根据权利要求75-80中任一项或任何组合所述方法中的任何一项的单元的装置。

技术总结
示例移动相机，包括：第一卷积神经网络，其用于响应于在第一传感器数据中检测到第一特征而识别第一传感器数据中的第一特征；状态转换器，其用于响应于第一卷积神经网络识别第一特征而将移动相机从第一特征检测状态转换到第二特征检测状态，移动相机用于在第二特征检测状态中使用比在第一特征检测状态中更高的功耗来操作；第二卷积神经网络，其用于在第二特征检测状态下识别第二传感器数据中的第二特征；以及通信接口，其用于向外部设备发送以下中的至少一个：与第一特征相对应的第一元数据或与第二特征相对应的第二元数据。

技术研发人员：D·莫洛尼,A·德加尼
受保护的技术使用者：莫维迪乌斯有限公司
技术研发日：
技术公布日：2024/1/11