传感器数据的选择性处理的制作方法

背景技术：

诸如无人飞行器(uav)等无人载运工具可用于在众多环境下执行监视、侦查和勘探任务以供军事和民用应用。uav可由远程用户手动控制，或者可以按半自主要或全自主要的方式操作。这样的uav可以包括被配置用于从周围环境收集传感器数据的传感器，以及用以从所收集的数据计算和确定用于对uav进行导航的信息的处理器。

在一些情况下，用于评估导航信息的现有方法可能不甚理想。例如，从单一传感器搜集的传感器数据可能具有差质量。在另一方面，如果处理来自多个传感器的传感器数据以评估或确定状态信息，则系统的处理延迟可能会增大。差质量的传感器数据或增大的处理延迟可能对uav功能产生不利的影响。

技术实现要素：

本文公开的实施方式提供了用于评估诸如uav等载运工具在环境内的状态信息的改进的方法。在许多实施方式中，uav包括多个成像装置，用于收集关于周围环境的信息。可以处理从所述成像装置中的每个获取的数据，以例如确定每个成像装置在一时间间隔内的图像数据的质量。基于所述图像数据的质量，可以选择所述成像装置的子集的图像数据来进行处理，以便评估所述uav的状态信息。有利地，本文描述的选择性处理方法提供了经评估的状态信息的提高的准确度同时节省了计算资源，并且可以用于改善uav在多样化的环境类型和操作条件下的功能性。

因此，在一个方面，提供了一种导航系统。所述系统包括载运工具，其包括多个成像装置，所述多个成像装置每个被配置用于捕捉多个图像；以及一个或多个处理器，其可操作地耦合至所述多个成像装置并且被单独地或共同地配置用于：(a)计算来自每个成像装置的所述多个图像中的每个图像中的特征点数目；(b)基于所述特征点数目，选择所述多个成像装置中的至少一个；以及(c)使用来自选定的一个或多个成像装置的多个图像来评估所述载运工具的状态信息。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，所述载运工具可以包括一个或多个动力单元，所述一个或多个动力单元被配置用于实现所述载运工具的移动。所述一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以使得所述多个成像装置中的每个成像装置被配置用于从不同的视野捕捉所述多个图像。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。备选地，所述多个成像装置可以包括至少四个成像装置。所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，每个图像中的特征点数目可以指示出所述图像的显著度。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(featuresfromacceleratedsegmenttest，fast)算法。

在一些实施方式中，步骤(b)可以包括评估所述特征点数目是否超过预定阈值。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，所述一个或多个处理器还可被配置用于：(d)基于所述状态信息，输出用于实现所述载运工具的移动的控制信号。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(c)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(c)。

在另一方面，提供了一种用于评估附接至多个成像装置的移动载运工具的状态信息的方法。所述方法包括：(a)用所述多个成像装置中的每个成像装置来捕捉多个图像；(b)借助于处理器，计算来自每个成像装置的所述多个图像中的每个图像中的特征点数目；(c)借助于所述处理器，基于所述特征点数目来选择所述多个成像装置中的至少一个；以及(d)借助于所述处理器，使用来自选定的一个或多个成像装置的多个图像来评估所述载运工具的状态信息。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，所述载运工具可以包括一个或多个动力单元，所述一个或多个动力单元被配置用于实现所述载运工具的移动。所述一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以便从不同的视野捕捉所述多个图像中的每个。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。备选地，所述多个成像装置可以包括至少四个成像装置。所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，每个图像中的特征点数目可以指示出所述图像的显著度。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(fast)算法。

在一些实施方式中，步骤(c)可以包括评估所述特征点数目是否超过预定阈值。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，所述方法还可包括基于所述状态信息，输出用于实现所述载运工具的移动的控制信号。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(d)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(d)。

在另一方面，提供了一种导航系统。所述系统包括：载运工具，其包括一个或多个动力单元以及多个成像装置，所述一个或多个动力单元被配置用于实现所述载运工具的移动，所述多个成像装置每个被配置用于捕捉多个图像；以及一个或多个处理器，其可操作地耦合至所述多个成像装置并且被单独地或共同地配置用于：(a)评估来自每个成像装置的所述多个图像的图像质量；(b)基于步骤(a)的评估，选择所述多个成像装置中的至少一个；以及(c)使用来自选定的一个或多个成像装置的多个图像来评估所述载运工具的状态信息。在一些实施方式中，所述一个或多个处理器还被配置用于：(d)基于所述状态信息，向所述一个或多个动力单元输出控制信号以供实现所述载运工具的移动。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，所述一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以使得所述多个成像装置中的每个成像装置被配置用于从不同的视野捕捉所述多个图像。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。备选地，所述多个成像装置可以包括至少四个成像装置。所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，所述图像质量可以基于所述多个图像中的每个图像中的特征点数目。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(fast)算法。所述图像质量可以基于所述多个图像中的每个图像的显著度。所述图像质量可以基于所述多个图像中的每个图像中的曝光水平或对比度水平中的至少一个。所述图像质量可以基于所述多个图像对于在评估所述载运工具的状态信息中使用的适当性。

在一些实施方式中，步骤(a)可以包括评估所述多个图像的图像质量是否超过预定阈值。步骤(a)可以包括识别所述多个图像中哪个图像具有最高的图像质量。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(c)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(c)。

在另一方面，提供了一种用于控制附接至多个成像装置的移动载运工具的方法。所述方法包括：(a)用所述多个成像装置中的每个成像装置来捕捉多个图像；(b)借助于处理器，评估来自每个成像装置的所述多个图像的图像质量；(c)借助于所述处理器，基于步骤(b)的评估来选择所述多个成像装置中的至少一个；以及(d)借助于所述处理器，使用来自选定的一个或多个成像装置的多个图像来评估所述载运工具的状态信息。在一些实施方式中，所述方法还包括：(e)借助于所述处理器，基于所述状态信息向安装在所述载运工具上的一个或多个动力单元输出控制信号以供实现所述载运工具的移动。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，所述一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以便从不同的视野捕捉所述多个图像中的每个。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。备选地，所述多个成像装置可以包括至少四个成像装置。

在一些实施方式中，所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，所述图像质量可以基于所述多个图像中的每个图像中的特征点数目。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(fast)算法。所述图像质量可以基于所述多个图像中的每个图像的显著度。所述图像质量可以基于所述多个图像中的每个图像中的曝光水平或对比度水平中的至少一个。所述图像质量可以基于所述多个图像对于在评估所述载运工具的状态信息中使用的适当性。

在一些实施方式中，步骤(b)可以包括评估所述多个图像的图像质量是否超过预定阈值。

在一些实施方式中，步骤(b)可以包括识别所述多个图像中哪个图像具有最高的图像质量。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(d)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(d)。

在另一方面，提供了一种导航系统。所述系统包括：载运工具，其包括多个成像装置，多个成像装置每个被配置用于捕捉多个图像，其中所述多个成像装置包括主成像装置以及一个或多个辅成像装置；以及一个或多个处理器，其可操作地耦合至所述多个成像装置并且被单独地或共同地配置用于：(a)评估来自所述主成像装置的多个图像的图像质量，以确定所述图像质量是否满足预定阈值；(b)如果步骤(a)的图像质量不满足所述预定阈值，则评估来自所述一个或多个辅成像装置的多个图像的图像质量；(c)基于步骤(b)的评估，选择所述一个或多个辅成像装置中的至少一个；以及(d)使用来自选定的一个或多个辅成像装置的多个图像来评估所述载运工具的状态信息。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以使得所述多个成像装置中的每个成像装置被配置用于从不同的视野捕捉所述多个图像。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。备选地，所述多个成像装置可以包括至少四个成像装置。所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述主成像装置可以定向成实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，步骤(a)和步骤(b)的图像质量可以每个基于所述多个图像中的每个图像中的特征点数目。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(fast)算法。

在一些实施方式中，步骤(a)和步骤(b)的图像质量可以每个基于所述多个图像中的每个图像的显著度。步骤(a)和步骤(b)的图像质量可以每个基于所述多个图像中的每个图像中的曝光水平或对比度水平中的至少一个。步骤(a)和步骤(b)的图像质量可以每个基于所述多个图像对于在评估所述载运工具的状态信息中使用的适当性。

在一些实施方式中，步骤(b)可以包括评估所述多个图像的图像质量是否超过第二预定阈值。步骤(b)可以包括识别所述多个图像中哪个图像具有最高的图像质量。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(d)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(d)。

在另一方面，提供了一种用于评估附接至多个成像装置的移动载运工具的状态信息的方法。所述方法包括：(a)用所述多个成像装置中的每个成像装置来捕捉多个图像，并且其中所述多个成像装置包括主成像装置以及一个或多个辅成像装置；(b)借助于处理器，评估来自所述主成像装置的多个图像的图像质量，以确定所述图像质量是否满足预定阈值；(c)如果步骤(b)的图像质量不满足所述预定阈值，则借助于所述处理器，评估来自所述一个或多个辅成像装置的多个图像的图像质量；(d)借助于所述处理器，基于步骤(c)的评估来选择所述一个或多个辅成像装置中的至少一个；以及(e)借助于所述处理器，使用来自选定的一个或多个辅成像装置的多个图像来评估所述载运工具的状态信息。

在一些实施方式中，所述载运工具可以是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地，所述无人飞行器可被配置用于检测限制飞行区域的存在，并且不在该限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。

在一些实施方式中，一个或多个动力单元可以包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个成像装置布置在所述载运工具上，以便从不同的视野捕捉所述多个图像中的每个。在一些实施方式中，所述多个成像装置可以包括至少三个成像装置。所述多个成像装置可以包括至少四个成像装置。所述多个成像装置可以每个相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。备选地或组合地，所述不同的方向可以包括至少四个不同的方向。所述主成像装置可以定向成实质上沿着所述载运工具的运动方向。所述多个成像装置可以位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述多个图像可以包括在预定时间间隔内捕捉的多个连续图像帧。所述预定时间间隔可以是在从约0.02秒到约0.1秒的范围内。

在一些实施方式中，步骤(b)和步骤(c)的图像质量可以每个基于所述多个图像中的每个图像中的特征点数目。可以使用角点检测算法计算每个图像中的特征点数目。所述角点检测算法可以是加速分割检测特征(fast)算法。

在一些实施方式中，步骤(b)和步骤(c)的图像质量可以每个基于所述多个图像中的每个图像的显著度。步骤(b)和步骤(c)的图像质量可以每个基于所述多个图像中的每个图像中的曝光水平或对比度水平中的至少一个。步骤(b)和步骤(c)的图像质量可以每个基于所述多个图像对于在评估所述载运工具的状态信息中使用的适当性。

在一些实施方式中，步骤(c)可以包括评估所述多个图像的图像质量是否超过第二预定阈值。步骤(c)可以包括识别所述多个图像中哪个图像具有最高的图像质量。

在一些实施方式中，所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，可以在所述载运工具的操作期间重复步骤(a)-步骤(e)。可以约每0.02秒一次至约每0.1秒一次地重复步骤(a)-步骤(e)。

应当明白，本发明的不同方面可以被单独地、共同地或彼此组合地理解。本文所描述的本发明的各个方面可以适用于下文阐述的特定应用中的任一或者适用于任何其他类型的可移动物体。本文对飞行器的任何描述均可适用于和用于任何可移动物体，诸如任何载运工具。另外，本文在空中运动(例如，飞行)的情景下公开的系统、装置和方法还可以适用于其他类型运动的情景下，诸如在地面上或在水上的移动、水下运动或者在太空中的运动。此外，本文对旋翼或旋翼组件的任何描述均可适用于和用于被配置用于通过旋转生成推进力的任何动力系统、装置或机构(例如，螺旋桨、轮子、轮轴)。

在另一方面，提供了一种用于在环境内导航载运工具的系统。所述系统包括载运工具，其包括多个传感器，所述多个传感器布置在该载运工具上以使得所述多个传感器中的每个传感器被配置用于从不同的视野获取传感器数据；一个或多个处理器，其可操作地耦合至所述多个传感器并且被单独地或共同地配置用于：(a)基于一个或多个预定准则，选择所述多个传感器的子集以用于在所述环境内导航所述载运工具；(b)处理来自选定的一个或多个传感器的传感器数据，以便生成用于在所述环境内导航所述载运工具的导航信息；以及(c)基于所述导航信息，输出用于控制所述载运工具的信号。

在一些实施方式中，通过至少评估每个传感器以确定所述传感器是否满足所述一个或多个预定准则，以及如果所述传感器满足所述一个或多个预定准则，则选择所述传感器，来选择所述子集。所述一个或多个预定准则可以包括：所述传感器是否定向成实质上沿着所述载运工具的运动方向。所述一个或多个预定准则可以包括：由所述传感器获取的传感器数据的质量是否超过预定阈值。所述一个或多个预定准则可以包括：所述传感器是否具有所述多个传感器中最高的传感器数据质量。所述一个或多个预定准则可以包括：所述传感器的功耗是否低于预定阈值。所述一个或多个预定准则可以包括：所述传感器是否具有所述多个传感器中最低的功耗。

在一些实施方式中，所述子集中的传感器的数目基于所述载运工具的运动方向改变。所述子集中的传感器的数目可以基于所述环境的环境复杂度改变。

在一些实施方式中，所述载运工具是无人飞行器。所述载运工具可以包括一个或多个动力单元，所述一个或多个动力单元被配置用于实现所述载运工具的移动。所述一个或多个动力单元包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个传感器包括多种不同的传感器类型。所述多个传感器可以包括以下各项中的一种或多种：成像装置、超声传感器、激光雷达传感器或雷达传感器。所述多个传感器可以包括至少三个传感器或至少四个传感器。每个传感器可以相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。

在一些实施方式中，所述多个传感器位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述导航信息包括所述载运工具的状态信息。所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，所述导航信息包括所述环境的环境信息。该环境信息可以包括所述环境中的一个或多个障碍物的位置。所述信号可以使所述载运工具躲避所述一个或多个障碍物。

在另一方面，提供了一种用于在环境内导航载运工具的方法。所述方法包括：(a)借助于处理器，基于一个或多个预定准则来选择多个传感器的子集以用于在所述环境内导航所述载运工具，其中所述多个传感器布置在所述载运工具上以使得所述多个传感器中的每个传感器被配置用于从不同的视野获取传感器数据；(b)借助于所述处理器，处理来自选定的一个或多个传感器的传感器数据，以便生成用于在所述环境内导航所述载运工具的导航信息；以及(c)借助于所述处理器，基于所述导航信息来输出用于控制所述载运工具的信号。

在一些实施方式中，选择所述子集包括评估每个传感器以确定所述传感器是否满足所述一个或多个预定准则，以及如果所述传感器满足所述一个或多个预定准则，则选择所述传感器。所述一个或多个预定准则可以包括：所述传感器是否定向成实质上沿着所述载运工具的运动方向。所述一个或多个预定准则可以包括：由所述传感器获取的传感器数据的质量是否超过预定阈值。所述一个或多个预定准则可以包括：所述传感器是否具有所述多个传感器中最高的传感器数据质量。所述一个或多个预定准则可以包括：所述传感器的功耗是否低于预定阈值。所述一个或多个预定准则可以包括：所述传感器是否具有所述多个传感器中最低的功耗。

在一些实施方式中，所述子集中的传感器的数目基于所述载运工具的运动方向改变。所述子集中的传感器的数目可以基于所述环境的环境复杂度改变。

在一些实施方式中，所述载运工具是无人飞行器。所述载运工具可以包括一个或多个动力单元，所述一个或多个动力单元被配置用于实现所述载运工具的移动。所述一个或多个动力单元包括一个或多个旋翼，所述一个或多个旋翼被配置用于向所述载运工具提供升力。

在一些实施方式中，所述多个传感器包括多种不同的传感器类型。所述多个传感器可以包括以下各项中的一种或多种：成像装置、超声传感器、激光雷达传感器或雷达传感器。所述多个传感器可以包括至少三个传感器或至少四个传感器。每个传感器可以相对于所述载运工具定向在不同的方向上。所述不同的方向可以是正交方向。所述不同的方向可以包括至少四个不同的方向。所述不同的方向中的至少一个可以实质上沿着所述载运工具的运动方向。

在一些实施方式中，所述多个传感器位于以下位置中的三个或更多个：所述载运工具的前侧、后侧、左侧、右侧、上侧或下侧。

在一些实施方式中，所述导航信息包括所述载运工具的状态信息。所述状态信息可以包括所述载运工具的位置、姿态、速度或加速度中的至少一个。所述姿态可以包括所述载运工具的横滚定向、俯仰定向或偏航定向中的至少一个。

在一些实施方式中，所述导航信息包括所述环境的环境信息。该环境信息可以包括所述环境中的一个或多个障碍物的位置。所述信号可以使所述载运工具躲避所述一个或多个障碍物。

通过考察说明书、权利要求书和附图，本发明的其他目标和特征将会变得明显。

援引并入

本说明书中所提及的所有公布、专利和专利申请均通过引用并入本文，其程度如同具体地和个别地指出要通过引用并入每一单个公布、专利或专利申请。

附图说明

本发明的新特征特别地在所附权利要求项中阐述。通过参考以下的详细说明及其附图，将更好地理解本发明的特征和优势；该详细说明阐述了利用本发明原理的说明性实施方式；在附图中：：

图1图示了根据实施方式uav在室外环境中操作；

图2图示了根据实施方式uav在室内环境中操作；

图3图示了根据实施方式uav与多个传感器耦合；

图4图示了根据实施方式具有不同视野的传感器；

图5图示了根据实施方式用于在环境内导航载运工具的方法；

图6图示了根据实施方式用于使用来自多个成像装置的图像来处理uav的状态信息的系统；

图7图示了根据实施方式用于基于所处理的信息来评估状态信息并控制载运工具的方法；

图8图示了根据实施方式用于基于计算特征点数目来评估状态信息的方法；

图9图示了根据实施方式的运动中的uav的俯视图，所述uav具有主成像装置和辅成像装置；

图10图示了根据实施方式用于基于主成像装置和辅成像装置来评估状态信息的方法；

图11图示了根据实施方式由三个辅成像装置获取的三个图像序列的示例性特征点数目；

图12图示了根据实施方式的uav；

图13图示了根据实施方式包括载体和负载的可移动物体；以及

图14图示了根据实施方式用于控制可移动物体的系统。

具体实施方式

本公开内容提供了用于评估诸如无人飞行器(uav)等载运工具的状态信息的导航系统和方法。在一些实施方式中，uav可以适于携带被配置用于收集环境数据的多个传感器。在一些实施方式中，传感器可包括诸如相机等成像装置。本文描述的方法可涉及使用一个以上成像装置来获取具有不同视野的多个图像。在一些实施方式中，可以将在时间间隔内的由多个成像装置拍摄的图像帧的质量进行比较，以确定那段时间内具有最高质量图像序列的主成像装置。处理器可仅处理来自于由主成像装置拍摄的图像帧的信息，以确定或评估uav的状态。在单一成像装置难以在一段时间内获取高质量图像的情况下，该方法可有利于提供准确且可靠的状态信息。仅根据由主成像装置捕捉的图像处理图像获得状态信息可减少处理时间和延迟，并且减少所必需的计算机资源。即使是在多样化的环境和操作条件下，如本文所公开的用于收集环境数据的多个成像装置的使用可以提高确定uav的状态信息的准确度，，从而增强诸如导航和避障等uav功能性的稳健性和灵活性。

本文提供的实施方式可适用于各种类型的载运工具，诸如uav。例如，uav可以是不超过10kg重和/或具有不超过1.5m的最大尺寸的小型uav。在一些实施方式中，uav可以是旋翼机，诸如由多个螺旋桨推进以在空中移动的多旋翼航空器(例如，四轴飞行器)。下文进一步详述了适合随本文介绍的实施方式一起使用的uav、其他载运工具和其他可移动物体的附加示例。

本文所描述的uav可以完全自主地(例如，通过诸如机载控制器等合适的计算系统)、半自主地或者手动地(例如，由人类用户)操作。uav可以从合适的实体(例如，人类用户或自主控制系统)接收命令，并通过执行一个或多个动作来响应这样的命令。例如，可以控制uav从地面起飞、在空中移动(例如，以多达三个平移自由度和多达三个旋转自由度)、移动至目标位置或一系列目标位置、在空中悬停、降落在地面上等。又例如，可以控制uav以指定速度和/或加速度(例如，以多达三个平移自由度和多达三个旋转自由度)或者沿着指定移动路径移动。此外，所述命令可以用于控制一个或多个uav部件，诸如本文所描述的部件(例如，传感器、致动器、动力单元、负载等)。例如，一些命令可以用于控制诸如相机等uav负载的位置、定向和/或操作。可选地，uav可被配置用于根据一个或多个预定操作规则来操作。所述操作规则可以用于控制uav的任何合适的方面，诸如uav的位置(例如，纬度、经度、高度)、定向(例如，横滚、俯仰、偏航)、速度(例如，平移速度和/或角速度)和/或加速度(例如，平移加速度和/或角加速度)。例如，可以设计操作规则以使得不允许uav飞到阈值高度之外，例如，uav可被配置成在距地面不超过400m的高度上飞行。在一些实施方式中，操作规则可适于提供自动化机制，用于提高uav的安全性并防止安全事故。例如，uav可被配置用于检测限制飞行区域(例如，机场)并且不在该限制飞行区域的预定距离内飞行，从而避免与航空器和其他障碍物的潜在碰撞。

图1图示了根据实施方式uav102在室外环境100中操作。室外环境100可以是城区、郊区或乡村环境或者是至少部分地不位于建筑物内的任何其他环境。uav102可以相对靠近地面104(例如，低空)或者相对远离地面104(例如，高空)操作。例如，在距地面小于或等于约10m处操作uav102可被认为是在低空，而在距地面大于或等于约10m处操作uav102可被认为是在高空。

在一些实施方式中，室外环境100包括一个或多个障碍物108a-108d。障碍物可以包括可阻碍uav102移动的任何物体或实体。一些障碍物(例如，障碍物108a、108d)可能位于地面104上，诸如建筑物、地面载运工具(例如，轿车、摩托车、卡车、自行车)、人类、动物、植物(例如，树木、灌木)和其他人造或自然结构。一些障碍物可能与地面104、水体、人造结构或自然结构相接触和/或由其所支撑。备选地，一些障碍物(例如，障碍物108b、108c)可能完全位于空中106，包括飞行器(例如，飞机、直升机、热气球、其他uav)或鸟类。空中障碍物可能不由地面104或由水体或由任何自然或人造结构所支撑。位于地面104上的障碍物可能包括显著延伸至空中106的部分(例如，高层结构诸如塔、摩天大楼、灯柱、无线电发射塔、输电线、树木等)。

图2图示了根据实施方式uav152在室内环境150中操作。室内环境150位于建筑物154的内部中，其具有地板156、一面或多面墙壁158和/或天花板或屋顶160。示例性建筑物包括住宅、商业或工业建筑物，诸如房屋、公寓、办公楼、生产设施、仓储设施等。建筑物154的内部可由地板156、墙壁158和天花板160完全封闭，使得uav152被约束到室内空间。相反地，可能不存在地板156、墙壁158或天花板160中的至少一个，从而使得uav152能够从内部飞到外部，或者反之亦然。备选地或组合地，在地板156、墙壁158或天花板160中可能形成一个或多个孔164(例如，门、窗、天窗)。

类似于室外环境100，室内环境150可能包括一个或多个障碍物162a-162d。一些障碍物可能位于地板156上(例如，障碍物162a)，诸如家具、家用电器、人类、动物、植物和其他人造物体或自然物体。相反地，一些障碍物可能位于空中(例如，障碍物162b)，诸如鸟类或其他uav。室内环境150中的一些障碍物可由其他结构或物体所支撑。障碍物还可附着于天花板160(例如，障碍物162c)，诸如灯具、吊扇、屋梁或其他安装在天花板上的家用电器或结构。在一些实施方式中，障碍物可能附着于墙壁158(例如，障碍物162d)，诸如灯具、搁架、橱柜或其他安装在墙壁上的家用电器或结构。值得注意的是，建筑物154的结构部件也可被认为是障碍物，包括地板156、墙壁158和天花板160。

本文所描述的障碍物可能大致上是固定的(例如，建筑物、植物、结构)或者大致上是移动的(例如，人类、动物、载运工具或者其他能够移动的物体)。一些障碍物可能包括静止部件和移动部件的组合(例如，风车)。移动障碍物或障碍物部件可以根据预定的或可预测的路径或模式移动。例如，轿车的移动可能是相对可预测的(例如，根据道路的形状)。备选地，一些移动障碍物或障碍物部件可以沿着随机的轨迹或以其他方式不可预测的轨迹移动。例如，诸如动物等生物可能按相对不可预测的方式移动。

为了确保安全和高效的操作，为uav提供用于评估环境信息(诸如周围环境中的物体的位置)和/或uav状态信息(诸如位置、速度、姿态和加速度)的机制可能是有益的。另外，对环境和/或状态信息的准确评估可利于导航，特别是当uav以半自主或全自主方式操作时尤为如此，并且对于各种各样的uav功能可能是有价值的。

因此，本文描述的uav可包括被配置用于收集传感器数据的一个或多个传感器，可以处理所述传感器数据以获取用于对uav进行导航的导航信息。导航信息可包括与uav状态、周围环境或者该环境内的物体相关的信息。基于收集到的传感器数据，可以生成用于控制uav导航的控制信号。适于随本文公开的实施方式一起使用的示例性传感器包括位置传感器(例如，全球定位系统(gps)传感器、支持位置三角测量法的移动装置发射器)、视觉传感器(例如，能够检测可见光、红外光或紫外光的成像装置，诸如相机)、接近式传感器或距离传感器(例如，超声传感器、激光雷达、tof相机或深度相机、雷达)、惯性传感器(例如，加速度计、陀螺仪、惯性测量单元(imu))、高度传感器、姿态传感器(例如，罗盘)、压力传感器(例如，气压计)、音频传感器(例如，麦克风)或场传感器(例如，磁力计、电磁传感器)。可以使用任何合适数目和组合的传感器，诸如一个、两个、三个、四个、五个、六个、七个、八个或更多个传感器。可选地，可以从不同类型(例如，两种、三种、四种、五种、六种、七种、八种或更多种类型)的传感器接收数据。不同类型的传感器可以测量不同类型的信号或信息(例如，位置、定向、速度、加速度、接近度、压力等)和/或利用不同类型的测量技术来获取数据。例如，传感器可以包括主动式传感器(例如，生成和测量来自其自身能源的能量的传感器)和被动式传感器(例如，检测可用能量的传感器)的任何合适的组合。又例如，一些传感器可以生成依据全局坐标系提供的绝对测量数据(例如，由gps传感器提供的位置数据、由罗盘或磁力计提供的姿态数据)，而其他传感器可以生成依据局部坐标系提供的相对测量数据(例如，由陀螺仪提供的相对角速度；由加速度计提供的相对平移加速度；由视觉传感器提供的相对姿态信息；由超声传感器、激光雷达或tof相机提供的相对距离信息)。在一些情况下，局部坐标系可以是相对于uav定义的机体坐标系。

传感器可被配置用于收集对于导航有用的各种类型的传感器数据，诸如与uav、周围环境或该环境内的物体相关的数据。可以处理传感器数据(例如，由一个或多个处理器处理)，以便获取导航信息，诸如状态信息或环境信息。例如，传感器中的至少一些可被配置用于提供关于uav的状态的数据，并且可以处理由此类传感器获取的传感器数据以获取uav的状态信息。由传感器提供的状态信息可以包括关于uav的空间信息(例如，诸如经度、纬度和/或高度等的位置或定位信息；诸如横滚、俯仰和/或偏航等定向或姿态信息)。状态信息还可以包括关于uav的运动信息(例如，平移速度、平移加速度、角速度、角加速度等)。例如，传感器可被配置用于确定uav在多达六个自由度上(例如，三个位置和/或平移自由度、三个定向和/或旋转自由度)的空间布局和/或运动。可以相对于全局坐标系或相对于局部坐标系(例如，相对于uav或另一实体)来提供状态信息。例如，传感器可被配置用于确定uav与控制该uav的用户之间的距离，或者uav与该uav的飞行起始点之间的距离。

备选地或附加地，可以处理由传感器获取的数据以提供各种类型的环境信息。例如，传感器数据可以指示环境类型，诸如室内环境、室外环境、低空环境或高空环境。传感器数据还可以提供关于当前环境条件的信息，包括天气(例如，晴朗、下雨、下雪)、能见度条件、风速、当日时间等。此外，由传感器收集的环境信息可以包括关于该环境中物体(诸如本文所描述的障碍物)的信息。障碍物信息可以包括关于环境中的一个或多个障碍物的数目、密度、几何形状和/或位置的信息。

在一些实施方式中，环境信息可以包括关于周围环境的复杂度的信息。“环境复杂度”可在本文中用于指环境被障碍物占据的程度。环境复杂度可以是定量或定性测量。在一些实施方式中，环境复杂度基于以下一项或多项确定：障碍物的数目、由障碍物占据的空间的体积或百分比、在离uav的一定距离内被障碍物占据的空间的体积或百分比、未被障碍物所阻碍的空间的体积或百分比、在离uav的一定距离内未被障碍物所阻碍的空间的体积或百分比、障碍物与uav的接近度、障碍物密度(例如，每单元空间的障碍物数目)、障碍物的类型(例如，固定的或移动的)、障碍物的空间布局(例如，位置、定向)、障碍物的运动(例如，速度、加速度)等。例如，具有相对高障碍物密度的环境将会具有高环境复杂度(例如，室内环境、城区环境)，而具有相对低障碍物密度的环境将会具有低环境复杂度(例如，高空环境)。又例如，大百分比的空间被障碍物占据的环境将会具有较高的复杂度，而具有大百分比的未被阻碍的空间的环境将会具有较低的复杂度。

在一些实施方式中，使用从处理传感器数据所获取的导航信息来生成用于控制诸如移动、避障、环境绘图等uav导航的各个方面的信号。所述信号可以输出至各种uav部件(例如，动力单元)，以实现环境内的uav导航。在一些实施方式中，这样的导航可以自主地或半自主地发生，使得需要很少的用户输入或者不需要用户输入来控制uav。

为了优化uav在环境内的导航，优化用作控制uav的基础的导航信息的准确度可能是有益的。导航信息的准确度可取决于用以生成该导航信息的传感器数据的准确度、可靠性和质量。在一些情况下，例如由于装置故障、非最理想的传感器数据质量、传感器视野限制等，单一传感器可能不能够始终为uav操作提供令人满意的传感器数据。因此，为了确保所获取的传感器数据对于导航目的来说是令人满意的，在uav上提供用于导航目的的多个传感器可能是有益的，以便例如提供冗余、增加用于处理的可用数据量以及补偿任何单一传感器的故障或不准确性。

图3图示了根据实施方式与多个传感器308、310和312耦合的uav300。uav300可包括机身302。动力单元304、306可耦合至机身302。uav300可包括一个或多个耦合至机身302的传感器，诸如传感器308、310、312。每个传感器可具有不同的视野314、316、318。在图3的实施方式中，传感器308、310耦合至机身302的侧面，而传感器312通过载体320(例如，云台)连接至机身302。虽然图3示出了耦合至侧面的和通过载体连接至机身的传感器，但应当理解，本公开内容的传感器可以位于uav的任何合适的部分上，诸如在uav的机身之上、之下、在其一个或多个侧面或者在其之内。一些传感器可以机械地耦合至uav，使得该uav的空间布局和/或运动对应于传感器的空间布局和/或运动。传感器可以通过刚性联轴器耦合至uav，使得传感器不会相对于其所附接到的uav的部分移动。备选地，传感器与uav之间的耦合可允许该传感器相对于所述uav的移动(例如，相对于uav的平移或旋转移动)。所述耦合可以是永久性耦合或者非永久性(例如，可拆卸的)耦合。合适的耦合方法可包括粘合剂、粘结、焊接和/或紧固件(例如，螺钉、钉、销等)。可选地，传感器可以与uav的一部分一体成型。此外，传感器可以与uav的一部分(例如，处理单元、控制系统、数据存储装置)电耦合，以便使得由传感器收集的数据能够用于uav的各种功能(例如，导航、控制、推进、与用户或其他装置的通信等)，诸如本文所讨论的实施方式。传感器可以可操作地与uav的一部分(例如，处理单元、控制系统、数据存储装置)耦合。

虽然图3描绘了具有三个传感器的uav，但应当理解，本文描述的实施方式可适用于任何合适数目的传感器，诸如一个、两个、三个、四个、五个、六个、七个、八个或更多个传感器。在一些实施方式中，uav包括至少一个、至少两个、至少三个、至少四个、至少五个、至少六个、至少七个或至少八个传感器。所述传感器可各自指向不同的方向。传感器可以根据需要相对于彼此和相对于uav定位和定向。在一些实施方式中，传感器可以定位成彼此靠近。备选地，传感器可以定位成彼此远离。传感器可以定位在载运工具的相对侧面上、载运工具的相邻侧面上、载运工具的同一侧面上、载运工具的同一部分上或者载运工具的不同部分上。例如，每个传感器可以安装在uav的不同侧面或表面上(例如，前表面、后表面、左表面、右表面、顶面(上侧)和/或底面(下侧))。在一些实施方式中，传感器中的一些或所有安装在一个或多个附接至uav的载体上。在一些实施方式中，多个传感器可位于uav的三个或更多个不同的侧面或表面上(例如，载运工具的前侧、后侧、左侧、右侧、上侧、下侧)。

传感器可以位于不同的位置和定向，使得每个传感器的视野不同。传感器的视野可以是可由该传感器检测的(例如，可见的)环境的范围。具有不同视野的传感器可描绘周围环境的不同部分。传感器中的一些或所有的视野可以重叠。备选地，传感器的视野可以不重叠。两个传感器之间的视野可以重叠但不相同(例如，仅部分地重叠)。视野可以与视角相关，所述视角可由传感器所成像的给定场景的角范围来测量。传感器的视角可以是小于或约为360°、300°、270°、240°、180°、120°、90°、60°、45°、30°、20°、10°、5°或1°的角度。每个传感器的视角可以是不同的。备选地，传感器中的一些或所有的视角可以是相同的。

在一些实施方式中，具有光学部件的传感器(例如，诸如相机等视觉传感器)的方向性可由其光轴的方向性所表征。多个传感器可以位于不同的位置和定向，以使得其各自的光轴是不同的。传感器的光轴(亦可称为“主轴”)可以是一条线：在传感器中沿着该线存在一定程度的旋转对称。在一些实施方式中，传感器的光轴经过该传感器的光学部件(例如，镜头、光传感器)的中心。在一些实施方式，可以布置传感器以使得其各自的光轴相对于彼此成约10°、20°、30°、40°、50°、60°、70°、80°、90°、100°、110°、120°、130°、140°、150°、160°、170°或180°的角度。在一些实施方式中，传感器可均匀地间隔开(例如，两个装置相隔180°，三个装置相隔120°，四个装置相隔90°等)。在一些实施方式中，传感器可以相对于彼此正交地定向。备选地或组合地，所述传感器中的至少一个可以定向成沿着uav的运动方向。光轴可以是测量视角所依的轴。可以沿着光轴垂直地、水平地或对角地测量视角。

图4图示了根据实施方式位置靠近并具有不同视野415、420的两个传感器405、410。在一些实施方式中，传感器405、410为相机。传感器405利用视野415获取传感器数据，而传感器410利用视野420获取传感器数据。在图4的实施方式中，视野415、420是不同的并且不重叠。在一些实施方式中，水平测量的传感器405、410的视角435、440约为60°。传感器405可具有光轴425，该光轴425相对于传感器410的光轴430成90°角。在备选实施方式中，视野415、420、视角435、440和/或光轴425、430可以根据需要改变。

uav(或其他可移动物体)上携带的传感器可以全都是相同的类型。备选地，传感器中的至少一些可以是不同的类型。在一些实施方式中，所述每个传感器从不同位置和/或定向提供同一场景的传感器数据。传感器可被配置用于同时或近似同时地捕捉场景的传感器数据。备选地，一些传感器可被配置用于在不同于其他传感器的时间捕捉传感器数据。

如本文先前所描述，在一些情况下，使用多个传感器用于收集传感器数据可以提高导航信息的准确度。然而，在某些情况下，处理来自多个传感器的传感器数据可能需要比理想情况更多的处理能力、处理时间和/或计算资源。例如，小型uav(例如，重量小于10kg)和其他小的可移动物体可能不能够携带足够的处理器、存储器和/或其他类型的计算资源来支持以足够的速度处理多个传感器数据集以供导航目的。

因此，在一些实施方式中，传感器数据的选择性处理被用来节省处理能力和计算资源并减少处理时间。在这样的实施方式中，仅使用由uav携带的传感器的子集来提供用于生成导航信息的传感器数据。可以基于一个或多个预定准则来选择所述传感器的子集，以便优化所得的导航信息的准确度以及提高整体uav性能(例如，减少功耗、处理器负荷、计算复杂度)。此方法可以提高传感器数据处理的速度和效率，同时维持导航信息优越的准确度和可靠性。

图5图示了根据实施方式用于在环境内导航载运工具的方法500。方法500可适用于控制携带多个传感器(例如，成像装置、超声传感器、激光雷达传感器、雷达传感器或其组合)的载运工具，诸如uav。可选地，传感器可以布置在载运工具上，使得每个传感器从不同的视野获取各自的传感器数据。视野中的至少一些可以彼此重叠。在一些实施方式中，视野中的至少一些是不同的。在其他实施方式中，视野中的至少一些是相同的。方法500的步骤中的一些或所有可以由可操作地耦合至所述多个传感器的一个或多个处理器来执行。在一些实施方式中，在无需用户输入的情况下执行方法500，从而支持对用于生成导航信息的传感器数据的自主选择和处理。

在步骤510中，基于一个或多个预定准则，选择由载运工具携带的多个传感器的子集。所述子集可包括任何数目的传感器，诸如至少一个、两个、三个、四个、五个或更多个传感器。在一些实施方式中，所述子集少于由载运工具携带用于导航的所有传感器。在一些实施方式中，所述子集仅包括单一传感器。将为所述子集选择的传感器的数目可以基于某些因素改变。例如，所述子集中的传感器的数目可以基于周围环境的特性(诸如环境复杂度)改变。当载运工具于相对复杂(例如，高障碍物密度)的环境内操作时，可以选择较多数目的传感器，而当载运工具于不复杂(例如，低障碍物密度)的环境内操作时，可以选择较少数目的传感器。当在高度复杂的环境内导航时，选择较多数目的传感器可能是有益的，以便提供传感器数据的附加冗余和准确度并且减少事故(例如，与障碍物碰撞)的风险。在一些实施方式中，当载运工具于高度复杂的环境内操作时，选择至少2个、3个、4个、5个或更多个传感器。

又例如，被选择作为所述子集的一部分的传感器的数目可以基于载运工具的状态改变，所述状态诸如为载运工具的运动方向和/或运动速度。在一些实施方式中，如果运动方向是一维的(例如，相对于载运工具参考系的正交坐标轴)则选择单一传感器，如果运动方向是二维的则选择两个传感器，而如果运动方向是三维的则选择三个传感器。例如，当传感器与运动方向对准时，可以选择单一传感器；当传感器倾斜于运动方向但仍处于同一运动平面内时，可以选择两个传感器；而当传感器倾斜于运动方向并处于运动平面之外时，可以选择三个传感器。如本文先前所描述，可以根据传感器的视野、视角和/或光轴来确定传感器相对于运动方向的对准。

可以使用各种类型的预定准则来选择传感器。例如，所述准则可以与传感器的定向和/视野相关，例如，传感器是否定向成大致上沿着载运工具的运动方向、传感器的视野是否与运动方向重叠等。又例如，所述准则可以与由传感器产生的传感器数据的质量(例如，信噪比、对于处理的适当性、准确度、鲁棒性、可靠性)相关，诸如质量是否超过预定阈值、传感器是否具有最高的传感器数据质量等。在一些实施方式中，分析来自每个传感器的传感器数据以确定质量，并且仅选择产生最高质量数据的传感器。在另一示例中，所述准则可以与每个传感器的功耗相关，例如，功耗是否低于预定阈值、传感器是否具有最低的功耗等。在一些实施方式中，在展现出较高功耗的传感器之前优先选择展现出较低功耗的传感器。所述一个或多个预定准则可以按很多方法或其组合提供，诸如在操作之前预设或预编程在uav中、在操作期间传输至uav、在操作之前或操作期间基于用户输入确定。在一些实施方式中，步骤510涉及评估每个传感器以确定其是否满足所述一个或多个预定准则，以及如果该传感器满足所述准则，则选择它。

在步骤520中，处理来自选定的一个或多个传感器的传感器数据，以便生成用于在环境内导航载运工具的导航信息。如本文先前所描述，可以处理传感器数据以获取载运工具的状态信息和/或环境的环境信息。在一些实施方式中，仅使用来自选定的一个或多个传感器的传感器数据来确定导航信息，使得来自其余传感器的传感器数据不被处理。如本文先前所描述，此选择性处理方法可提高用以确定导航信息的处理效率和速度。

在步骤530中，基于步骤530中生成的导航信息，输出用于控制载运工具的信号。该信号可被配置用于控制载运工具在环境内的导航。在一些实施方式中，该信号包括用于载运工具的动力单元的控制信号，以便控制该载运工具的空间布局和/或移动。例如，可以使用关于一个或多个障碍物的位置的环境信息来生成控制信号，以使所述载运工具以躲避障碍物的方式移动。在另一示例中，可以使用关于载运工具的当前速度的状态信息作为反馈以调整动力单元的操作，以便确保载运工具达到并维持期望的速度。

在一些实施方式中，本文描述的方法可适用于选择性处理由视觉传感器(在本文中亦称为“成像装置”)获取的图像数据。成像装置可被配置用于检测电磁辐射(例如，可见光、红外光和/或紫外光)并基于检测到的电磁辐射生成图像数据。例如，成像装置可包括电荷耦合器件(ccd)传感器或互补金属氧化物半导体(cmos)传感器，其响应于光波长而生成电信号。可以处理所得的电信号以产生图像数据。由成像装置生成的图像数据可包括一个或多个图像，所述图像可以是静态图像(例如，照片)、动态图像(例如，视频)或其合适的组合。该图像数据可以是多色的(例如，rgb、cmyk、hsv)或者单色的(例如，灰度、黑白、棕黑)。虽然本文提供的某些实施方式是在成像装置的情景下描述的，但应当理解，本公开内容可适用于任何合适类型的传感器，并且反之亦然。

在一些实施方式中，成像装置可以是相机。相机可以是捕捉动态图像数据(例如，视频)的电影或视频相机。相机可以是捕捉静态图像(例如，照片)的静物相机。虽然本文提供的某些实施方式是在相机的情景下描述的，但应当理解，本公开内容可适用于任何合适的成像装置，并且本文关于相机的任何描述亦可适用于任何合适的成像装置，并且本文关于相机的任何描述亦可适用于其他类型的成像装置。相机可以用于生成3d场景(例如，环境、一个或多个物体等)的2d图像。由相机生成的图像可表示3d场景到2d图像平面上的投影。因此，2d图像中的每个点对应于所述场景中的3d空间坐标。

本文描述的由成像装置获取的图像可以用于多种与uav操作相关的应用。在一些实施方式中，使用所述图像来促进uav在环境内的导航(例如，自主地、半自主地或手动地)。例如，可以处理所述图像以确定uav的状态信息(例如，位置、定向、速度和/或加速度信息)。备选地或附加地，可以处理所述图像以确定环境信息(例如，复杂度、障碍物的位置)。本文关于状态信息的任何描述亦可适用于其他类型的导航信息，诸如环境信息，并且反之亦然。可以使用由单一成像装置获取的图像来确定状态信息。备选地，可以使用从多个成像装置获取的图像来确定状态信息。

在一些实施方式中，本文描述的成像装置被配置用于捕捉多个图像，其被处理以为了确定状态信息。由成像装置拍摄的多个图像在本文中可以称为图像序列或图像的序列。由成像装置捕捉的单个图像在本文中可称为“图像帧”。图像序列可包括一个或多个图像帧。可以按特定的捕捉速率来捕捉图像序列。在一些实施方式中，可以按标准的视频帧速率诸如约24p、25p、30p、48p、50p、60p、72p、90p、100p、120p、300p、50i或60i来捕捉图像帧。在一些实施方式中，可以按小于或等于约每0.0001秒一次、每0.0002秒一次、每0.0005秒一次、每0.001秒一次、每0.002秒一次、每0.005秒一次、每0.002秒一次、每0.05秒一次、每0.01秒一次、每0.02秒一次、每0.05秒一次、每0.1秒一次、每0.2秒一次、每0.5秒一次、每1秒一次、每2秒一次、每5秒一次或每10秒一次的速率来捕捉图像帧。在一些实施方式中，捕捉速率可以根据用户输入、状态信息或外部条件(例如，雨、雪、风、环境的不明显的表面纹理)改变。

图像序列可以在一时间间隔内捕捉。在一些实施方式中，图像序列或多个图像可包括在预定时间间隔内捕捉的多个连续图像帧。所述时间间隔可以根据需要由用户设定。时间间隔可以是固定的。备选地，时间间隔可以是自动确定的，例如，由处理器确定。时间间隔可保持固定，或者可在uav或其部件(例如，成像装置)的操作过程中改变。在一些实施方式中，时间间隔可以小于或等于约0.005秒、0.002秒、0.05秒、0.01秒、0.02秒、0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒、20秒、50秒、100秒、200秒、500秒、1000秒或3600秒。在一些实施方式中，时间间隔可在从约0.02秒到约0.1秒的范围内。在一些实施方式中，时间间隔可以根据用户输入、状态信息或外部条件改变。成像装置可以在任何持续时间内捕捉所述图像序列。在一些实施方式中，持续时间可以是uav处于操作中的时间、uav正在移动的时间、由用户设定的时间、由处理器自动确定的时间、预设的时间、给出用户输入的时间、存在不稳定性(例如，湍流、漂移)的时间或者取决于状态信息。

在一些实施方式中，可以处理由成像装置捕捉的图像序列以检测存在于来自每个成像装置的多个图像中的每个图像中的一个或多个特征点。特征点可以是图像的一部分(例如，边缘、角点、兴趣点、斑点、脊等)，其可唯一地区别于该图像的其余部分和/或该图像中的其他特征点。可选地，特征点对于所成像的物体的变换(例如，平移、旋转、缩放)和/或图像特性(例如，亮度、曝光)的改变可以是相对不变的。可以在信息内容丰富的图像的部分中检测特征点(例如，显著的2d纹理)。可以在图像的在扰动下(例如，当改变图像的照度和亮度时)稳定的部分中检测特征点。本文描述的特征检测可以使用各种算法来实现，所述各种算法可以从图像数据提取一个或多个特征点并计算特征点的总数，或“特征点数目”。所述算法可以是边缘检测算法、角点检测算法、斑点检测算法或脊检测算法。在一些实施方式中，所述角点检测算法可以是“加速分割检测特征”(fast)。在一些实施方式中，特征检测器可以提取特征点并使用fast来计算特征点数目。在一些实施方式中，特征检测器可以是canny边缘检测器、sobel算子、harris&stephens/plessy/shi-tomasi角点检测算法、susan角点检测器、水平曲线曲率方法、高斯-拉普拉斯算子、高斯差、hessian行列式、mser、pcbr或灰度斑点、orb、freak或其合适的组合。

可以使用一个或多个处理器根据所提取的特征来评估状态信息。在一些实施方式中，处理器可包括现场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)或复杂可编程逻辑器件(cpld)。在一些实施方式中，处理器可以是由uav携带的嵌入式处理器。备选地，处理器可以与uav分离(例如，位于与uav通信的地面站处)。在一些实施方式中，处理器可以取得所提取的特征点并在图像帧的序列中对其进行比较，以便在地图上跟踪并标绘出物体以及确定图像帧上的相对变化。在一些实施方式中，处理器可以基于所述特征点通过分析图像帧上的相对变化来确定uav的状态信息，诸如位置(例如，经度、纬度和高度)、姿态、定向(例如，横滚、俯仰和偏航)、速度(例如，平移速度和角速度)和加速度(例如，平移加速度和角加速度)。

图6图示了根据实施方式用于使用来自多个成像装置602的图像来处理uav的状态信息的系统600。系统600可包括多个成像装置602、第一处理器604和第二处理器606。成像装置602中的每一个可以用于捕捉图像序列。由成像装置602捕捉的图像序列可发送至第一处理器604(例如，fpga)，所述第一处理器604处理所述图像序列以便检测每个图像中的特征点，例如，使用上述算法进行检测。如本文所进一步详述，在一些实施方式中，处理器604确定来自图像序列中的每个图像中的多个特征点，计算特征点数目，并且使用该特征点数目来评估或确定图像质量。图像序列中每个图像的特征点可传输至第二处理器606(例如，嵌入式处理器)。处理器606可以进一步处理所述图像序列以评估uav的状态信息。可选地，如本文先前所描述，处理器606可以使用由处理器604生成的图像序列的特征点来确定状态信息。状态信息可输出至uav的飞行控制模块，并且用作输出用以实现uav移动的控制信号的基础。例如，控制信号可以输出至安装在uav上的一个或多个动力单元。虽然系统600被描绘成包括两个单独的处理器604、606用于检测特征点和评估状态信息，但任何合适数目和组合的处理器都可使用。例如，可以使用单一处理器来执行特征点检测和状态信息确定。在一些实施方式中，处理器中的至少一些可由uav携带。在一些实施方式中，处理器中的至少一些可以与uav分离(例如，位于与uav通信的地面站处)。可以有一个或多个处理器用于检测特征点和评估状态信息。所述特征点和状态信息可由不同的处理器来确定，或者由相同的处理器来确定。

从图像确定的状态信息的准确度和鲁棒性可取决于该图像的图像质量。在一些实施方式中，图像质量是指一个或多个图像帧对于图像处理(例如，评估uav状态信息)的适当性。不适合于处理的差质量图像可能提供不准确的数据，而适合于处理的高质量图像可提供准确的数据。图像质量可能与图像显著度相关或者取决于图像显著度。图像显著度在本文中可用于指图像具有例如容易从背景和/或周围图像像素中分辨出来或“脱颖而出”的特征的程度。本文关于图像质量的任何描述亦可适用于图像显著度，并且反之亦然。在一些实施方式中，图像质量可以由图像的曝光水平和/或对比度来确定。在一些实施方式中，图像质量可以使用图像梯度方法来确定，其中可以计算针对图像中每个像素的梯度并且可以使用结果来确定图像纹理是否足够丰富。具有较丰富纹理的图像可具有较大的梯度，这可能意味着较高的图像质量。在一些实施方式中，如本文先前所描述，通过特征检测来评估图像质量。举例而言，图像质量可以与图像中检测到的特征点的数目相关。在一些实施方式中，评估并识别图像中的特征点的数目，以便确定图像质量。在一些实施方式中，每个图像中的特征点数目可指示出该图像的显著度。高数目的特征点可意味着适合用于评估状态信息的高质量图像，而低数目的特征点可意味着不适合用于评估状态信息的低质量图像。例如，高质量图像可具有至少约100个、150个、200个、250个、500个、1000个或更多个特征点。相反地，低质量图像可具有少于约100个、75个、60个、50个、25个或更少个特征点。

在一些实施方式中，由单一成像装置捕捉的图像帧中的一些或所有可能例如由于非最理想的成像条件而具有相对差的图像质量。在某些情况下，例如当光照很亮或者具有高对比度时，或者在不利的环境条件(诸如雨、雾或烟雾)下，成像装置可能不能够提供令人满意的图像数据。当图像描绘重复的环境(例如，墙壁、水体)、具有低对比度(例如，下雪、夜间)、曝光过度、曝光不足和/或不明显的表面纹理的环境时，可能导致差图像质量。而且，即使由成像装置拍摄的图像的初始序列具有良好质量，由该成像装置拍摄的后续图像也可能由于变化的环境条件而退化。差图像质量可导致特征点数目减少，从而导致对不准确的状态信息的处理，或者在一些情景下导致无法处理任何状态信息。

在一些实施方式中，差图像质量是由图像的曝光过度造成的。当图像损失突出细节和/或当图像的重要部分被“洗掉”时，可将该图像描述为曝光过度。处理器可能仅能够从曝光过度的图像的未被洗掉的部分检测到特征点，从而导致识别出的特征点较少，所述特征点可能难以与图像噪声区分开来。

在一些实施方式中，当图像描绘具有低的或不明显的表面纹理(例如，空白墙壁)的场景时，会出现差图像质量。表面纹理可以是由铺设、表面粗糙度以及波纹度所定义的表面性质。具有不明显表面纹理的图像可能具有相对低的图像对比度。具有不明显表面纹理的表面的图像可导致特征点较少，所述特征点可能难以与图像噪声区分开来。

为了缓解这一问题，处理器可以使用由多个成像装置拍摄的多个图像序列来确定状态信息。如果从许多不同的视野提取特征点，则所述成像装置中的至少一个产生适合于确定状态信息的高质量图像序列的几率可能会更大。然而，使用来自多个成像装置的图像帧的多个序列以便评估uav的状态信息可能增加对计算资源的使用和/或增加处理时间。因此，在一些实施方式中，仅使用所述多个成像装置的子集来确定状态信息。可以使用各种方法来选择要使用哪个(哪些)成像装置。例如，所述选择可以基于由成像装置产生的图像序列的质量执行(例如，借助于处理器)。如本文先前所描述，图像质量可以基于每个图像序列的图像中存在的特征点的数目确定。

在一些实施方式中，并行地(例如，同时地)执行对每个图像序列的图像质量评估，以使得即使在处理从多个成像装置捕捉到的图像时，系统的处理延迟也并不一定会增加。在一些实施方式中，串行地(例如，依次地)执行从每个图像序列确定状态信息，使得如果处理来自多个成像装置的信息以确定状态信息，则系统的处理延迟可能会增加。因此，当处理来自所有成像装置的图像序列以确定图像质量时，仅选择所述成像装置的子集用于确定状态信息可能是有益的。在一些实施方式中，仅选择一个成像装置。备选地，可以选择两个、三个、四个、五个、六个、七个、八个或更多个成像装置。

对用于确定状态信息的成像装置的选择可以基于一个或多个准则。所述准则可以是预定准则(例如，在uav的操作之前由用户预设)。备选地，所述准则可以在uav的操作期间确定，例如，自动地或者基于用户输入确定。可选地，所述准则可以是动态的，使得该准则可以在uav的操作期间修改，例如，响应于变化的操作条件而修改。在一些实施方式中，所述准则可与图像序列和/或该图像序列中单个图像的图像质量或图像显著度相关。如本文先前所描述，图像质量或图像显著度可与图像序列的特征点数目相关。在一些实施方式中，出于确定用于选择成像装置的准则的目的(该成像装置的图像序列将被评估以确定状态信息)，“特征点数目”将会与“图像质量”互换使用。例如，所述准则可以是：整体图像序列或该序列中的每个图像是否满足图像质量的最小阈值(例如，是否满足最小特征点数目)。例如，用作图像质量阈值的最小特征点数目可以是约10个、20个、30个、40个、50个、60个、70个、80个、90个、100个、150个、200个、500个或更多个特征点。所述准则可以是：选择产生具有最高的平均图像质量(例如，每图像帧最高的特征点数目)的图像序列的成像装置。所述准则可以是：选择在图像序列内具有最高的最大图像质量(例如，最高的最大特征点数目)的成像装置。所述准则可以是：选择在图像序列内具有最高的最小图像质量(例如，最高的最小特征点数目)的成像装置。应当理解，所述准则可以根据所要选择的成像装置的数目改变。例如，如果要选择两个成像装置，则所述准则可以是：选择在图像序列内具有第一和第二高的最大图像质量(例如，第一和第二高的特征点数目)的两个成像装置。

再次参考图6，在一些实施方式中，系统600的一个或多个处理器可以评估捕捉到的图像帧的图像质量。例如，处理器604可以用于处理来自成像装置602中的每一个的图像序列，以便评估每个图像序列的图像质量。处理器604可处理向该处理器发送的每个图像帧，以便确定图像质量。例如，在一些实施方式中，处理器604确定来自图像序列中的每个图像中的多个特征点，计算特征点数目，并且使用该特征点数目来确定图像质量。每个序列的特征点数目可传输至处理器606，所述处理器606可将所述特征点数目用作选择一个或多个成像装置以供评估状态信息的基础。由选定的一个或多个成像装置获取的图像序列可继而由处理器606进行处理以生成状态信息。

图7图示了根据实施方式用于基于所处理的信息来评估状态信息并控制载运工具的方法1000。正如本文介绍的所有方法，可以使用本文描述的系统和装置的任何实施方式来执行方法1000的步骤。例如，方法1000可由uav携带的导航系统来执行。在一些实施方式中，方法1000的步骤1010到步骤1050可由一个或多个处理器来执行，所述一个或多个处理器中的至少一些可由uav携带。此外，可以在无需用户输入的情况下自动地执行所述步骤中的至少一些。备选地或组合地，步骤中的至少一些可涉及用户输入。根据需要，可以重复方法1000的步骤中的一些或所有。例如，可以按期望的速率重复步骤1010到步骤1050。所述速率可以小于或等于约每0.005秒一次、每0.01秒一次、每0.02秒一次、每0.05秒一次、每0.1秒一次、每0.2秒一次、每0.5秒一次、每1秒一次、每2秒一次、每5秒一次、每10秒一次、每20秒一次、每50秒一次、每100秒一次、每200秒一次、每500秒一次、每1000秒一次或每3600秒一次。在一些实施方式中，该速率可以是约每0.02秒一次至约每0.1秒一次。

在步骤1010中，可以在一时间间隔内由多个成像装置捕捉多个图像序列。所述时间间隔可以小于或等于约0.005秒、0.01秒、0.02秒、0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒、20秒、50秒、100秒、200秒、500秒、1000秒或3600秒。在一些实施方式中，时间间隔可在从约0.02秒到约0.1秒的范围内。在一些实施方式中，时间间隔可在从约0.005秒到约10秒的范围内。在所述时间间隔期间捕捉到的图像序列可以包括约1个图像、2个图像、5个图像、10个图像、20个图像、50个图像、100个图像、200个图像、500个图像或1000个图像。可选地，如本文先前所讨论，成像装置可以布置在uav上，以便从不同的视野捕捉所述多个图像中的每个。

在步骤1020中，可以借助于处理器来评估来自每个成像装置的多个图像的图像质量。如本文先前所描述，图像质量可与特征点数目相关。对图像质量的确定可以并行地处理(例如，同时处理所有的图像序列)。因此，即使针对图像质量处理来自多个成像装置的捕捉的图像，系统的处理延迟可能也并不一定会增加。

在步骤1030中，可以基于步骤1020的图像质量评估来选择由多个成像装置拍摄的图像序列中的至少一个。对成像装置的选择可以基于一个或多个准则。如本文先前所描述，所述准则可以与图像序列的图像质量或图像显著度相关。例如，所述准则可以是：整体图像序列或该序列中的每个图像是否满足图像质量的最小阈值。所述准则可以是：选择所具有的图像序列拥有最高的平均图像质量的成像装置。所述准则可以是：选择在图像序列内具有最高的最大图像质量的成像装置。所述准则可以是：选择在图像序列内具有最高的最小图像质量的成像装置。应当理解，所述准则可根据所要选择的成像装置的数目改变。例如，如果选择两个成像装置，则准则可以是选择在图像序列内具有第一和第二高的最大图像质量的两个成像装置。在一些实施方式中，出于确定用于选择成像装置(其图像序列将被评估以确定状态信息)的准则的目的，“特征点数目”将会与“图像质量”互换使用。

在步骤1040中，可以借助于处理器使用来自步骤1030中选定的一个或多个成像装置的多个图像来评估uav的状态信息。由处理器来评估或确定状态信息可以串行地执行(例如，一次一个图像序列，依次地执行)。因此，如果处理来自多个成像装置的信息，则系统的处理延迟可能会增加。通过具有用于选择仅来自成像装置的子集的图像序列以供在确定状态信息中处理的准则，可以节省处理时间和计算资源。在一些实施方式中，虽然针对由多个成像装置拍摄的所有图像进行图像质量评估(并行处理)，但仅使用来自成像装置的子集的数据进行状态信息评估(串行处理)。而且，状态信息的确定可能比图像质量确定在计算上更为高强度，所述图像质量确定可能是计算成本低廉的低级图像处理操作。因此，图7可图示一种在计算上和时间上高效的确定状态信息的方法。

在步骤1050中，可以可选地将状态信息用作输出用以使uav在环境内导航的信号的基础。所述信号可包括用于uav的动力系统(例如，旋翼)的控制信号，用以实现载运工具的移动。所述信号可以基于用户命令生成，该用户命令被输入到远程终端或其他用户装置中并随后被传输至uav。备选地，该信号可由uav(例如，自动化机载控制器)自主地生成。在一些情况下，所述信号可以利用来自用户输入和自动化的贡献半自主地生成。在一些实施方式中，使用状态信息作为产生控制信号的飞行控制算法的输入。

图8图示了根据实施方式用于基于计算特征点数目来评估状态信息的方法1100。方法1100可被理解为方法1000的特殊版本，其中通过计算由每个成像装置拍摄的多个图像中的每个图像中的特征点数目来评估所述图像的图像质量。

方法1100的步骤1110到步骤1150可由一个或多个处理器来执行，其中至少一些处理器可由uav携带。在一些实施方式中，方法1100由uav的导航系统来执行。此外，可以在无需用户输入的情况下自动地执行所述步骤中的至少一些。备选地或组合地，步骤中的至少一些可涉及用户输入。根据需要，可以重复方法1100的步骤中的一些或所有。例如，可以按期望的速率重复步骤1110到步骤1150。所述速率可以小于或等于约每0.005秒一次、每0.01秒一次、每0.02秒一次、每0.05秒一次、每0.1秒一次、每0.2秒一次、每0.5秒一次、每1秒一次、每2秒一次、每5秒一次、每10秒一次、每20秒一次、每50秒一次、每100秒一次、每200秒一次、每500秒一次、每1000秒一次或每3600秒一次。在一些实施方式中，该速率可以是约每0.02秒一次至约每0.1秒一次。

在步骤1110中，可以在一时间间隔内由多个成像装置中的每个成像装置捕捉多个图像序列。所述时间间隔可以小于或等于约0.005秒、0.01秒、0.02秒、0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒、20秒、50秒、100秒、200秒、500秒、1000秒或3600秒。在一些实施方式中，时间间隔可在从约0.02秒到约0.1秒的范围内。在一些实施方式中，时间间隔可在从约0.005秒到约10秒的范围内。在所述时间间隔期间捕捉到的图像序列可以包括约1个图像、2个图像、5个图像、10个图像、20个图像、50个图像、100个图像、200个图像、500个图像或1000个图像。如本文先前所讨论，成像装置可以布置在uav上，以便从不同的视野捕捉所述多个图像中的每个图像。

在步骤1120中，例如借助于处理器，计算来自每个成像装置的多个图像中的每个图像中的特征点数目。在一些实施方式中，可以通过使用诸如fast等特征检测算法计算每个图像中的特征点数目来评估特征点数目。对特征点数目的计算可以并行地处理。因此，即使针对特征点数目处理来自多个成像装置的捕捉的图像，系统的处理延迟可能也并不一定会增加。

在步骤1130中，可以基于步骤1120的评估来选择多个成像装置中的至少一个。对成像装置的选择可以基于一个或多个准则。该准则可与图像序列的特征点数目相关。例如，所述准则可以是：整体图像序列或该序列中的每个图像是否满足特征点数目的最小阈值。所述准则可以是：选择所具有的图像序列拥有最高的平均特征点数目的成像装置。所述准则可以是：选择在图像序列内具有最高的最大特征点数目的成像装置。所述准则可以是：选择在图像序列内具有最高的最小特征点数目的成像装置。应当理解，所述准则可以根据所要选择的成像装置的数目改变。例如，如果选择两个成像装置，则准则可以是：选择在图像序列内具有第一和第二高的最大特征点数目的两个成像装置。

在步骤1140中，可以借助于处理器使用步骤1130中选定的多个图像来评估uav的状态信息。由处理器进行的状态信息的确定可以串行地执行。因此，如果处理来自多个成像装置的信息，则系统的处理延迟可能会增加。通过具有用于选择所述图像的子集以供在确定状态信息中处理的准则，可以节省处理时间和计算资源。

可选地，状态信息可用作输出用以使uav在环境内导航的信号的基础。所述信号可包括用于uav的动力系统(例如，旋翼)的控制信号，用以实现载运工具的移动。所述信号可以基于输入到远程终端或其他用户装置中并随后传输至uav的用户命令生成。备选地，该信号可由uav(例如，实现合适的飞行控制算法的自动化机载控制器)自主地生成。在一些情况下，所述信号可以利用来自用户输入和自动化的贡献半自主地生成。

在一些实施方式中，将一个或多个成像装置指定为用于评估状态信息的“默认”成像装置。这样的成像装置在本文中可称为“主成像装置”。默认情况下不选择的成像装置在本文中可称为“辅成像装置”。主成像装置或默认成像装置可以是这样的成像装置：其图像序列总是被使用以便确定图像质量，并且如果所述图像质量被认为是令人满意的，则其图像序列用于评估uav的状态信息。辅成像装置或非默认成像装置可以是这样的成像装置：只有当由主成像装置拍摄的图像序列的图像质量被认为不令人满意时，才会针对该辅成像装置或非默认成像装置的图像序列进行图像质量的评估。只有当由主成像装置拍摄的图像序列具有不令人满意的图像质量时，才可以使用由辅成像装置拍摄的图像序列来评估uav的状态信息。uav可具有任何合适数目的主成像装置和辅成像装置。例如，uav可具有一个、两个、三个、四个、五个、六个、七个、八个或更多个主成像装置。uav可具有一个、两个、三个、四个、五个、六个、七个、八个或更多个辅成像装置。uav可具有比辅成像装置更多的主成像装置，或者反之亦然。可选地，主成像装置的数目可以等于辅成像装置的数目。

在一些实施方式中，主成像装置可以是定向成大致上沿着uav的运动方向的成像装置。当主成像装置的视野与运动方向重叠时，可以认为主成像装置是定向成大致上沿着运动方向。在一些实施方式中，当视野或光轴与运动方向对准时，可以认为主成像装置是定向成大致上沿着uav的运动方向。在一些实施方式中，当成像装置的视野或光轴约为运动方向的10°、20°、30°、40°、50°、60°、70°、80°、90°、100°、110°、120°、130°、140°、150°、160°、170°或180°或其之内时，可以认为主成像装置是定向成大致上沿着uav的运动方向。主成像装置可以随着uav运动方向的改变而改变。在uav的运动方向改变之后，主成像装置可能不再定向于uav的运动方向上。

图9图示了根据实施方式的运动中的uav1200的俯视图，所述uav1200具有主成像装置1202和辅成像装置1204、1206、1208。uav1200包括携带成像装置1202、1204、1206、1208的机身1210。成像装置1202、1204、1206、1208中的每一个耦合至uav1200的不同侧面，并且具有对应的视野1212、1214、1216、1218。uav1200可由一个或多个动力单元(未示出)推进以沿着移动方向(箭头1220所示)移动。uav的移动方向可以是任何方向。uav可以水平地(例如，向前、向后、向左、向右)、垂直地(例如，向上、向下)或以任何组合进行移动。在图9的实施方式中，成像装置1202被指定为主成像装置，这是因为视野1212定向成沿着所述移动方向，而辅成像装置1204、1206、1208的视野1214、1216、1218未定向成沿着所述移动方向。在一些实施方式中，如果移动方向随后发生改变，则对主成像装置和辅成像装置的指定可随之改变，使得沿着新的移动方向定向的成像装置被指定为新的主成像装置。

在备选实施方式中，独立于uav的运动方向来执行对主成像装置的选择。例如，可以基于其他准则(例如，用户偏好、特征点数目、图像质量、功耗等)来选择主成像装置和辅成像装置。因此，主成像装置可能不定向成大致上沿着uav的移动方向。

如果主成像装置的图像质量满足某一准则或者超过某一阈值，则可处理由该主成像装置拍摄的图像序列以评估uav的状态信息。所述准则可以是：整体图像序列是否满足图像质量的最小阈值，该序列中的每个图像是否满足图像质量的最小阈值，或者图像序列中的图像的子集是否满足图像质量的最小阈值。在一些实施方式中，出于确定是否将使用由主成像装置拍摄的图像用于处理uav状态信息的准则的目的，“特征点数目”将会与“图像质量”互换使用。例如，图像质量的最小阈值可以是特征点数目，诸如不少于约10个、20个、30个、40个、50个、60个、70个、80个、90个、100个、150个、200个、500个或更多个特征点。如果主成像装置的图像质量未满足某一准则和/或未超过某一阈值，则可以确定辅成像装置的图像质量。可以基于一个或多个准则来选择所述辅成像装置中的至少一个用于处理状态信息。

当主成像装置未拍摄到具有令人满意的质量的图像序列时，对用于处理状态信息的成像装置的选择可以基于一个或多个准则。所述准则可以是：整体图像序列或该图像序列中的每个图像是否满足图像质量的最小阈值。所述准则可以是：所具有的图像序列拥有最高的平均图像质量的成像装置。所述准则可以是：在图像序列内具有最高的最大图像质量的成像装置。所述准则可以是：在图像序列内具有最高的最小图像质量的成像装置。应当理解，所述准则将会根据所要选择的成像装置的数目改变。例如，如果选择两个成像装置，则准则可以是在图像序列内具有第一和第二高的最大图像质量的两个成像装置。在一些实施方式中，出于确定用于选择成像装置(其图像序列将被评估以确定状态信息)的准则的目的，“特征点数目”将会与“图像质量”互换使用。在一些实施方式中，图像序列用于处理状态信息的辅成像装置可被指定为新的主成像装置。不具有令人满意的图像质量的先前的主成像装置可变成辅成像装置。在一些实施方式中，uav的运动方向可能不与主成像装置和辅成像装置相关联。

图10图示了根据实施方式用于基于主成像装置和辅成像装置来评估状态信息的方法1300。图10中的步骤1310-步骤1350可由一个或多个处理器来执行，其中一些处理器可由uav携带。在一些实施方式中，方法1300由uav的导航系统来执行。此外，可以在无需用户输入的情况下自动地执行所述步骤。可以按期望的速率重复图10中的步骤1310-步骤1350。所述速率可以小于或等于约每0.005秒一次、每0.01秒一次、每0.02秒一次、每0.05秒一次、每0.1秒一次、每0.2秒一次、每0.5秒一次、每1秒一次、每2秒一次、每5秒一次、每10秒一次、每20秒一次、每50秒一次、每100秒一次、每200秒一次、每500秒一次、每1000秒一次或每3600秒一次。在一些实施方式中，所述速率可以是约每0.02秒一次至约每0.1秒一次。

在步骤1310中，可以在一时间间隔内由多个成像装置中的每个成像装置捕捉多个图像。所述时间间隔可以小于或等于约0.005秒、0.01秒、0.02秒、0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒、20秒、50秒、100秒、200秒、500秒、1000秒或3600秒。在一些实施方式中，时间间隔可在从约0.02秒到约0.1秒的范围内。在所述时间间隔期间捕捉到的图像序列可以包括约1个图像、2个图像、5个图像、10个图像、20个图像、50个图像、100个图像、200个图像、500个图像或1000个图像。如本文先前所讨论，成像装置可以布置在uav上，以便从不同的视野捕捉所述多个图像中的每个图像。可选地，成像装置可以布置在uav上，以便利用不同的视野来捕捉所述多个图像中的每个图像。多个成像装置可包括一个或多个主成像装置(例如，单一主成像装置)以及一个或多个辅成像装置。

在步骤1320中，如先前所描述，可以评估来自主成像装置的多个图像的图像质量(例如，借助于处理器)以确定所述图像质量是否满足预定阈值。在一些实施方式中，图像质量可基于图像中特征点的总数来确定。如果所述图像序列中的图像质量满足预定阈值，则可以使用由主成像装置捕捉到的图像来评估或确定所述状态信息。备选地，可以使用其他类型的准则来评估来自主成像装置的图像的图像质量。所述准则可以是：整体图像序列或该序列中的每个图像是否满足图像质量的最小阈值。在一些实施方式中，出于确定是否将会使用由主成像装置拍摄的图像用于处理uav状态信息的准则的目的，“特征点数目”将会与“图像质量”互换使用。

在步骤1325中，如果如步骤1320中所评估：图像质量满足预定阈值(或者满足准则)，则可借助于处理器使用由主成像装置拍摄的多个图像来评估uav的状态信息。

在步骤1330中，如果在步骤1320中图像质量未满足预定阈值(或者满足准则)，则可借助于处理器评估来自所述一个或多个辅成像装置的多个图像的图像质量。在一些实施方式中，如本文先前所描述，可以通过图像中特征点的总数来评估或确定图像质量。

在步骤1340中，可以基于步骤1330的评估来选择所述一个或多个辅成像装置中的至少一个。对成像装置的选择可以基于一个或多个准则。所述准则可以是：整体图像序列或该序列中的每个图像是否满足图像质量的最小阈值。所述准则可以是：所具有图像序列拥有最高的平均图像质量的成像装置。所述准则可以是：在图像序列内具有最高的最大图像质量的成像装置。所述准则可以是：在图像序列内具有最高的最小图像质量的成像装置。应当理解，所述准则将会根据所要选择的成像装置的数目改变。例如，如果选择两个成像装置，则准则可以是在图像序列内具有第一和第二高的最大图像质量的两个成像装置。在一些实施方式中，出于确定用于选择成像装置的准则的目的(所述成像装置的图像序列将被评估以确定状态信息)，“特征点数目”将会与“图像质量”互换使用。

在一些实施方式中，如果由一个或多个辅成像装置拍摄的图像序列具有低于一个或多个主成像装置的图像质量(例如，没有一个成像装置捕捉到超过预定阈值的图像序列)，则可以选择主成像装置用于评估uav的状态信息的目的，尽管主成像装置并没有超过预定准则或阈值。

在步骤1350中，可以借助于处理器使用来自步骤1340中选定的一个或多个辅成像装置的多个图像来评估uav的状态信息。如本文先前所描述，所述状态信息可例如基于由选定的成像装置所捕捉到的图像序列来确定。在一些实施方式中，如果辅成像装置拍摄到质量低于主成像装置的图像序列，则可借助于处理器使用由主成像装置拍摄的多个图像来评估uav的状态信息。在一些实施方式中，状态信息评估的结果可基于所使用的成像序列的视野有所不同。因此，对状态信息的评估(其可用于导航)可以将一个或多个选定的成像装置的视野的任何变化纳入考虑。

在一些实施方式中，一个或多个成像装置的一个或多个图像序列被用于评估uav的状态信息，所述一个或多个成像装置可以成为或保持作为“一个或多个主成像装置”。主成像装置是这样的成像装置：其图像序列总是被评估以确定图像质量，并且，如果该图像质量被认为是令人满意的，则使用其图像序列来评估uav的状态信息。一个或多个图像序列未被用于评估uav的状态信息的一个或多个成像装置可以成为或保持作为“一个或多个辅成像装置”。辅成像装置是这样的成像装置：只有当由主成像装置拍摄的图像序列的图像质量被认为不令人满意时，才会针对该辅成像装置的图像序列进行图像质量评估。

可选地，步骤1350中评估的状态信息可用作输出用以使uav在环境内导航的信号的基础。所述信号可包括用于uav的动力系统(例如，旋翼)的控制信号，用以实现载运工具的移动。所述信号可以基于输入到远程终端或其他用户装置中并随后传输至uav的用户命令而生成。备选地，所述信号可由uav(例如，自动化机载控制器)自主地生成。在一些情况下，所述信号可以利用来自用户输入和自动化的贡献半自主地生成。

图11图示了根据实施方式由三个辅成像装置获取的三个图像序列的示例性特征点数目。图像序列1405示出了由辅成像装置#1拍摄的十个图像帧的特征点数目。图像序列1410示出了由辅成像装置#2拍摄的十个图像帧的特征点数目。图像序列1415示出了由辅成像装置#3拍摄的十个图像帧的特征点数目。如本文先前所描述，成像装置#1、成像装置#2和成像装置#3可以利用不同视野和/或利用不同光轴来捕捉图像。在图11的实施方式中，在时间间隔t(未示出)期间，由“主成像装置”拍摄的每个图像帧中的特征点数目小于阈值t1。阈值t1可以是约100个特征点。因此，可能并不一定使用由主成像装置拍摄的图像来评估uav的状态信息，并且可以评估由辅成像装置(其相对于彼此以及相对于主成像装置具有不同的视野)拍摄的图像的图像质量。

可以对从每个辅成像装置在时间t(例如，2秒)期间所拍摄的10个图像帧中的每一个提取的特征点数目进行计数，以便确定是否存在更适合于评估状态信息的图像序列。在图11中，由辅成像装置#1拍摄的10个帧中的特征点的最小数目为51(帧2中所示)，由辅成像装置#2拍摄的10个帧中的特征点的最小数目为62(帧6中所示)，而由辅成像装置#3拍摄的10个帧中的特征点的最小数目为49(帧1中所示)。可以选择拍摄了在这些最小数目中具有最大值的图像帧的辅成像装置(例如，辅成像装置#2)。选定的辅成像装置可以成为主成像装置和/或被选择用于确定状态信息。在一些实施方式中，如果由选定的辅成像装置拍摄的10个帧中的特征点的最小数目大于第二阈值t2，则已选定的辅成像装置可以成为主成像装置和/或被选择用于确定状态信息。阈值t2可以是约120个特征点。在一些实施方式中，可以使用由新的主成像装置拍摄的图像序列来处理uav的状态信息。

备选地，可以比较由辅成像装置拍摄的10个图像帧中的特征点数目中的最大值，以选择成像装置。在图11中，该最大值对于辅成像装置#1为72(帧4中所示)，对于辅成像装置#2为82(帧4中所示)，而对于辅成像装置#3为77(帧10中所示)。可以选择拍摄了在这些最大数目中具有最大值的图像帧的辅成像装置(例如，辅成像装置#2)。选定的辅成像装置可以成为主成像装置和/或被选择用于评估状态信息。在一些实施方式中，如果由选定的辅成像装置拍摄的10个帧中的特征点的最大数目大于第二阈值t2，则已选定的辅成像装置可以成为主成像装置和/或被选择用于确定状态信息。在一些实施方式中，可以使用由新的主成像装置拍摄的图像序列来处理uav的状态信息。

备选地，可以比较由辅成像装置拍摄的10个图像帧中特征点的平均值或总值，以选择成像装置。在图11中，对于辅成像装置#1，该平均值为61.1(总值为611)；对于辅成像装置#2，该平均值为71.3(总值为713)；而对于辅成像装置#3，该平均值为64.1(总值为641)。可以选择具有特征点的最高平均值或总值的辅成像装置(例如，辅成像装置#2)。选定的辅成像装置可以成为主成像装置和/或被选择用于确定状态信息。在一些实施方式中，如果由选定的辅成像装置拍摄的10个帧中特征点的平均数目或总数大于第二阈值t2，则已选定的辅成像装置可以成为主成像装置和/或被选择用于评估状态信息。在一些实施方式中，可以使用由新的主成像装置拍摄的图像序列来处理uav的状态信息。

当主成像装置未捕捉到适合用于确定状态信息的图像序列时，可以选择已捕捉到具有高图像质量值的图像序列的辅成像装置来评估uav的状态信息。在一些实施方式中，可以选择先前描述的其他准则作为选择最适合于评估uav状态信息的成像装置的基础。本文描述并在图11中示出的方法可以与其他方法组合使用(例如，作为方法1000中的步骤1030-步骤1050的一部分来执行)。例如，可以评估状态信息，并将其用作向安装在载运工具上的一个或多个动力单元输出用于实现载运工具移动的控制信号的基础。

本文所描述的系统、装置和方法可以适用于众多可移动物体。如前文所提及，本文对飞行器的任何描述均可适用于和用于任何可移动物体。本发明的可移动物体可被配置用于在任何合适的环境内移动，诸如在空中(例如，固定翼航空器、旋转翼航空器或者既不具有固定翼也不具有旋转翼的航空器)、在水中(例如，船舶或潜艇)、在地面上(例如，机动车，诸如轿车、卡车、公交车、厢式货车、摩托车；可移动结构或框架，诸如棒状物、钓鱼竿；或者火车)、在地下(例如，地铁)、在太空(例如，航天飞机、卫星或探测器)或者这些环境的任何组合。可移动物体可以是载运工具，诸如本文别处所描述的载运工具。在一些实施方式中，可移动物体可以安装在诸如人类或动物等活体身上。合适的动物可以包括禽类、犬类、猫类、马类、牛类、羊类、猪类、海豚、啮齿类或昆虫。

可移动物体能够在所述环境内关于六个自由度(例如，三个平移自由度和三个旋转自由度)自由移动。备选地，可移动物体的移动可能在一个或多个自由度受到约束，诸如由预定路径、轨迹或定向所约束。所述移动可以由诸如引擎或马达等任何合适的致动机构所致动。可移动物体的致动机构可以由任何合适的能源提供动力，所述能源诸如为电能、磁能、太阳能、风能、引力能、化学能、核能或者其任何合适的组合。可移动物体可以如本文别处所述经由动力系统自推进。所述动力系统可以可选地依靠能源运行，所述能源诸如为电能、磁能、太阳能、风能、引力能、化学能、核能或者其任何合适的组合。备选地，可移动物体可以由生物所携带。

在一些情况下，所述可移动物体可以是载运工具。合适的载运工具可以包括水上载运工具、飞行器、空间载运工具或地面载运工具。例如，飞行器可以是固定翼航空器(例如，飞机、滑翔机)、旋转翼航空器(例如，直升机、旋翼飞机)、同时具有固定翼和旋转翼的航空器或者既无固定翼又无旋转翼的航空器(例如，飞艇、热气球)。载运工具可以是自推进式，诸如在空中、在水上或水中、在太空中或者在地面上或地面下自推进。自推进式载运工具可以利用动力系统，诸如包括一个或多个引擎、马达、轮子、轮轴、磁体、旋翼、螺旋桨、桨叶、喷嘴或者其任何合适组合的动力系统。在一些情况下，动力系统可以用于使可移动物体能够从表面起飞、降落到表面上、维持其当前位置和/或定向(例如，悬停)、改变定向和/或改变位置。

可移动物体可以由用户遥控或者由可移动物体之内或之上的乘员在本地控制。在一些实施方式中，可移动物体是无人可移动物体，诸如uav。无人可移动物体，诸如uav，可以不具有该可移动物体机载的乘员。可移动物体可以由人类或自主控制系统(例如，计算机控制系统)或者其任何合适的组合来控制。可移动物体可以是自主式或半自主式机器人，诸如配置有人工智能的机器人。

可移动物体可以具有任何合适的大小和/或尺寸。在一些实施方式中，可移动物体可以具有使人类乘员身处载运工具之内或之上的大小和/或尺寸。备选地，可移动物体可以具有比能够使人类乘员身处载运工具之内或之上的大小和/或尺寸更小的大小和/或尺寸。可移动物体可以具有适合于由人类搬运或携带的大小和/或尺寸。备选地，可移动物体可以大于适合由人类搬运或携带的大小和/或尺寸。在一些情况下，可移动物体可以具有的最大尺寸(例如，长度、宽度、高度、直径、对角线)小于或等于约：2cm、5cm、10cm、50cm、1m、2m、5m或10m。该最大尺寸可以大于或等于约：2cm、5cm、10cm、50cm、1m、2m、5m或10m。例如，可移动物体的相对旋翼的轴之间的距离可以小于或等于约：2cm、5cm、10cm、50cm、1m、2m、5m或10m。备选地，相对旋翼的轴之间的距离可以大于或等于约：2cm、5cm、10cm、50cm、1m、2m、5m或10m。

在一些实施方式中，可移动物体可以具有小于100cmx100cmx100cm、小于50cmx50cmx30cm或小于5cmx5cmx3cm的体积。可移动物体的总体积可以小于或等于约：1cm³、2cm³、5cm³、10cm³、20cm³、30cm³、40cm³、50cm³、60cm³、70cm³、80cm³、90cm³、100cm³、150cm³、200cm³、300cm³、500cm³、750cm³、1000cm³、5000cm³、10,000cm³、100,000cm³、1m³或10m³。相反地，可移动物体的总体积可以大于或等于约：1cm³、2cm³、5cm³、10cm³、20cm³、30cm³、40cm³、50cm³、60cm³、70cm³、80cm³、90cm³、100cm³、150cm³、200cm³、300cm³、500cm³、750cm³、1000cm³、5000cm³、10,000cm³、100,000cm³、1m³或10m³。

在一些实施方式中，可移动物体可以具有的占地面积(这可以指由所述可移动物体所包围的横截面面积)小于或等于约：32,000cm²、20,000cm²、10,000cm²、1,000cm²、500cm²、100cm²、50cm²、10cm²或5cm²。相反地，所述占地面积可以大于或等于约：32,000cm²、20,000cm²、10,000cm²、1,000cm²、500cm²、100cm²、50cm²、10cm²或5cm²。

在一些情况下，可移动物体可以不超过1000kg重。可移动物体的重量可以小于或等于约：1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kg或0.01kg。相反地，所述重量可以大于或等于约：1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kg或0.01kg。

在一些实施方式中，可移动物体相对于该可移动物体所携带的负荷可以较小。如下文进一步详述，所述负荷可以包括负载和/或载体。在一些示例中，可移动物体重量与负荷重量之比可以大于、小于或等于约1:1。在一些情况下，可移动物体重量与负荷重量之比可以大于、小于或等于约1:1。可选地，载体重量与负荷重量之比可以大于、小于或等于约1:1。当需要时，可移动物体重量与负荷重量之比可以小于或等于：1:2、1:3、1:4、1:5、1:10或者甚至更小。相反地，可移动物体重量与负荷重量之比还可以大于或等于：2:1、3:1、4:1、5:1、10:1或者甚至更大。

在一些实施方式中，可移动物体可以具有低能耗。例如，可移动物体可以使用小于约：5w/h、4w/h、3w/h、2w/h、1w/h或更小。在一些情况下，可移动物体的载体可以具有低能耗。例如，所述载体可以使用小于约：5w/h、4w/h、3w/h、2w/h、1w/h或更小。可选地，可移动物体的负载可以具有低能耗，诸如小于约：5w/h、4w/h、3w/h、2w/h、1w/h或更小。

图12图示了根据本发明的实施方式的无人飞行器(uav)1500。该uav可以是如本文所述的可移动物体的示例。uav1500可以包括具有四个旋翼1502、1504、1506和1508的动力系统。可以提供任何数目的旋翼(例如，一个、两个、三个、四个、五个、六个、七个、八个或更多个)。无人飞行器的旋翼、旋翼组件或其他动力系统可使该无人飞行器能够悬停/维持位置、改变定向和/或改变位置。相对旋翼的轴之间的距离可以是任何合适的长度1510。例如，长度1510可以小于或等于2m，或者小于或等于5m。在一些实施方式中，长度1510可以在从40cm到1m、从10cm到2m或者从5cm到5m的范围内。本文对uav的任何描述均可适用于可移动物体，诸如不同类型的可移动物体，并且反之亦然。

在一些实施方式中，可移动物体可被配置用于携带负荷。该负荷可以包括乘客、货物、器材、仪器等之中的一种或多种。该负荷可以提供在外壳内。该外壳可以与可移动物体的外壳相分离，或者是可移动物体的外壳的一部分。备选地，负荷可以被提供有外壳，而可移动物体不具有外壳。备选地，负荷的部分或者整个负荷可以在不具有外壳的情况下提供。负荷可以相对于所述可移动物体刚性固定。可选地，负荷可以是相对于可移动物体可移动的(例如，可以相对于可移动物体平移或旋转)。

在一些实施方式中，负荷包括负载。所述负载可被配置成不执行任何操作或功能。备选地，负载可以是被配置用于执行操作或功能的负载，亦称为功能性负载。例如，负载可以包括一个或多个传感器，用于勘测一个或多个目标。任何合适的传感器均可并入到负载中，诸如图像捕捉装置(例如，相机)、音频捕捉装置(例如，抛物面麦克风)、红外成像装置或紫外成像装置。所述传感器可以提供静态感测数据(例如，照片)或动态感测数据(例如，视频)。在一些实施方式中，传感器提供针对负载的目标的感测数据。备选地或组合地，负载可以包括一个或多个发射体，用于向一个或多个目标提供信号。可以使用任何合适的发射体，诸如照明源或声源。在一些实施方式中，负载包括一个或多个收发器，诸如用于与远离可移动物体的模块通信。可选地，负载可被配置用于与环境或目标交互。例如，负载可以包括能够操纵物体的工具、仪器或机构，诸如机械臂。

可选地，负荷可以包括载体。该载体可被提供用于负载，并且所述负载可经由该载体直接地(例如，直接接触可移动物体)或间接地(例如，不接触可移动物体)耦合至可移动物体。相反地，负载可在无需载体的情况下安装在可移动物体上。负载可与载体一体成型。备选地，负载可以可拆卸地耦合至载体。在一些实施方式中，负载可以包括一个或多个负载元件，并且所述负载元件中的一个或多个可如上文所述可以相对于可移动物体和/或载体移动。

载体可以与可移动物体一体成型。备选地，载体可以可拆卸地耦合至可移动物体。载体可以直接地或间接地耦合至可移动物体。载体可以向负载提供支撑(例如，承载所述负载的重量的至少一部分)。载体可以包括能够稳定和/或引导负载移动的合适的安装结构(例如，云台平台)。在一些实施方式中，载体可以适于控制负载相对于可移动物体的状态(例如，位置和/或定向)。例如，载体可被配置用于相对于可移动物体移动(例如，关于一个、两个或三个平移度和/或一个、两个或三个旋转度)，以使得负载相对于合适的参考系维持其位置和/或定向，而不管可移动物体的移动如何。所述参考系可以是固定参考系(例如，周围环境)。备选地，所述参考系可以是移动参考系(例如，可移动物体、负载目标)。

在一些实施方式中，载体可被配置用于允许负载相对于载体和/或可移动物体的移动。所述移动可以是关于多达三个自由度的平移(例如，沿着一个、两个或三个轴)，或者是关于多达三个自由度的旋转(例如，围绕一个、两个或三个轴)，或者是其任何合适组合。

在一些情况下，载体可以包括载体机架组件以及载体致动组件。所述载体机架组件可以向负载提供结构支撑。载体机架组件可以包括单独的载体机架组件，其中一些组件可以是可相对于彼此移动的。所述载体致动组件可以包括一个或多个致动器(例如，马达)，所述致动器致动单个载体机架部件移动。致动器可以允许多个载体机架部件同时移动，或者可被配置用于每次允许单一载体机架部件移动。载体机架部件的移动可以产生负载的对应移动。例如，载体致动组件可以致动一个或多个载体机架部件围绕一个或多个旋转轴(例如，横滚轴、俯仰轴或偏航轴)旋转。所述一个或多个载体机架部件的旋转可以使负载相对于可移动物体围绕一个或多个旋转轴旋转。备选地或组合地，载体致动组件可以致动一个或多个载体机架部件沿着一个或多个平移轴平移，并从而产生负载相对于可移动物体沿着一个或多个对应的轴平移。

在一些实施方式中，可移动物体、载体和负载相对于固定参考系(例如，周围环境)和/或相对于彼此的移动可以由终端来控制。所述终端可以是处于远离所述可移动物体、载体和/或负载的位置处的遥控装置。终端可以安置于支撑平台上或者固定至支撑平台。备选地，终端可以是手持式或可穿戴式装置。例如，终端可以包括智能电话、平板计算机、笔记本电脑、计算机、眼镜、手套、头盔、麦克风或者其合适的组合。终端可以包括用户界面，诸如键盘、鼠标、操纵杆、触摸屏或显示器。任何合适的用户输入均可用于与终端交互，诸如手动输入命令、语音控制、手势控制或位置控制(例如，经由终端的移动、位置或倾斜)。

终端可以用于控制可移动物体、载体和/或负载的任何合适的状态。例如，终端可以用于控制可移动物体、载体和/或负载相对于固定参考系和/或相对于彼此的位置和/或定向。在一些实施方式中，终端可以用于控制可移动物体、载体和/或负载的单独元件，诸如载体的致动组件、负载的传感器或者负载的发射器。终端可以包括适于与可移动物体、载体或负载中的一个或多个通信的无线通信装置。

终端可以包括用于查看可移动物体、载体和/或负载的信息的合适的显示单元。例如，终端可被配置用于显示可移动物体、载体和/或负载关于位置、平移速度、平移加速度、定向、角速度、角加速度或其任何合适的组合的信息。在一些实施方式中，终端可以显示由负载提供的信息，诸如由功能性负载提供的数据(例如，由相机或其他图像捕捉装置记录的图像)。

可选地，同一终端可以同时控制可移动物体、载体和/或负载或者所述可移动物体、载体和/或负载的状态，以及接收和/或显示来自所述可移动物体、载体和/或负载的信息。例如，终端可以控制负载相对于环境的定位，同时显示由负载捕捉的图像数据，或者关于负载的位置的信息。备选地，不同的终端可以用于不同的功能。例如，第一终端可以控制可移动物体、载体和/或负载的移动或状态，而第二终端可以接收和/或显示来自可移动物体、载体和/或负载的信息。例如，第一终端可以用于控制负载相对于环境的定位，而第二终端显示由该负载捕捉的图像数据。可以在可移动物体与同时控制该可移动物体并接收数据的集成终端之间或者在可移动物体与同时控制该可移动物体并接收数据的多个终端之间利用各种通信模式。例如，可以在可移动物体与同时控制该可移动物体并接收来自该可移动物体的数据的终端之间形成至少两种不同的通信模式。

图13图示了根据实施方式的包括载体1602和负载1604的可移动物体1600。虽然可移动物体1600被描绘为航空器，但此描绘并不旨在成为限制性的，并且如本文先前所述可以使用任何合适类型的可移动物体。本领域技术人员将会理解，本文在航空器系统的情景下描述的实施方式中的任一均可适用于任何合适的可移动物体(例如，uav)。在一些情况下，可以在可移动物体1600上提供负载1604而无需载体1602。可移动物体1600可以包括动力机构1606、感测系统1608和通信系统1610。

如前文所述，动力机构1606可以包括旋翼、螺旋桨、桨叶、引擎、马达、轮子、轮轴、磁体或喷嘴中的一种或多种。例如，动力机构1606可以是如本文别处所公开的旋翼组件或其他旋转动力单元。可移动物体可以具有一个或多个、两个或更多个、三个或更多个或者四个或更多个动力机构。动力机构可以全都是同一类型。备选地，一个或多个动力机构可以是不同类型的动力机构。动力机构1606可以使用任何合适的手段安装在可移动物体1600上，诸如为本文别处所述的支撑元件(例如，驱动轴)。动力机构1606可以安装在可移动物体1600的任何合适的部分上，诸如顶部、底部、前面、后面、侧面或其合适的组合。

在一些实施方式中，动力机构1606可以使得可移动物体1600能够从表面垂直地起飞或者垂直地降落在表面上而无需可移动物体1600的任何水平移动(例如，无需沿着跑道行进)。可选地，动力机构1606可以可操作地允许可移动物体1600以指定位置和/或定向悬停于空中。动力机构1600中的一个或多个可以独立于其他动力机构得到控制。备选地，动力机构1600可被配置成同时受到控制。例如，可移动物体1600可以具有多个水平定向的旋翼，所述旋翼可以向该可移动物体提供升力和/或推力。可以致动所述多个水平定向的旋翼以向可移动物体1600提供垂直起飞、垂直降落以及悬停能力。在一些实施方式中，所述水平定向的旋翼中的一个或多个可以在顺时针方向上旋转，同时所述水平旋翼中的一个或多个可以在逆时针方向上旋转。例如，顺时针旋翼的数目可以等于逆时针旋翼的数目。水平定向的旋翼中每个的旋转速率可独立地改变，以便控制由每个旋翼产生的升力和/或推力，并从而调整可移动物体1600的空间布局、速度和/或加速度(例如，关于多达三个平移度和多达三个旋转度)。

感测系统1608可以包括一个或多个传感器，所述传感器可以感测可移动物体1600的空间布局、速度和/或加速度(例如，关于多达三个平移度和多达三个旋转度)。所述一个或多个传感器可以包括全球定位系统(gps)传感器、运动传感器、惯性传感器、接近式传感器或图像传感器。由感测系统1608提供的感测数据可以用于控制可移动物体1600的空间布局、速度和/或定向(例如，使用合适的处理单元和/或控制模块，如下文所述)。备选地，感测系统1608可以用于提供关于可移动物体周围环境的数据，诸如气象条件、距潜在障碍物的接近度、地理特征的位置、人造结构的位置等。

通信系统1610支持经由无线信号1616与具有通信系统1614的终端1612的通信。通信系统1610、1614可以包括任何数目的适合于无线通信的发射器、接收器和/或收发器。所述通信可以是单向通信，使得数据只能在一个方向上传输。例如，单向通信可以仅涉及可移动物体1600向终端1612传输数据，或者反之亦然。数据可以从通信系统1610的一个或多个发射器传输至通信系统1612的一个或多个接收器，或者反之亦然。备选地，所述通信可以是双向通信，使得数据在可移动物体1600与终端1612之间的两个方向上均可传输。双向通信可以涉及从通信系统1610的一个或多个发射器向通信系统1614的一个或多个接收器传输数据，并且反之亦然。

在一些实施方式中，终端1612可以向可移动物体1600、载体1602和负载1604中的一个或多个提供控制数据，以及从可移动物体1600、载体1602和负载1604中的一个或多个接收信息(例如，可移动物体、载体或负载的位置和/或运动信息；由负载感测到的数据，诸如由负载相机捕捉的图像数据)。在一些情况下，来自终端的控制数据可以包括针对可移动物体、载体和/或负载的相对位置、移动、致动或控制的指令。例如，控制数据可以导致可移动物体的位置和/或定向的修改(例如，经由动力机构1606的控制)，或者负载相对于可移动物体的移动(例如，经由载体1602的控制)。来自终端的控制数据可以导致对负载的控制，诸如对相机或其他图像捕捉装置的操作的控制(例如，拍摄静止或移动图片、放大或缩小、开启或关闭、切换成像模式、改变图像分辨率、改变聚焦、改变景深、改变曝光时间、改变视角或视野)。在一些情况下，来自可移动物体、载体和/或负载的通信可以包括来自(例如，感测系统1608的或负载1604的)一个或多个传感器的信息。所述通信可以包括来自一种或多种不同类型的传感器(例如，gps传感器、运动传感器、惯性传感器、接近式传感器或图像传感器)的感测到的信息。这样的信息可以关于可移动物体、载体和/或负载的定位(例如，位置、定向)、移动或加速度。来自负载的这样的信息可以包括由该负载捕捉的数据或该负载的感测到的状态。由终端1612提供并传输的控制数据可被配置用于控制可移动物体1600、载体1602或负载1604中的一个或多个的状态。备选地或组合地，每个载体1602和负载1604还可以包括通信模块，该通信模块被配置用于与终端1612通信，以使得该终端可独立地与可移动物体1600、载体1602和负载1604中的每一个通信和对其加以控制。

在一些实施方式中，可移动物体1600可以被配置用于与除终端1612以外或代替终端1612的另一远程装置通信。终端1612也可被配置用于与另一远程装置以及可移动物体1600通信。例如，可移动物体1600和/或终端1612可以与另一可移动物体或者另一可移动物体的载体或负载通信。当需要时，所述远程装置可以是第二终端或其他计算装置(例如，计算机、笔记本电脑、平板计算机、智能电话或其他移动装置)。远程装置可被配置用于向可移动物体1600传输数据、从可移动物体1600接收数据、向终端1612传输数据和/或者从终端1612接收数据。可选地，远程装置可以连接至因特网或其他电信网络，以使得从可移动物体1600和/或终端1612接收的数据可被上传至网站或服务器。

图14是根据实施方式的用于控制可移动物体的系统1700框图的示意图。系统1700可以与本文所公开的系统、装置和方法的任何合适的实施方式组合使用。系统1700可以包括感测模块1702、处理单元1704、非暂时性计算机可读介质1706、控制模块1708和通信模块1710。

感测模块1702可以利用不同类型的传感器以不同方式收集与可移动物体相关的信息。不同类型的传感器可以感测不同类型的信号或者来自不同来源的信号。例如，所述传感器可以包括惯性传感器、gps传感器、接近式传感器(例如，激光雷达)或视觉/图像传感器(例如，相机)。感测模块1702可以可操作地耦合至具有多个处理器的处理单元1704。在一些实施方式中，感测模块可以可操作地耦合至传输模块1712(例如，wi-fi图像传输模块)，该传输模块被配置用于向合适的外部装置或系统直接传输感测数据。例如，传输模块1712可以用于向远程终端传输由感测模块1702的相机捕捉的图像。

处理单元1704可以具有一个或多个处理器，诸如可编程处理器(例如，中央处理单元(cpu))。处理单元1704可以可操作地耦合至非暂时性计算机可读介质1706。非暂时性计算机可读介质1706可以存储可由处理单元1704执行的逻辑、代码和/或程序指令，用以执行一个或多个步骤。非暂时性计算机可读介质可以包括一个或多个存储器单元(例如，可移动介质或外部存储装置，诸如sd卡或随机存取存储器(ram))。在一些实施方式中，来自感测模块1702的数据可直接传送至并存储于非暂时性计算机可读介质1706的存储器单元内。非暂时性计算机可读介质1706的存储器单元可以存储可由处理单元1704执行的逻辑、代码和/或程序指令，用以执行本文所描述的方法的任何合适的实施方式。例如，处理单元1704可被配置用于执行指令，从而使处理单元1704的一个或多个处理器分析由感测模块所产生的感测数据。存储器单元可以存储由处理单元1704处理的、来自感测模块的感测数据。在一些实施方式中，非暂时性计算机可读介质1706的存储器单元可以用于存储由处理单元1704产生的处理结果。

在一些实施方式中，处理单元1704可以可操作地耦合至控制模块1708，该控制模块1708被配置用于控制可移动物体的状态。例如，控制模块1708可被配置用于控制可移动物体的动力机构以调整可移动物体关于六个自由度的空间布局、速度和/或加速度。备选地或组合地，控制模块1708可以控制载体、负载或感测模块中的一个或多个的状态。

处理单元1704可以可操作地耦合至通信模块1710，该通信模块1710被配置用于传输和/或接收来自一个或多个外部装置(例如，终端、显示装置或其他遥控器)的数据。可以使用任何合适的通信手段，诸如有线通信或无线通信。例如，通信模块1710可以利用局域网(lan)、广域网(wan)、红外、无线电、wifi、点对点(p2p)网络、电信网络、云通信等之中的一种或多种。可选地，可以使用中继站，诸如塔、卫星或移动台。无线通信可以依赖于接近度或独立于接近度。在一些实施方式中，通信可能需要或者可能不需要视线传播。通信模块1710可以传输和/或接收来自感测模块1702的感测数据、由处理单元1704产生的处理结果、预定控制数据、来自终端或遥控器的用户命令等之中的一个或多个。

系统1700的部件可以按任何合适的配置来布置。例如，系统1700的部件中的一个或多个可以位于可移动物体、载体、负载、终端、感测系统或与上述的一个或多个通信的附加的外部装置上。此外，虽然图14描绘了单一处理单元1704和单一非暂时性计算机可读介质1706，但本领域技术人员将会理解，这并不旨在成为限制性的，并且系统1700可以包括多个处理单元和/或非暂时性计算机可读介质。在一些实施方式中，所述多个处理单元和/或非暂时性计算机可读介质中的一个或多个可以位于不同的位置，诸如在可移动物体、载体、负载、终端、感测模块、与上述的一个或多个通信的附加的外部装置上或其合适的组合上，以使得由系统1700执行的处理和/或存储器功能的任何合适的方面可以发生于上述位置中的一个或多个处。

本文所使用的“a和/或b”包括a或b中的一个或多个以及它们的组合，诸如a和b。

虽然本文已经示出和描述了本发明的优选实施方式，但对于本领域技术人员明显的是，这样的实施方式只是以示例的方式提供的。本领域技术人员现将会在不偏离本发明的情况下想到许多变化、改变和替代。应当理解，在实践本发明的过程中可以采用对本文所描述的本发明实施方式的各种备选方案。所附权利要求旨在限定本发明的范围，并因此覆盖这些权利要求及其等效项的范围内的方法和结构。