一种信息处理方法和电子设备的制造方法

文档序号:10516003阅读:138来源:国知局
一种信息处理方法和电子设备的制造方法
【专利摘要】本发明公开一种信息处理方法,应用于可移动的电子设备,电子设备具有图像采集单元,图像采集单元能够进行图像采集;所述方法包括:获得第一指令,第一指令用于指示进行基于目标跟随的图像采集;响应第一指令,获得目标对象与电子设备之间的位置信息;根据位置信息获得第一参数,并根据第一参数控制电子设备的移动状态,以使电子设备跟随所述目标对象,第一参数为控制电子设备移动状态的参数;且,根据位置信息获得第二参数,并根据第二参数控制图像采集单元的图像采集姿态,以使电子设备在跟随目标对象的过程中,图像采集单元能够获得满足第一条件的图像。本发明还公开了一种电子设备。
【专利说明】
_种信息处理方法和电子设备
技术领域
[0001]本发明涉及智能拍摄技术领域,尤其涉及一种信息处理方法和电子设备。
【背景技术】
[0002]现有技术中常见的图像/视频拍摄手段有:1、工作人员手持/肩扛摄像机进行拍摄;2、将摄像机安装在吊臂上,工作人员控制吊臂的运动,实现对目标的拍摄;3、将摄像机安装在导轨上,通过控制摄像机在导轨上的移动,实现对目标的拍摄。这些拍摄手段都有一定的局限性,这些局限性至少包括:拍摄环境的局限、拍摄范围的局限等等。因此,为实现自由度和灵活性更高的图像/视频拍摄,提出本发明的技术方案。

【发明内容】

[0003]为解决现有存在的技术问题,本发明实施例期望提供一种信息处理方法和电子设备。
[0004]本发明实施例是这样实现的:
[0005]本发明实施例提供了一种信息处理方法,应用于可移动的电子设备,所述电子设备具有图像采集单元,所述图像采集单元能够进行图像采集;所述方法包括:
[0006]获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;
[0007]响应所述第一指令,获得目标对象与所述电子设备之间的位置信息;
[0008]根据所述位置信息获得第一参数,并根据所述第一参数控制所述电子设备的移动状态,以使所述电子设备跟随所述目标对象,所述第一参数为控制所述电子设备移动状态的参数;
[0009]且,根据所述位置信息获得第二参数,并根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述电子设备在跟随所述目标对象的过程中,所述图像采集单元能够获得满足第一条件的图像。
[0010]上述方案中,所述电子设备保存有预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,使所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外;所述方法还包括:
[0011 ]在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述电子设备的移动状态,使所述电子设备仅在所述移动轨迹上或移动区域内跟随所述目标对象。
[0012]上述方案中,所述电子设备保存有预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略,所述方法还包括:
[0013]获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像采集;
[0014]响应所述第二指令,根据所述第二限制数据控制所述电子设备在所述限制移动轨迹上按所述移动策略进行移动,且在所述电子设备移动的过程中,获得目标对象与所述电子设备之间的位置信息,并根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述电子设备在移动的过程中,所述图像采集单元能够获得满足第一条件的图像。
[0015]上述方案中,所述方法还包括:通过以下方式记录所述电子设备的限制移动轨迹:
[0016]获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹;
[0017]响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据以及惯性测量单元(MU)数据,所述码盘数据以及頂U数据用于描述所述限制移动轨迹;
[0018]获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹;
[0019]响应所述第四指令,保存记录的所述码盘数据以及頂U数据。
[0020]上述方案中,所述方法还包括:获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述电子设备自身的姿态。
[0021]上述方案中,所述目标对象上设有超宽带(UWB)信标,所述电子设备包括UWB单元,所述获得目标对象与电子设备之间的位置信息,包括:
[0022]所述电子设备通过UWB单元与所述UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。
[0023]本发明实施例还提供了一种电子设备,包括:移动单元、图像采集单元和目标锁定单元,所述图像采集单元和目标锁定单元设置于所述移动单元上,所述移动单元能够搭载所述图像采集单元和目标锁定单元移动,所述目标锁定单元用于锁定目标对象,所述图像采集单元用于进行图像采集;
[0024]所述目标锁定单元还用于,获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;响应所述第一指令,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述移动单元和所述图像采集单元;
[0025]所述移动单元还用于,接收所述目标锁定单元发送的所述位置信息,根据所述位置信息获得第一参数,并根据所述第一参数控制所述移动单元的移动状态,以使所述移动单元跟随所述目标对象,所述第一参数为控制所述移动单元移动状态的参数;
[0026]所述图像采集单元还用于,接收所述目标锁定单元发送的所述位置信息,根据所述位置信息获得第二参数,并根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述移动单元在跟随所述目标对象的过程中,所述图像采集单元能够获得满足第一条件的图像。
[0027]上述方案中,所述电子设备还包括:第一限制数据保存单元,用于保存预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外;
[0028]所述移动单元还用于,在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述电子设备的移动状态,使所述电子设备仅在所述移动轨迹上或移动区域内跟随所述目标对象。
[0029]上述方案中,所述电子设备还包括:
[0030]第二限制数据保存单元,用于保存预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略;
[0031]所述移动单元、目标锁定单元和图像采集单元还用于,获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像米集;
[0032]所述移动单元还用于,响应所述第二指令,根据所述第二限制数据控制所述电子设备在所述限制移动轨迹上按所述移动策略进行移动;
[0033]所述目标锁定单元还用于,在所述移动单元移动的过程中,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述图像采集单元;
[0034]所述图像采集单元还用于,根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述移动单元在移动的过程中,所述图像采集单元能够获得满足第一条件的图像。
[0035]上述方案中,所述电子设备还包括限制移动轨迹记录单元,用于通过以下方式记录所述电子设备的限制移动轨迹:
[0036]获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹;响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据以及惯性测量单元(MU)数据,所述码盘数据以及IMU数据用于描述所述限制移动轨迹;获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹;响应所述第四指令,停止记录所述码盘数据以及MU数据;
[0037]其中,记录的所述码盘数据以及MU数据存入所述第一限制数据保存单元或第二限制数据保存单元。
[0038]上述方案中,所述图像采集单元还用于,获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述电子设备自身的姿态。
[0039]上述方案中,所述目标锁定单元为超宽带(UWB)单元,
[0040]所述UWB单元用于,与所述目标对象上设有的UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。
[0041]本发明实施例所提供的一种信息处理方法和电子设备,使电子设备能够完成对目标对象的跟随,并能在跟随过程中适应性的调整图像采集单元的图像采集姿态,使目标对象始终处于图像采集单元的构图中。本发明实施例不受拍摄环境、拍摄范围的局限,能实现自由度和灵活性更高的图像/视频拍摄。
【附图说明】
[0042]图1为本发明实施例一的信息处理方法的流程图;
[0043]图2为本发明实施例二的电子设备的组成结构示意图;
[0044]图3为本发明实施例的一种实现自主跟随目标拍摄的自平衡车的组成结构示意图。
【具体实施方式】
[0045]下面结合附图和具体实施例对本发明的技术方案进一步详细阐述。
[0046]实施例一
[0047]本发明实施例一提供了一种信息处理方法,应用于可移动的电子设备,所述电子设备具有图像采集单元,图像采集单元能够进行图像采集;如图1所示,该方法包括:
[0048]步骤101,获得第一指令,第一指令用于指示进行基于目标跟随的图像采集。电子设备可以在用户触发跟随目标进行图像采集的操作时获得第一指令,例如:用户触发电子设备上的特定按钮时,电子设备获得所述第一指令,或者,用户触发控制界面(既可以是电子设备自身的控制界面,也可以是与电子设备保持通信的控制设备的控制界面)上的特定按钮时,电子设备获得所述第一指令,等等。
[0049]需要说明的是,本发明实施例所指的电子设备是能够实现自主移动的电子设备,所谓自主移动是指无需外部控制而能够根据自身所获得的信息实现自主的移动,如:根据对外部环境的检测实现自主移动控制(如避障、路径规划),或,基于目标跟随的自主移动控制等等。本发明实施例的电子设备需要至少具备目标跟随和图像采集这两种功能,所谓目标跟随是指电子设备能够跟随目标对象移动,如:与目标对象之间保持一定的距离和角度的跟随;所谓图像采集是指电子设备能够对目标对象进行图像采集,如拍照、录像。
[0050]步骤102,响应第一指令,获得目标对象与电子设备之间的位置信息。
[0051]在获得第一指令后,电子设备响应所述第一指令,并通过电子设备的位置信息测量工具获得目标对象与电子设备之间的位置信息。需要说明的是,位置信息测量工具可以有多种,这其中既包括能够测量目标对象和电子设备绝对位置信息的测量工具(如GPS定位工具),也包括能够测量目标对象和电子设备之间相对位置关系(如相对距离和夹角)的测量工具(如基于超宽带、超声波、红外测距、声呐、雷达、双目视觉等)。
[0052]步骤103a,根据位置信息获得第一参数,并根据第一参数控制电子设备的移动状态,以使电子设备跟随目标对象,第一参数为控制电子设备移动状态的参数。
[0053]在获得目标对象与电子设备之间的位置信息后,电子设备即能获得其与目标对象的相对位置关系,从而获得用来控制电子设备移动状态的第一参数,通过执行所述第一参数来控制电子设备移动,让电子设备能够实时的跟随目标对象。
[0054]例如:电子设备在通过GPS定位工具获得目标对象和电子设备的绝对位置信息后,根据预设的跟随条件(如跟随距离、跟随角度等),计算获得电子设备需要前往的绝对位置信息,并根据所述需要前往的绝对位置信息、以及电子设备当前所处的绝对位置信息计算获得第一参数,第一参数描述电子设备的平动速度和转动速度,电子设备通过按所述平动速度和转动速度行驶,到达需要前往的绝对位置;在行驶过程中,电子设备仍然会不断获得目标对象和电子设备的绝对位置信息,并不断计算新的第一参数,从而不断的控制电子设备的平动速度和转动速度,使电子设备能够连续的跟上目标对象。
[0055]再例如:电子设备通过相对位置测量工具(如基于超宽带、超声波、红外测距、声呐、雷达、双目视觉等)获得目标对象与电子设备之间的相对距离和夹角,根据预设的跟随条件(如跟随距离、跟随角度等),计算获得电子设备的距离调整量和角度调整量,并根据所述距离调整量和角度调整量计算获得第一参数,第一参数描述电子设备的平动速度和转动速度,电子设备按所述平动速度和转动速度行驶;在行驶过程中,电子设备仍然会不断获得目标对象和电子设备的相对位置信息,并不断计算新的第一参数,从而不断的控制电子设备的平动速度和转动速度,使电子设备能够连续的跟上目标对象。
[0056]步骤103b,根据位置信息获得第二参数,并根据第二参数控制图像采集单元的图像采集姿态,以使电子设备在跟随目标对象的过程中,图像采集单元能够获得满足第一条件的图像。
[0057]在获得目标对象与电子设备之间的位置信息后,电子设备即能获得其与目标对象的相对位置关系,从而能够根据这种相对位置关系获得用于控制图像采集单元的图像采集姿态的第二参数;根据第二参数来调整图像采集单元的图像采集姿态,使电子设备在跟随目标对象的过程中,图像采集单元能够采集获得满足第一条件的图像。
[0058]所述第一条件可用于限制目标对象在图像采集单元所采集图像中所处的位置/区域等,例如:第一条件用于限制目标对象只要处于图像采集单元的构图中即可,或者,第一条件用于限制目标对象处于图像采集单元的构图中心矩形/圆形区域,等等。
[0059 ]所述图像采集姿态可以包括图像采集单元的俯仰角(P i tch)、偏航角(yaw)和翻滚角(roll),pitch是指图像采集单元围绕X轴旋转的角度,yaw是指图像采集单元围绕Y轴旋转的角度,roll是指图像采集单元围绕Z轴旋转的角度。所述第二参数可以包括pitch调整量、yaw调整量和roll调整量,用来描述图像采集单元需要分别在pitch、yaw和roll上的调整量ο例如:通过Pi tch、yaw和ro 11的调整,使目标对象处于图像采集单元的构图中;或者,通过P i tch、yaw和ro 11的调整,使目标对象处于图像采集单元的构图中心矩形/圆形区域。
[0060]需要说明的是,本发明实施例中,电子设备按照一定的频率不断获得目标对象与电子设备之间的位置信息,从而不断更新相应的第一参数和第二参数,以不断的根据更新的第一参数来更新电子设备的移动状态,使电子设备连续的跟随目标对象,且,不断的根据更新的第二参数来更新图像采集单元的图像采集姿态,使图像采集单元在跟随所述目标对象的过程中,始终能够获得满足第一条件的图像。
[0061]在一实施方式中,电子设备保存有预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,使所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外,但所述电子设备在所述限制移动轨迹上或限制移动区域内的移动是具有自主性的;本发明实施例的方法还包括:
[0062]在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述电子设备的移动状态,使所述电子设备仅在所述限制移动轨迹上或限制移动区域内跟随所述目标对象。
[0063]也就是说,本实施方式通过预设第一限制数据的方式来限制电子设备的移动轨迹或移动区域,使移动设备仅在预设的移动轨迹上或移动区域内移动;那么,本实施方式使电子设备只能完成有限制条件(即移动轨迹或移动区域的限制)的跟随所述目标对象。有了第一限制数据的限制,电子设备在根据其与目标对象的位置信息获得第一参数后,需要用第一限制数据来修正第一参数,以防止不加修正的第一参数控制电子设备移动到限制移动轨迹或移动区域之外;具体的,电子设备可以根据第一参数预测电子设备的移动轨迹,将预测的移动轨迹与所述限制移动轨迹或限制移动区域进行比较,以判断预测的移动轨迹是否超出所述限制移动轨迹或限制移动区域,如果超出,则根据第一限制数据修正第一参数,使修正后的第一参数预测的移动轨迹不超出所述限制移动轨迹或限制移动区域,如果没超出,则无需对第一参数进行修正。
[0064]在另一实施方式中,电子设备保存有预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略,移动策略用于描述电子设备在所述限制移动轨迹上的移动规则(路线、时间、速度等等),本发明实施例的方法还包括:
[0065]获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像采集;例如:移动策略规定电子设备从限制移动轨迹上的A点移动到B点,或者,限制移动轨迹为闭环轨迹,移动策略规定电子设备沿所述闭环轨迹循环移动(即转圈),等等;
[0066]响应所述第二指令,根据所述第二限制数据控制所述电子设备在所述限制移动轨迹上按所述移动策略进行移动,且在所述电子设备移动的过程中,获得目标对象与所述电子设备之间的位置信息,并根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述电子设备在移动的过程中,所述图像采集单元能够获得满足第一条件的图像。
[0067]例如:根据所述第二限制数据控制电子设备从限制移动轨迹上的A点移动到B点,在移动过程中,电子设备获得目标对象与所述电子设备之间的位置信息,进而依此获得用于控制图像采集单元的图像采集姿态的第二参数,通过所述第二参数来控制图像采集单元的姿态,使其能够采集获得满足第一条件(如图像采集单元的镜头始终对准目标对象)的图像。
[0068]再例如:根据所述第二限制数据控制电子设备在限制闭环轨迹上做循环移动(SP转圈),在移动过程中,电子设备获得目标对象与所述电子设备之间的位置信息,进而依此获得用于控制图像采集单元的图像采集姿态的第二参数,通过所述第二参数来控制图像采集单元的姿态,使其能够采集获得满足第一条件(如图像采集单元的镜头始终对准目标对象)的图像。
[0069]在本实施方式中,不要求电子设备的移动跟随目标对象,因为第二限制数据要求电子设备按一定的移动策略沿一定的限制移动轨迹移动;但要求电子设备的图像采集单元能跟随目标对象,依据电子设备与目标对象的位置变化,随时调整图像采集单元的图像采集姿态,使图像采集单元的镜头对准目标对象。
[0070]其中,本发明实施例可以通过以下方式记录所述电子设备的限制移动轨迹:
[0071]获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹;
[0072]响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据(能够描述电子设备的车轮转速)以及惯性测量单元(IMU,Inertial Measurement Unit)数据(能够描述电子设备的三轴角速度和加速度),所述码盘数据以及IMU数据能够描述所述限制移动轨迹;
[0073]获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹;
[0074]响应所述第四指令,保存记录的随时间变化的所述码盘数据以及頂U数据。
[0075]上述描述了一种示教再现的移动轨迹记录方法,例如:用户推动电子设备从A点移动到B点,电子设备记录在移动过程中随时间变化的码盘数据以及頂U数据;随后,将电子设备重新放到A点,电子设备通过实施所述随时间变化的码盘数据以及IMU数据,能够自主的完成从A点移动到B点。
[0076]当然,本发明实施例并非仅限于这种示教再现的移动轨迹记录方法,也可以通过编码方式直接在电子设备中预存所述随时间变化的码盘数据以及IMU数据。
[0077]在再一实施方式中,本发明实施例的方法还包括:获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述电子设备自身的姿态。
[0078]为降低电子设备移动过程中的姿态波动对图像采集单元的工作稳定性(如保持镜头稳定性)的影响,本实施方式按一定的频率获得电子设备的姿态信息、即第三参数(如pitch、yaw、roll等),依此来进一步调整(可能是微调)图像采集单元的图像采集姿态,以提升图像的视觉效果。
[0079]例如:所述第一条件限制目标对象位于图像采集单元的构图中心区域内,而通过第二参数控制图像采集单元仅仅满足所述第一条件(构图的中心区域内有目标对象)时,并不能确保获得的图像效果,因为,通常电子设备移动存在抖动、颠簸,这容易导致目标对象在构图的中心区域内抖动,这种情况下获得的图像效果不佳;而通过测量电子设备的第三参数,采用灵敏度更高的方式来调整图像采集单元的姿态,使图像采集单元的拍摄姿态始终保持最佳姿态(P i tch、yaw、ro 11最佳),而不受电子设备的抖动、颠簸的影响,提升所获得图像的视觉效果。
[0080]在又一实施方式中,目标对象上设有超宽带(UWB,Ultra Wideband)信标,所述电子设备包括UWB单元,所述获得目标对象与电子设备之间的位置信息,包括:
[0081 ] 所述电子设备通过UWB单元与所述UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。
[0082]也就是说,基于UWB技术,能够实现电子设备对目标对象的位置跟随,在目标对象上安装UWB信标,电子设备上安装UWB单元,通过UWB单元向UWB信标发射信号,并接收UWB信标的返回信号,能够获得UWB信标与UWB单元之间的相对距离d和相对角度Θ,依此来描述UWB信标与UWB单元之间的相对位置关系;根据所述UWB信标与UWB单元之间的相对位置关系,并考虑预设的UWB信标与目标对象、UWB单元与电子设备之间的位置换算关系,能够获得电子设备与目标对象之间的相对位置关系,并用来描述电子设备与目标对象之间的相对位置。其中,UWB信标与UWB单元之间的相对距离d可以采用基于(T0F,Time of Flight)的技术来测量,TOF通过计算无线电波(或光、声波等)发射和反射的时间差,来换算成相对距离d JWB信标与UWB单元之间的相对角度Θ可以采用基于到达角(A0A,Angle of arrival)的技术来测量,AOA是基于信号到达角度的定位算法,通过某些硬件设备感知发射节点信号的到达方向,可以计算接收节点和锚节点之间的相对方位或相对角度。
[0083]需要说明的是,本发明实施例并非仅限于用UWB技术来获得目标对象与电子设备之间的位置信息,实现电子设备对目标对象的跟随;本发明实施例还可以采用诸如超声波、红外测距、声呐、雷达、双目视觉、GPS等技术手段,来获得目标对象与电子设备之间的位置信息,实现电子设备对目标对象的跟随,本发明实施例在此不做限制。
[0084]通过实施本发明的实施例一,电子设备能够完成对目标对象的跟随,并能在跟随过程中适应性的调整图像采集单元的图像采集姿态,使目标对象始终处于图像采集单元的构图中;且,通过检测电子设备在移动过程中的抖动、颠簸对图像采集单元的图像采集姿态造成的影响,能通过对图像采集姿态的进一步微调,使图像采集单元能够应对电子设备在移动过程中的抖动、颠簸,保证所获得图像的视觉效果。本发明实施例的目标跟随拍摄不受拍摄环境、拍摄范围的局限,能实现自由度和灵活性更高的图像/视频拍摄,其应用场景广泛。
[0085]实施例二
[0086]对应本发明实施例一的信息处理方法,本发明实施例二还提供了一种电子设备,如图2所示,该电子设备包括:移动单元10、图像采集单元30和目标锁定单元20,所述图像采集单元30和目标锁定单元20设置于所述移动单元10上,所述移动单元10能够搭载所述图像采集单元30和目标锁定单元20移动,所述目标锁定单元20用于锁定目标对象,所述图像采集单元30用于进行图像采集;
[0087]所述目标锁定单元20还用于,获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;响应所述第一指令,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述移动单元10和所述图像采集单元30;
[0088]所述移动单元10还用于,接收所述目标锁定单元20发送的所述位置信息,根据所述位置信息获得第一参数,并根据所述第一参数控制所述移动单元10的移动状态,以使所述移动单元10跟随所述目标对象,所述第一参数为控制所述移动单元10移动状态的参数;
[0089]所述图像采集单元30还用于,接收所述目标锁定单元20发送的所述位置信息,根据所述位置信息获得第二参数,并根据所述第二参数控制所述图像采集单元30的图像采集姿态,以使所述移动单元10在跟随所述目标对象的过程中,所述图像采集单元30能够获得满足第一条件的图像。
[0090]在一实施方式中,所述电子设备还包括:第一限制数据保存单元40,连接移动单元10,用于保存预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外;
[0091]所述移动单元10还用于,在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述移动单元10的移动状态,使所述移动单元10仅在所述移动轨迹上或移动区域内跟随所述目标对象。
[0092]在一实施方式中,所述电子设备还包括:
[0093]第二限制数据保存单元50,连接移动单元10,用于保存预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略;
[0094]所述移动单元10、目标锁定单元20和图像采集单元30还用于,获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像采集;
[0095]所述移动单元10还用于,响应所述第二指令,根据所述第二限制数据控制所述移动单元10在所述限制移动轨迹上按所述移动策略进行移动;
[0096]所述目标锁定单元20还用于,在所述移动单元10移动的过程中,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述图像采集单元30;
[0097]所述图像采集单元30还用于,根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元30的图像采集姿态,以使所述移动单元10在移动的过程中,所述图像采集单元30能够获得满足第一条件的图像。
[0098]在一实施方式中,所述电子设备还包括限制移动轨迹记录单元60,连接第一限制数据保存单元40和第二限制数据保存单元50,限制移动轨迹记录单元60用于通过以下方式记录所述电子设备的限制移动轨迹:
[0099]获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹;响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据以及MU数据,所述码盘数据以及IMU数据用于描述所述限制移动轨迹;获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹;响应所述第四指令,停止记录所述码盘数据以及MU数据;
[0100]其中,记录的所述码盘数据以及IMU数据存入所述第一限制数据保存单元40或第二限制数据保存单元50。
[0101]在一实施方式中,所述图像采集单元30还用于,获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述移动单元10自身的姿态。
[0102]在一实施方式中,所述目标锁定单元20为UWB单元,
[0103]所述UWB单元用于,与所述目标对象上设有的UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。
[0104]通过实施本发明的实施例二,电子设备能够完成对目标对象的跟随,并能在跟随过程中适应性的调整图像采集单元的图像采集姿态,使目标对象始终处于图像采集单元的构图中;且,通过检测电子设备在移动过程中的抖动、颠簸对图像采集单元的图像采集姿态造成的影响,能通过对图像采集姿态的进一步微调,使图像采集单元能够应对电子设备在移动过程中的抖动、颠簸,保证所获得图像的视觉效果。本发明实施例的目标跟随拍摄不受拍摄环境、拍摄范围的局限,能实现自由度和灵活性更高的图像/视频拍摄,其应用场景广泛。
[0105]需要特别说明的是,本发明实施例所指的电子设备是能够实现自主移动的电子设备,所谓自主移动是指无需外部控制而能够根据自身所获得的信息实现自主的移动,如:根据对外部环境的检测实现自主移动控制(如避障),或,基于目标跟随的自主移动控制等等。常见的能实现自主移动的电子设备如:自平衡车、无人机等等。本发明实施例的电子设备需要至少具备目标跟随和图像采集这两种功能,所谓目标跟随是指电子设备能够跟随目标对象移动,如:与目标对象之间保持一定的距离和角度的跟随;所谓图像采集是指电子设备能够对目标对象进行图像采集,如拍照、录像。
[0106]下面以自平衡车上搭载目标跟随和图像采集这两种功能为例,进一步详细阐述本发明的实施例。
[0107]参见图3,图3为本发明实施例的一种自平衡车的组成结构示意图。图3中01代表自平衡车,在自平衡车01上安装有云台02,云台上设有UWB单元(图中未示出)和图像采集单元03(相机);自平衡车Ol即为本发明实施例所述的自主移动装置,且自平衡车Ol能够基于UWB技术实现对目标对象的跟随(满足预设的跟随距离和/或跟随角度等等)。云台02为一种三自由度云台,其能实现pitch、yaw、roll这三种角度的调节,基于云台02的调节,能实现对安装于其上的图像采集单元03的姿态调节。下面结合不同的应用场景分别阐述搭载有云台
02、UWB单元和图像采集单元03的自平衡车01的目标跟随拍摄过程。
[0108]场景一:
[0109]预设自平衡车01的移动轨迹,自平衡车01按预设轨迹移动(比如:预设自平衡车01在I分钟之内按轨迹从A点走到B点),在移动过程中云台02上的UWB单元测量目标对象(无论目标对象静止还是运动)与UWB单元之间的位置信息,通过调节云台02使图像采集单元03(相机)镜头始终对准目标对象。在自平衡车01移动过程中的跟随拍摄过程如下:
[0110]首先,基于用户触发,自平衡车01获得第二指令,第二指令用于自平衡车01按预设的移动策略沿预设的限制移动轨迹移动,且在移动过程中对目标对象进行图像采集;
[0111]其次,自平衡车01响应所述第二指令,按预设的移动策略并沿预设的移动轨迹移动,且在自平衡车01移动的过程中,云台02上的UWB单元通过与目标对象上安装的UWB信标进行通信,获得UWB信标与UWB单元之间的位置信息;
[0112]云台02根据所述位置信息获得用于调整云台02姿态(pitch、yaw、roll三种姿态)的第二参数,根据所述第二参数调整云台02自身的姿态,以保持在自平衡车01的移动过程中,图像采集单元03的镜头始终能够对准目标对象,使目标对象始终处于图像采集单元03的构图中(例如:使目标对象始终处于图像采集单元03的构图的中心区域内);
[0113]另外,为降低自平衡车01移动过程中的姿态波动对图像采集单元03的工作稳定性(如保持镜头稳定性)的影响,本实施例还按一定的频率获得自平衡车01的姿态信息、即第三参数(如pi tch、yaw、rol I等),依此来进一步调整(可能是微调)图像采集单元03的姿态,使图像采集单元03的拍摄姿态始终保持最佳姿态(pitCh、yaW、roll最佳),而不受自平衡车01的抖动、颠簸的影响,以提升图像的视觉效果。
[0114]场景二:不为自平衡车01预设移动轨迹,自平衡车01能够基于UWB单元实现对目标对象的自动跟随(满足预设的跟随距离和/或跟随角度等等),在自平衡车01跟随目标对象的过程中,云台02上的UWB单元测量目标对象(无论目标对象静止还是运动)与UWB单元之间的位置信息,通过调节云台02使图像采集单元03(相机)镜头始终对准目标对象。在自平衡车01移动过程中的跟随拍摄过程如下:
[0115]首先,基于用户触发,自平衡车01获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;自平衡车01响应所述第一指令,云台02上的UWB单元通过与目标对象上安装的UWB信标进行通信,获得UWB信标与UWB单元之间的位置信息(相对距离和相对角度等);
[0116]其次,自平衡车01根据所述位置信息获得用于控制其自身移动状态的第一参数(车轮的平动速度、转动速度等),并根据获得的第一参数控制自平衡车01的移动状态,以使自平衡车01跟随目标对象;
[0117]且,云台02根据所述位置信息获得用于调整云台02姿态(pitch、yaW、r0ll三种姿态)的第二参数,根据所述第二参数调整云台02自身的姿态,以保持在自平衡车01的移动过程中,图像采集单元03的镜头始终能够对准目标对象,使目标对象始终处于图像采集单元03的构图中(例如:使目标对象始终处于图像采集单元03的构图的中心区域内);
[0118]另外,为降低自平衡车01移动过程中的姿态波动对图像采集单元03的工作稳定性(如保持镜头稳定性)的影响,本实施例还按一定的频率获得自平衡车01的姿态信息、即第三参数(如pi tch、yaw、rol I等),依此来进一步调整(可能是微调)图像采集单元03的姿态,使图像采集单元03的拍摄姿态始终保持最佳姿态(pitCh、yaW、roll最佳),而不受自平衡车01的抖动、颠簸的影响,以提升图像的视觉效果。
[0119]场景三:预设自平衡车01的限制移动轨迹/限制移动区域,自平衡车01只能在预设的轨迹/区域上移动(但与场景一不同的是,自平衡车01在预设的轨迹/区域上是可自主移动的);自平衡车01能够基于UWB单元实现对目标对象的有限制条件(即移动轨迹或移动区域的限制)的跟随,在自平衡车01跟随目标对象的过程中,云台02上的UWB单元测量目标对象(无论目标对象静止还是运动)与UWB单元之间的位置信息,通过调节云台02使图像采集单元03(相机)镜头始终对准目标对象。在自平衡车01移动过程中的跟随拍摄过程如下:
[0120]首先,基于用户触发,自平衡车01获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;自平衡车01响应所述第一指令,云台02上的UWB单元通过与目标对象上安装的UWB信标进行通信,获得UWB信标与UWB单元之间的位置信息;
[0121 ]其次,自平衡车01根据所述位置信息获得用于控制其自身移动状态的第一参数(车轮的平动速度、转动速度等),在获得第一参数后,根据第一参数预测自平衡车01的移动轨迹,将预测的移动轨迹与所述限制移动轨迹或限制移动区域进行比较,以判断预测的移动轨迹是否超出所述限制移动轨迹或限制移动区域,如果超出,则修正第一参数,使修正后的第一参数预测的移动轨迹不超出所述限制移动轨迹或限制移动区域,如果没超出,则无需对第一参数进行修正;
[0122]按修改正后的第一参数控制自平衡车01的移动状态,使自平衡车01仅在所述限制移动轨迹上或限制移动区域内跟随目标对象;
[0123]且,云台02根据所述位置信息获得用于调整云台02姿态(pitch、yaW、r0ll三种姿态)的第二参数,根据所述第二参数调整云台02自身的姿态,以保持在自平衡车01的移动过程中,图像采集单元03的镜头始终能够对准目标对象,使目标对象始终处于图像采集单元03的构图中(例如:使目标对象始终处于图像采集单元03的构图的中心区域内);
[0124]另外,为降低自平衡车01移动过程中的姿态波动对图像采集单元03的工作稳定性(如保持镜头稳定性)的影响,本实施例还按一定的频率获得自平衡车01的姿态信息、即第三参数(如pi tch、yaw、rol I等),依此来进一步调整(可能是微调)图像采集单元03的姿态,使图像采集单元03的拍摄姿态始终保持最佳姿态(pitCh、yaW、roll最佳),而不受自平衡车01的抖动、颠簸的影响,以提升图像的视觉效果。
[0125]综上所述,通过实施本发明实施例,电子设备能够完成对目标对象的跟随,并能在跟随过程中适应性的调整图像采集单元的图像采集姿态,使目标对象始终处于图像采集单元的构图中;且,通过检测电子设备在移动过程中的抖动、颠簸对图像采集单元的图像采集姿态造成的影响,能通过对图像采集姿态的进一步微调,使图像采集单元能够应对电子设备在移动过程中的抖动、颠簸,保证所获得图像的视觉效果。本发明实施例的目标跟随拍摄不受拍摄环境、拍摄范围的局限,能实现自由度和灵活性更高的图像/视频拍摄,其应用场景广泛。
[0126]另外,本发明实施例的方案并非仅限于在自平衡车上(二维空间自主移动设备)的应用,其应当也适用于无人机(三维空间自主移动设备)等上的应用;其在无人机(三维空间自主移动设备)上的实现过程与在二维空间自主移动设备上的实现过程类似,此处不再赘述。
[0127]在本发明所提供的几个实施例中,应该理解到,所揭露的方法、装置和电子设备,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
[0128]上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
[0129]另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
[0130]本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(R0M,Read_0nly Memory)、随机存取存储器(RAM ,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0131]或者,本发明实施例上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、只读存储器(R0M,Read-0nly Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0132]鉴于此,本发明实施例还提供了一种计算机可读存储介质,所述存储介质包括一组计算机可执行指令,所述指令用于执行本发明实施例所述的信息处理方法。
[0133]以上所述,仅为本发明的【具体实施方式】,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
【主权项】
1.一种信息处理方法,应用于可移动的电子设备,所述电子设备具有图像采集单元,所述图像采集单元能够进行图像采集;所述方法包括: 获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集; 响应所述第一指令,获得目标对象与所述电子设备之间的位置信息; 根据所述位置信息获得第一参数,并根据所述第一参数控制所述电子设备的移动状态,以使所述电子设备跟随所述目标对象,所述第一参数为控制所述电子设备移动状态的参数; 且,根据所述位置信息获得第二参数,并根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述电子设备在跟随所述目标对象的过程中,所述图像采集单元能够获得满足第一条件的图像。2.根据权利要求1所述信息处理方法,其特征在于,所述电子设备保存有预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,使所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外;所述方法还包括: 在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述电子设备的移动状态,使所述电子设备仅在所述移动轨迹上或移动区域内跟随所述目标对象。3.根据权利要求1所述信息处理方法,其特征在于,所述电子设备保存有预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略,所述方法还包括: 获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像采集; 响应所述第二指令,根据所述第二限制数据控制所述电子设备在所述限制移动轨迹上按所述移动策略进行移动,且在所述电子设备移动的过程中,获得目标对象与所述电子设备之间的位置信息,并根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述电子设备在移动的过程中,所述图像采集单元能够获得满足第一条件的图像。4.根据权利要求2或3所述信息处理方法,其特征在于,所述方法还包括:通过以下方式记录所述电子设备的限制移动轨迹: 获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹; 响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据以及惯性测量单元IMU数据,所述码盘数据以及IMU数据用于描述所述限制移动轨迹; 获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹; 响应所述第四指令,保存记录的所述码盘数据以及MU数据。5.根据权利要求1、2或3所述信息处理方法,其特征在于,所述方法还包括:获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述电子设备自身的姿态。6.根据权利要求1、2或3所述信息处理方法,其特征在于,所述目标对象上设有超宽带UWB信标,所述电子设备包括UWB单元,所述获得目标对象与电子设备之间的位置信息,包括: 所述电子设备通过UWB单元与所述UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。7.—种电子设备,包括:移动单元、图像采集单元和目标锁定单元,所述图像采集单元和目标锁定单元设置于所述移动单元上,所述移动单元能够搭载所述图像采集单元和目标锁定单元移动,所述目标锁定单元用于锁定目标对象,所述图像采集单元用于进行图像采集; 所述目标锁定单元还用于,获得第一指令,所述第一指令用于指示进行基于目标跟随的图像采集;响应所述第一指令,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述移动单元和所述图像采集单元; 所述移动单元还用于,接收所述目标锁定单元发送的所述位置信息,根据所述位置信息获得第一参数,并根据所述第一参数控制所述移动单元的移动状态,以使所述移动单元跟随所述目标对象,所述第一参数为控制所述移动单元移动状态的参数; 所述图像采集单元还用于,接收所述目标锁定单元发送的所述位置信息,根据所述位置信息获得第二参数,并根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述移动单元在跟随所述目标对象的过程中,所述图像采集单元能够获得满足第一条件的图像。8.根据权利要求7所述电子设备,其特征在于,所述电子设备还包括:第一限制数据保存单元,用于保存预设的第一限制数据,所述第一限制数据用于描述所述电子设备的限制移动轨迹或限制移动区域,基于所述第一限制数据的控制,所述电子设备无法移动到所述限制移动轨迹或限制移动区域之外; 所述移动单元还用于,在根据所述位置信息获得第一参数后,根据所述第一限制数据对所述第一参数进行修正,并根据修正后的第一参数控制所述移动单元的移动状态,使所述移动单元仅在所述移动轨迹上或移动区域内跟随所述目标对象。9.根据权利要求7所述电子设备,其特征在于,所述电子设备还包括: 第二限制数据保存单元,用于保存预设的第二限制数据,所述第二限制数据用于描述所述电子设备的限制移动轨迹、以及电子设备在所述限制移动轨迹上的移动策略; 所述移动单元、目标锁定单元和图像采集单元还用于,获得第二指令,所述第二指令用于指示所述电子设备按所述移动策略沿所述限制移动轨迹移动,且在移动过程中对目标对象进行图像米集; 所述移动单元还用于,响应所述第二指令,根据所述第二限制数据控制所述移动单元在所述限制移动轨迹上按所述移动策略进行移动; 所述目标锁定单元还用于,在所述移动单元移动的过程中,获得目标对象与所述电子设备之间的位置信息,并将所述位置信息发送给所述图像采集单元; 所述图像采集单元还用于,根据所述位置信息获得第二参数,根据所述第二参数控制所述图像采集单元的图像采集姿态,以使所述移动单元在移动的过程中,所述图像采集单元能够获得满足第一条件的图像。10.根据权利要求8或9所述电子设备,其特征在于,所述电子设备还包括限制移动轨迹记录单元,用于通过以下方式记录所述电子设备的限制移动轨迹: 获得第三指令,所述第三指令用于指示开始记录所述电子设备移动过的轨迹;响应所述第三指令,记录所述电子设备在移动过程中随时间变化的码盘数据以及惯性测量单元IMU数据,所述码盘数据以及IMU数据用于描述所述限制移动轨迹;获得第四指令,所述第四指令用于指示停止记录所述电子设备移动过的轨迹;响应所述第四指令,停止记录所述码盘数据以及頂U数据; 其中,记录的所述码盘数据以及IMU数据存入所述第一限制数据保存单元或第二限制数据保存单元。11.根据权利要求7、8或9所述电子设备,其特征在于,所述图像采集单元还用于,获得所述电子设备的第三参数,在获得满足第一条件的图像后,根据所述第三参数进一步调整所述图像采集单元的图像采集姿态,以获得满足第二条件的图像;所述第三参数用于描述所述移动单元自身的姿态。12.根据权利要求7、8或9所述电子设备,其特征在于,所述目标锁定单元为超宽带UWB单元, 所述UWB单元用于,与所述目标对象上设有的UWB信标之间进行UWB信号交互,并基于所述UWB单元发送给所述UWB信标的信号、以及接收的所述UWB信标的返回信号,获得所述目标对象与电子设备之间的位置信息。
【文档编号】H04N5/232GK105872371SQ201610200835
【公开日】2016年8月17日
【申请日】2016年3月31日
【发明人】任冠佼, 董世谦, 王野, 蒲立
【申请人】纳恩博(北京)科技有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1