专利名称：机载云台运动目标自主跟踪系统的图像稳定方法
技术领域：
本发明涉及一种目标自主跟踪系统的图像稳定方法，特别是一种基于类人眼复合运动的机载云台目标自主跟踪系统的图像稳定方法。
背景技术：
对动态目标的自主跟踪是视觉监测监控系统的关键技术。在一些具体的监控系统中，摄像机往往装在一些小型无人飞行器上，通过有效控制小型无人飞行器的姿态信息和机载云台，使被跟踪的地面运动目标始终保持在图像中心位置，并将图像传回地面指挥中心，辅助监控人员对可疑目标进行跟踪监视，扩大监控的范围，减轻监控人员的劳动强度， 增强了监控的可靠性，具有广泛的军用与民用价值。目前的基于视觉的监控系统主要集中在一些公共场所、重要部门等，监控摄像头通常都是固定安装的，监控的场景范围比较有限，通过监控人员操作摄像机运动跟踪可疑目标，基本上没有识别和自动跟踪的功能，属于被动监视。为了扩大监控范围，常采用多摄像头监控，相邻摄像头的监控范围部分重叠，场景固定，摄像头不能对可疑运动目标进行跟踪监视，而且此种方法成本较高。因此，许多研究机构将摄像机安装在机载转动伺服云台上。在控制机载云台的过程中，云台的调节主要集中在图像处理方面，通过图像处理，提取图像特征检测目标并进行匹配等获取目标偏差位置，从而使目标处于摄像机的图像中心位置。但是，在运动目标自主跟踪系统中，由于复杂的非结构环境、目标位置的动态变化、小型无人飞行器姿态变化以及机体振动等影响，因此对单纯通过图像处理方法来调节伺服云台，补偿范围小，图像稳定性差，在跟踪过程中容易出现目标丢失。
发明内容
本发明的目的在于针对已有技术存在的缺陷，提供一种新的基于类人眼复合运动的机载云台目标跟踪系统的图像稳定方法，用于提高无人机机载视频系统的动态目标跟踪性能。为达到上述目的，本发明的构思是人眼具有很多特殊功能，这是因为人眼眼球在脑认知学习以及眼球运动神经回路的控制下，可以实现眼球的多种运动，例如前庭动眼反射、视动反射、急动，平滑追踪运动等。然而在大多数情况下，人眼获得外界信息不是一种运动完成的，例如人类在颠簸的环境中仍能实时注视或跟踪运动的目标，这是由于人眼的前庭动眼反射以及平滑跟踪运动所组成复合运动。类人眼的前庭动眼反射与平滑追踪融合复合运动控制系统的数学模型如附
图1所示，已被生理学实验所证实。在这个系统中，无人飞行器相当于人的头部，机载传感器相当于人的前庭器官，机载摄像机相当于眼球，机载云台相当于眼球外部的六条眼肌，通过图像采集卡获得偏差信息类似于人眼视网膜的滑动误差。机载云台的运动控制系统采用类人眼的前庭动眼反射和平滑追踪运动融合的复合运动系统模型，使得当跟踪目标的位置发生动态变化时，尽管受到无人机机体振动以及姿态变化的影响，仍能使跟踪运动目标处于图像位置的中心区域。
根据上述构思，本发明采用如下技术方案
一种机载云台运动目标自主跟踪系统的图像稳定方法，其特征在于采用人眼的前庭动眼反射与平滑追踪融合的眼球复合运动控制系统数学模型进行运算，以获得在颠簸环境下机载云台在跟踪动态目标中的图像信息稳定可靠。系统的操作步骤如下
1)选定跟踪目标监控人员通过控制小型无人飞行器与机载云台，选定需跟踪的可疑目标；
2)传感器测量姿态传感器测量小型无人飞行器的姿态位置，视觉传感器(摄像机)通过图像采集卡获得跟踪目标信息；
3)A/D转换对传感器(姿态与视觉)得到的连续模拟量通过A/D转换后得到数字量采样信号；
4)数字滤波对采样信号进行平滑加工，增强有效信号，消除或减少噪声；
5)标度转换分别对视频传感器和姿态传感器进行相应的标定与转换；
6)信息融合对采集到目标图像偏差信息与无人飞行器姿态信息以及机载云台姿态信息根据建立的眼球复合运动的输入关系，进行相应的运算处理，从而获得跟踪目标与摄像机视轴的相对偏差；
7)系统控制运算获得的运动平台运动参数值通过处理器的控制算法，得到机载云台补偿偏差所需旋转的速度和方向；
8)控制云台转动将得到的摄像机云台所需旋转的速度和方向，发送给机载云台的电机，控制摄像机的运动；
9)监控人工干预地面工作站监控人员如果发现目标丢失，重复步骤1)到步骤9)循环，如果目标跟踪处于图像监控中，按正常的步骤。上述的控制运算采用了人眼的前庭动眼反射与平滑追踪融合的复合运动控制系统数学模型，如附图1和图2所示
图中眼球半规管的传递函数表示为
权利要求
1.一种机载云台运动目标自主跟踪系统的图像稳定方法，其特征在于将眼球的前庭动眼反射和平滑追踪运动融合一起，即为眼球的复合运动，并采用的基于这种类人眼的复合运动控制系统的数学模型对机载云台进行控制，以达到无人飞行器在恶劣环境下，仍能稳定平稳的实时跟踪运动目标；其操作步骤如下1)选定跟踪目标监控人员通过控制小型无人飞行器与机载云台，选定所需跟踪的可疑目标；2)传感器测量姿态传感器测量小型无人飞行器的姿态位置，视觉传感器一摄像机通过图像采集卡获得跟踪目标信息；3)A/D转换对传感器(姿态与图像)得到的连续模拟量通过A/D转换后得到数字量采样信号；4)数字滤波对采样信号进行平滑加工，增强有效信号，消除或减少噪声；5)标度转换分别对视觉传感器和姿态传感器进行相应的标定与转换；6)信息融合对采集到目标图像偏差信息与无人飞行器姿态信息以及机载云台姿态信息根据建立的眼球复合运动的输入关系，进行相应的运算处理，从而获得跟踪目标与摄像机视轴的相对偏差；7)系统控制运算获得的运动平台运动参数值通过处理器的控制算法，得到补偿偏差机载云台所需旋转的速度和方向；8)控制云台转动将得到的摄像机云台所需旋转的速度和方向，发送给机载云台的电机，控制摄像机的运动；9)监控人工干预地面工作站监控人员如果发现目标丢失，重复步骤1)到步骤9)循环，如果目标跟踪处于图像监控中，按正常的步骤。
2.根据权利要求1所述的机载云台运动目标自主跟踪系统的图像稳定方法，其特征在于所述步骤7)中的控制算法，所采用的算法模型如下其中模型的输出[五O)]是视轴转角，模型的输入[ITCf)]是头部运动转角， [T(S)]运动目标的位置；α n分别是神经回路对头部角速度信号、被跟踪目标的角位移和角速度的转换增益，取值范围0 丨T是半规管的时间常数，Tc =IBs ； 7；是眼球装置的时间常数，T =0. 24s ； T是积分器的时间常数，g。是神经直接通路的增益，在正常情况下，Tn =25s, gg =0. 24 ； Tq表示滤波器的时间常数，Tq =0. 2s ； |是重复误差补偿间隔时间，根据传感器数据采集频率可进行调整，这里一般选用I =0. 012s ；釭和μ分别代表对视网膜滑动位移和速度误差重复补偿的权值，k =2.5, μ =u
全文摘要
本发明涉及一种基于类人眼复合运动的机载云台运动目标自主跟踪系统的图像稳定方法。它包括无人飞行器及其飞控系统、机载云台摄像机、机载图像处理单元和机载仿生控制微处理器。其步骤为姿态传感器测量小型无人飞行器的姿态位置，并且视觉传感器采集摄像机的目标信息，两者信息经过相应的A/D转换，数字滤波之后，根据建立的眼球复合运动的输入关系进行运算处理，获得跟踪目标与摄像机视轴的相对偏差，并进行相应的标度转换，将处理好的信息作为机载云台控制器的控制律，分别控制机载云台电机，实现眼球复合运动的特性。这种方法根据跟踪的运动目标位置信息与无人飞行器的姿态信息，通过本发明上述步骤，可以对机载云台进行实时调节，可以实现无人飞行器在颠簸环境中，对可疑的运动目标进行自主跟踪，并能对跟踪图像具有一定的稳定作用。
文档编号H04N5/232GK102355574SQ201110312090
公开日2012年2月15日 申请日期2011年10月17日 优先权日2011年10月17日
发明者李恒宇, 李磊, 王涛, 罗均, 谢少荣 申请人:上海大学