具体实施例中，用户先在大视场下手动给将平台框架加矩，调整光电载荷摄像设备所指向的角度，使其指向需要观瞄的区域，用户端通过向外部通讯单元发送自动扫瞄指令，以确定当前采集的图像作为预侦察区域，图像信号处理器将此时通过光电载荷采集到的图像IMG_BASE进行缓存，缓存完毕后，确定图像IMG_BASE中的摆扫轨迹，如图2中的蛇形路径所示，沿着蛇形路径进行自动扫瞄可以在小视场下实现对整个图像IMG_BASE下侦察区域的遍历扫瞄。
[0042]在光电载荷的小视场下，平台框架在开始自动摆扫的初始位置下摄取图像，其中心处于MG_BASE中的摆扫路径上，初始位置可以在摆扫路径的任一位置上，一般为图像IMG_BASE的边界附近，如图2中的左上角或者右下角。平台控制单元在控制平台稳定框架转动到该起始位置后，会将平台稳定框架是否转动到位的信息反馈至图像信号处理单元，图像信号处理单元将实时接收到的图像MG_N与图像MG_BASE进行匹配。
[0043]本发明中采用一种基于图像局部特征的SURF描述算子，因其对图像局部特征的描述在尺度、旋转、对比度方面都有很好的不变性，因此在图像匹配领域有广泛的应用。
[0044]本发明中利用SURF描述算子做大小视场图像的匹配方法为:
[0045]一、对大小视场图像做中值滤波预处理；
[0046]二、利用SURF描述算子分别提取滤波后的图像局部特征向量；
[0047]三、基于仿射坐标变换模型下利用RANSAC算法对该图像对做运动估计，求取仿射变换参数；
[0048]四、按照仿射变换参数求出小视场图像IMG_N在大视场图像IMG_BASE中的对应位置，偏离图像原点的水平像素偏移量X(N)和垂直像素偏移量Y(N)，其中N为光电载荷在小视场下开始自动扫描后的采集图像帧序号，偏移基准参考大视场图像MG_BASE的左上角为原点。
[0049]当前图像IMG_N的中心偏离图像IMG_BASE扫瞄路径采样点处的像素偏移量的确定方法为:
[0050]一、计算大视场与小视场的角度倍数关系A ;
[0051 ] 二、自动摆扫时，相邻两帧图像在水平方向的图像数据重复度K( 一般为50%以上，否则会影响采用帧差法做动目标检测的效果)；垂直方向的数据重复度为Ρ(因本实施例中采用水平方向的蛇形摆扫路径，P可以设为O)。
[0052]三、光电载荷的水平分辨率为MX,垂直分辨率为ΜΥ，图像帧频为F ；
[0053]四、沿着摆扫路径做一次完整的摆扫，其时间设为Τ，则
[0054]T = (A* (A-K) /(1-K))/F ；
[0055]其中，A表示光电载荷大视场和小视场的倍数；
[0056]五、上述匹配方法算得第N帧时小视场图像MG_N与大视场图像MG_BASE匹配偏移结果为水平X (N)像素，垂直Y (N)像素；
[0057]六、自动摆扫到第N帧时，图像IMG_BASE中扫瞄路径采样点处的像素位置为:
[0058]SY (N) = MY* (I/(2*A) +N/ (A* (A-K) /(1-K)))；
[0059]且若N/ ((A-K) / (1-K))为偶数则
[0060]SX(N) = MX*(1/(2*A) + (N% ((A-K)/(1-K))-(N% ((A-K)/(1_K))-1)*K)/A)；[0061 ]若 N/ ((A-K) / (1-K))为奇数则
[0062]SX (N) = MX- (MX* (I/(2*A) + (N% ((A-K) /(1-K))-
[0063](N% ((A-K)/(1-K))-1) *K)/A))；
[0064]七、当前图像MG_N的中心偏离图像MG_BASE扫瞄路径采样点处的像素偏移量为DX (N) = X (N) -SX (N)，DY (N) = Y (N) -SY (N)。
[0065]将上述计算得出的偏移量DX和DY发送给平台控制单元，平台控制单元通过DX和DY进行角度补偿控制，使得平台稳定框架沿着自动摆扫路径进行自动摆扫，其中N在每帧采集时依次累加，随着摆扫的进行，当X(N)与Y(N)超出大视场图像IMG_BASE的右下角边界即X(N) >MX且Y(N) >MY时，N则在每帧采集时依次减少，则平台框架将按照与图2中摆扫方向相反的方向进行摆扫；当X(N)与Y(N)超出大视场图像MG_BASE的左上角边界即X(N)〈O且Y(N)〈O时，N则在每帧采集时依次累加，则平台框架将按照与图2中摆扫方向相同的方向再次进行摆扫，依此往复，从而实现长时间自动循环摆扫。
[0066]本发明中为了实现对运动目标的自动识别，图像信号处理单元提取光电载荷实时采集到的当前帧图像IMG_N和前一帧图像IMG_N-1间的局部特征向量，并将两帧图像中提取的局部特征向量对进行配对。本发明中采用SURF特征描述算子进行匹配的步骤如下:
[0067]1、对相邻两帧图像做中值滤波预处理；
[0068]2、利用SURF描述算子分别提取滤波后该图像对的局部特征向量；
[0069]3、基于仿射模型下利用RANSAC算法对该图像对做运动估计，求取仿射变换参数；
[0070]4、根据仿射变换的结果，对该相邻图像对做运动补偿，并对补偿前后的图像做差分运算；
[0071]5、通过对差分运算后图像的开运算和相邻像素区域聚类，做运动区域检测，提取动目标并做出标识。
[0072]按照上述步骤，图像信号处理单元通过外部通讯单元将检测出的动目标信息发送至用户端，供其判读。
[0073]本发明通过光电载荷在大小视场下的图像配准关系进行自动扫瞄的路径规划和自动扫瞄控制，完成对预设观测区域图像的自动遍历扫瞄；在自动扫瞄时，对相邻图像序列进行图像匹配，通过匹配关系做运动补偿，并做帧间差分运算，检测出动目标，实现了图像中运动目标的实时自动识别，提高了侦察准确性和效率。根据当前技术的不足，该方法可以广泛应用于地面侦察、战场监控、防暴反恐等领域。
[0074]本发明未公开的部分为本技术领域的公知常识。
【主权项】
1.一种基于图像匹配的无人机载光电稳定平台自动侦察系统，其特征在于包括:夕卜部通讯单元(1)、图像信号处理单元(2)、平台控制单元(3)、平台稳定框架(4)、光电载荷(5)； 外部通讯单元(I)将接收到的外部发送的自动扫瞄指令转发至图像信号处理单元(2)； 图像信号处理单元(2)根据外部通讯单元(I)的自动扫瞄指令，向平台控制单元(3)发送平台转动指令，用于控制平台稳定框架(4)的转动；同时图像信号处理单元(2)向光电载荷(5)发送图像采集指令，光电载荷(5)根据图像采集指令在光电载荷(5)的最大视场下采集图像MG_BASE，并发送至图像信号处理单元(2)进行缓存；图像信号处理单元(2)缓存完毕后，确定图像IMG_BASE中的自动扫瞄路径，并向平台控制单元(3)发送平台稳定框架转动指令，平台控制单元(3)根据平台稳定框架转动指令控制平台稳定框架转动到自动扫瞄的起始位置后，开始沿自动扫描路径转动，同时图像信号处理单元(2)向光电载荷(5)发送视场调整指令，光电载荷(5)将视场调整为光电载荷的最小视场，随着平台稳定框架的转动进行实时采集图像MG_N ;光电载荷(5)将实时采集到的图像IMG_N发送至图像信号处理单元⑵；图像信号处理单元⑵将实时接收到图像頂G_N与图像MG_BASE进行匹配，计算当前图像IMG_N的中心偏离图像IMG_BASE中扫瞄路径采样点处的像素偏移量，并将该偏移量发送给平台控制单元(3)，平台控制单元(3)控制平台稳定框架(4)进行转动，对该偏移量进行补偿，从而实现小视场下的自动摆扫观瞄。
2.根据权利要求1所述的一种基于图像匹配的无人机载光电稳定平台自动侦察系统，其特征还在于:所述图像信号处理单元(2)提取光电载荷实时采集到的当前帧MG_N和前一帧图像IMG_N-1间的局部特征向量，并将两帧图像中提取的局部特征向量对进行匹配；所述图像信号处理单元(2)，根据匹配的结果，对相邻图像间做运动补偿，并对补偿前后的图像做差分运算；所述图像信号处理单元(2)，对差分运算后的图像做运动区域检测，并利用检测出的结果对动目标做出标识；所述图像信号处理单元(2)，通过外部通讯单元(I)将检测出的动目标信息，发送至用户端供其判读。
3.根据权利要求1所述的一种基于图像匹配的无人机载光电稳定平台自动侦察系统，其特征还在于:所述自动扫瞄路径的确定方式如下: (1)根据光电载荷的最大和最小视场的倍数关系，将图像IMG_BASE分为若干区域，确定图像MG_BASE中的自动扫瞄路径，所述的自动扫描路径能够遍历扫描所有MG_BASE分为的若干区域； (2)自动扫瞄的起始位置为图像IMG_BASE的自动扫瞄路径中的任意位置； (3)光电载荷从扫瞄的起始位置开始，沿预定的轨迹扫瞄可以遍历图像IMG_BASE中的所有区域，并能实时的完成循环往复扫瞄。
4.根据权利要求1所述的一种基于图像匹配的无人机载光电稳定平台自动侦察系统，其特征还在于:所述平台稳定框架(4)自动目标检测的特征如下: (1)平台稳定框架(4)根据摆扫路径做自动扫瞄的同时，做动目标的自动实时检测； (2)动目标自动检测的结果可以是多个动目标。
【专利摘要】本发明一种基于图像匹配的无人机载光电稳定平台自动侦察系统，通过光电载荷在大小视场下的图像配准关系进行自动扫瞄的路径规划和自动扫瞄控制，完成对预设观测区域图像的自动遍历扫瞄；在自动扫瞄时，对相邻图像序列进行图像匹配，通过匹配关系做运动补偿，并做帧间差分运算，检测出动目标，实现了图像中运动目标的实时自动识别，提高了侦察准确性和效率。
【IPC分类】G06T7-00, G01C11-00
【公开号】CN104567815
【申请号】CN201410833820
【发明人】卢磊, 陈浩, 丁祝顺
【申请人】北京航天控制仪器研究所
【公开日】2015年4月29日
【申请日】2014年12月26日