一种自适应阈值的加油锥套图像处理方法
【专利摘要】本发明公开了一种自适应阈值的加油锥套图像处理方法，属于空中加油过程图像处理的技术领域。图像处理方法：利用实验或经验预设图像二值化先验阈值表，依次遍历表中的二值化阈值，使用该阈值检测视频序列图像中的目标，选择首次目标成功检测使用的阈值为环境适用阈值，用以处理视频序列后续的各帧图像；当后续某帧图像目标检测失败时，重新使用先验阈值表中的阈值进行目标检测，以更新环境适用阈值。本发明极大可能地保留了锥套目标的外部特征，提高了锥套目标图像处理的适应性。
【专利说明】
一种自适应阈值的加油锥套图像处理方法
技术领域
[0001]本发明公开了一种自适应阈值的加油锥套图像处理方法，属于空中加油过程图像处理的技术领域。
【背景技术】
[0002]基于视觉的自主空中加油系统，是在受油机上安装摄像头，拍摄前方加油机所携带的加油锥套图像，由机载导航计算机对摄像机传输的图像信号进行处理和解算生成导航参数。飞控系统根据导航参数调整受油机的位置和姿态，从而实现受油机插头与加油锥套的对接。
[0003]图像检测和识别前通常要对图像进行二值化处理，即阈值分割。图像阈值化分割是一种传统的最常用的图像分割方法，因其实现简单、计算量小、性能较稳定而成为图像分割中最基本和应用最广泛的分割技术。常用的阈值分割方法有全局固定阈值和局部自适应阈值，全局固定阈值在实际应用中适应性较差，局部自适应阈值算法的优化集中在阈值选取方法的改进上。高空加油的真实图像处理环境光线条件复杂、亮度变化大，采用某一固定值进行阈值分割，易丢失锥套目标的形状特征，对后续的检测识别效果产生影响。现有的空中加油仍然停留在手动对接的阶段，基于视觉的自主空中加油仍处于理论研究和仿真实验阶段，目前尚未有将自适应阈值用于空中加油锥套图像处理的应用。本申请拟针对空中加油过程图像处理环境的特点，提出一种闭环自适应调整阈值的图像二值化方法。
【发明内容】
[0004]本发明所要解决的技术问题是针对上述【背景技术】的不足，提供了一种自适应阈值的加油锥套图像处理方法，实现了阈值的闭环自适应调整，解决了固定阈值分割锥套图像易丢失目标形状特征的技术问题。
[0005]本发明为实现上述发明目的采用如下技术方案:
一种自适应阈值的加油锥套图像处理方法，包括如下步骤:
A、利用实验或经验预设图像二值化先验阈值表；
B、待受油机到达锥套前方会合点处时，开始采集锥套的视频序列；
C、遍历先验阈值表，选择首次目标成功检测使用的阈值为环境适用阈值；
D、以步骤C中的环境适用阈值作为阈值，对视频序列中后续各帧图像进行逐帧处理，检测视频序列图像中的目标:当后续各帧图像中出现检测目标失败的情况时，对首帧检测目标失败的图像执行步骤C以更新环境适用阈值，直至完成视频序列所有图像的目标检测任务。
[0006]作为所述自适应阈值的加油锥套图像处理方法的进一步优化方案，步骤A采用如下方法预设图像二值化先验阈值表，具体包括如下步骤:
Al、在实验时采集不同场景下的锥套拍摄图像，并按场景亮度排序，
A2、采用逐步增大阈值的方法对上述各图像进行二值化处理，使得阈值分割后的图像经特征提取能够成功检测到目标，
A3、按图像顺序记录各场景下成功检测到目标的阈值，用以形成先验阈值表。
[0007]进一步的，所述自适应阈值的加油锥套图像处理方法中，步骤A2采用基于圆形特征的图像检测法进行特征提取。
[0008]再进一步的，所述自适应阈值的加油锥套图像处理方法，步骤D中所述对视频序列中后续各帧图像进行逐帧处理，包括对对视频序列中后续各帧图像进行阈值分割、目标检测、受油机位置信息和姿态信息的解算。
[0009]再进一步的，所述自适应阈值的加油锥套图像处理方法中，步骤C具体包括如下步骤:
Cl、利用先验阈值表中的第i个阈值对视频序列当前帧图像进行阈值分割，
C2、对阈值分割后的图像进行图像检测:
在检测锥套目标成功时，记录第i个阈值，
在检测锥套目标失败时，1的取值加I返回步骤Cl，
其中，i为大于O的整数。
[0010]本发明采用上述技术方案，具有以下有益效果:
(1)对不同场景下的锥套拍摄图像采用不同阈值，极大可能地保留了锥套目标的外部特征，为后续检测和识别算法提供保障；
(2)采用先验阈值表记录不同光照条件下的阈值，在后期视频序列图像逐帧处理中通过查表即可实现闭环自适应调整，无需手动修改阈值或通过复杂的算法求解阈值，提高了锥套目标图像处理的适应性。
【附图说明】
[0011]图1为本发明的流程图。
[0012]图2为采用不同阈值的二值化处理的效果对比图。
[0013]图3为遍历先验阈值表寻找环境适用阈值的流程图。
【具体实施方式】
[0014]下面结合附图对发明的技术方案进行详细说明。
[0015]自适应阈值的加油锥套图像处理算法如图1所示，具体包括如下步骤。
[0016]步骤1:设置先验阈值。
[0017]实验时采集不同光线环境中的锥套图像，对这些图像根据场景亮度进行编号，并依次对图像进行处理。图像处理的过程包括:阈值分割和基于圆形特征的图像检测。逐步增大所采用阈值，使得二值化处理后的图像能成功地检测到内圆，记录此时所采用的阈值(如图2所示，采用不同的阈值进行二值化处理，其效果对目标的边缘检测结果影响显著)。将这些阈值依照编号记录成表，该表即为不同场景下锥套目标检测的先验阈值表。也可以根据经验值设置先验阈值表。
[0018]步骤2:摄像头采集图像。
[0019]当受油机到达锥套前方会合点处，摄像头启动，开始采集锥套的视频序列。
[0020]步骤3:寻找环境适用阈值。
[0021]对视频序列的当前帧图像进行处理。阈值分割阶段，对先验阈值表中的值依次进行尝试，直至成功检测锥套，记录该阈值为环境适用阈值，具体流程图3所示。
[0022]利用先验阈值表中的第i个阈值对视频序列当前帧图像进行阈值分割，并进行图像检测:此帧图像中目标检测成功时，记录第i个阈值为环境适用阈值，检测失败时，i的取值加I继续搜索先验阈值表，i为大于O的整数。
[0023]步骤4:以步骤3中记录的值作为二值化处理时的阈值，对视频序列后续各帧进行逐帧处理:包括阈值分割、目标检测和受油机位置和姿态的解算。若视频序列后续帧中有图像经处理后未检测到目标，重复步骤3，即重新查找先验阈值表选取合适阈值，并记录为环境适用阈值以处理后续帧。可见，本申请根据目标检测结果实时调整二值化处理的阈值，实现了阈值的闭环自适应调整。
[0024]步骤5:对接任务成功，退出程序。
[0025]综上所述，本申请具有以下有益效果:
(1)对不同场景下的锥套拍摄图像采用不同阈值，极大可能地保留了锥套目标的外部特征，为后续检测和识别算法提供保障；
(2)采用先验阈值表记录不同光照条件下的阈值，在后期视频序列图像逐帧处理中通过查表即可实现闭环自适应调整，无需手动修改阈值或通过复杂的算法求解阈值，提高了锥套目标图像处理的适应性。
【主权项】
1.一种自适应阈值的加油锥套图像处理方法，其特征在于，包括如下步骤: A、预设图像二值化先验阈值表； B、待受油机到达锥套前方会合点处时，开始采集锥套的视频序列； C、遍历先验阈值表，选择首次目标成功检测使用的阈值为环境适用阈值； D、以步骤C中的环境适用阈值作为阈值对视频序列中后续各帧图像进行逐帧处理，检测视频序列图像中的目标:当后续各帧图像中出现检测目标失败的情况时，对首帧检测目标失败的图像执行步骤C以更新环境适用阈值，直至完成视频序列所有图像的目标检测任务。2.根据权利要求1所述一种自适应阈值的加油锥套图像处理方法，其特征在于，步骤A采用如下方法预设图像二值化先验阈值表，具体包括如下步骤: Al、在实验时采集不同场景下的锥套拍摄图像，并按场景亮度排序， A2、采用逐步增大阈值的方法对上述各图像进行二值化处理，使得阈值分割后的图像经特征提取能够成功检测到目标， A3、按图像顺序记录各场景下成功检测到目标的阈值，用以形成先验阈值表。3.根据权利要求2所述一种自适应阈值的加油锥套图像处理方法，其特征在于，步骤A2采用基于圆形特征的图像检测法进行特征提取。4.根据权利要求1至3中任意一项所述一种自适应阈值的加油锥套图像处理方法，其特征在于，步骤D中所述对视频序列中后续各帧图像进行逐帧处理，包括:对视频序列中后续各帧图像进行阈值分割、目标检测、受油机位置信息和姿态信息的解算。5.根据权利要求1至3中任意一项所述一种自适应阈值的加油锥套图像处理方法，其特征在于，步骤C具体包括如下步骤: Cl、利用先验阈值表中的第i个阈值对视频序列当前帧图像进行阈值分割， C2、对阈值分割后的图像进行图像检测: 在检测锥套目标成功时，记录第i个阈值， 在检测锥套目标失败时，1的取值加I返回步骤Cl， 其中，i为大于O的整数。
【文档编号】G06T7/00GK105894528SQ201610289466
【公开日】2016年8月24日
【申请日】2016年5月4日
【发明人】单尧, 孙永荣, 刘建业, 黄斌, 朱云峰, 李旺灵
【申请人】南京航空航天大学