基于无人机的多传感遥感影像匹配方法、装置和系统与流程

文档序号:12675371阅读:296来源:国知局

本发明涉及无人机技术领域,特别涉及基于无人机的多传感遥感影像匹配方法和系统。对于基于无人机的多传感遥感影像匹配方法,可以通过建立功能模块,组合成功能模块构架,由存储在计算机可读存储介质中的计算机程序来实施。



背景技术:

随着影像采集传感器技术的发展,影像获取来源不再局限于光学照相机,可见光数码相机、多光谱相机、热红外相机、彩红外摄影和全景摄影机等高性能的影像采集传感器被广泛应用在图像理解、计算机视觉和遥感等领域。

受传感成像原理、影像采集传感器工作环境、图像目标状态等因素影响,不同影像采集传感器获取影像信息的能力也各不相同,可见光数码相机成像分辨率高,获取的影像信息包含丰富的对比度、颜色和形状信息,但可见光数码相机工作时容易受环境光照程度影响,而且不能在夜间工作;多光谱相机采用多个光谱谱段同时测量目标,适用于地形测绘、检测和分析,但是获取的影像信息的成像质量不高;热红外相机具有一定的穿透烟、雾、雪等障碍物的能力,成像分辨率较高,但是拍摄距离较远时获取的影像信息不够稳定。

考虑到各种影像采集传感器在影像信息获取上的差异,目前使用无人机等影像采集平台获取地物影像时,一些影像采集人员会在无人机上同时搭载多个不同类别的影像采集传感器,但是由于不同影像采集传感器的拍摄位置和角度不同,拍摄每张影像时的三维地理坐标也不同,导致多个影像采集传感器所采集的影像内容和尺寸存在差异,获取的影像之间难以实现精确匹配。



技术实现要素:

本发明的目的在于避免上述现有技术中的不足之处而提供一种基于无人机的多传感遥感影像匹配方法及系统,以实现对无人机搭载的多种影像采集传感器遥感影像之间的精确匹配。

本发明的目的通过以下技术方案实现:

提供基于无人机的多传感遥感影像匹配方法,包括依次进行的如下步骤:

影像采集步骤:分别通过无人机搭载的多个影像采集传感器拍摄地物影像,记录所拍摄的每张地物影像的数据信息,所述数据信息包括拍摄时影像采集传感器的拍摄角度θ和拍摄时间t;

影像平面调整步骤:定义多个影像采集传感器在同一拍摄时间t拍摄的地物影像为同步影像,若同步影像中有影像采集传感器的拍摄角度θ相对预设角度发生偏移,且所有影像采集传感器的偏移角度不完全一致,就对拍摄角度θ发生偏移的影像采集传感器拍摄的同步影像进行投影变形,以使所有同步影像反映所拍摄的地物同一平面的影像信息;

同步影像配准步骤:对当前获取的所有同步影像进行压缩,以使这些同步影像的单位尺寸影像代表的地面范围大小一致;对这些同步影像进行图像聚类分割处理,得到拥有同种特性多种类别区域的灰值图,重叠这些灰值图的地物特征标记,对进行叠加处理,得到由这些同步影像叠加生成的配准影像,所述地物特征标记是指根据灰值图的灰度值近似的灰度区域的形状、面积提取的图像信息。

其中,所述影像采集步骤中记录的数据信息还包括地物影像空间分辨率R,所述同步影像配准步骤中,对当前获取的所有同步影像进行压缩是按照各个同步影像的地物影像空间分辨率R的比值进行的。

其中,所述影像采集步骤中记录的数据信息还包括影像采集传感器的焦距f、电荷耦合元件像素大小P和拍摄地物影像时的高度z,所述影像的空间分辨率R由如下公式确定:f/z=P/R。

其中,所述多个影像采集传感器包括可见光数码相机、多光谱相机和热红外相机中的至少两种。其中,

本发明的基于无人机的多传感遥感影像匹配方法,使用无人机搭载多个不同类别的影像采集传感器进行影像采集工作,然后对获取自不同影像采集传感器的同步影像分别进行投影变形处理,使多个同步影像都反映所拍摄的地物同一平面的影像信息,然后把这三个同步影像进行配准,从而得到由多种不同类型的影像信息叠加产生的配准影像。配准影像包括来自不同影像采集传感器的影像信息,可以增加影像信息细节、提高服务器输出的影像清晰度,从而改善单一影像采集传感器获取的影像品质,进而提高对影像进行特征提取和目标识别等操作的有效性,方便对影像进行下一步处理与分析。

对于基于无人机的多传感遥感影像匹配方法,可以通过建立功能模块,组合成功能模块构架,由存储在计算机可读存储介质中的计算机程序来实施。

还提供了基于无人机的多传感遥感影像匹配系统,包括无人机、服务器和搭载在无人机上的影像采集传感器,该系统的服务器具有功能模块构架,能够录入实施该功能模块构架的计算机程序,从而实现该基于无人机的多传感遥感影像匹配方法。通过搭载在无人机上的多个不同类别的影像采集传感器同时拍摄地物影像,处理得到由多种不同类型的影像信息叠加产生的配准影像,增加影像信息细节、提高服务器输出的影像清晰度,改善了单一影像采集传感器获取的影像品质。

具体实施方式

结合以下实施例对基于无人机的多传感遥感影像匹配方法及系统作进一步描述。

因为无人机具有操作简便、灵活性好和空间分辨率高等优势,无人机遥感技术迅速发展,无人机可以根据实际需要选择四旋翼无人机或者固定翼无人机,影像采集人员把搭载有影像采集传感器的无人机作为影像采集平台,控制无人机按照预先设定的航线和拍摄角度对地物进行拍摄作业,影像采集传感器把拍摄的影像发送给服务器,地物影像经由服务器分析处理后输出为地物的三维模型。

本实施例的多传感遥感影像匹配方法包括如下步骤:

影像采集步骤,分别通过无人机搭载的可见光数码相机、多光谱相机和热红外相机三种不同类型的影像采集传感器拍摄地物影像,记录所拍摄的每张地物影像的数据信息,该数据信息包括拍摄时影像采集传感器的拍摄角度θ、拍摄时间t和地物影像空间分辨率R。服务器内记录有影像采集传感器的参数,根据该参数和无人机拍摄的高度可以得到影像采集传感器获取的影像的空间分辨率R:f/z=P/R,其中:f为影像采集传感器的焦距,z为拍摄地物影像时的高度,P为电荷耦合元件像素大小。三个影像采集传感器实时拍摄得到的地物影像和相关数据信息发送给基于无人机的多传感遥感影像匹配系统的服务器,通过三个影像采集传感器同步拍摄地物影像并实时发送给服务器,可以获取更高品质的地物影像。

影像平面调整步骤,定义三个影像采集传感器在同一拍摄时间t拍摄的地物影像为同步影像,正常拍摄时三个影像采集传感器的拍摄角度都为预设的角度,则三个同步影像的取像平面保持一致,但是由于拍摄时外部条件等因素影响,可能出现影像采集传感器移位的情况,导致三个同步影像的取像平面出现偏差,影响后续的同步影像配准。服务器分别获取收到的三个同步影像的拍摄角度θ,若三个影像采集传感器的拍摄角度θ都出现了相同角度的偏移,则说明无人机的行进方向发生改变,无需对影像平面进行调整;若有一个或两个影像采集传感器的拍摄角度θ出现偏移,或者三个影像采集传感器的拍摄角度θ都出现了偏移但偏移角度不一样,就判断拍摄同步影像时三个影像采集传感器的取像平面不一致,服务器对拍摄角度θ出现偏移的影像采集传感器拍摄的同步影像进行投影变形处理,把拍摄角度θ出现偏移的同步影像调整为在预设拍摄角度的取像平面上的投影影像。经过如上影像平面调整步骤,调整后的三个同步影像都反映所拍摄的地物同一平面的影像信息,便于对三个同步影像进行配准。

同步影像配准步骤,服务器分别获取经过影像平面调整步骤调整后的三个同步影像的空间分辨率R,空间分辨率R是指单位像素所代表的地面范围的大小,即能够从遥感影像上识别出两个相邻地物的最小距离,地面两个相邻物体的距离超过空间分辨率R的限度时,两者在影像上就会表现为一个单一的目标。服务器把三个同步影像中空间分辨率R最大的同步影像作为基准影像,把该基准影像的空间分辨率R与余下的同步影像的比值作为压缩比例,按照该压缩比例对同步影像进行压缩处理,从而使得单位尺寸的影像代表的地面范围大小一致。服务器对调整压缩后的三个同步影像进行图像聚类分割处理,得到拥有同种特性多种类别区域的灰值图,然后根据连续的灰度值近似的灰度区域的形状、面积提取同步影像中的地物特征标记,通过重叠三个同步影像中的地物特征标记把三种不同类型的影像采集传感器拍摄地物影像叠加在一起,从而得到由三种不同类型的影像信息叠加产生的配准影像。配准影像包括来自不同影像采集传感器的影像信息,可以增加影像信息细节、提高服务器输出的影像清晰度,从而改善单一影像采集传感器获取的影像品质,进而提高对影像进行特征提取和目标识别等操作的有效性,方便对影像进行下一步分析和处理。

服务器把收到的三个影像采集传感器在同一时刻分别拍摄的地物影像作为同步影像,然后对获取自不同影像采集传感器的三个同步影像分别进行投影变形处理,使三个同步影像都反映所拍摄的地物同一平面的影像信息,然后把这三个同步影像进行配准,从而得到由三种不同类型的影像信息叠加产生的配准影像。配准影像包括来自不同影像采集传感器的影像信息,可以增加影像信息细节、提高服务器输出的影像清晰度,从而改善单一影像采集传感器获取的影像品质,进而提高对影像进行特征提取和目标识别等操作的有效性,方便对影像进行下一步处理与分析。

与每次拍摄都可以获取五个不同角度影像的机载多镜头专用相机不同,本实施例的无人机上搭载的影像采集传感器都是单镜头相机,单镜头相机在进行二维倾斜影像的拍摄时,一次获取一个角度的影像。通过预先设定无人机的行进路线和拍摄角度,采用单镜头倾斜摄影测量方法也可以实现对地物的全方位影像的拍摄,获得与多镜头设备同样的效果。

在对一个区域的地物进行拍摄时,设定无人机的横向拍摄路径和纵向拍摄路径,无人机在相邻两条横向拍摄路径或者纵向拍摄路径拍摄的地物影像的重叠度满足图像处理要求,即沿无人机行进方向的影像重叠度不低于60%,无人机行进方向的左右两侧的影像重叠度不低于30%,并且实际拍摄区域超出需要拍摄的地物区域一个拍摄路径间距的距离,这样在对相邻两部分影像进行拼合处理时就可以获得足够多的相同地物特征信息,从而得到需拍摄地物区域的完整影像。对每一条横向拍摄路径和纵向拍摄路径,影像采集人员控制影像采集传感器进行五个不同角度影像的拍摄,这五个不同角度是指镜头垂直向下和镜头与无人机前后左右四个方向分别呈45°角。服务器获取影像采集传感器拍摄的每一个地物影像的三维地理坐标O(x,y,z),则分别取影像采集传感器在如下坐标拍摄的地物影像作为该地物前后左右四个方向的影像:前、后、左、右方位的影像分别取在坐标A(x,y+z,z)、坐标B(x,y-z,z)、坐标C(x-z,y,z)、坐标D(x+z,y,z)拍摄的朝向坐标O(x,y,z)方向且呈45°角的地物影像。

服务器获取无人机在每个镜头方向得到的配准影像,根据常规的影像采集传感器构像方程和几何畸变校正理论对影像进行几何校正,并采用基于特征的图像配准算法对几何校正后的图像进行拼接处理,得到需拍摄地物区域的完整影像。控制器根据地理坐标关系获取地物垂直和前后左右五个方向的二维倾斜摄影影像数据,通过倾斜摄影测量三维建模工具自动建模,得到地物全面的原始三维模型。

对于基于无人机的多传感遥感影像匹配方法,可以通过建立功能模块,组合成功能模块构架,由存储在计算机可读存储介质中的计算机程序来实施。

为了实现该基于无人机的多传感遥感影像匹配方法,可以建立基于无人机的多传感遥感影像匹配系统,该系统的服务器具有功能模块构架,能够录入实施该功能模块构架的计算机程序,从而实现该基于无人机的多传感遥感影像匹配方法。

最后应当说明的是,以上实施例仅用以说明本发明的技术方案,而非对本发明保护范围的限制,尽管参照较佳实施例对本发明作了详细地说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的实质和范围。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1