一种超低空无人机多传感器数据一体化处理方法及系统的制作方法
【专利摘要】本发明公开了一种超低空无人机多传感器数据一体化处理方法及系统，该方法设置包含GPS/IMU、基本传感器数据和初始传感器安置参数的初始数据，并对基于所述初始数据的多传感器联合数据进行后处理；定义多传感器后处理的数据流转过程及接口文件规范；以GPS/IMU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。采用本发明的技术方案，能够实现针对多传感器的几何数据后处理。
【专利说明】一种超低空无人机多传感器数据一体化处理方法及系统
【技术领域】
[0001]本发明涉及航空测绘的【技术领域】，尤其涉及一种超低空无人机多传感器数据一体化处理方法及系统。
【背景技术】
[0002]面向电力线巡检的超低空无人机多传感器数据一体化处理是一种面向电力线智能巡检应用的多传感器联合数据处理技术。该技术涵盖的关键问题包括:1)设计符合4类传感器联合数据处理的软件功能架构；2)定义软件系统相适应的数据流及其文件格式规范；3)采用以GPS/MU数据作为定位定姿基础，各传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式，使得多传感器数据处理能仅需要采用极少量或零地面控制信息即能同时满足准实时电力线路智能巡检诊断需求。
[0003]现有面向电力线巡检的超低空无人机多传感器一体化处理技术及其存在问题:
[0004]现今世界卫星遥感和有人驾驶的普通航空遥感已经非常发达[1]，但在为经济社会服务的时效性和丰富性上颇嫌不足[2]。无人机低空航测系统具有不同于普通航空摄影测量的技术特点，如具有灵活机动、高效快速、精细准确、作业成本低的特点，在小区域和飞行困难地区高分辨影像快速获取方面具有明显的优势，能够广泛应用于重大工程选址、新农村建设和应急救灾等方面的测绘保障。另外，为了达到某些特殊工程应用目的，单一传感器或数据源较难满足应用需求，如:电力线路安全巡检不仅需要获取电力线路走廊几何位置信息，而且需要对电力线的异常发热区域进行探测，还需对绝缘子放电异常进行有效诊断，因此，电力线路巡检传感器平台可能需要同时集成可见光数码相机、激光扫描仪、热红外相机、紫外相机等多种传感器，并且需要对多类传感器的联合数据处理技术展开研究，联合攻关现阶段其数据处理时效性和精确性所面临的不足。
[0005]在摄影测量与LiDAR领域，从现有商业数据处理系统具备功能讨论，如德国Inpho[3]、法国 PixelFactory[4]，芬兰 TerraSoIid[5],以及国内的 DPGrid[6]、PixelGridm 等应用系统，均是针对单一传感器数据源研发的后处理软件，目前还没有推出多传感器联合数据处理的商业系统。因此，开展研发面向电力线安全选件的超低空多传感器数据联合处理软件系统本身具有较强的前瞻性和先进性。
[0006]综上所述，利用无人机平台搭载多传感器平台进行数据采集与处理是满足多行业应用的必然发展趋势，并且目前还没有一款商业系统具有针对4类传感器的联合数据处理能力。另外，目前在电力部门及其附属行业以及摄影测量遥感领域，传感器几何后处理系统均是针对单一传感器数据源研发的后处理软件，目前还没有推出多传感器联合数据处理的商业系统。
[0007]但是现有的传感器几何后处理技术存在如下缺陷:没有针对多传感器几何后处理技术；针对单一传感器数据源研发的后处理软件，无法完成多传感器数据的处理。
[0008]主要参考文献:
[0009][I]国家遥感中心.地球空间信息科学技术进展[M].北京:电子出版社，2009.[0010][2]林宗坚.UAV低空航测技术研究[J],测绘科学，2011，36(1):5-9.[0011][3]http://www.1nph0.de/ (accessedl9.August.2013.)
[0012][4]http://www.astrium-ge0.com/cn/(accessedl9.August.2013.)
[0013][5]http://www.terrasolid.fi/ (accessedl5.May.2013.)
[0014][6]张祖勋.从数字摄影测量工作站(DPW)到数字摄影测量网格(DPGrid) [J],武汉大学学报.信息科学版，2007, 32 (7): 565-571.[0015][7]曹正响. 基于PixelGrid软件的无人机数据处理方法和技术探讨[J].测绘通报，2012，增刊.
【发明内容】
[0016]为了解决现有技术中没有针对多传感器几何后处理的技术问题，本发明提出一种超低空无人机多传感器数据一体化处理方法及系统，能够实现多传感器的几何后处理。
[0017]本发明的一方面公开了一种超低空无人机多传感器数据一体化处理方法，包括以下步骤:
[0018]设置包含GPS/IMU、基本传感器数据和初始传感器安置参数的初始数据，并对基于所述初始数据的多传感器联合数据进行后处理；
[0019]定义多传感器后处理的数据流转过程及接口文件规范；
[0020]以GPS/MU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
[0021]本发明的另一方面公开了一种超低空无人机多传感器数据一体化处理系统，包括多传感器联合数据处理模块、数据流及其文件格式规范模块和误差配准模型安置模块，其中，
[0022]多传感器联合数据处理模块用于设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据，并对基于所述初始数据的多传感器联合数据进行后处理；
[0023]文件接口定义模块用于定义多传感器后处理的数据流转过程及接口文件规范；
[0024]几何数据配准模块用于以GPS/MU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
[0025]本发明的技术方案由于通过对多传感器联合数据进行后处理和定义多传感器后处理的数据流转过程及接口文件规范，使得多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式，所以能够实现针对多传感器的几何数据后处理。
【专利附图】
【附图说明】
[0026]图1是本发明实施例中的超低空无人机多传感器数据一体化处理系统的主界面图。
[0027]图2是本发明实施例中的无人机多传感联合数据处理功能框架设计的结构示意图。
[0028]图3是本发明实施例中的无人机多传感联合数据处理数据流程过程的流程图。
[0029]图4是本发明实施例中的超低空无人机多传感器数据一体化处理方法的流程图。[0030]图5是本发明实施例中的超低空无人机多传感器数据一体化处理系统的结构示意图。
【具体实施方式】
[0031]下面结合附图对本发明的【具体实施方式】进行详细描述。
[0032]图4是本发明实施例中的超低空无人机多传感器数据一体化处理方法的流程图。如图4所示，本发明实施例中的超低空无人机多传感器数据一体化处理方法，包括以下步骤:
[0033]步骤401:设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据，并对基于初始数据的多传感器联合数据进行后处理；
[0034]步骤402:定义多传感器后处理的数据流转过程及接口文件规范；
[0035]步骤403:以GPS/MU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
[0036]步骤401中对基于初始数据的多传感器联合数据进行后处理进一步包括以下步骤:
[0037]基于初始数据的多传感器联合数据中的几何数据进行处理；
[0038]对几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理。
[0039]上述对几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤:
[0040]步骤404:对LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置；
[0041]步骤405对LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置；和/或，
[0042]如图2所示，上述对几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤:
[0043]点云生成与坐标转换；
[0044]点云粗差剔除、分块等预处理；
[0045]点云的全自动配准与拼接；
[0046]点云全自动滤波与分类编辑；
[0047]DSM、DEM自动构网与内插生成。
[0048]图2是本发明实施例中的无人机多传感联合数据处理功能框架设计的结构示意图。如图2所示，在系统功能架构设计中，如果以电力线安全巡检与诊断为目标导向，针对多传感器几何数据处理系统进行功能设计，可概略分为3个部分:航空光学影像数据处理系统、机载LiDAR点云数据处理系统、以及视频数据处理系统。从数据表现形式来讲，LiDAR点云能直接获取物体表面几何骨架模型，属于基础核心数据源，而光学影像与视频数据则能通过不同的大气窗口获取实体表面纹理信息。因此，多传感器几何数据处理系统应以GPS/IMU为前提数据源，不同传感器与GPS/MU间的安置检校配准为关键技术手段，最终面向生产基础测绘产品与精细三维模型为目标进行功能设计。
[0049]如图2所示，上述对LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置进一步包括以下步骤:
[0050]CPU和GPU并行影像预处理；
[0051]快速自动空中三角测量；
[0052]LiDAR点云辅助的GPU快速正射纠正；
[0053]大范围全自动匀光、匀色数据处理；
[0054]全测区正射影像自动镶嵌；
[0055]点云影像联合DLG测图。
[0056]如图2所示，上述对LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置进一步包括以下步骤:
[0057]点云引导的视频数据读取与分段；
[0058]POS引导的帧标签文件生成；
[0059]点云辅助自动/半自动配准要素提取；
[0060]配准参数解算与基于帧纹理的三维模型生成。
[0061]图5是本发明实施例中的超低空无人机多传感器数据一体化处理系统的结构示意图。如图5所示，本发明实施例中的超低空无人机多传感器数据一体化处理系统，包括多传感器联合数据处理模块1、数据流及其文件格式规范模块2和误差配准模型安置模块3。
[0062]多传感器联合数据处理模块用于设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据，并对基于初始数据的多传感器联合数据进行后处理；文件接口定义模块用于定义多传感器后处理的数据流转过程及接口文件规范；几何数据配准模块用于以GPS/MU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
[0063]多传感器联合数据处理模块，包括初始数据设置模块、几何数据处理系统和LiDAR数据处理系统，其中，初始数据设置模块用于设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据；几何数据处理系统用于基于初始数据的多传感器联合数据中的几何数据进行处理；LiDAR数据处理系统用于对几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理。
[0064]LiDAR数据处理系统对几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤:点云生成与坐标转换；点云粗差剔除、分块等预处理；点云的全自动配准与拼接；点云全自动滤波与分类编辑；DSM、DEM自动构网与内插生成。
[0065]几何数据配准模块包括可见光相机数据处理系统4和视频数据处理系统5。
[0066]可见光相机数据处理系统用于对LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置；可见光相机数据处理系统对LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置进一步包括以下步骤:
[0067]CPU和GPU并行影像预处理；
[0068]快速自动空中三角测量；
[0069]LiDAR点云辅助的GPU快速正射纠正；
[0070]大范围全自动匀光、匀色数据处理；
[0071]全测区正射影像自动镶嵌；
[0072]点云影像联合DLG测图。[0073]视频数据处理系统用于对LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置；视频数据处理系统对LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置进一步包括以下步骤:
[0074]点云引导的视频数据读取与分段；
[0075]POS引导的帧标签文件生成；
[0076]点云辅助自动/半自动配准要素提取；
[0077]配准参数解算与基于帧纹理的三维模型生成。
[0078]图1是本发明实施例中的超低空无人机多传感器数据一体化处理系统的主界面图。如图1所示，适合本发明实施例中的超低空无人机多传感器数据一体化处理系统，包含工程设置、坐标投影参数设置、可见光相机处理、激光雷达点云处理、视频处理等自动化处理模块。该软件系统面向电力线智能巡检应用，完全依照本发明的技术方案所设计功能框架、系统数据流转过程以及文件进行研发，其产品包括正射影像、数字高程模型、电力线三维模型、分类后点云、定向后的分段视频及其对应标签文件等。
[0079]图3是本发明实施例中的无人机多传感联合数据处理数据流程过程的流程图。如图3所示，在系统数据流转过程中，按照软件工程设计理论，架构设计合理的应用型软件系统在满足专业功能需求的前提下，应设计尽量高效、通用的数量流转过程。在充分借鉴现有成熟商业系统数据I/O技术基础上，总结并首次创造性地提出数据流转过程设计准则:
[0080]⑴单向性:系统按照模块化结构设计，各模块间交互数据尽量自顶向下单向传递;
[0081]⑵扩展性:系统内部通信与协同数据应具备可动态扩展性，尽量采用配置文件模式进行共享访问，为下一层应用级模块开发或插件二次开发提供数据交换基础；
[0082]⑶标准性:系统与外部接口应尽量采用国际标准格式进行交互，如采用惯导sbet格式、影像Tiff文件、矢量shp格式、国标DEM格式、点云LAS格式、视频avi或mpeg格式
坐寸ο
[0083]在文件接口定义模块中，遵照现有国际标准数据交换格式规范以及多传感器联合数据处理实际需求，设计适合面向电力线巡检的超低空无人机多传感器数据一体化处理的文件格式。在系统设计中，文件格式包含有现行的国际通用格式和自定义的文件格式，相关的数据结构定义可参见各文件的首段说明。具体如下:
[0084]⑴系统输入数据定义
[0085]表1:输入数据整体说明
[0086]
【权利要求】
1.一种超低空无人机多传感器数据一体化处理方法，其特征在于，包括以下步骤: 设置包含GPS/IMU、基本传感器数据和初始传感器安置参数的初始数据，并对基于所述初始数据的多传感器联合数据进行后处理； 定义多传感器后处理的数据流转过程及接口文件规范； 以GPS/IMU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
2.根据权利要求1所述的一种超低空无人机多传感器数据一体化处理方法，其特征在于，所述对基于所述初始数据的多传感器联合数据进行后处理进一步包括以下步骤: 基于所述初始数据的多传感器联合数据中的几何数据进行处理； 对所述几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理。
3.根据权利要求2所述的一种超低空无人机多传感器数据一体化处理方法，其特征在于，所述对所述几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤: 对所述LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置；对所述LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置；和/或，所述对所述几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤: 点云生成与坐标转换； 点云粗差剔除、分块等预处理； 点云的全自动配准与拼接； 点云全自动滤波与分类编辑； DSM, DEM自动构网与内插生成。
4.根据权利要求3所述的一种超低空无人机多传感器数据一体化处理方法，其特征在于，所述对所述LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置进一步包括以下步骤: CPU和GPU并行影像预处理； 快速自动空中三角测量； LiDAR点云辅助的GPU快速正射纠正； 大范围全自动匀光、匀色数据处理； 全测区正射影像自动镶嵌； 点云影像联合DLG测图。
5.根据权利要求3所述的一种超低空无人机多传感器数据一体化处理方法，其特征在于，所述对所述LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置进一步包括以下步骤: 点云引导的视频数据读取与分段； POS引导的帧标签文件生成； 点云辅助自动/半自动配准要素提取； 配准参数解算与基于帧纹理的三维模型生成。
6.一种超低空无人机多传感器数据一体化处理系统，其特征在于，包括多传感器联合数据处理模块、数据流及其文件格式规范模块和误差配准模型安置模块，其中， 多传感器联合数据处理模块用于设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据，并对基于所述初始数据的多传感器联合数据进行后处理； 文件接口定义模块用于定义多传感器后处理的数据流转过程及接口文件规范； 几何数据配准模块用于以GPS/MU为参考基准，多传感器间通过安置误差配准模型统一规算到同一个绝对参考坐标系的联合数据处理模式。
7.根据权利要求6所述的一种超低空无人机多传感器数据一体化处理系统，其特征在于，所述多传感器联合数据处理模块，包括初始数据设置模块、几何数据处理系统和LiDAR数据处理系统,其中， 初始数据设置模块用于设置包含GPS/MU、基本传感器数据和初始传感器安置参数的初始数据； 几何数据处理系统用于基于所述初始数据的多传感器联合数据中的几何数据进行处理； LiDAR数据处理系统用于对所述几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理。
8.根据权利要求7所述的一种超低空无人机多传感器数据一体化处理系统，其特征在于，所述几何数据配准模块包括可见光相机数据处理系统和视频数据处理系统，其中， 可见光相机数据处理系统用于对所述LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置；` 视频数据处理系统用于对所述LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置；和/或， 所述LiDAR数据处理系统对所述几何数据处理系统的几何数据处理结果中的LiDAR数据进行处理进一步包括以下步骤: 点云生成与坐标转换； 点云粗差剔除、分块等预处理； 点云的全自动配准与拼接； 点云全自动滤波与分类编辑； DSM, DEM自动构网与内插生成。
9.根据权利要求8所述的一种超低空无人机多传感器数据一体化处理系统，其特征在于，所述可见光相机数据处理系统对所述LiDAR数据处理系统的LiDAR数据处理结果中的可见光相机数据进行配置进一步包括以下步骤: CPU和GPU并行影像预处理； 快速自动空中三角测量； LiDAR点云辅助的GPU快速正射纠正； 大范围全自动匀光、匀色数据处理； 全测区正射影像自动镶嵌； 点云影像联合DLG测图。
10.根据权利要求8所述的一种超低空无人机多传感器数据一体化处理系统，其特征在于，所述视频数据处理系统对所述LiDAR数据处理系统的LiDAR数据处理结果中的视频数据进行配置进一步包括以下步骤: 点云引导的视频数据读取与分段； POS引导的帧标签文件生成； 点云辅助自动/半自动配准要素提取； 配准参数解算与基于帧纹理的三维模型生成。
【文档编号】G06F9/44GK103744661SQ201310720218
【公开日】2014年4月23日 申请日期:2013年12月23日 优先权日:2013年12月23日
【发明者】彭向阳, 左志权, 陈锐民, 刘正军, 王柯, 谢小伟, 麦晓明, 王锐 申请人:广东电网公司电力科学研究院, 中国测绘科学研究院