基于紫外可见光图像融合的巡检机器人以及检测方法与流程

本发明涉及图像检测技术领域，尤其涉及一种基于紫外可见光图像融合的巡检机器人以及检测方法。

背景技术：

高压设备投入运行后，由于表面粗糙不均、污秽、结构缺陷、导体接触不良等原因，会引起设备场强分布不均，造成电晕、电弧等放电现象。电晕、电弧放电时会伴随有电、光、热、声波、化合物等产生。因此需要对其进行检测。

技术实现要素：

有鉴于此，本发明的目的在于提出一种基于紫外可见光图像融合的巡检机器人以及检测方法，以解决高压电力设备缺陷检测的问题。

基于上述目的，本发明提供了一种基于紫外可见光图像融合的巡检机器人，包括巡检机器人本体，所述检机器人本体上设置有：

紫外成像仪，用于拍摄并输出待检测设备的紫外图像；

可见光成像仪，用于拍摄并输出待检测设备的可见光图像；

图像融合单元，与所述紫外成像仪、所述可见光成像仪连接，用于将所述紫外图像与所述可见光图像融合生成融合图像；

检测单元，用于根据所述融合图像对待检测设备进行故障检测；

导航单元，用于实现巡检机器人的定位与导航。

可选的，所述导航单元通过最优路径规划算法和精确轨迹规划算法实现定位与导航。

可选的，所述导航单元包括：

激光雷达，用于对巡检环境的地形与环境进行扫描获取地形与环境的扫描数据；

惯性测量单元，用于测量巡检机器人本体的加速度与角速度；

编码器，用于将地形与环境的扫描数据以及巡检机器人本体的加速度与角速度进行融合，获得导航数据实现巡检机器人的定位与导航。

可选的，还包括紫外光日盲滤光镜，用于将输入信号处理成240nm～280nm波段紫外光信号，并将紫外光信号输入紫外成像仪。

可选的，所述紫外成像仪包括紫外镜头、紫外相机、紫外ccd。

可选的，所述可见光成像仪包括可见光镜头、可将光相机。

本发明还提供一种基于紫外可见光图像融合的检测方法，包括：

获取导航数据，构建待检测环境的三维实景环境；

基于导航信息确认巡检机器人的行驶路径并拍摄待检测设备的紫外图像以及可见光图像；

将所述紫外图像与所述可见光图像融合生成融合图像；

基于所述融合图像对待检测设备进行故障检测，获得故障信息。

可选的，所述获取导航数据包括：

获取巡检环境的地形与环境的扫描数据；

获取检机器人本体的加速度与角速度；

将地形与环境的扫描数据以及巡检机器人本体的加速度与角速度进行融合，获得导航数据。

可选的，所述紫外图像的获取方法包括：紫外通道光信号经透镜成像后由后端光电阴极成像，将可见光图像转变为电子图像，然后由三级mcp进行信号放大，然后经荧光屏将信号将电子图像转变为可见光图像，利用光纤锥将该图像耦合到后端ccd上。

可选的，还包括：根据所述故障信息生成报警信息，并将所述报警信息发送至用户端。

从上面所述可以看出，本发明提供的基于紫外可见光图像融合的巡检机器人以及检测方法，能够实现不停车精确测温与表计识别，可以通过云台边走边转、红外自动对焦、设备的形状匹配读取设备温度、近处表计不调焦识别、移动过程中拍摄高清图像等。

附图说明

图1为本发明实施例基于紫外可见光图像融合的巡检机器人的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明进一步详细说明。

需要说明的是，除非另外定义，本发明实施例使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变后，则该相对位置关系也可能相应地改变。

本发明实施例的第一个方面提出一种基于紫外可见光图像融合的巡检机器人，包括巡检机器人本体，所述检机器人本体上设置有：

紫外成像仪11，用于拍摄并输出待检测设备的紫外图像；

可见光成像仪12，用于拍摄并输出待检测设备的可见光图像；

图像融合单元13，与所述紫外成像仪、所述可见光成像仪连接，用于将所述紫外图像与所述可见光图像融合生成融合图像；

检测单元14，用于根据所述融合图像对待检测设备进行故障检测；

导航单元，用于实现巡检机器人的定位与导航。

本发明提供的基于紫外可见光图像融合的巡检机器人，能够实现不停车精确测温与表计识别，可以通过云台边走边转、红外自动对焦、设备的形状匹配读取设备温度、近处表计不调焦识别、移动过程中拍摄高清图像等。

可选的，紫外成像仪采用共轴光路成像技术，入射光信号一路直接进入可见光通道、可见光通道对设备本体进行成像，另一路折射后进入紫外通道，紫外通道采用了100％日盲滤光片，仅探测240nm～280nm波段紫外光信号，从而避免了外界太阳光信号的干扰，紫外通道光信号经透镜成像后由后端光电阴极成像，将可见光图像转变为电子图像，然后由三级mcp进行信号放大，然后经荧光屏将信号将电子图像转变为可见光图像，利用光纤锥将该图像耦合到后端ccd上。仪器内部采用图像融合算法实现紫外通道和可见光通道的图像融合并输出最终图像。调焦采用可见光通道自动调焦方式，紫外通道跟随可见光通道进行调焦，通过调节mcp两端电压实现紫外通道的增益调整，为取得较好的信噪比，增益也可以采用手动调节方式。

可选的，图像传感器实现紫外和可见光传感器融合，其中紫外成像采用双通道成像技术包含了可见光信息，但是实际情况中可能受制于制造精度的问题，通过直接的光学影像融合会有不匹配的情况，不能做到精准的紫外和可见光融合，所以在硬件处理器端，预留出可见光相机和紫外相机的独立的输出端口连接至后续硬件平台，可以通过后续软件平台对两路独立的视频接口进行软件算法校正、标定、叠加，实现程序可控，灵活叠加。针对可见光摄像头、紫外成像头传感器的数字/模拟数据输出至视频处理系统的接口，主要的工作集中在设计fpga+dsp的高速图像处理系统：对输入的视频信号进行识别、分析、处理、提取紫外成像头的电晕以及局部放电的位置强弱信息并叠加紫外成像头的电晕以及局部放电的位置强弱信息，将最终图形数字化传输至嵌入式系统中进行存储、分析后一方面通过无线自组网系统传输至变电站主控中心，另一方面通过osd技术通过在视频信号中叠加字符信息，优化人机交互界面，将实时诊断信息输出至微型头盔显示器。同时该系统承担视频处理以及实施诊断的核心算法并且充分利用了fpga并行处理的优点和dsp浮点运算速度快的优点，加上两片ddr2构建32bit总线，整个系统的带宽高达10gb/s；两片ddr2容量高达2gbit，满足视频处理过程中对高缓冲区的要求。我们选用的fpga为altera公司cycloneiv系列的ep4ce30f23c6n这款高速的fpga芯片，在整个cycloneiv系列中速度级别达到最高的c6级别，可以实现fpga和ddr2之间的始终频率达到200m，ddr2内部400m，充分满足多路紫外以及视频图像的处理需求。

可选的，紫外成像头、可见光摄像头两个传感器组成整个设备的图像传感器系统，将输入的模拟图像流信号最终图形数字化传输至嵌入式系统中进行存储、分析后通过osd模块叠加嵌入式硬件系统中自动检测软件得出的分析结论直观输出至微型显示器。由于多个图像传感器以及与之相匹配镜头的差异性，多路输入的视频图片信号一定会有视场的失真以及畸变，所以紫外成像和可见光两路的视频图片信息进行畸变校正、压缩解码、图像识别、图像融合显得尤为重要；关于图像处理领域发展由来已久，从典型的邻近差值算法、双线性差值算法、拉伸算法、中值滤波到更智能的动态可重构的图像算法、遗传算法、神经网络算法等，所有的图像算法在紫外、可见光图像中进行灵活运用最终实现多信号的有机融合。

可选的，所述导航单元通过最优路径规划算法和精确轨迹规划算法实现定位与导航。

可选的，所述导航单元包括：

激光雷达，用于对巡检环境的地形与环境进行扫描获取地形与环境的扫描数据；

惯性测量单元，用于测量巡检机器人本体的加速度与角速度；

编码器，用于将地形与环境的扫描数据以及巡检机器人本体的加速度与角速度进行融合，获得导航数据实现巡检机器人的定位与导航。

可选的，还包括紫外光日盲滤光镜，用于将输入信号处理成240nm～280nm波段紫外光信号，并将紫外光信号输入紫外成像仪。

可选的，所述紫外成像仪包括紫外镜头、紫外相机、紫外ccd。

可选的，所述可见光成像仪包括可见光镜头、可见光相机。

本发明实施例的第二个方面提出一种基于紫外可见光图像融合的检测方法，包括：

步骤101，获取导航数据，构建待检测环境的三维实景环境；

步骤102，基于导航信息确认巡检机器人的行驶路径并拍摄待检测设备的紫外图像以及可见光图像；

步骤103，将所述紫外图像与所述可见光图像融合生成融合图像；

步骤104，基于所述融合图像对待检测设备进行故障检测，获得故障信息。

可选的，所述获取导航数据包括：

获取巡检环境的地形与环境的扫描数据；

获取检机器人本体的加速度与角速度；

将地形与环境的扫描数据以及巡检机器人本体的加速度与角速度进行融合，获得导航数据。

可选的，所述紫外图像的获取方法包括：紫外通道光信号经透镜成像后由后端光电阴极成像，将可见光图像转变为电子图像，然后由三级mcp进行信号放大，然后经荧光屏将信号将电子图像转变为可见光图像，利用光纤锥将该图像耦合到后端ccd上。

可选的，还包括：根据所述故障信息生成报警信息，并将所述报警信息发送至用户端。

所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本公开的范围(包括权利要求)被限于这些例子；在本发明的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本发明的不同方面的许多其它变化，为了简明它们没有在细节中提供。

另外，为简化说明和讨论，并且为了不会使本发明难以理解，在所提供的附图中可以示出或可以不示出与集成电路(ic)芯片和其它部件的公知的电源/接地连接。此外，可以以框图的形式示出装置，以便避免使本发明难以理解，并且这也考虑了以下事实，即关于这些框图装置的实施方式的细节是高度取决于将要实施本发明的平台的(即，这些细节应当完全处于本领域技术人员的理解范围内)。在阐述了具体细节(例如，电路)以描述本发明的示例性实施例的情况下，对本领域技术人员来说显而易见的是，可以在没有这些具体细节的情况下或者这些具体细节有变化的情况下实施本发明。因此，这些描述应被认为是说明性的而不是限制性的。

尽管已经结合了本发明的具体实施例对本发明进行了描述，但是根据前面的描述，这些实施例的很多替换、修改和变型对本领域普通技术人员来说将是显而易见的。例如，其它存储器架构(例如，动态ram(dram))可以使用所讨论的实施例。

本发明的实施例旨在涵盖落入所附权利要求的宽泛范围之内的所有这样的替换、修改和变型。因此，凡在本发明的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明的保护范围之内。