本发明属于人工智能和先进传感技术应用于风电领域,涉及一种激光和视频融合的叶片净空监测系统、方法、设备及介质。
背景技术:
激光雷达测距基本原理:测距原理基本可以归结为测量光往返目标所需要时间,然后通过光速c=299792458m/s和大气折射系数n计算出距离d。同其他波段的雷达相比,激光雷达导引头具有体积小、质量轻和空间分辨率高的特点。与红外、电视等导引头相比,激光雷达方向性好,测量精度,具有全天候(大雨天除外)全天时的特点。
塔架净空视频监控基本原理是通过相机将拍摄到的视频经过图像计算将塔筒和叶片之间的像素距离转换成实际距离的过程。
将激光测试塔架净空与视频测试塔架净空进行比较,结果如表1所示。
表1.激光测试塔架净空与视频测试塔架净空的性能比较
由表1可知,激光测试塔架净空与视频测试塔架净空各有缺点,激光测试塔架净空法测试精确度不高,但是能够用于光线黑暗的环境中,视频测试塔架净空法测试精度高但是对使用环境要求苛刻,且使用寿命较低。因此,亟需发展一种能够在光照强度较低的环境中适用的叶片净空监测技术。
技术实现要素:
本发明的目的在于克服上述现有技术中,激光测试塔架净空法测试精确度不高,视频测试塔架净空法对使用环境要求苛刻且使用寿命较低的缺点,提供一种激光和视频融合的叶片净空监测系统、方法、设备及介质。
为了达到上述目的,本发明采用以下技术方案予以实现:
一种激光和视频融合的叶片净空监测系统,包括:
激光雷达扫描模块,获取叶片的运行数据,运行数据包括叶片的距离、运行速度和叶片上扫描点的角度;基于叶片的运行数据,确定净空结果的激光净空置信度,计算得到叶片的激光净空值;
视频净空测试模块,用于获取叶片运行的一组扫描点,根据扫描点的离散度通过融合算法确定净空结果的视频净空置信度,并计算出叶片的视频净空值;
判断决策模块,分别与激光雷达扫描模块和视频净空测试模块相交互,基于激光雷达扫描模块和视频净空测试模块中净空结果的置信度和净空值,获取最终的叶片净空值。
优选地,激光雷达扫描模块中净空结果的激光置信度的具体获取过程为:
基于叶片的运行数据,首先通过融合算法确定运行数据的置信度,获取叶片运行的激光坐标系,再根据激光坐标系确定净空结果的激光净空置信度。
优选地,激光雷达扫描模块包括第一数据处理单元,用于对叶片的运行数据进行处理,并基于预先设置的叶片运行速度阈值、激光净空值阈值、激光扫描数量限定、激光数据标准差限定和激光坐标系限定,确定净空值的激光净空置信度;
视频净空测试模块中包括第二数据处理单元,基于预先设置的视频净空值阈值、视频扫描数量限定和视频数据标准差限定,确定净空值的视频净空置信度。
一种激光和视频融合的叶片净空监测方法,包括如下步骤:
基于激光雷达扫描获取叶片的运行数据;运行数据包括叶片的距离、运行速度和叶片上扫描点的角度;基于叶片的运行数据,确定净空结果的激光净空置信度,计算得到叶片的激光净空值;
基于视频净空监测获取叶片运行的一组扫描点,根据扫描点的离散度通过融合算法确定净空结果的视频净空置信度,并计算出叶片的视频净空值;
基于激光净空置信度、激光净空值、视频净空置信度和视频净空值,计算得到最终的叶片净空值。
优选地,激光净空置信度的确定过程具体为:
通过激光雷达扫描获取一组叶片运行数据,基于融合算法确定运行数据的置信度,得到叶片的激光坐标系,基于叶片的激光坐标系确定净空结果的激光净空置信度。
优选地,最终的叶片净空值的具体计算过程为:
最终的叶片净空值=(激光净空值*激光置信度+视频净空值*视频置信度)/(激光置信度+视频置信度)。
优选地,激光净空置信度是基于预先设置的叶片运行速度阈值、激光净空值阈值、激光扫描数量限定、激光数据标准差限定和激光坐标系限定确定的;
叶片运行速度阈值为0~150帧/秒,激光雷达扫描得到的叶片运行速度为0~150,则置信度为1;
激光净空值阈值为-5~100,激光雷达扫描得到的净空值为-5~100,则置信度为1;
激光扫描数量限定具体为:在一次叶片扫描过程中返回数据小于3组,则置信度为0;
激光数据标准差限定具体为:一次叶片扫描过程中各组数据标准差大于1米,则置信度为0;各组数据标准差为0~1米,则置信度线性分布;
激光坐标系限定具体为:坐标系中计算出的叶片运行角度值为-5°~5°,则置信度为1。
优选地,视频净空置信度是基于预先设置的视频净空值阈值、视频扫描数量限定、视频数据标准差限定确定的;
视频净空值阈值为-5~100,视频净空监测得到的净空值为-5~100,则置信度为1;
视频标准差限定具体为:一次叶片扫描过程中各图像中根据扫描点计算出来的直线拟合斜率值和理想斜率值的角度偏差为-5°~5°,则置信度为1;
视频扫描数量限定具体为:一次叶片扫描过程中获取的叶尖的数量小于5组,则置信度为0。
一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现所述激光和视频融合的叶片净空监测方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现所述激光和视频融合的叶片净空监测方法的步骤。
与现有技术相比,本发明具有以下有益效果:
本发明公开了一种激光和视频融合的叶片净空监测系统,将激光雷达测试和视频净空监测相结合,通过使用激光测距技术提高夜晚状态下叶片净空测量的准确性,提升了净空工况监测的完整性;独创的通过激光和视频净空监测的融合算法,通过激光和视频净空两种途径所采集的净空值进行了净空测量,通过融合算法实现结果的校验;通过激光和视频的融合能够监测各种工况下的风电机组叶片净空值,基本没有失效盲区,解决了视频算法在夜晚及微光条件下测量不清晰的问题;通过激光和视频的通过融合算法能够提高整体监测的精度;通过激光和视频的融合算法能够给出更多的监测结果资料,净空值和视频融合,能够为风机运行提供更多的保障。
本发明还公开了一种激光和视频融合的叶片净空监测方法,塔架净空视频监控基本原理是通过相机将拍摄到的视频经过图像计算将塔筒和叶片之间的像素距离转换成实际距离的过程,本发明方法通过融合视频测量和激光测量两种技术,解决了单一的净空测量方案由于各个技术路线的局限性导致两种方法均存在一定的使用场景问题。而本发明方法通过融合视频测量和激光测量两种技术,有效的提高了对净空工况监测的完整性,增加夜晚状态的净空识别精度,提升效果可信度,增加了净空监控的精度,同时也扩大了净空监控的适用范围。
附图说明
图1为激光和相机的安装示意图;
图2为激光雷达测试示意图;
图3为本发明风电机组塔筒寿命预测系统的示意图;
图4为本发明一示例性实施例示出的一种电子终端设备的结构图。
其中:1-激光雷达;2-相机;3-塔筒;4-叶片;21-存储器,22-处理器,23-接口,24-通信组件,25-电子终端设备。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面结合附图对本发明做进一步详细描述:
实施例1
如图1所示,安装激光雷达和监测相机,激光雷达安装在机舱左后方,监测一定的扫描区域,如果有叶片扫过则将叶片的距离、运行速度、扫描到的点的角度返回(s,v,r),经过坐标变化可以将叶片扫过塔筒的轨迹抽象成俯视图中的直线l1,经过塔筒外缘的并和l1平行的直线l2与l1之间的距离就是塔筒的净空值。激光计算净空的算法中坐标系的原点o是激光安装的中心点,x轴正向左,y轴正向下。整体抽象图形如图2所示。用视频监控测试净空和激光测试净空值类似首先将叶片扫过塔筒的轨迹抽象成一条直线下图(l1,l2,l3),然后找到平行于塔筒叶片轨迹的直线且经过塔筒前缘的直线l0,ln到l0的距离就是该次测量的塔架净空值。视频的坐标原点在图形的左上角,x轴向右,y轴向左。视频的测试模型是通过图像计算之后返回一条直线y=kx+b。
如图3所示,激光雷达扫描模块,获取叶片的运行数据,运行数据包括叶片的距离、运行速度和叶片上扫描点的角度;基于叶片的运行数据,确定净空结果的激光净空置信度,计算得到叶片的激光净空值;
视频净空测试模块,用于获取叶片运行的一组扫描点,根据扫描点的离散度通过融合算法确定净空结果的视频净空置信度,并计算出叶片的视频净空值;
判断决策模块,分别与激光雷达扫描模块和视频净空测试模块相交互,基于激光雷达扫描模块和视频净空测试模块中净空结果的置信度和净空值,获取最终的叶片净空值。
激光雷达扫描模块中净空结果的激光置信度的具体获取过程为:基于叶片的运行数据,首先通过融合算法确定运行数据的置信度,获取叶片运行的激光坐标系,再根据激光坐标系确定净空结果的激光净空置信度。
激光雷达扫描模块包括第一数据处理单元,用于对叶片的运行数据进行处理,并基于预先设置的叶片运行速度阈值、激光净空值阈值、激光扫描数量限定、激光数据标准差限定和激光坐标系限定,确定净空值的激光净空置信度;
视频净空测试模块中包括第二数据处理单元,基于预先设置的视频净空值阈值、视频扫描数量限定和视频数据标准差限定,确定净空值的视频净空置信度。
实施例2
一种激光和视频融合的叶片净空监测方法,包括如下步骤:
基于激光雷达扫描获取叶片的运行数据;运行数据包括叶片的距离、运行速度和叶片上扫描点的角度;基于叶片的运行数据,确定净空结果的激光净空置信度,计算得到叶片的激光净空值;
基于视频净空监测获取叶片运行的一组扫描点,根据扫描点的离散度通过融合算法确定净空结果的视频净空置信度,并计算出叶片的视频净空值;
基于激光净空置信度、激光净空值、视频净空置信度和视频净空值,计算得到最终的叶片净空值。
激光净空置信度的确定过程具体为:通过激光雷达扫描获取一组叶片运行数据,基于融合算法确定运行数据的置信度,得到叶片的激光坐标系,基于叶片的激光坐标系确定净空结果的激光净空置信度。
实施例3
一种激光和视频融合的叶片净空监测方法,包括如下步骤:
步骤1)激光雷达首先获得一组(距离、速度、角度);
步骤2)融合算法根据(距离、速度、角度)确定数据置信度;
步骤3)融合算法根据(距离、速度、角度)计算激光坐标系中的k1,b1;
步骤4)根据k1值再次确认净空结果的置信度;
步骤5)根据k1,b1和计算出净空值;
步骤6)视频净空监测系统获取一组扫描点;
步骤7)根据叶片的扫描点的离散度计算净空的置信度;
步骤8)根据视频净空的扫描点计算视频净空坐标系中的k2,b2;
步骤9)根据k2值再次确认净空结果的置信度;
步骤10)根据k2和b2计算出净空值;
步骤11)融合算法比较激光雷达数值的可信度和净空算法的可信度,获取可信度高的值作为最终的净空结果。
其中,
影响激光可信度的因素包括:1)大雪,大雨天激光雷达失效;2)安装位置移动造成扫描叶片失效。
计算激光雷达可信度的算法具体包括:
1)阈值限定:正常的净空值应该在(-5,100)如果数值不在范围内就说明数值可信度为0,叶片运行速度值(0,150)如果超过这个范围置信度为0。
2)扫描数量限定:如果在一次叶片扫描过程中返回数据小于3组则认为置信度为0。
3)标准差限定:如果一次叶片扫描过程中各组数据标准差大于1米则认为置信度为0。0~1米置信度线性分布。
4)如果毫米坐标系中计算出的k值在(-5度,5度)之外则认为置信度为0,在-5度~5度之间置信度为1。
影响视频净空置信度的因素包括:1)光线亮度;2)雾、云、尘的影响。
计算视频净空置信度的算法具体为:
1)阈值限定:正常的净空值应该在(-5,100)如果数值不在范围内就说明数值可信度为0。
2)扫描数量限定:如果在一次叶片扫描过程中获取的叶尖的数量小于5组则认为置信度为0。
3)标准差限定:如果一次叶片扫描过程中各图像中根据扫描点计算出来的直线拟合k值和理想k值的角度偏差在-5度到5度,如果超出这个偏差则置信度为0,在-5度~5度之间置信度为1。
最终的净空值算法,净空值=(激光净空值*激光置信度+视频净空值*视频置信度)/(激光置信度+视频置信度)
需要说明的是,装置的安装过程中,需要注意:
激光雷达,激光雷达的测距原理基本可以归结为测量光往返目标所需要时间,然后通过光速c=299792458m/s和大气折射系数n计算出距离d,因此安装位置必须要和被测物体尽量垂直。
监测相机,相机是通过计算两个物体之间的像素来进行计算,因此安装位置和叶片塔筒越平行越好。
运用本发明系统进行实际风电机组的净空值检测,检测结果如表1所示。测试机型为gw115-2.0mw,叶片长度为56米。
表1.激光和视频融合的叶片净空监测在具体应用中的试验结果
由表1的结果可知,当视频净空置信度为1,而激光净空置信度为0时,系统采信视频净空测量距离,当时视频净空置信度为0,而激光净空置信度为1时,系统采信激光净空测量距离。当两者置信度均为1时,系统将两者测量均值作为结果输出。
实施例4
本发明方法如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。其中,所述计算机存储介质可以是计算机能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器(例如软盘、硬盘、磁带、磁光盘(mo)等)、光学存储器(例如cd、dvd、bd、hvd等)、以及半导体存储器(例如rom、eprom、eeprom、非易失性存储器(nandflash)、固态硬盘(ssd))等。
实施例5
在示例性实施例中,还提供一种电子终端设备25,如图4所示,包括存储器21、处理器22以及存储在所述存储器21中并可在所述处理器22上运行的计算机程序,所述处理器22执行所述计算机程序时实现本发明方法的步骤。处理器可能是中央处理单元(centralprocessingunit,cpu),还可以是其他通用处理器、数字信号处理器(digitalsignalprocessor,dsp)、专用集成电路(applicationspecificintegratedcircuit,asic)、现成可编程门阵列(field-programmablegatearray,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通信组件24用于该电子终端设备25与其他设备之间进行有线或无线通信。无线通信,例如wi-fi,蓝牙,近场通信(nearfieldcommunication,简称nfc),2g、3g、4g或5g,或它们中的一种或几种的组合,因此相应的该通信组件24可以包括:wi-fi模块,蓝牙模块,nfc模块。
以上内容仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明权利要求书的保护范围之内。