一种隐患目标识别方法与装置与流程

文档序号:29437079发布日期:2022-03-30 09:07阅读:92来源:国知局
一种隐患目标识别方法与装置与流程

1.本技术涉及电力技术领域,尤其涉及一种隐患目标识别方法与装置。


背景技术:

2.在输电线路的运维中,对输电线路周围环境进行监测是一项重要的工作,如检查是否有超高树木,违章建筑、违章施工等等,要求输电线路通道内所有施工机械类隐患目标距离导线的最短距离在10米以上,而3米内很可能会由于放电造成人员伤亡或者跳闸。通道隐患类型中的大型施工机械尤其是处于扬臂或者伸展状态的吊车、水泥泵车很容易对导线产生较大威胁,需要对这些隐患进行识别和对导线的威胁程度进行定量和定性判定。
3.当前输电线路通道隐患目标距离识别与危险程度判定主要采用无人机拍摄和通过定点监拍方式。而无人机巡检方式受飞行环境因素(无线电环境、气象环境、地理环境)影响较大,单次采集图像数据量有限,图像采集后需要检查一下照片质量,针对曝光过度或不足的情况对输电线路通道进行补拍,再对可用的图像进行三维重建进而排查隐患,因此无人机巡检方式隐患排查实时性不高。多线激光雷达由于成本较高,功耗较大。双目视觉测距在实际应用中要求较高的安装精度,一般应用条件下无法达到设计精度,并且在双目系统实际搭建过程中,标定以及安装相对较繁琐,使得其小型化、产品化比较困难,对拍摄到的物体较远时测距误差非常大。
4.而现有的单目测距方法的标定过程中标定量数量多,流程复杂,增加了测量误差,且测量方法通常针对于物距,不适用于输电线路通道内隐患目标与导线最短距离的测量,不能满足用户的使用需求。当设备受环境影响位置出现变动后,需要重新标定,实际可操作性不高。


技术实现要素:

5.针对上述现有技术中存在的问题,本技术实施例提出一种隐患目标识别方法与装置,解决了现有测距方法所需参数多且计算过程复杂,不适用于输电线路通道内隐患目标与导线最短距离的测量的问题。
6.一方面,本技术实施例提供了一种隐患目标识别方法。以输电线路通道中的杆塔上的单目相机的地面投影点为原点,建立三维坐标系;并根据所述单目相机拍摄的单目图像建立图像二维坐标系;确定所述图像二维坐标系中满足预设条件的像素点,在所述三维坐标系中的投影点的纵向视野中,单个像素点对应的实际物理尺寸;其中,所述预设条件为,在图像二维坐标系中的像素点的纵坐标,在所述单目相机对应的可见地面的纵坐标范围内;根据满足所述预设条件的若干像素点在所述图像二维坐标系中的纵坐标,与所述若干像素点分别对应的投影点处纵向视野中单个像素点对应的实际物理尺寸的对应关系,以及根据隐患目标与输电线路通道中的导线在所述图像二维坐标系中的像素距离,确定所述隐患目标与所述输电线路通道中的导线的实际物理距离。
7.本技术实施例通过建立地面三维坐标系和图像二维坐标系,能够仅利用少量的已
知参数,计算出单目图像中所显示的可见的地面部分的像素点以及该像素点所在的视野平面中的每个像素点,在实际情况中代表的物理尺寸;再通过找到与隐患目标最高点最近的输电线路通道中导线上的点,计算两点的像素距离,从而根据像素与实际物理尺寸的对应关系,计算出隐患目标到输电线路通道中导线的距离。无需复杂的标定过程,大大简化了单目相机距离测量的步骤,且本技术的技术方案适用于输电线路通道内隐患目标与导线最短距离的测量,而不是简单的测量隐患目标的物距。
8.在一个实施例中,所述满足所述预设条件的若干像素点在所述图像二维坐标系中的纵坐标,与所述若干像素点分别对应的投影点处纵向视野中单个像素点对应的实际物理尺寸的对应关系,具体为:根据map=(v,scale)确定所述对应关系;其中,map为所述对应关系,v为所述满足预设条件的像素点的纵坐标,scale表示纵坐标为v的像素点在三维坐标系的投影点处的纵向视野中,单个像素代表的实际物理尺寸;且所述对应关系以像素比例尺关系表的方式进行存储。
9.本技术实施例通过将单目图像中可见的地面所占的像素点在图像二维坐标系中的纵坐标,与该像素点以及其所在视野平面中的每个像素点在实际情况中的物理尺寸的对应关系,以像素比例尺关系表的形式存储,便于在计算隐患目标与输电线路通道中导线的距离时,只需得知隐患目标在图像中的纵坐标,即可根据该纵坐标在像素比例尺关系表中查找对应的视野平面中单个像素对应的实际物理尺寸。
10.在一个实施例中,确定所述隐患目标与所述输电线路通道中的导线的实际物理距离之后,所述方法还包括:通过梯度投影和霍夫变换技术对所述单目图像中输电线路通道中导线所在若干像素点位置坐标集合以及输电线路通道中杆塔的位置坐标进行提取,根据所述输电线路通道中导线所在若干像素点位置坐标集合以及输电线路通道中杆塔的位置坐标在所述图像二维坐标系中建立所述输电线路通道的立体防护区;所述立体防护区的宽度由所述输电线路通道中的导线的电压等级及对应的放电安全距离决定。
11.本技术实施例根据输电线路通道中导线的电压等级及安全放电距离在输电线路通道周围建立立体防护区,可以分别针对在防护区内和防护区外的隐患进行危险等级判定,从而在防护区外定性进行隐患目标分析,对于防护区外的隐患目标因危险等级较低可以不计算其与输电线路通道中导线的距离,在防护区内定量进行隐患目标分析,提高计算效率。
12.在一个实施例中,所述方法还包括:基于预设时间间隔,对所述像素比例尺关系表进行校正检测;通过目标检测模型检测同一个已知参照物目标;若检测到所述参照物在预设时间间隔内的像素位置变化超过第一预设值,或图像尺寸变化超过第二预设值,则暂停隐患目标距离识别,根据在所述图像二维坐标系中所述参照物当前高度所占像素数量,更新所述像素比例尺关系表。
13.本技术实施例通过定期对像素比例尺关系表以及立体防护区进行校正检测,可以避免因单目相机位置或角度变动带来的计算误差,提高距离检测准确率。
14.在一个实施例中,所述确定所述图像二维坐标系中满足预设条件的像素点,在所述三维坐标系中的投影点的纵向视野中,单个像素点对应的实际物理尺寸,具体包括:根据以下公式得到所述满足预设条件的所有像素点的投影点处的纵向视野中,单个像素代表的实际物理尺寸:
15.fd_p1=(obj_h_m/obj_h_pixels)*img_h_pixels;
16.oo'=1/2*fd_p1/tanα;op1=sqrt(z*z+h*h);tanβ=h/z,
17.γ=β-arccos(oo'/op1);z0=h/tan(α+γ);op0=sqrt(z0*z0+h*h);
18.fd_p0=2*op0*sinα;scale_p0=fd_p0/img_h_pixels;
19.oo”=op0*cosα;p0p1'=fd_p0/2-oo”*tan(β-γ);z1=z-z0;
20.zstep=z1/p0p1';ap=z0+(v_p-v_p0)*zstep;
21.op=sqrt(ap*ap+h*h);α1=arctan(ap/h);α2=90-γ-α1;
22.oo
p
=cos(α2)*op;fd_p=2*oop*tanα;
23.scale_p=fd_p/img_h_pixels;
24.其中,fd_p1为单目图像中的输电线路通道中的杆塔与地面的交点p1处的纵向视野长度,obj_h_m为参照物实际物理高度尺寸,obj_h_pixels为参照物当前高度所占像素数量,img_h_pixels为所述单目图像v轴方向包含的像素点的数量;oo’为所述p1点的物距长度,α为所述单目相机垂直视野角的半角;op1为所述单目相机的主点o与p1点的实际距离,z为输电线路通道中两个杆塔之间的距离,h为所述单目相机的安装高度;β为op1与水平方向的夹角,γ为所述单目相机的主光轴与水平方向的夹角;z0为所述单目相机对输电线路通道中两个杆塔之间地面的盲区长度;op0为主点o与所述满足预设条件的像素点中纵坐标最小的像素点的投影点p0的实际距离;fd_p0为p0处的纵向视野的实际物理尺寸;scale_p0为fd_p0中单个像素代表的实际物理尺寸;oo”为p0点处的物距长度;p0p1’为p0点处视野中可见地面的成像视野的长度;z1为输电线路通道中两个杆塔之间被单目相机覆盖的可见地面长度;zstep为z1与p0p1’的比值;ap为所述单目相机地面投影点a到p0p1’中任意一个像点对应的投影点p的距离,v_p为p点映射在图像二维坐标系中的纵坐标,v_p0为p0点映射在图像二维坐标系中的纵坐标;op为主点o与点p的距离;α1为op与oa之间的夹角;α2为op与主光轴之间的夹角;o
p
为p点处的视野与主光轴的交点,oo
p
为p点的物距长度;fd_p为p点处的纵向视野的实际物理尺寸;scale_p为p点处纵向视野中单个像素代表的实际物理尺寸。
25.本技术实施例通过少量的已知参数,以及建立的地面三维坐标系,利用输电线路通道中两个杆塔之间被单目相机覆盖的可见地面在单目图像中的投影关系,以图像中的纵坐标值建立简单高效的像素比例尺关系,无需复杂的标定过程。
26.在一个实施例中,所述确定所述隐患目标与所述输电线路通道中导线的实际物理距离,具体包括:在所述三维坐标系中,确定隐患目标最高点b与输电线路通道中导线所在若干像素点的最短距离点c,获取隐患目标最高点b与所述c点的三维坐标,并将所述c点映射到图像二维坐标系中,得到c点的二维坐标;根据所述b点的二维坐标和所述c点的二维坐标,在所述图像二维坐标系中,确定b、c两点的像素距离;根据b点在所述图像二维坐标系中的纵坐标v_b值,在所述像素比例尺关系表中查找与所述v_b值对应的scale值;根据l
实际
=l
像素
×
scale_b,得到b点与c点之间的实际物理尺寸;其中,l
实际
为b点与c点的实际物理尺寸,l
像素
为b点与c点的像素距离,scale_b为所述像素比例尺关系表中v_b对应的scale值。
27.本技术实施例通过利用导线位置分布,将导线投影到地面三维坐标系,找到输电线路通道中的导线与隐患目标距离最近的点,通过计算该点与隐患目标最高点的像素距离,并按照隐患所在位置的图像二维坐标中的v坐标,将像素距离换算为实际物理尺寸,从而判断隐患威胁程度。
28.在一个实施例中,所述以输电线路通道中的杆塔上的单目相机的地面投影点为原点,建立三维坐标系,并根据所述单目相机拍摄的单目图像建立图像二维坐标系,具体包括:以输电线路通道中杆塔上的单目相机的地面投影点a为原点,以垂直于地面方向为y轴,以平行于输电线路通道方向为z轴,以平行于地面且垂直于输电线路通道方向为x轴,建立所述三维坐标系;以所述单目图像中任意一点为原点,以所述单目图像的水平方向为u轴,以所述单目图像的垂直方向为v轴,建立所述图像二维坐标系。
29.在一个实施例中,在所述确定所述隐患目标与所述输电线路通道中的导线的实际物理距离之后,所述方法还包括:按照所述隐患目标与所述输电线路通道中的导线之间的实际物理距离,分级划分所述隐患目标的隐患威胁等级,当所述隐患威胁等级高于预设阈值时,发出告警信息;所述隐患目标在所述立体防护区外的情况下,隐患威胁等级最低;所述隐患目标在所述立体防护区内的情况下,隐患目标与输电线路通道中的导线之间的最短实际物理距离越小,威胁隐患等级越高。
30.在一个实施例中,在所述获取隐患目标最高点b与所述c点的三维坐标之前,所述方法还包括:根据输电线路通道中导线所在若干像素点在图像二维坐标系中的位置信息,确定所述输电线路通道中导线所在若干像素点在三维坐标系中的x坐标和y坐标;将所述输电线路通道中的导线与所述输电线路通道中的导线在地面上的投影做线性映射,以所述输电线路通道中导线的投影为参照,确定所述输电线路通道中导线所在若干像素点的z坐标,从而获得输电线路通道中导线所在若干像素点的三维坐标集合。
31.另一方面,本技术提供了一种隐患目标识别装置,所述装置包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:以输电线路通道中的杆塔上的单目相机的地面投影点为原点,建立三维坐标系;以及建立所述单目相机拍摄的单目图像的二维坐标系;确定所述图像二维坐标系中满足预设条件的像素点,在所述三维坐标系中的投影点的纵向视野中,单个像素点对应的实际物理尺寸;其中,所述预设条件为,在图像二维坐标系中,纵坐标在所述单目相机对应的可见地面的纵坐标范围内;根据满足所述预设条件的若干像素点在所述图像二维坐标系中的纵坐标,与所述若干像素点分别对应的投影点处纵向视野中单个像素点对应的实际物理尺寸的对应关系,以及根据隐患目标与输电线路通道中的导线在所述图像二维坐标系中的像素距离,确定所述隐患目标与所述输电线路通道中的导线的实际物理距离。
32.本技术的一种隐患目标识别方法及装置,针对安装在输电线路通道中杆塔上的单目相机,仅需要少量已知参数(单目相机距离地面的安装高度、单目相机本身的垂直视野角、已知参照物高度、两个杆塔距离)即可完成标定和距离测量;而且在相机受外界环境影响导致位置变动的情况下,能够根据需要定期进行校正,有效保证测量的准确性;同时利用梯度投影和霍夫变换技术对输电线路通道中的导线进行动态特征提取,获取输电线路通道中导线所在若干像素点的位置集合,并根据输电线路通道中的导线和杆塔的位置建立立体防护区,可定性对隐患目标进行分析;本技术技术方案计算简便,实时高效,实现了输电线路通道的实时监控分析,能够有效判断隐患目标与输电线路通道中导线的距离信息,并进行危险等级划分,从而进一步判断隐患的危险等级,为输电线路通道安全提供更加有效的预警机制。
附图说明
33.此处所说明的附图用来提供对本技术的进一步理解,构成本技术的一部分,本技术的示意性实施例及其说明用于解释本技术,并不构成对本技术的不当限定。在附图中:
34.图1为本技术实施例提供的一种隐患目标识别方法的流程图
35.图2为本技术实施例提供的图像二维坐标系示意图;
36.图3为本技术实施例提供的地面三维坐标系示意图;
37.图4为本技术实施例提供的单目相机侧视图;
38.图5为本技术实施例提供的立体防护区示意图;
39.图6为输电线路通道中的导线投影在地面三维坐标系中的示意图;
40.图7为本技术实施例提供的一种隐患目标识别装置的结构示意图。
具体实施方式
41.为使本技术的目的、技术方案和优点更加清楚,下面将结合本技术具体实施例及相应的附图对本技术技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本技术保护的范围。
42.本技术实施例提供了一种隐患目标识别方法及装置,下面通过附图对本技术实施例提出的技术方案进行详细的说明。
43.图1为本技术提供的一种隐患目标识别方法的流程图。
44.s101、单目相机进行输电线路通道图像采集。
45.具体地,安装在输电线路通道中的杆塔上并朝向对面杆塔的单目相机,以预设的时间间隔采集输电线路通道及其场景图像,并将图像上传到监测设备或后台服务器。
46.需要说明的是,本技术并不限制技术方案在前端监测设备上进行还是在后台服务器进行,以下用隐患识别装置代表本方案的执行主体。
47.s102、隐患识别装置对单目图像进行隐患目标检测。
48.具体地,采用深度学习方式训练隐患目标和参照物目标定位检测模型。首先构建输电线路通道隐患样本集,包括大型施工机械、杆塔、塔吊、吊车等目标,然后采用fpn(feature pyramid network)特征金字塔网络构建目标识别网络,以faster0rcnn-res101为基础网络模型,加入fpn金字塔特征提取方式组合各个层级的目标特征,建立隐患目标识别神经网络,训练输出隐患目标检测模型。使用上述隐患目标检测模型对单目相机上传的单目图像进行隐患目标检测,确定隐患目标的位置。
49.s103、隐患识别装置判断是否启动校正程序。
50.具体地,隐患识别装置通过预设程序,定期启动对隐患识别系统的校正检测,例如,设置每个月启动一次校正检测程序,若未到设置好的校正检测时间,则执行s104;若图像识别时刚好达到设置好的校正检测时间,则执行s109。
51.s109、隐患识别装置对参照物位置及尺寸进行检测。
52.具体地,通过深度学习训练的目标检测模型,对参照物进行位置和尺寸检测,此处的参照物可以是单目相机覆盖的可见视野中,任意一个不会移动和变形的物体,例如对面的杆塔、地面上的建筑等。将检测到的参照物位置和尺寸分别与上一次校正检测时检测的
同一个参照物的位置和尺寸进行对比,若参照物的位置或尺寸中有任意一项的变化超过了各自的限定值,则判断为参照物变动超限。
53.例如,参照物位置变动的限定值为10个像素,参照物尺寸变动的限定值为15个像素,若检测到参照物位置变动了11个像素,尺寸变动了1像素,则判定为参照物位置或尺寸变动超限。同样,若参照物位置变动了5个像素,尺寸变动了20个像素,也判定为参照物位置或尺寸变动超限。
54.s110、隐患识别装置判断参照物位置或尺寸变动是否超限。
55.具体地,若参照物位置或尺寸的变动没有超过限定值,则继续执行s104,若参照物位置或尺寸的变动超过了限定值,说明单目相机的位置或者安装角度因环境影响发生了较大变动,执行s111。
56.s111、隐患识别装置建立三维坐标系及二维坐标系。
57.图2为本技术实施例提供的图像二维坐标系示意图,如图2所示,单目图像的水平方向为u轴,竖直方向为v轴,单位为像素。需要说明的是,单目图像的任意一点或者图像外任意一点都可以作为图像二维坐标系的原点,图2所示以单目图像中心点为原点o仅为一个可行的实施例。
58.图3为本技术实施例提供的地面三维坐标系示意图,如图3所示,地面三维坐标系以单目相机301在地面上的投影点a为原点,以平行于输电线路通道中的杆塔302方向为y轴,以平行于两个杆塔的连线方向为z轴,以垂直于两个杆塔连线方向为x轴,单位为像素。
59.s112、隐患识别装置计算得到像素比例尺关系表。
60.图4为本技术实施例提供的单目相机侧视图,如图4所示,主点o是安装在输电线路通道中的杆塔上的单目相机的光心,最右边的竖直线条为单目相机所在杆塔的对面杆塔。将相机对面的杆塔作为参照物,计算可见地面p0p1上的每个点处纵向视野的实际物理尺寸,并根据该纵向视野呈现在单目图像中所占的像素数量,计算出单目图像中每个视野平面中单个像素在实际情况中代表的物理尺寸,纵向视野即为与单目相机主光轴垂直的平面在单目相机视野范围内的纵向高度,例如p0点处的纵向视野为图4中与相机主光轴垂直的线段fd_p0,p1点的纵向视野为图4中与相机主光轴垂直的线段fd_p1。
61.已知以下参数:相机安装高度h,相机垂直视野角的半角α,相机分辨率img_h_pixels*img_w_pixels,相机对面的杆塔显示在图像中的像素尺寸obj_h_pixels*obj_w_pixels,相机对面杆塔的实际物理高度obj_h_m,两个杆塔之间的距离z。
62.首先计算可见地面上距离单目相机最近的点p0处的纵向视野fd_p0的实际物理尺寸,该纵向视野呈现在单目图像中即为整张图像的宽度,根据单目图像在图像二维坐标系v轴方向所包含的像素数量,计算出fd_p0映射在单目图像中的每个像素点,所代表的实际物理尺寸scale_p0,计算公式如下:
63.根据参数obj_h_m、obj_h_pixels以及img_h_pixels得到观测点p1处的纵向视野尺寸fd_p1=(obj_h_m/obj_h_pixels)*img_h_pixels;根据fd_p1以及参数α得到p1点的物距oo'=1/2*fd_p1/tanα;根据参数z以及参数h得到op1的长度op1=sqrt(z*z+h*h);根据参数h、参数z以及oo'和op1得到单目相机的安装倾斜角γ:tanβ=h/z,γ=β-arccos(oo'/op1);根据参数h、参数α以及单目相机的安装倾斜角γ得到两个杆塔之间地面盲区的长度z0=h/tan(α+γ);根据盲区z0以及参数h得到op0的长度op0=sqrt(z0*z0+h*h);根据op0
以及参数α得到p0点处纵向视野fd_p0=2*op0*sinα;根据fd_p0以及参数img_h_pixels得到fd_p0映射在单目图像中的每个像素点代表的实际物理尺寸scale_p0=fd_p0/img_h_pixels。
64.在一个实施例中,如图4所示,点p’为p0p1’上任意一个像点,点p为像点p’在可见地面上的投影点,根据上述fd_p0的长度,计算出可见地面在p0点处纵向视野中的成像范围p0p1’的长度,根据p0p1’与可见地面z1的比值关系,以及p’点映射在图像二维坐标系中的v坐标,计算出p0p1’上每个像点在可见地面上的投影点处的scale值,计算过程如下:
65.根据op0及参数α得到p0点处的物距oo”=op0*cosα;根据fd_p0、oo”、β以及γ得到p0p1’的长度p0p1'=fd_p0/2-oo”*tan(β-γ);根据输电线路通道中两个杆塔之间的距离z和盲区z0得到两个杆塔之间相机的可见地面的长度z1=z-z0;根据z1和p0p1’的长度计算两者比值关系zstep=z1/p0p1';根据p点在图像二维坐标系中的纵坐标v_p和p0点在图像二维坐标系中的纵坐标v_p0得到地面零点a距离p点的长度ap=z0+(v_p-v_p0)*zstep;根据ap和参数h得到主点o到p点的长度op=sqrt(ap*ap+h*h);根据ap和参数h得到op与oa的夹角α1=arctan(ap/h);根据角α1和角γ得到op与oo
p
之间的夹角α2=90-γ-α1;根据角α2和op的长度得到主点o与p点处的视野与主光轴的交点o
p
的距离oo
p
=cos(α2)*op;根据oo
p
与角α得到p点的纵向视野长度fd_p=2*oo
p
*tanα;根据fd_p和参数img_h_pixels得到fd_p映射在单目图像中的每个像素点代表的实际物理尺寸scale_p=fd_p/img_h_pixels。
66.遍历可见地面部分在单目图像中所占像素的纵坐标,依次计算v轴方向每个像素点所对应的scale值,并将对应关系以像素比例尺关系表的形式存储。
67.例如,单目图像中可见地面部分所占像素在二维坐标系中的纵坐标范围为v∈[0,100],那么从v=0开始依次按照上述公式计算符合v∈[0,100]的像素点所对应的scale值。将v值与计算得到的scale值对应存储在像素比例尺关系表map=(v,scale)中,表格形式如下所示:
[0068]
vscale(米/像素)0scale_01scale_1
……
100scale_100
[0069]
表1
[0070]
其中,map为上述像素比例尺关系表,表1中scale_0,scale_1,

,scale_100分别为根据v=0,v=1,

,v=100以及上述公式计算出来的具体数值,单位为米/像素。
[0071]
s113、隐患识别装置按输电线路通道中导线的位置分布建立输电线路通道立体防护区。
[0072]
具体地,隐患识别装置对单目图像进行图像直方图均衡归一化,以形态学梯度算子过滤提取图像中输电线路通道中导线的边缘信息,然后对梯度结果图像进行二值化处理,并进行投影分割,获取图像中输电线路通道中导线区域特征图。然后在输电线路通道中导线区域内,利用图像增强特征,并抑制背景噪声。然后进行hough变换检测,获取梯度图像中输电线路通道中的导线位置。
[0073]
图5为本技术实施例提供的立体防护区示意图。如图5所示,灰色部分为地面,根据
得到的输电线路通道中的导线位置和杆塔601的位置,以输电线路通道中导线的电压等级和放电时的安全距离为参考,在单目相机中建立如图5虚线部分所示的立体防护区,在一个例子中,如图5虚线部分所示的立体防护区会显示在单目相机拍摄的图像上。
[0074]
需要说明的是,在隐患识别装置初始状态时,首先执行一次s111~s113,建立初始像素比例尺关系表和初始立体防护区,再根据初始像素比例尺关系表进行隐患目标距离判定。当装置启动校正检测时,s111~s113正在执行时,s105~s108暂停执行,s111~s113执行结束后再根据新的像素比例尺关系表和新的立体防护区执行s105~s108中的操作。
[0075]
s104、隐患识别装置判断隐患目标是否在防护区内。
[0076]
具体地,在s102中检测到隐患目标后,通过神经网络模型对隐患目标的位置信息与建立的立体防护区范围做对比,检测该隐患目标是否在防护区范围内,若隐患目标在立体防护区内,则执行s105,若隐患目标在立体防护区范围之外,则执行s108。
[0077]
s105、隐患识别装置采用动态自适应阈值分割,提取隐患目标边缘信息,获取隐患目标上的最高点b的图像二维坐标。
[0078]
s106、隐患识别装置确定到隐患目标最高点b的到输电线路通道中导线的像素距离。
[0079]
具体地,隐患识别装置首先根据输电线路通道中导线的位置信息,将输电线路通道中的导线投影到地面三维坐标系中得到输电线路通道中导线所在各个像素点的三维坐标。
[0080]
图6为输电线路通道中的导线投影在地面三维坐标系中的示意图,如图6所示,根据提取的输电线路通道中的导线位置,得到单目图像中可见的输电线路通道中导线的最近点p3和最远点p2的图像二维坐标,并通过相机坐标系转换得到p2p3范围内的输电线路通道中导线所在若干像素点在地面三维坐标系中的x坐标和y坐标;将输电线路通道中的导线投影到三维坐标系中的可见地面上,p3点的投影点为p0,p2点的投影点为p1,将p2p3与p0p1做线性映射,以p1p0范围内的若干点的z坐标为参照获取p2p3范围内若干像素点的z坐标;从而得到p2p3范围内若干像素点的三维坐标。
[0081]
将b点投影到地面三维坐标系中,得到b点的三维坐标,计算b点与转换三维坐标后的输电线路通道中导线上若干像素点的三维像素距离,确定b点与输电线路通道中的导线三维像素距离最短的点c,并将点c的三维坐标转换为图像二维坐标。根据b、c两点的图像二维坐标计算b、c两点之间的像素距离。
[0082]
s107、将b点和c点的像素距离通过像素比例尺关系表换算为实际物理尺寸。
[0083]
具体地,获取b点在隐患目标所在图像中的v坐标,在像素比例尺关系表中查找b点的v坐标对应的scale值,然后根据l
实际
=l
像素
×
scale_b,计算b点和c点之间的实际物理尺寸,其中,l
实际
为b点与c点的实际物理尺寸,l
像素
为b点与c点的像素距离,scale_b为所述像素比例尺关系表中b点v坐标对应的scale值。
[0084]
例如,b点在图像中的v坐标为5,根据像素比例尺关系表查找到v=5对应的scale值为2米/像素,b点与c点的像素距离为20个像素,那么b点与c点之间的实际距离为2*20=40米。
[0085]
s108、根据b点和c点的实际物理尺寸,为隐患目标划分隐患威胁等级。
[0086]
具体地,根据隐患目标到输电线路通道中导线的实际物理距离远近,分级划分隐
患目标的隐患威胁等级。隐患目标与输电线路通道中导线之间的实际物理距离越近,隐患威胁等级越高,当隐患威胁等级高于预设阈值时,隐患识别装置立即启动语音报警,并提示相关人员注意线路异常情况,以阻止外力对输电线路通道中的导线进一步造成损坏。
[0087]
在一个实施例中,距离输电线路通道中的导线0~10m范围内隐患威胁等级为a级,距离输电线路通道中的导线10~20m范围内隐患威胁等级为b级,距离输电线路通道中的导线20~30m范围内隐患威胁等级为c级,以此类推,直到隐患目标与输电线路通道中的导线的距离超出立体防护区的范围。
[0088]
在一个实施例中,当隐患目标在防护区之外时,判定隐患威胁等级最低,且对于防护区外的隐患目标可以不进行距离判定,直接排除该隐患目标对输电线路通道中的导线造成威胁的可能性。
[0089]
需要说明的是,s102~s108的执行主体可以是前端监拍设备,也可以是后台服务器,本技术中不做限定。
[0090]
图7为本技术实施例提供的一种隐患目标识别装置的结构示意图,如图7所示,装置至少包括:
[0091]
至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:
[0092]
以输电线路通道中杆塔上的单目相机的地面投影点为原点,建立三维坐标系;以及建立所述单目相机拍摄的单目图像的二维坐标系;确定所述图像二维坐标系中满足预设条件的像素点,在所述三维坐标系中的投影点的纵向视野中,单个像素点对应的实际物理尺寸;其中,所述预设条件为,在图像二维坐标系中,纵坐标在所述单目相机对应的可见地面的纵坐标范围内;根据满足所述预设条件的若干像素点在所述图像二维坐标系中的纵坐标,与所述若干像素点分别对应的投影点处纵向视野中单个像素点对应的实际物理尺寸的对应关系,以及根据隐患目标与输电线路通道中的导线在所述图像二维坐标系中的像素距离,确定所述隐患目标与所述输电线路通道中导线的实际物理距离。
[0093]
本技术实施例提供的一种隐患目标识别方法及装置,利用单目测距及图像定位识别技术对输电线路通道进行实时监控,实现了隐患距离测量功能,能够有效判断隐患目标与输电线路通道中导线的距离信息,进行危险等级划分,从而进一步判断隐患的危险等级,为输电线路通道安全提供更加有效的预警信息。
[0094]
以上所述仅是本技术的优选实施方式,并不用于限制本技术。应当指出,对于本领域的普通技术人员来说,本技术可以有各种更改和变化。凡在不脱离本发明原理的前提下所作的任何修改、等同替换、改进等,均应包含在本技术的权利要求范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1