龟裂信息编辑装置、龟裂信息编辑方法及龟裂信息编辑程序与流程

文档序号:15306070发布日期:2018-08-31 21:00阅读:266来源:国知局

本发明涉及一种龟裂信息编辑装置、龟裂信息编辑方法及龟裂信息编辑程序,尤其涉及一种用于编辑与结构物的龟裂相关的龟裂信息的龟裂信息编辑装置、龟裂信息编辑方法及龟裂信息编辑程序。



背景技术:

桥梁、隧道、道路及大楼等结构物中会产生各种损伤,损伤随着时间经过而逐渐变大,因此为了确保结构物的安全,需根据损伤情况进行修补。一直以来,损伤的检查通过工作人员的目视或者利用器具的检查来进行,但由于检查时间及成本、作业场所的环境等问题,近年来,逐渐通过摄像装置和/或图像处理装置进行电子处理。

根据专利文献1,龟裂的检测装置通过与像素值相关的特征量选定与神经网络收敛运算,生成龟裂候选图像。候选图像中的龟裂判定中,进行龟裂候选图像的确定与位于其附近范围内的像素的连结判定。并且,根据相邻像素的欧氏距离,进行当作是飞地且并非龟裂的判定。

专利文献2中,记载有对连结的黑色像素(或白色像素)的块分配相同的标记(编号),对不同的连结成分彼此分配不同的标记(编号)的标注处理,由此,能够分为龟裂等损伤区域的标记、污垢等的标记。

并且,被标注处理的标注图像是对“1”的集合即“1”的块分配“a”、“b”及“c”等标记的图像,能够识别标记“a”是龟裂部分的标记,标记“b”及“c”是相对于污垢等的块部分。并且,作为标记,标注了记号,但也可以设为编号。而且,对出现在图像上的龟裂部分分配标记,从其标注图像测量龟裂部分的像素数,根据像素数及分辨率测量龟裂宽度及长度。

以往技术文献

专利文献

专利文献1:日本特开2011-242365号公报

专利文献2:日本特开2002-174601号公报



技术实现要素:

发明要解决的技术课题

通常,龟裂是不连续的形状,很难将断续的线组判定为1条龟裂。

关于这一点,专利文献1中,以欧氏距离进行连结判定,1条龟裂有可能未适当地连接。即,即使欧氏距离较远,但从人眼观察时,也有识别为1条龟裂的情况,仅以欧氏距离作为基准的龟裂的连接有可能与实际运用上的龟裂的连接相矛盾。

因此,还考虑通过对如专利文献1的自动龟裂检测结果,用户进行仅指定特定龟裂的操作,由此编辑自动龟裂检测结果。例如,是判断为误检测而将一整条龟裂删除的情况等。

尤其在混凝土产生的龟裂,越进行其形状变得越复杂,因此从密集在图像上的龟裂仅指定所希望的龟裂时,定位适当的位置是需要花费时间的作业,而且还易产生错误。

并且,若事前并不知道各龟裂的位置和区域,则位置和区域的选择上需要时间,由于形状的复杂,易产生错误。尤其,龟裂是断续的形状,因此检测结果也根据其形状而变得不连续,因此区域选择并非易事。若龟裂密集,则区域选择的难度进一步提高。

但是,专利文献2的技术中,虽然能够用标记识别龟裂与污垢,但无法通过标记指定龟裂等缺陷信息,或删除(编辑等)该指定的缺陷信息。

本发明是鉴于这种问题点而完成的,其目的在于通过适当标注不连续的龟裂,能够简单地指定1条龟裂来编辑。

用于解决技术课题的手段

为了解决上述课题,本申请发明的第1方式所涉及的龟裂信息编辑装置具备:龟裂信息获取部,获取针对通过结构物的表面图像的图像解析来检测的结构物的龟裂的龟裂信息;标注部,根据龟裂信息获取部获取的龟裂信息,赋予识别龟裂信息的标记;显示部,将表示龟裂信息的影像重叠显示于表面图像,并且将表示标注部所赋予的标记的影像与表示龟裂信息的影像建立关联来显示;标记选择部,能够从显示部所显示的标记中受理任意标记的选择;及龟裂信息编辑部,受理与标记选择部受理选择的标记建立有关联的龟裂信息的编辑。

该方式所涉及的龟裂信息编辑装置能够通过标记选择,受理与所选择的标记建立有关联的龟裂信息的编辑。因此,基于用户操作的龟裂信息的选择与编辑较容易。

本申请发明的第2方式所涉及的龟裂信息编辑装置中,龟裂信息编辑部所受理的龟裂信息的编辑包含龟裂信息的删除、将与任意选择的多个标记建立有关联的多个不连续的龟裂信息彼此结合为1个连续的龟裂信息、或解除多个不连续的龟裂信息彼此的结合。

通过标记选择,能够受理与所选择的标记建立有关联的龟裂信息的删除、结合、结合的解除。因此,基于用户操作的龟裂信息的编辑较容易。

本申请发明的第3方式所涉及的龟裂信息编辑装置中,标注部根据龟裂信息的编辑,更新龟裂信息获取部所获取的龟裂信息的标记,显示部根据龟裂信息的编辑,更新表示龟裂信息的影像与表示标记的影像。

由此,视觉上能够容易确认与所选择的标记相关联的龟裂信息的编辑结果。

本申请发明的第4方式所涉及的龟裂信息编辑装置中,通过龟裂信息编辑部受理到龟裂信息的删除时,标注部删除选择的标记,显示部停止表示与选择的标记对应的龟裂信息的影像的显示。

由此,视觉上能够容易确认与所选择的标记相关联的龟裂信息的删除结果。

本申请发明的第5方式所涉及的龟裂信息编辑装置中,通过龟裂信息编辑部受理到多个龟裂信息彼此的结合时,标注部对受理到结合的多个龟裂信息彼此赋予共同的标记,显示部将表示共同的标记的影像与表示已结合的多个龟裂信息彼此的影像建立关联来显示。

由此,视觉上能够容易确认与所选择的标记相关联的龟裂信息的结合结果。

本申请发明的第6方式所涉及的龟裂信息编辑装置中,通过龟裂信息编辑部受理到多个龟裂信息彼此的结合的解除时,标注部,分别对多个龟裂信息赋予能够相互区别受理到结合的解除的多个龟裂信息彼此的标记,显示部将分别表示多个龟裂信息的影像与能够区别的标记每一个建立关联来显示。

由此,视觉上能够容易确认与所选择的标记相关联的龟裂信息的结合的解除结果。

本申请发明的第7方式所涉及的龟裂信息编辑装置中,显示部在表示龟裂信息的影像外的位置显示表示标注部所赋予的标记的影像。

由此,标记与龟裂信息的影像不会干扰而可见性得到提高。

本申请发明的第8方式所涉及的龟裂信息编辑装置中,表示标记的影像是个别地包含龟裂信息获取部所获取的每个龟裂信息的标记的文本框或包含由龟裂信息获取部所获取的多个龟裂信息的标记的一览表。

由于能够从包含龟裂信息的标记的文本框或包含多个龟裂信息的标记的一览表选择任意的标记,因此标记的选择较容易。

本申请发明的第9方式所涉及的龟裂信息编辑装置中,显示部强调显示与选择的标记建立有关联的龟裂信息的影像。

由此,与所选择的标记相关联的龟裂信息的识别较容易。

本申请发明的第10方式所涉及的龟裂信息编辑装置中,龟裂信息获取部通过克鲁斯卡算法、普里姆算法、神经网络收敛运算及渗滤(percolation)法等,获取针对结构物的龟裂的龟裂信息。

本申请发明的第11方式所涉及的龟裂信息编辑装置中,龟裂信息是包含龟裂的宽度、长度及方向的矢量数据。

本申请发明的第12方式所涉及的龟裂信息编辑方法由计算机执行如下步骤:获取针对通过结构物的表面图像的图像解析检测的结构物的龟裂的龟裂信息的步骤;根据获取的龟裂信息,赋予识别龟裂信息的标记的步骤;将表示龟裂信息的影像重叠显示于表面图像,并且将表示所赋予的标记的影像与表示龟裂信息的影像建立关联来显示的步骤;从显示的标记中受理任意标记的选择的步骤;及受理与受理选择的标记建立有关联的龟裂信息的编辑的步骤。

本申请发明的方式还包含用于使计算机执行上述中记载的龟裂信息编辑方法的龟裂信息编辑程序。

发明效果

根据本发明,通过标记选择,能够受理与所选择的标记建立有关联的龟裂信息的编辑。因此,基于用户操作的龟裂信息的选择与编辑较容易。

附图说明

图1是表示作为结构物的例子的桥梁的图。

图2是表示本发明的一实施方式所涉及的损伤信息处理装置的结构的框图。

图3是表示本发明的一实施方式所涉及的损伤信息处理方法的顺序的流程图。

图4是表示分割曲线状的损伤来生成多个损伤矢量的情况的图。

图5是用于说明确定损伤矢量的起点的情况的图。

图6是用于说明确定损伤矢量的起点的情况的另一图。

图7是表示分离的损伤矢量的连结的图。

图8是表示分离的损伤矢量的连结的另一图。

图9是表示分级结构信息中包含的图像信息的表。

图10是表示分级结构信息中包含的损伤矢量的信息的例(与分级确定方法的例1对应)的图。

图11中,图11a是用于说明损伤矢量与标记的显示例的图。

图11中,图11b是用于说明损伤矢量与标记的显示例的图。

图12是用于说明损伤矢量的分级确定方法的例2的另一图。

图13是表示与分级确定方法的例2对应的分级结构信息(损伤矢量信息)的例的表。

图14是用于说明损伤矢量的分级确定方法的例3的图。

图15是用于说明损伤矢量的分级确定方法的例3的另一图,是表示在时间上比图14后拍摄的图像的图。

图16是用于说明损伤矢量的分级确定方法的例3的其他图,是表示在时间上比图15后拍摄的图像的图。

图17是表示与分级确定方法的例3对应的分级结构信息(损伤矢量信息)的例子的表。

图18是用于说明损伤矢量的分级确定方法的例4的图。

图19是表示与分级确定方法的例4对应的分级结构信息(损伤矢量信息)的例子的表。

图20是表示选择c1-3的标记,对与该标记对应的损伤矢量进行删除命令输入的情况的图。

图21是表示对与c1-3的标记对应的损伤矢量进行删除命令输入的结果,c1-3的标记的显示被删除且与c1-3的标记对应的损伤矢量的显示被删除的更新显示例的图。

图22是表示进行该删除命令输入的结果,对与c1-3的标记对应的损伤矢量的删除操作标志分配有“1”的分级结构信息的一例的图。

图23是表示选择c1-5及c8-1的标记,进行与这些标记对应的损伤矢量彼此的结合命令输入的情况的图。

图24是表示进行该结合命令输入的结果,结合与c1-5及c8-1的标记对应的损伤矢量的损伤矢量的线段及对该追加损伤矢量赋予的标记“c1-5+c8-1”的更新显示例的图。

图25是表示对与c1-5及c8-1的标记对应的损伤矢量的追加操作标志分配有“2”的分级结构信息的更新例的图。

图26是表示选择与追加损伤矢量对应的“c1-5+c8-1”的标记,进行与这些标记对应的损伤矢量彼此的结合解除命令输入的情况的图。

图27是表示进行该结合解除命令输入的结果,c1-5及c8-1的标记的损伤矢量彼此的结合被解除的显示例的图。

图28是表示对与c1-5及c8-1的标记对应的损伤矢量的追加操作标志分配有“0”的分级结构信息的一例的图。

具体实施方式

以下,参考附图,对本发明所涉及的龟裂信息编辑装置、龟裂信息编辑方法及龟裂信息编辑程序的实施方式进行说明。

<第1实施方式>

图1是表示适用本发明所涉及的龟裂信息编辑装置、龟裂信息编辑方法及龟裂信息编辑程序的结构物的例子即桥梁1(结构物、混凝土结构物)的结构的立体图。图1所示的桥梁1具有主梁3,主梁3通过接合部3a接合。主梁3是架设在桥座和/或桥墩之间,支承桥面板2上的车辆等的荷重的部件。并且,在主梁3的上部,浇筑有用于车辆等行进的桥面板2。桥面板2设为钢筋混凝土制。另外,桥梁1除了桥面板2及主梁3以外,还具有未图示的横梁、横撑架及横系杆等部件。

<图像的获取>

检查桥梁1的损伤时,检查人员利用数码相机104(参考图2),从下方(图1的c方向)拍摄桥梁1,针对检查范围获取表面图像。在沿桥梁1的延伸方向(图1的a方向)及其正交方向(图1的b方向)适当移动的同时进行拍摄。另外,由于桥梁1的周边情况,检查人员难以移动时,可在能够沿桥梁1移动的移动体设置数码相机104来进行拍摄。这种移动体上,可设置数码相机104的升降机构和/或云台机构。另外,作为移动体的例子,能够举出车辆、机器人及飞行物体,但并不限定于这些。

<损伤信息处理装置的结构>

图2是表示作为本发明的龟裂信息编辑装置所涉及的实施方式的损伤信息处理装置100的概略结构的框图。损伤信息处理装置100具备损伤信息获取部102(与龟裂信息获取部对应)、损伤矢量生成部110(与标注部对应)、分级结构信息生成部112、损伤矢量提取部114、分级结构信息记录部116(与龟裂信息编辑部对应)、显示部118(与显示部对应)及操作部120(与标记选择部对应),这些相互连接而能够相互收发所需的信息。

各部的功能例如能够通过由cpu(centralprocessingunit(中央处理器))等控制器件执行存储于存储器的程序来实现。并且,损伤信息获取部102包含无线通信用天线及输入输出接口电路,分级结构信息记录部116包含hdd(harddiskdrive(硬盘驱动器))等非暂时性记录介质而构成。并且,显示部118包含液晶显示器等显示器件,操作部120包含键盘等输入器件。另外,这些表示本发明所涉及的损伤信息处理装置的结构的一例,可适当采用其他结构。

如上所述,利用数码相机104拍摄的图像通过无线通信输入至图像获取部106,通过图像处理部108获取损伤信息。数码相机104、图像获取部106及图像处理部108构成损伤信息获取部102。损伤矢量生成部110从由损伤信息获取部102获取的损伤信息,通过图像解析生成损伤矢量(龟裂矢量),并且,连结空间上分离的损伤矢量。分级结构信息生成部112根据由损伤矢量生成部110生成的损伤矢量生成分级结构信息,所生成的分级结构信息记录于分级结构信息记录部116。损伤矢量提取部114参考分级结构信息,提取满足损伤矢量的所属分级等指定条件的损伤矢量。显示部118重叠所输入的图像、生成或者提取的损伤矢量、分级结构信息等的全部或一部分来显示,或者单独显示这些。显示部118还从损伤矢量的信息生成线段的图像等,进行显示时所需的图像处理。操作部120受理与损伤矢量及分级结构信息的提取条件以及显示条件的设定及分级结构信息的编辑等相关的用户的命令输入。

<损伤信息处理的顺序>

接着,对利用上述结构的损伤信息处理装置100的损伤信息处理(与本发明的龟裂信息编辑方法对应)进行说明。图3是表示本实施方式所涉及的损伤信息处理的顺序的流程图。另外,本实施方式中,对损伤是在桥面板2产生的龟裂的情况进行说明,将损伤适当记载为“龟裂”,但能够适用本发明的损伤并不限于龟裂,也可以是游离石灰等其他损伤。用于通过损伤信息处理装置100执行该处理的程序(与本发明的龟裂信息编辑程序对应)记录于损伤信息处理装置100内置的闪存器等能够计算机读取的非暂时性有形介质。

<损伤信息获取工序>

首先,如上所述,通过无线通信将用数码相机104拍摄的桥梁1的图像输入至图像获取部106(步骤s100;图像输入工序)。桥梁1的图像根据检查范围输入多个,并且,所输入的图像中,通过数码相机104附加有拍摄日期时间的信息。另外,输入图像的拍摄日期时间并不一定要在所有的图像中相同,可横跨多日。图像可总括输入多个图像,也可设为一次输入1个图像。另外,桥梁1的图像可设为经由各种存储卡等非暂时性记录介质输入,而不是无线通信,也可经由互联网输入已经拍摄并记录的图像的数据。另外,步骤s100中输入的桥梁1的图像可以是拍摄图像本身,也可以是对拍摄图像实施预处理的图像。

<损伤提取工序>

接着,图像处理部108从所输入的图像提取损伤(龟裂)(步骤s110;损伤提取工序)。步骤s100的图像输入工序及步骤s110的损伤提取工序构成本发明的损伤信息处理方法中的损伤信息获取工序。另外,步骤s110中,若从在步骤s100中输入的图像提取到损伤,即若识别到图像中的损伤区域,则可视作已获取到损伤信息,无需掌握损伤的详细特征。

步骤s110中的损伤的提取能够通过各种方法进行,例如能够利用日本专利4006007号公报中记载的龟裂检测方法。该方法是由如下工序构成的龟裂检测方法:计算与所对比的2个浓度对应的小波系数,并且计算分别改变该2个浓度时的各自的小波系数来制作小波系数表,通过对拍摄作为龟裂检测对象的混凝土表面的输入图像进行小波转换来制作小波图像的工序;在小波系数表内,将与局部区域内的附近像素的平均浓度和关注像素的浓度对应的小波系数作为阈值,对关注像素的小波系数与该阈值进行比较,由此判定龟裂区域与非龟裂区域的工序。

另外,可设为在对步骤s100中输入的图像实施必要的预处理之后进行步骤s110中的损伤的提取。

<损伤矢量的生成>

若在步骤s110中提取到损伤(若获取到损伤信息),则损伤矢量生成部110将所获取的损伤信息矢量化来生成损伤矢量(龟裂矢量)(步骤s120;损伤矢量生成工序)。矢量化时,根据需要,对所提取的损伤(龟裂)进行二值化和/或细线化。另外,“矢量化”是指针对损伤,求出由起点及终点确定的线段,损伤(龟裂)为曲线状时,以曲线与线段的距离成为阈值以下的方式,将损伤分割为多个区间,针对多个区间的每一个生成损伤矢量。图4的例子中,将曲线状的损伤cr分割为4个区间cr1~cr4,针对各个区间生成损伤矢量cv1~cv4,由此使区间cr1~cr4中的损伤与损伤矢量cv1~cv4之间的距离d1~d4成为阈值以下。

生成损伤矢量时,例如能够将桥面板2的特征点作为坐标系的原点,针对损伤矢量的组(矢量组),将自原点的距离最小的端点作为第1起点,以下沿着损伤矢量的行进方向,依次确定终点、起点。图5的例子中,将桥面板2上的点p0作为坐标系原点,将图的右方向及下方向分别作为坐标系的x轴方向、y轴方向时,能够将矢量组c7的点p13、p14、p15、p16中自点p0的距离d最短的点p13作为损伤矢量c7-1的起点,以下,将点p14作为损伤矢量c7-1的终点(且损伤矢量c7-2、c7-3的起点),将点p15、p16分别作为损伤矢量c7-2、c7-3的终点。

然而,若以相同的方法确定矢量组c8的起点,则点p17成为损伤矢量c8-1的起点,点p18成为损伤矢量c8-2、c8-3的起点,导致损伤矢量c8-3的行进方向(从点p18朝向点p20的方向)与损伤矢量c8-1的行进方向相反。因此,这种情况下,如图6所示,可将点p19作为损伤矢量c8a-1的起点,以下,将点p18作为损伤矢量c8a-1的终点(且损伤矢量c8a-2、c8a-3的起点),将点p17、p20分别作为损伤矢量c8a-2、c8a-3的终点。另外,将此时的损伤矢量的集合体标明为矢量组c8a。这种处理可设为由损伤矢量生成部110不经由用户的命令输入而进行,也可设为根据经由操作部120的用户的命令输入,由损伤矢量生成部110进行。

<分离的损伤矢量的连结>

如上所述那样生成损伤矢量时,若损伤在桥面板2的内部连续而在表面分离,则有可能识别为分离的损伤矢量。因此,本实施方式所涉及的损伤信息处理装置100中,连结这种多个损伤矢量来生成1个或多个矢量。

图7是表示损伤矢量的连结的例子的图,表示提取到包含损伤矢量c3-1(点p21、点p22分别为起点、终点)的矢量组c3、包含损伤矢量c4-1(点p23、点p24分别为起点、终点)的矢量组c4的情况。并且,将损伤矢量c3-1与连结点p22及点p23的线段所呈的角设为α1,将连结点p22及点p23的线段与损伤矢量c4-1所呈的角设为α2。此时,若角α1及角α2均为阈值以下,则连结损伤矢量c3-1及c4-1,并且,融合矢量组c3及c4。具体而言,如图8所示,生成新的损伤矢量c5-2并与其他损伤矢量c5-1(与损伤矢量c3-1相同)及c5-3(与损伤矢量c4-1相同)连结,将包含这些损伤矢量c5-1、c5-2及c5-3的新的矢量组作为矢量组c5。

另外,上述方法是损伤矢量连结方法的一例,也可使用其他方法。并且,如上所述,可设为与用户的命令输入无关地,由损伤矢量生成部110判断是否连结损伤矢量彼此,也可设为根据经由操作部120的用户的命令输入,由损伤矢量生成部110进行判断。

如此,本实施方式所涉及的损伤信息处理装置100中,通过适当连结空间上(在桥面板2的表面)分离的损伤矢量,能够准确地掌握损伤矢量彼此的连结关系。

<分级结构信息的生成>

若在步骤s120中生成了损伤矢量,则根据所生成的损伤矢量,由分级结构信息生成部112生成分级结构信息(步骤s130;分级结构信息生成工序)。分级结构信息是分级地表现损伤矢量彼此的连结关系的信息,由图像信息(参考图9)及损伤矢量信息(参考图10、13、17及19)构成。这些图像信息及损伤矢量信息经由损伤矢量(龟裂矢量)的集合体即矢量组建立有关联。因此,还能够参考矢量组的id(identification),从损伤的图像提取损伤矢量,相反地,还能够根据损伤矢量提取图像。另外,分级结构信息与损伤矢量所属的分级(级别)无关地以相同的项目及形式生成(参考图10、13、17及19),用户能够轻松地识别及掌握分级结构信息。

<图像信息>

上述图像信息是针对拍摄到损伤的拍摄图像的信息,对损伤矢量的组,规定拍摄图像的识别信息(id)及图像数据、图像获取日期时间等。图9是表示图像信息的例子的表,对矢量组c1(参考图11a),规定有图像的id、图像数据、获取日期时间、图像的宽度及高度、通道数、比特/像素、分辨率。关于通道数,若是rgb(r:红、g:绿、b:蓝)彩色图像,则是3通道,若是单色图像,则是1通道。另外,图9中,仅记载了矢量组c1,但存在多个矢量组时,对各组生成相同的信息。

<损伤矢量信息>

图10是损伤矢量信息的例子。损伤矢量信息由损伤矢量所属的矢量组的信息、各损伤矢量的固有信息、在矢量组内与各损伤矢量连结的其他损伤矢量的信息及附加信息构成。

矢量组(参考图10的表的情况下的矢量组c1;参考图11a)的信息包含组的标记(识别信息)。损伤矢量的固有信息包含损伤矢量的标记(识别信息)、分级(级别;所属分级信息)、起点及终点(点编号及位置坐标)及长度。在此,关于分级(级别),级别1为最上位,数字越变大,越成为下位的分级。对具体的分级的确定方法的详细内容,将进行后述。如以下说明,其他损伤矢量的信息包含父矢量、兄弟矢量及子矢量的标记(识别信息)。附加信息包含损伤的宽度、删除操作标志、追加操作标志、检查日及修复信息。

<父矢量、兄弟矢量及子矢量>

本实施方式中,一损伤矢量的终点成为其他损伤矢量的起点时,将这种一损伤矢量称作“父矢量”,将其他损伤矢量称作“子矢量”。父矢量设为以针对1个损伤矢量成为零或1个的方式确定,子矢量相对于1个父矢量,可存在零以上的任意数量。并且,父矢量的终点成为多个子矢量的起点时,将这些多个子矢量相互称作“兄弟矢量”。兄弟矢量也可存在零以上的任意数量。

如此,本实施方式中,分级结构信息中包含父矢量、兄弟矢量及子矢量的标记(识别信息),因此根据任意的损伤矢量,能够参考矢量的id,依次确定父矢量、兄弟矢量及子矢量。例如,能够确定一损伤矢量的父矢量,并进一步确定该父矢量的父矢量。如此,本实施方式所涉及的损伤信息处理装置100中,能够轻松掌握损伤矢量彼此的连结关系,并且,能够轻松进行损伤矢量的分析及搜索。

<附加信息>

附加信息中包含的“宽度”表示与各损伤矢量对应的龟裂的宽度。删除操作标志表示是否为进行删除操作的矢量,已进行删除操作时为“1”,未进行时为“0”。能够参考该删除操作标志,在损伤矢量的显示与不显示之间进行切换。追加操作标志与损伤矢量的检测方式相关联,当为自动检测到的矢量时,为“0”,当为手动(通过用户的命令输入)追加的矢量时,为“1”,当为手动追加且连接不同标记的矢量来生成的矢量时,为“2”。

“检查日”中设定拍摄损伤的图像的日期,但也能够通过用户经由操作部120的命令输入来编辑。并且,“修复”的信息能够根据用户经由操作部120的命令输入(修复的种类及修复日)生成。修复的种类例如有用水泥填埋、用树脂填埋、放置(持续观察)等(图10的表中,分别记载为r1、r2、r3)。

<损伤矢量的分级>

接着,对损伤矢量所属的分级(级别)进行说明。例如如以下的例1~4中说明,能够用各种方法确定损伤矢量的分级。

<分级确定方法(例1)>

图11a是表示矢量组c1的图。矢量组c1由损伤矢量c1-1~c1-6构成,这些损伤矢量将点p1~p7作为起点或终点。这种情况下,例1中,损伤矢量每进行分支(一损伤矢量的终点成为其他多个损伤矢量的起点),分级就成为下位。具体而言,将损伤矢量c1-1的分级设为最上位的“级别1”,将损伤矢量c1-1的终点即点p2作为起点的损伤矢量c1-2及c1-3的分级设为比损伤矢量c1-1更下位的“级别2”。同样地,将损伤矢量c1-3的终点即点p4作为起点的损伤矢量c1-5及c1-6的分级设为比损伤矢量c1-3更下位的“级别3”。另一方面,损伤矢量c1-2的终点即点p3为损伤矢量c1-4的起点,但将点p3作为起点的损伤矢量只有损伤矢量c1-4,没有分支,因此损伤矢量c1-4的分级与c1-2相同,设为“级别2”。如图10的表所示,如此确定的各损伤矢量的分级包含于分级结构信息中。

并且,如图11a所示,各损伤矢量的个别的标记通过将所对应的各损伤矢量的起点、终点或连结这些的线段的附近的任意位置作为起点的文本框的影像,与各损伤矢量建立关联来显示于显示部118。此外,各损伤矢量的标记可通过将所对应的各损伤矢量的线段附近的任意的位置作为起点的旗、带、板、框(box)、线、表等影像或者这些的所有或一部分的组合,与各损伤矢量建立关联来显示。文本框设为配置于损伤矢量的影像外,避开与损伤矢量本身的重复的位置即可。

并且,标记的显示位置和显示形式也任意。图11a中,在损伤矢量的附近配置有标记,但如图11b,可将在不与损伤矢量重复的画面的空白部分,用一览表显示包含多个标记的标记组,用一对一连结的线对各标记与各损伤矢量建立关联,由此示出两者的对应。另外,用文本框等表示的各个标记或标记的一览表只要避免与相同组的损伤矢量的重复显示即可,可与和不同的组对应的损伤矢量重复显示。

<分级确定方法(例2)>

图12是表示矢量组c1(损伤矢量彼此的连结关系与图11a所示的关系相同)的图。例2中,所连结的损伤矢量中与其他损伤矢量所呈的角度为阈值以下的矢量(相当于树结构中的“干”的损伤矢量)设为属于相同的分级。具体而言,存在于图12的点线内(以参考符号lv1表示的范围)的损伤矢量c1-1、c1-2及c1-4设为相同的分级的“级别1”(最上位)。并且,关于除此以外的损伤矢量c1-3、c1-5及c1-6,与例1相同,设为损伤矢量每进行分支,分级就成为下位,将损伤矢量c1-3(相当于树结构中的“枝”)设为“级别2”,将损伤矢量c1-5及c1-6(相当于树结构中的“叶”)设为“级别3”。如图13的表所示,如此确定的各损伤矢量的分级及类别(干、枝或者叶)包含于分级结构信息中。

<分级确定方法(例2的变形例)>

对上述分级确定方法(例2)的变形例进行说明。如分级确定方法(例2),将损伤矢量设为相当于树结构中的干、枝及叶来确定分级时,通常认为“枝”比“干”短,因此可将最长的损伤矢量设为“干”(级别1),将其他损伤矢量设为“枝”或“叶”来确定分级。此时,例如,图13的表所示的损伤矢量信息中,长度100mm的损伤矢量c1-1成为“干”(级别1)。能够将损伤矢量c1-2及c1-3设为“枝”(级别2),将损伤矢量c1-4设为“枝”(级别2)或“叶”(级别3),将损伤矢量c1-5及6设为“叶”(级别3)。

另外,也可不针对“最长的损伤矢量”,而是将构成“最长的龟裂”的损伤矢量设为“干”(级别1),将与从“干”分支的龟裂对应的损伤矢量设为“枝”或“叶”。此时,设为“最长的龟裂”表示“在无论是粗的龟裂还是细的龟裂,均连结的状态下,作为龟裂最长”。

并且,也可如下,除了损伤矢量的长度以外,还考虑宽度(与损伤矢量对应的损伤的宽度)来确定类别(干、枝及叶)及分级。例如,将“长度×宽度”成为最大的损伤矢量设为“干”,将其他损伤矢量设为“枝”或“叶”来确定分级。此时,例如,图13的表所示的损伤矢量信息中,“长度×宽度”最大(100mm2)的损伤矢量c1-1成为“干”。能够将损伤矢量c1-2及c1-3设为“枝”(级别2),将损伤矢量c1-4设为“枝”(级别2)或“叶”(级别3),将损伤矢量c1-5及6设为“叶”(级别3)。

如上述变形例,通过考虑损伤矢量的长度或“长度×宽度”来确定损伤矢量的分级,能够提高分级化的精度。

<分级确定方法(例3)>

图14~16是表示矢量组c1(损伤矢量彼此的连结关系与图11a、12所示的关系相同)的图。例3中,根据桥梁1的图像的拍摄日期时间判断产生损伤矢量的时间的前后,设为在时间上,越是之后产生的损伤矢量,越属于下位的分级。图14~16的情况下设为如下,即,最初拍摄的图像中,产生有包含损伤矢量c1-1的矢量组c1a(图14),接着拍摄的图像中,新产生损伤矢量c1-2及c1-3而成为矢量组c1b(图15),最后拍摄的图像中,还产生损伤矢量c1-4、c1-5及c1-6而成为矢量组c1(图16)。

这种情况下,例3中设为如下,即,将最初的图像中产生的损伤矢量c1-1(图14中以参考符号lv1表示的范围)设为最上位的“级别1”,将在下一图像中产生的损伤矢量c1-2及c1-3(图15中以参考符号lv2表示的范围)设为“级别2”,在最后的图像中产生的损伤矢量c1-4、c1-5及c1-6(图16中以参考符号lv3表示的范围)设为“级别3”。

如图17的表所示,如此确定的各损伤矢量的分级包含于分级结构信息中。

<分级确定方法(例4)>

图18是表示龟裂c2a及与此对应的矢量组c2的图。例4中设为如下,即,与一损伤矢量连结的其他损伤矢量只有1个时,将这种其他1个损伤矢量设为属于与一损伤矢量相同的分级。具体而言,如图18所示,若考虑一条曲线状的龟裂c2a分割为多个龟裂c2a-1~c2a-4,这些龟裂分别与将点p8~点p12作为起点或终点的损伤矢量c2-1~c2-4对应的情况,则在损伤矢量c2-1~c2-3的终点,仅分别连结有1个损伤矢量(损伤矢量c2-2~c2-4)。这种情况下,例4中设为如下,即,假设损伤矢量c2-1~c2-4(图18中以参考符号lv1表示的范围)实际上为1个,全部属于作为相同分级的“级别1”(最上位)。

如图19的表所示,如此确定的各损伤矢量的分级包含于分级结构信息中。

以上,对损伤矢量的所属分级确定方法的例1~4进行了说明,这些方法能够根据具体的损伤方式适当分开使用,并且,也可根据需要组合多个方法来使用。例如,针对连结的图案为复杂的损伤矢量的组,可如下,即,一部分用例1确定分级,其他部分用例4确定分级。这种分级方法的组合可由分级结构信息生成部112判断来进行,也能够根据用户经由操作部120的命令输入来进行。

<分级结构信息的项目及形式>

本实施方式中,如图10、13、17及19的表所示,分级结构信息与损伤矢量所属的分级无关地,是相同的项目及形式,因此能够迅速且轻松地掌握损伤矢量彼此的连结关系。

<损伤矢量的提取>

接着,对损伤矢量的提取进行说明。本实施方式中,分级结构信息中,包含损伤矢量所属的矢量组、损伤矢量的标记、所属分级、所连结的其他损伤矢量(父矢量、兄弟矢量及子矢量)的标记等(参考图10、13、17及19),能够对这些项目指定所希望的条件来提取损伤矢量。作为所指定的条件,例如能够举出“损伤矢量所属的分级”及“将特定的矢量作为父矢量、兄弟矢量或者子矢量的矢量”,可指定的条件并不限定于这些例子。

例如,当为图10所示的损伤矢量信息时,若将“损伤矢量的分级(级别)为级别2”指定为条件,则参考分级结构信息的“分级(级别)”的栏,提取损伤矢量c1-2、c1-3及c1-4,若将“与损伤矢量c1-2连结,属于比损伤矢量c1-2更上位的分级的损伤矢量”指定为条件,则提取损伤矢量c1-1(父矢量)。并且,若将“与损伤矢量c1-2连结,属于与损伤矢量c1-2相同的分级的损伤矢量”指定为条件,则提取损伤矢量c1-3(兄弟矢量)及损伤矢量c1-4(子矢量),若将“与损伤矢量c1-3连结,属于比损伤矢量c1-3更下位的分级的损伤矢量”指定为条件,则提取损伤矢量c1-5及c1-6(子矢量)。这种损伤矢量的提取能够根据用户经由操作部120的命令输入,由损伤矢量提取部114参考分级结构信息记录部116来进行。

如此,本实施方式所涉及的损伤信息处理装置100中,能够轻松地进行损伤矢量的搜索、分析及评价。另外,所提取的损伤矢量能够以各个信息和/或线画的形式显示(后述)。

<损伤矢量及分级结构信息的显示>

步骤s140中,将在步骤s130中生成的分级结构信息显示于显示部118(显示工序)。分级结构信息的显示例如能够以图9、10、13、17及19所示的表的形式进行,或根据从这些表提取的一部分信息进行。作为这种“一部分信息”的一例,能够举出“以指定的条件提取的损伤矢量的信息”及“针对检查日和/或修复日等特定项目的信息”。

并且,可根据分级结构信息,描绘表示损伤矢量的线画,并显示于显示部118。如图10、13、17、19的表所示,分级结构信息中包含损伤矢量的起点及终点以及所连结的其他损伤矢量的信息,因此能够根据这些信息描绘表示损伤矢量的线画(例如,参考图11a、11b、12、14~16)来显示。表示损伤矢量的线画中,可标注箭头(参考图11a、11b、12、14~16),以便能够识别损伤矢量的方向(从起点朝向终点的方向)。描绘及显示损伤矢量的线画时,可描绘及显示分级结构信息中包含的所有损伤矢量,也可仅显示一部分损伤矢量(例如,如上所述,以指定的条件提取的矢量)。

另外,显示表示损伤矢量的线画时,可在该线画的附近配置所对应的标记的影像,或根据分级结构信息中包含的信息中的特定信息改变损伤矢量的颜色、粗度及线种(实线、点线等)等显示条件。作为这种信息,例如,能够举出损伤矢量的分级(级别)、类别(干、枝、叶)、产生日期时间、删除操作标志及追加操作标志的值等,可从分级结构信息中包含的项目中适当设定。如此,通过以与损伤矢量的特征相应的方式显示,能够轻松地掌握损伤矢量彼此的连结关系和/或时间变化的情况。

上述的损伤矢量的线画与分级结构信息可显示任意一个,也可同时显示双方。并且,上述显示中,可将拍摄到损伤(龟裂)的图像(例如,图9的表所示的图像“img_2015-001”)与损伤矢量的线画重叠(重合)或者排列显示,以便能够比较两者(例如,参考图18)。

本实施方式中,由于如此显示损伤矢量和/或分级结构信息,因此能够轻松地掌握损伤矢量的信息及损伤矢量彼此的连结关系。

<损伤矢量及分级结构信息的记录>

步骤s150中,将分级结构信息记录于分级结构信息记录部116(记录工序)。记录于分级结构信息记录部116的分级结构信息能够用于损伤的分析及评价等目的。另外,从分级结构信息提取到一部分信息(例如,满足所指定的条件的损伤矢量)时,如此提取的信息全部包含于原来的分级结构信息中,因此提取结果并不一定要记录,但通过将提取结果也记录于分级结构信息记录部116,能够根据需要迅速参考。

<损伤矢量及分级结构信息的编辑>

步骤s160中,根据用户经由操作部120的编辑命令输入,分级结构信息生成部112修正记录于分级结构信息记录部116的分级结构信息(编辑工序)。并且,根据该编辑命令输入,基于显示部118的损伤矢量与标记的显示被更新。

该编辑命令输入包含以下内容。

(1)删除与任意选择的标记对应的损伤矢量。进行该编辑命令输入时,对所删除的损伤矢量的删除操作标志分配“1”。

能够如下进行损伤矢量的删除命令输入。例如,若点击选择任意的标记,则强调显示所选择的标记及与该选择的标记对应的损伤矢量的线画。强调显示通过标记或损伤矢量的线画的设计的变更(着色、点线化、粗线化、亮度的变化等)来进行。并且,在所选择的标记的附近,显示确认是否执行能够对损伤矢量进行的编辑操作“删除”的对话框,若从该对话框进行能够执行“删除”的选择,则对与所选择的标记对应的损伤矢量的删除操作标志分配“1”,结束删除命令输入。

图20表示选择c1-3的标记,对与该标记对应的损伤矢量进行删除命令输入的情况。图21中,示出对与c1-3的标记对应的损伤矢量进行删除命令输入的结果,c1-3的标记的显示被删除且与c1-3的标记对应的损伤矢量的线画的显示被停止的更新显示例。并且,图22是进行该删除命令输入的结果,对与c1-3的标记对应的损伤矢量的删除操作标志分配“1”的分级结构信息的编辑结果的一例。另外,即使对损伤矢量进行删除命令输入,也不删除与其损伤矢量对应的分级结构信息。这是因为,如后述,用于机器学习。

(2)对与任意选择的标记对应的损伤矢量,加除(局部追加或局部除去)构成该损伤矢量的区域。进行该编辑命令输入时,对与所选择的标记对应的删除操作标志或追加操作标志分配“1”。并且,与加除区域对应地,更新记录于分级结构信息的损伤矢量的起点、终点、长度、宽度的值。

(3)追加将与任意选择的多个标记建立有关联的多个不连续的损伤矢量彼此结合为1个连续的损伤矢量的损伤矢量。进行该编辑命令输入时,对所结合的各损伤矢量的各追加操作标志分别分配“2”。

能够如下进行损伤矢量的追加命令输入。例如,若点击选择任意的2个标记,则强调显示该选择的标记及所对应的损伤矢量的线画,并且在标记的附近,显示确认是否执行能够对所对应的损伤矢量进行的编辑操作“结合”的对话框,若从该对话框进行能够执行“结合”的选择,则对与所选择的标记对应的各损伤矢量的各追加操作标志分配“2”,完成损伤矢量的追加命令输入。

图23表示选择c1-5及c8-1的标记,进行结合与这些标记对应的损伤矢量彼此的损伤矢量的追加命令输入的情况。图24表示进行该命令输入的结果,结合与c1-5及c8-1的标记对应的损伤矢量的追加的损伤矢量的线画、对通过该追加的损伤矢量结合的损伤矢量赋予的共同的标记“c1-5+c8-1”的更新显示例。另外,虽省略图示,但与c1-5及c8-1的标记对应的损伤矢量结合为一直线时,可消除点p6、p17的显示。图25是对与c1-5及c8-1的标记对应的损伤矢量的追加操作标志分配“2”的分级结构信息的更新例。所结合的损伤矢量的标记只要能够与其他损伤矢量进行区别,则可以是任意标记。并且,所结合的损伤矢量的矢量组可与所结合的损伤矢量的任意矢量组(例如,长或短的损伤矢量所属的矢量组)相同,也可生成其他新的矢量组。这与<分离的损伤矢量的连结>中说明的内容相同地进行。

另外,该更新的分级结构信息中,将先选择的标记c1-5的损伤矢量作为父矢量,将后选择的标记c8-1的损伤矢量作为子矢量。先选择标记c8-1且后选择标记c1-5时,将标记c8-1的损伤矢量作为父矢量,将标记c5-1的损伤矢量作为子矢量。在任何情况下,关于对追加操作标志分配“2”的多个损伤矢量c1-5及c8-1和将这些中的任一个作为父矢量且将另一个作为子矢量来结合的追加的损伤矢量,这些结合为一直线时,汇集成1个连续的结合损伤矢量,对该1个连续的结合损伤矢量赋予新的标记“c1-5+c8-1”。

(4)解除与多个标记建立有关联的多个不连续的损伤矢量彼此的结合。进行该结合的解除命令输入时,对已解除结合的各损伤矢量的各追加操作标志分别分配“0”。

能够如下进行损伤矢量彼此的结合的解除命令输入。例如,若从基于上述(3)的结合损伤矢量的标记中选择任意的标记,则强调显示该选择的标记及所对应的结合损伤矢量的线画,而且,在该选择的标记的附近,显示确认是否执行能够对该结合损伤矢量进行的编辑操作“结合解除”的对话框,若从该对话框进行能够执行“结合解除”的选择,则通过与所选择的标记对应的结合损伤矢量结合的各损伤矢量的各追加操作标志从“2”变更为“0”,并且两者的父矢量、子矢量关系被删除,完成结合解除命令输入。

图26表示选择与结合损伤矢量对应的“c1-5+c8-1”的标记,进行基于与该标记对应的结合损伤矢量的结合的解除命令输入的情况。图27表示进行该结合的解除命令输入的结果,c1-5及c8-1的标记的损伤矢量彼此的结合被解除的显示例。图28是对与c1-5及c8-1的标记对应的损伤矢量的追加操作标志分配“0”的分级结构信息的更新例。另外,更新分级结构信息,以使已解除结合的损伤矢量之间的父矢量及子矢量的关系也被删除。

可分别对结合解除后的各损伤矢量重新分配能够区别的标记,以此代替将与结合之前的标记相同的标记分别再次分配于结合解除后的各损伤矢量。但是,机器学习特定的损伤矢量彼此的结合为错误而通过手动解除结合的内容时,优选将与结合之前的标记相同的标记分别再次分配于结合解除之后的各损伤矢量。

并且,成为结合解除对象的损伤矢量并不限于手动指定的损伤矢量。例如,还能够进行通过如图8所示的损伤矢量连结方法结合c3-1与c4-1的损伤矢量c5-2的解除。此时,通过损伤矢量c5-2的标记选择与结合解除的命令,结合前的矢量组c3、c4与属于它们的损伤矢量的之前的标记c3-1、c4-1复活。为了实现此现象,必需事先将实施损伤矢量连结方法之前的矢量组c3、c4与标记c3-1、c4-1作为连结前的履历来记录于分级结构信息。

(5)与矢量组对应的标记的显示及选择和与该选择的标记对应的矢量组的删除、结合及结合的解除。这能够与和各个损伤矢量对应的标记的显示及选择等相同地进行。

如以上说明,根据本实施方式所涉及的损伤信息处理装置100及损伤信息处理方法,能够轻松地掌握损伤矢量彼此的连结关系,并且,能够根据分级结构信息轻松地进行损伤矢量的分析和/或搜索。

并且,通过标记的选择,可进行损伤矢量的删除、结合、结合的解除,因此即使不准确地指定复杂形状的损伤矢量的位置,也能够轻松地编辑分级结构信息。

以上,对本发明的例子进行了说明,但本发明并不限定于上述实施方式及变形例,能够在不脱离本发明的精神的范围进行各种变形。

例如,步骤s100~s150的工序除了上述方法以外,还能够通过普里姆算法执行,该普里姆算法是通过曲线图理论求出加权连结曲线图的最小生成树的最优化问题的算法。

即,例如,假设能够根据曲线图理论的考虑方式,在检测结果的像素之间设定成本。成本是利用损伤矢量(龟裂)的方向、宽度或距离等基准值的计算结果,设为连接成本最小的像素之间。作为成本计算的概念,可考虑如下计算方法,即,损伤矢量彼此的距离越远离,成本变得越大,但损伤矢量彼此的方向越相互一致,成本变得越小。即使距离较远,但以其他基准,被视作为1条龟裂的可能性较大时,能够获得反映该信息的连接结果。如果,在周边只有像素之间的成本充分大的损伤矢量,则无需连接损伤矢量彼此。并且,连接的结果,变成以不自然的角度(例如,90°以下的锐角)弯曲的形状或产生不自然的宽度差(例如,在所连接的损伤矢量彼此中产生5像素以上的宽度的阶梯差)时,可设为不连接的条件。如此,对损伤矢量彼此的距离、角度、宽度的差,若两者的距离小、角度小、宽度的差小,则能够设定为成本变小。

或者,通过普里姆算法提取损伤矢量时,根据编辑命令输入的结束,可变更与损伤矢量的距离、方向、宽度相关的成本的计算基准值,由此修正损伤矢量的提取基准。

例如,通过对图8的损伤矢量c5-2的删除操作,记录有损伤矢量c5-2的删除标志“1”时,将角α1及角α2的阈值减小规定量(例如,5°)。由此,所连接的损伤矢量彼此所呈的角度越是锐角,与两者之间的方向相关的成本越变大。

或者,如图23所示,属于不同矢量组的损伤矢量c1-5、c8-1彼此的方向一致,对这些进行连接操作时,将连接相同方向的损伤矢量彼此的距离的阈值增加规定量(例如,10像素)。由此,与相同方向的损伤矢量之间的距离相关的成本减小,即使远离,方向相同的损伤矢量彼此变得容易自动连接。

此外,能够通过与专利文献1相同的神经网络收敛运算等各种机器学习、基于本申请人的专利申请2015-195769号中记载的渗滤法、克鲁斯卡算法等各种方法、或者普里姆算法、神经网络收敛运算、渗滤法、克鲁斯卡算法等各种方法的一部分或全部的组合、或者这些的一部分或全部的组合的1次以上的反复,精度良好地进行1个损伤矢量的提取。

符号说明

1-桥梁,2-桥面板,3-主梁,3a-接合部,100-损伤信息处理装置,102-损伤信息获取部,104-数码相机,106-图像获取部,108-图像处理部,110-损伤矢量生成部,112-分级结构信息生成部,114-损伤矢量提取部,116-分级结构信息记录部,118-显示部,120-操作部,s100-图像输入工序,s110-损伤提取工序,s120-损伤矢量生成工序,s130-分级结构信息生成工序,s140-显示工序,s150-记录工序,s160-编辑工序。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1