损伤图制作辅助装置、损伤图制作辅助方法、损伤图制作辅助程序及损伤图制作辅助系统与流程

本发明涉及损伤图制作辅助装置、损伤图制作辅助方法、损伤图制作辅助程序及损伤图制作辅助系统，特别是涉及对基于构造物的点检结果的损伤图制作进行辅助的损伤图制作辅助装置、损伤图制作辅助方法、损伤图制作辅助程序及损伤图制作辅助系统。

背景技术：

桥梁等构造物要定期进行点检。点检作业分为外部作业(现场作业)和内部作业(办公室作业)来进行。在外部作业中，点检技术人员赴现场进行近距离目视点检部位(靠近至能触碰到关注部位的距离进行目视)的作业(所谓的近距离目视点检)。此时，点检技术人员基于目视的确认结果，进行标记(沿着损伤(也称为形变)用粉笔引线的作业(也称为画线))、绘图及照片拍摄(现场状况照片的拍摄)等作业。在内部作业中，基于现场获得的绘图及照片，进行制作报告书的作业。报告书包括损伤图(也称为形变图)，点检技术人员基于绘图及照片，将损伤部位写入各点检部位的附图(例如，cad(computer-aideddesign：计算机辅助设计)等工业数据的附图)中，制作损伤图。

但是，以这样的程序进行的现有点检作业存在点检技术人员的负担大、并且损伤图的制作也容易发生错误(例如，漏写等)这样的问题。

因此，在专利文献1中提出了一种技术，从拍摄混凝土构造物的表面所得的图像中自动检测标记、裂纹等。另外，在专利文献2中提出了一种技术，在做好标记后，在混凝土构造物的表面喷洒保水剂，由此，容易地从拍摄图像中检测标记部位。

以往技术文献

专利文献

专利文献1：日本特开2014-6222号公报

专利文献2：日本特开2002-340805号公报

技术实现要素：

发明要解决的技术课题

但是，标记一般使用粉笔来进行，但此时，点检技术人员有时区分使用粉笔的颜色进行标记。例如，有时根据损伤的程度、损伤的种类、点检时间等，区分使用颜色。另一方面，对于使用的粉笔颜色，没有特别约定，因此在第三方想基于现场作业的结果进行损伤图的制作等时，存在不能有效利用标记的颜色信息这样的缺点。

本发明是鉴于这种情况而完成的，其目的在于提供一种能够利用标记的颜色高效地制作损伤图的损伤图制作辅助装置、损伤图制作辅助方法、损伤图制作辅助程序及损伤图制作辅助系统。

用于解决技术课题的手段

用于解决上述课题的方法如下。

(1)一种损伤图制作辅助装置，其中，具备：图像获取部，其获取对构造物的表面进行彩色摄影所得的图像；标记检测部，其分析图像并按每种颜色检测在构造物的表面的损伤部位所做的标记；以及损伤图制作部，其基于每种颜色的标记的检测结果制作损伤图。

(2)根据上述(1)的损伤图制作辅助装置，其中，还具备存储部，所述存储部存储按标记的每种颜色确定的信息，损伤图制作部参照存储于存储部的信息制作损伤图。

(3)根据上述(2)的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的损伤的程度的信息，损伤图制作部参照存储于存储部的信息，制作对损伤的程度进行了分类的损伤图。

(4)根据上述(3)所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的裂纹的程度的信息，损伤图制作部制作对裂纹的程度进行了分类的损伤图。

(5)根据上述(3)或(4)所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的漏水和/或游离石灰的程度的信息，损伤图制作部制作对漏水和/或游离石灰的程度进行了分类的损伤图。

(6)根据上述(3)至(5)中任一项所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的剥离和/或钢筋暴露的程度的信息，损伤图制作部制作对剥离和/或钢筋暴露的程度进行了分类的损伤图。

(7)根据上述(2)至(6)中任一项所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的损伤的种类的信息，损伤图制作部参照存储于存储部的信息，制作对损伤的种类进行了分类的损伤图。

(8)根据上述(2)至(7)中任一项所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的点检时间的信息，损伤图制作部参照存储于存储部的信息，制作对点检时间进行了分类的损伤图。

(9)根据上述(2)至(7)中任一项所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的点检时间的信息，损伤图制作部参照存储于存储部的信息，制作每个点检时间的损伤图。

(10)根据上述(2)至(9)中任一项所述的损伤图制作辅助装置，其中，在存储部中存储按标记的每种颜色确定的钢部件的龟裂的程度、腐蚀的程度及防腐蚀功能劣化的程度中的至少一者的信息，损伤图制作部参照存储于存储部的信息，制作对钢部件的龟裂的程度、腐蚀的程度及防腐蚀功能劣化的程度中的至少一者进行了分类的损伤图。

(11)一种损伤图制作辅助方法，其中，包括：获取对构造物的表面进行彩色摄影所得的图像的步骤；分析图像并按每种颜色检测在构造物的表面的损伤部位所做的标记的步骤；以及基于每种颜色的标记的检测结果制作损伤图的步骤。

(12)一种损伤图制作辅助程序，其中，其使计算机实现：获取对构造物的表面进行彩色摄影所得的图像的功能；分析图像并按每种颜色检测在构造物的表面的损伤部位所做的标记的功能；以及基于每种颜色的标记的检测结果制作损伤图的功能。

(13)一种损伤图制作辅助系统，其包括用户终端及服务器，其中，用户终端具备：终端侧图像输入部，其输入对构造物的表面进行彩色摄影所得的图像；终端侧发送部，其将图像发送到服务器；以及终端侧接收部，其从服务器接收基于图像制作的损伤图，服务器具备：服务器侧接收部，其从用户终端接收图像；标记检测部，其分析图像并按每种颜色检测在构造物的表面的损伤部位所做的标记；损伤图制作部，其基于每种颜色的标记的检测结果制作损伤图；以及服务器侧发送部，其将损伤图发送到用户终端。

发明效果

根据本发明，能够从对构造物的表面进行彩色摄影所得的图像中检测标记的颜色并分析图像高效地制作损伤图。

附图说明

图1是表示损伤图制作辅助系统的一实施方式的系统结构图。

图2是表示用户终端的硬件结构的一例的框图。

图3是用户终端所具有的主要功能的框图。

图4是表示服务器的硬件结构的一例的框图。

图5是服务器所具有的主要功能的框图。

图6是从下方观察桥梁看到的立体图。

图7是表示标记的一例的图。

图8是表示底板的拍摄顺序的一例的图。

图9是表示一个围堰中的拍摄顺序的一例的图。

图10是表示使用了本实施方式的损伤图制作辅助系统的损伤图制作的处理顺序的流程图。

图11是表示用多种颜色的粉笔标记的围堰的拍摄图像的一例的图。

图12是表示标记的检测结果的图。

图13是表示损伤图的一例的图。

图14是本实施方式的损伤图制作辅助系统的用户终端所具有的主要功能的框图。

图15是本实施方式的损伤图制作辅助系统的服务器所具有的主要功能的框图。

图16是表示根据裂纹的程度进行了分类的损伤图的一例的图。

图17是表示裂纹的评价标准的一例的表。

图18是表示根据漏水的程度进行了分类的损伤图的一例的图。

图19是表示根据游离石灰的程度进行了分类的损伤图的一例的图。

图20是表示漏水及游离石灰的评价标准的一例的表。

图21是表示根据钢筋暴露的程度进行了分类的损伤图的一例的图。

图22是表示剥离及钢筋暴露的评价标准的一例的表。

图23是表示损伤图的结构的一例的图。

图24是表示在损伤图上损伤的显示形态的一例的图。

图25是表示按损伤的种类进行了分类的损伤图的一例的图。

图26是表示按点检的时间进行了分类的损伤图的结构的一例的图。

具体实施方式

下面，按照附图对本发明的优选实施方式进行详细说明。

《第一实施方式》

[损伤图制作辅助系统的系统结构]

图1是表示损伤图制作辅助系统的一实施方式的系统结构图。

本实施方式的损伤图制作辅助系统10由进行前端处理的用户终端20和进行后端处理的服务器30构成。用户终端20和服务器30经由网络40连接为能够互相通信。网络40例如利用因特网。

[用户终端]

用户终端20例如由个人计算机、平板计算机、智能手机等通用计算机构成。

图2是表示用户终端的硬件结构的一例的框图。如该图所示，用户终端20由cpu(centralprocessingunit：中央处理器)21、ram(randomaccessmemory：随机存取存储器)22、rom(readonlymemory：只读存储器)23、hdd(harddiskdrive：硬盘驱动器)24、通信if(interface：接口)25、输入装置26、输出装置27及光盘驱动器28等构成。在hdd24中存储有进行前端处理所需的程序及该处理所需的各种数据。输入装置26例如由键盘、鼠标、触摸面板等构成。输出装置27例如由显示器、打印机等构成。用户终端20经由通信if25与网络40连接。

图3是用户终端所具有的主要功能的框图。

作为前端处理，用户终端20实施以下处理：接受拍摄点检对象的构造物所得的图像的输入的处理、将输入的图像发送(上传)到服务器30的处理、接收(下载)服务器30中的处理结果的处理、输出接收到的处理结果的处理及记录接收到的处理结果的处理等。因此，如图3所示，用户终端20具有接受图像的输入的终端侧图像输入部20a、将输入的图像发送到服务器30的终端侧发送部20b、从服务器30接收处理结果的终端侧接收部20c、输出接收到的处理结果的终端侧输出部20d及记录接收到的处理结果的终端侧记录部20e的功能。这些功能通过构成用户终端20的计算机执行规定程序来实现。

终端侧图像输入部20a进行接受拍摄点检对象所得的图像的输入的处理。终端侧图像输入部20a经由通信if25从数码相机等外部设备输入图像。该图像是对作为点检对象的构造物的表面进行彩色摄影所得的图像。因此，是彩色图像。具体而言，是以像素为单位具有r(red；红)、g(green；绿)及b(blue；蓝)各强度值(亮度值)的图像(所谓的rgb图像)。

终端侧发送部20b进行将输入的图像发送(上传)到服务器30的处理。终端侧发送部20b经由网络40将图像到服务器30。

终端侧接收部20c进行从服务器30接收处理结果的处理。终端侧接收部20c经由网络40从服务器30接收处理结果。如后所述，服务器30基于从用户终端20发送来的图像，制作损伤图(也称为形变图)。制作的损伤图作为处理结果被发送到用户终端20。终端侧接收部20c接收(下载)从该服务器30发送的损伤图。

终端侧输出部20d进行输出处理结果的处理。具体而言，将处理结果即损伤图输出到输出装置27即显示器。另外，根据需要，将输入的图像输出到输出装置27即显示器。

终端侧记录部20e进行记录处理结果的处理。具体而言，将处理结果即损伤图记录到hdd24。此时，关联记录原始图像。

[服务器]

服务器30由普通的服务器计算机构成。服务器30实质上构成损伤图制作辅助装置。

图4是表示服务器的硬件结构的一例的框图。如该图所示，服务器30由cpu31、ram32、rom33、hdd34、通信if35、输入装置36、输出装置37及光盘驱动器38等构成。在hdd34中存储有进行后端处理所需的程序及该处理所需的各种数据。输入装置36例如由键盘、鼠标、触摸面板等构成。输出装置37例如由显示器、打印机等构成。服务器30经由通信if35与网络40连接。

图5是服务器所具有的主要功能的框图。

作为后端处理，服务器30实施以下处理：接收从用户终端20发送的图像的处理、在接收到将点检部位分割拍摄而得到的图像的情况下对分割的图像组进行全景合成的处理、分析图像并按每种颜色检测在构造物的表面所做的标记的处理、基于标记的检测结果制作损伤图的处理、以及将制作的损伤图作为处理结果发送到用户终端20的处理等。因此，服务器30如图5所示，具有从用户终端20接收图像的服务器侧接收部30a、对分割的图像组进行全景合成的全景合成部30b、从图像中检测标记的标记检测部30c、基于标记的检测结果制作损伤图的损伤图制作部30d、将制作的损伤图发送到用户终端20的服务器侧发送部30e等的功能。这些功能通过构成服务器30的计算机执行规定程序来实现。该程序实质上构成损伤图制作辅助程序。

服务器侧接收部30a进行接收从用户终端20发送的图像的处理。服务器侧接收部30a经由网络40从用户终端20接收图像。服务器侧接收部30a是图像获取部的一例。接收到的图像被存储到hdd34中。图像也可作为将点检部位分割拍摄而得到的图像来获取。在该情况下，由下面的全景合成部30b进行全景合成。

全景合成部30b在接收到将点检部位分割拍摄而得到的图像的情况下，进行对分割的图像组进行全景合成的处理。由于全景合成本身是公知的技术，因此省略其详细说明。全景合成部30b例如检测图像彼此的对应点，对分割的图像组进行合成。此时，全景合成部30b根据需要对各图像实施缩放校正、倾斜校正及旋转校正等校正。

此外，在将点检部位分割拍摄的情况下，拍摄者(点检技术人员)以相邻的图像互相重叠的方式进行拍摄。

标记检测部30c进行分析图像并按每种颜色检测标记的处理。例如，当用白色及红色两种颜色做标记时，标记检测部30c按白色及红色的每种颜色从图像中检测标记。标记的检测可采用多种方法。例如，可采用如下方法：使用将包括多种颜色的标记的图像作为学习用数据进行了机器学习的已学习模型，按每种颜色检测标记。关于机器学习算法的种类，没有特别限定，例如，可使用利用了rnn(recurrentneuralnetwork；循环神经网络)、cnn(convolutionalneuralnetwork；卷积神经网络)或mlp(multilayerperceptron；多层感知机)等神经网络的算法。另外，例如还可采用基于图像的亮度分布及rgb值分布，按每种颜色检测标记的方法。由于做了标记的区域是与其它区域不同的亮度分布及rgb值分布，因此可通过搜索亮度值及rgb值的变化来按每种颜色从图像中检测标记。

损伤图制作部30d进行基于标记的检测结果制作损伤图的处理。损伤图制作为追踪从图像中检测到的标记的图，按每种颜色分类制作。例如，通过颜色不同的分层构造来制作。

服务器侧发送部30e进行将制作的损伤图发送到用户终端20的处理。服务器侧发送部30e经由网络40将损伤图发送到用户终端20。

[损伤图的制作方法]

接着，对使用了本实施方式的损伤图制作辅助系统10的损伤图的制作方法(损伤图制作辅助方法)进行说明。在此，以点检桥梁、特别是桥梁的底板的情况为例进行说明。

[桥梁]

图6是从下方观察桥梁看到的立体图。

该图所示的桥梁1具有具备主梁2、横梁3、横撑架4、平纵联5及底板6的立体构造，这些部件具有通过螺栓、铆钉、焊接等连结的构造。

在主梁2等的上部浇筑有用于车辆等行驶的底板6。底板6一般是钢筋混凝土制的底板。主梁2是架在桥座或桥墩之间以支撑底板6上的车辆等的载荷的部件。主梁2具有与底板6的面(水平面)正交的面(铅垂方向的面)。横梁3是连结主梁2的部件。具备横梁3以便用多个主梁2支撑载荷。横撑架4及平纵联5是将主梁2互相连结的部件。具备横撑架4及平纵联5以便于分别克服风及地震的横向载荷。

[桥梁的点检]

通常，底板6的点检以围堰单位实施。围堰是在底板6上由主梁2及横梁3划分出的一个区块。

在使用了本实施方式的损伤图制作辅助系统10的点检中，作为外部作业(现场作业)，在现场进行标记及照片拍摄的作业。此外，基于在该外部作业中获得的照片(图像)，作为内部作业(办公室作业)，进行损伤图的制作。

[标记]

标记是沿着裂纹等损伤(也称为形变)用粉笔引线的作业(也称为画线)。

图7是表示标记的一例的图。该图表示对构造物的表面出现的裂纹进行标记时的例子。

如图7所示，通过用粉笔沿着构造物的表面出现的裂纹引出线m来进行标记。除此以外，对于漏水、游离石灰、剥离、钢筋暴露等损伤，通过沿着发生损伤的区域的外缘引线来进行。另外，根据需要标注表示损伤的状态等的信息(文字及记号等)。

[照片拍摄]

图8是表示底板的拍摄顺序的一例的图。

如上所述，底板的点检以围堰单位进行。围堰go是由主梁2和横梁3划分出的区块中的一个区块。因此，拍摄也按围堰go来进行。图8表示一边沿y方向及x方向依次移动一边拍摄各围堰go的样子(图中的箭头表示移动方向)。此外，在图8中，将底板6的长边方向(主梁2的方向)设为x，将在底板6的面内与x正交的方向(横梁3的方向)设为y，将与底板6正交的方向(垂直下方向)设为z。

图9是表示一个围堰中的拍摄顺序的一例的图。

在一次拍摄不能拍摄围堰go的整个区域的情况下，或者在即使能够拍摄也无法获得高分辨率的图像的情况等下，将拍摄区域分割，分多次拍摄。在图9中，附号a所示的框是表示一次拍摄范围的框。在图9所示的例子中，表示一边沿y方向及x方向依次移动一边拍摄围堰go内的各区域的样子(图中的箭头表示移动方向。)。

拍摄者(点检技术人员)面对点检对象的面即底板，从一定距离进行拍摄。另外，在相邻的拍摄区域，以一部分相互重叠的方式进行拍摄(例如，重叠30％以上进行拍摄。)。由此，在全景合成时，能够高精度地进行合成。

此外，使用可进行彩色摄影的数码相机进行拍摄。

[损伤图的制作]

在此，以对一个围堰go制作损伤图的情况为例进行说明。

图10是表示使用了本实施方式的损伤图制作辅助系统的损伤图制作的处理顺序的流程图。

首先，在用户终端20进行图像的输入(步骤s1)。在将一个围堰go分割为多个进行拍摄的情况下，输入拍摄到的所有图像。

接着，将输入的图像发送(上传)到服务器30(步骤s2)。在将一个围堰go分割为多个进行拍摄的情况下，例如，将拍摄到的所有图像存储到一个文件夹中来发送。

服务器30接收从用户终端20发送来的图像(步骤s3)。接收到的图像被存储到hdd34中。

服务器30基于接收到的图像判定是否需要全景合成(步骤s4)。在接收了多个图像的情况下，判定为需要全景合成。

当判定为需要全景合成时，服务器30实施全景合成的处理(步骤s5)。通过全景合成获得拍摄围堰go的一张图像。

接着，服务器30从围堰go的拍摄图像中检测标记(步骤s6)。标记按每种颜色来检测。

图11是表示用多种颜色的粉笔标记的围堰的拍摄图像的一例的图。

在该图所示的图像i的围堰go，根据损伤的程度区分使用两种颜色的粉笔进行标记。具体而言，用白色粉笔标记裂纹宽度小于0.2mm的裂纹，用红色粉笔标记裂纹宽度为0.2mm以上的裂纹。在图11中，符号mr表示用红色粉笔所做的标记。另外，符号mw表示用白色粉笔所做的标记。服务器30分析图像i并按每种颜色检测标记。

图12是表示标记的检测结果的图。

该图表达为用线追踪检测到的标记而形成的图。在该图中，符号lr表示追踪检测为红色标记的标记而形成的线。另外，符号lw表示追踪检测为白色标记的标记而形成的线。此外，在该图中，为了方便，用粗线表示追踪红色标记而形成的线lr、用细线表示追踪白色标记而形成的线lw，以便易于区分两者。

在检测到标记之后，如图10所示，服务器30基于该检测结果制作损伤图(步骤s7)。损伤图制作成追踪从图像中检测到的标记而形成的图。在本实施方式中，制作按每种颜色进行了分类的分层构造的损伤图。

图13是表示损伤图的一例的图。

该图表示用白色及红色两种颜色标记的围堰的损伤图的一例。在该情况下，制作具备第一分层l1和第二分层l2的损伤图df。第一分层l1由追踪白色标记而形成的损伤图构成。第二分层l2由追踪红色标记而形成的损伤图构成。损伤图df由使第一分层l1和第二分层l2重叠后的图构成。

此外，在各分层中，追踪标记的线优选使用不同的线种和/或不同的颜色，以便在使分层彼此重叠时能够互相区分。例如，可使用与检测到的颜色相同的颜色。

通过像这样由每种颜色的分层构造构成损伤图df，可按每种颜色确认在点检部位(在本实施例中为围堰)所做的标记。

在制作损伤图之后，如图10所示，服务器30将制作的损伤图发送到用户终端20(步骤s8)。

用户终端20接收(下载)从服务器30发送来的损伤图作为处理结果(步骤s9)。然后，将接收到的损伤图输出到输出装置27(步骤s10)。具体而言，在作为输出装置27的显示器上进行显示。另外，将接收到的损伤图记录到hdd34中(步骤s11)。此时，用户终端20与作为损伤图的制作基础的照片数据相关联地记录损伤图。

通过以上一系列工序，基于拍摄图像的损伤图的制作处理结束。用户(点检技术人员)基于获取到的损伤图制作点检结果的报告书。此时，由于获得了标记的每种颜色的损伤图的数据，因此在标记的每种颜色都含有意义的情况下，能够高效地制作报告书等。例如，在根据损伤的程度区分所使用的粉笔的颜色进行了标记的情况下，可单独获得与损伤的程度对应的损伤图(通过切换分层，可获得损伤的每种程度的损伤图。)。另一方面，标记有时也会根据混凝土的颜色而改变所使用的粉笔的颜色。例如，有时选择相对于混凝土的颜色醒目的颜色的粉笔进行标记(例如，在发白的混凝土上使用红色粉笔，在发黑的混凝土上使用白色粉笔等进行标记。)。在这样的情况下，使用将各分层重叠后的损伤图。由此，可不受颜色影响地制作损伤图。另一方面，在标记时，可不受混凝土的颜色影响地高效实施标记作业。另外，在从图像中检测标记时，可高精度地检测标记。

《第二实施方式》

在本实施方式中，对利用标记的颜色信息制作自动对损伤进行了分离的损伤图的情况进行说明。

在本实施方式的损伤图制作辅助系统中，从用户处获取被区分颜色的标记的各颜色的含义信息，利用该各颜色的含义信息，制作对损伤的信息进行了分类的损伤图。

[用户终端]

图14是本实施方式的损伤图制作辅助系统的用户终端所具有的主要功能的框图。

如该图所示，本实施方式的用户终端20还具有标记颜色信息输入部20f的功能，在这一点上，与上述第一实施方式的损伤图制作辅助系统10中的用户终端20不同。因此，在此，仅对不同点进行说明。

标记颜色信息输入部20f在标记被区分颜色的情况下，进行接受各标记的颜色的含义信息(标记颜色信息)的输入的处理。标记颜色信息输入部20f经由输入装置26输入各标记的颜色的含义信息。例如，在用白色粉笔标记裂纹宽度小于0.2mm的裂纹、用红色粉笔标记裂纹宽度为0.2mm以上的裂纹的情况下，输入“白色”为“裂纹宽度小于0.2mm的裂纹”、“红色”为“裂纹宽度0.2mm以上的裂纹”这样的信息。

终端侧发送部20b在将输入的图像发送到服务器30时，同时也将标记颜色信息发送到服务器30。

[服务器]

图15是本实施方式的损伤图制作辅助系统的服务器所具有的主要功能的框图。

如该图所示，本实施方式的服务器30(损伤图制作装置)还具有标记颜色信息存储部30f的功能，在这一点上，与上述第一实施方式的损伤图制作辅助系统10的服务器30不同。因此，在此，仅对不同点进行说明。

从用户终端20发送来的标记颜色信息由服务器侧接收部30a接收，并被存储到标记颜色信息存储部30f中。标记颜色信息存储部30f例如由hdd34构成。

损伤图制作部30d在制作损伤图时，参照存储于标记颜色信息存储部30f的信息，制作对损伤的信息进行了分类的损伤图。

[损伤图的制作例]

(1)根据损伤的程度区分使用标记的颜色的情况

在该情况下，制作根据损伤的程度进行了分类的损伤图。用户将每种颜色的损伤的程度的信息(标记颜色信息)输入到用户终端20。输入的标记颜色信息被发送到服务器30，并存储于服务器30的标记颜色信息存储部30f。服务器30参照该标记颜色信息，制作根据损伤的程度进行了分类的损伤图。

(a)根据裂纹的程度区分使用标记的颜色的情况

在该情况下，可根据裂纹的程度区分使用所使用的粉笔的颜色。例如，用白色粉笔标记裂纹宽度小于0.2mm的裂纹、用红色粉笔标记裂纹宽度为0.2mm以上的裂纹等。用户将所使用的粉笔的颜色(标记的颜色)和该每种颜色的含义信息(裂纹的程度的信息)输入到用户终端20。例如，将“白色”为“裂纹宽度小于0.2mm的裂纹”、“红色”为“裂纹宽度0.2mm以上的裂纹”这样的信息输入到用户终端20。

如上所述，按每种颜色检测标记。服务器30基于每种颜色的标记的检测结果和标记的颜色的信息，制作损伤图。损伤图例如制作根据损伤的程度进行了分类的分层构造的损伤图。

图16是表示根据裂纹的程度进行了分类的损伤图的一例的图。

该图表示用白色粉笔标记了裂纹宽度小于0.2mm的裂纹、用红色粉笔标记了裂纹宽度为0.2mm以上的裂纹的围堰的损伤图的一例。在该情况下，制作具备第一分层l1和第二分层l2的损伤图df。第一分层l1由标记了裂纹宽度小于0.2mm的裂纹的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由标记了裂纹宽度为0.2mm以上的裂纹的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。损伤图df由使第一分层l1和第二分层l2重叠后的图构成。

在各分层中标注有进行了分类的损伤的信息。例如，在第一分层l1标注有表示是裂纹宽度小于0.2mm的裂纹的检测结果的信息if1。另外，在第二分层l2标注有表示是裂纹宽度为0.2mm以上的裂纹的检测结果的信息if2。另外，在将第一分层l1和第二分层l2重叠而成的损伤图df上，标注有表示是所有裂纹的检测结果的信息if0。

此外，在各分层中，追踪标记的线优选使用不同的线种和/或不同的颜色，以便在将分层彼此重叠时能够互相区分。例如，可使用与检测到的颜色相同的颜色。

根据本例，在根据裂纹的程度区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按裂纹的程度进行了分类的损伤图。由此，能够高效地制作点检报告书。

关于裂纹，除此以外，还可按照预先规定的评价标准来评价损伤，并按照该评价区分使用颜色进行标记。在该情况下，基于按每种颜色检测到的标记的检测结果，制作按每种颜色进行了分类的损伤图(按每种颜色进行了分层的损伤图)，由此，可自动制作按照评价标准进行了分类的损伤图。在判定标准中，除了单独规定的标准之外，还可利用国家、自治团体及企业等规定的标准。例如，关于桥梁的点检，可利用日本国土交通省规定的桥梁定期点检要领中规定的标准。

图17是表示裂纹的评价标准的一例的表。

在该图所示的例子中，将关注最大裂纹宽度的程度(大、中、小)和关注最小裂纹间隔的程度(大、小)组合，以五个等级(a、b、c、d、e)评价裂纹的损伤的程度。

在标记时，根据评价类别(a、b、c、d、e)，区分使用粉笔的颜色。例如，类别b使用白色粉笔、类别c使用蓝色粉笔、类别d使用黄色粉笔、类别e使用红色粉笔，标记损伤部位。

在制作损伤图时，制作按标记的每种颜色进行了分类的损伤图。由此，可自动制作按损伤的评价类别进行了分类的损伤图。

(b)根据漏水的程度区分使用标记的颜色的情况

在该情况下，可根据漏水的程度区分使用所使用的粉笔的颜色。例如，用白色粉笔标记普通漏水部位、用红色粉笔标记伴随锈汁的漏水部位等。用户将所使用的粉笔的颜色(标记的颜色)和该每种颜色的含义信息(漏水的程度的信息)输入到用户终端20。例如，将“白色”为“普通漏水”、“红色”为“伴随锈汁的漏水”这样的信息输入到用户终端20。

服务器30基于每种颜色的标记的检测结果和标记的颜色的信息，制作按漏水的程度进行了分类的分层构造的损伤图。

图18是表示按漏水的程度进行了分类的损伤图的一例的图。

该图表示用白色粉笔标记了普通漏水部位、用红色粉笔标记了伴随锈汁的漏水部位的围堰的损伤图的一例。在该情况下，制作具备第一分层l1和第二分层l2的损伤图df。第一分层l1由标记了普通漏水部位的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由标记了伴随锈汁的漏水部位的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。损伤图df由使第一分层l1和第二分层l2重叠后的图构成。

在各分层中标注有进行了分类的损伤的信息。例如，在第一分层l1标注有表示是普通漏水的信息if1。另外，在第二分层l2标注有表示是伴随锈汁的漏水的信息if2。另外，在将第一分层l1和第二分层l2重叠而成的损伤图df上，标注有表示是所有漏水部位的检测结果的信息if0。

根据本实施例，在根据漏水的程度区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按漏水的程度进行了分类的损伤图。由此，能够高效地制作点检报告书。

(c)根据游离石灰的程度区分使用标记的颜色的情况

在该情况下，可根据游离石灰的程度区分使用所使用的粉笔的颜色。例如，用白色粉笔标记普通游离石灰的部位、用红色粉笔标记伴随锈汁的游离石灰及冰凌状游离石灰的部位等。用户将所使用的粉笔的颜色(标记的颜色)和该每种颜色的含义信息(游离石灰的程度的信息)输入到用户终端20。例如，将“白色”为“普通游离石灰”、“红色”为“伴随锈汁的游离石灰及冰凌状游离石灰”这样的信息输入到用户终端20。

服务器30基于每种颜色的标记的检测结果和标记的颜色的信息，制作根据游离石灰的程度进行了分类的分层构造的损伤图。

图19是表示根据游离石灰的程度进行了分类的损伤图的一例的图。

该图表示用白色粉笔标记了普通游离石灰的部位、用红色粉笔标记了伴随锈汁的游离石灰及冰凌状游离石灰的部位的围堰的损伤图的一例。在该情况下，制作具备第一分层l1和第二分层l2的损伤图df。第一分层l1由标记了普通游离石灰的部位的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由标记了伴随锈汁的游离石灰及冰凌状游离石灰的部位的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。损伤图df由使第一分层l1和第二分层l2重叠后的图构成。

在各分层中标注有进行了分类的损伤的信息。例如，在第一分层l1标注有表示是普通游离石灰的信息if1。另外，在第二分层l2标注有表示是伴随锈汁的游离石灰及冰凌状游离石灰的信息if2。另外，在将第一分层l1和第二分层l2重叠而成的损伤图df上，标注有表示是所有游离石灰的检测结果的信息if0。

根据本实施例，在根据游离石灰的程度区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按游离石灰的程度进行了分类的损伤图。由此，能够高效地制作点检报告书。

关于漏水及游离石灰，还可按照预先规定的评价标准来评价损伤，并按照该评价区分使用颜色进行标记。在该情况下，通过基于按每种颜色检测到的标记的检测结果，制作按每种颜色进行了分类的损伤图(按每种颜色进行了分层的损伤图)，可自动制作按照评价标准进行了分类的损伤图。

图20是表示漏水及游离石灰的评价标准的一例的表。

在该图所示的例子中，根据漏水及游离石灰的发生状况，以五个等级(a、b、c、d、e)评价损伤的程度。

在标记时，根据评价类别(a、b、c、d、e)，区分使用粉笔的颜色。例如，类别c使用白色粉笔、类别d使用黄色粉笔、类别e使用红色粉笔，标记损伤部位。

在制作损伤图时，制作按标记的每种颜色进行了分类的损伤图。由此，可自动制作按损伤的评价类别进行了分类的损伤图。

(d)根据剥离及钢筋暴露的程度区分使用标记的颜色的情况

在该情况下，可根据剥离及钢筋暴露的程度区分使用所使用的粉笔的颜色。例如，用白色粉笔标记普通钢筋暴露的部位、用红色粉笔标记伴随严重锈蚀的钢筋暴露的部位等。用户将所使用的粉笔的颜色(标记的颜色)和该每种颜色的含义信息(钢筋暴露的程度的信息)输入到用户终端20。例如，将“白色”为“普通钢筋暴露”、“红色”为“伴随严重锈蚀的钢筋暴露”这样的信息输入到用户终端20。

服务器30基于每种颜色的标记的检测结果和标记的颜色的信息，制作按钢筋暴露的程度进行了分类的分层构造的损伤图。

图21是表示根据钢筋暴露的程度进行了分类的损伤图的一例的图。

该图表示用白色粉笔标记了普通钢筋暴露的部位、用红色粉笔标记了伴随严重锈蚀的钢筋暴露的部位的围堰的损伤图的一例。在该情况下，制作具备第一分层l1和第二分层l2的损伤图df。第一分层l1由标记了普通钢筋暴露的部位的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由标记了伴随严重锈蚀的钢筋暴露的部位的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。损伤图df由使第一分层l1和第二分层l2重叠后的图构成。

在各分层中标注有进行了分类的损伤的信息。例如，在第一分层l1标注有表示是普通钢筋暴露的信息if1。另外，在第二分层l2标注有表示是伴随严重锈蚀的钢筋暴露的信息if2。另外，在将第一分层l1和第二分层l2重叠而成的损伤图df上，标注有表示是所有钢筋暴露的检测结果的信息if0。

根据本例，在根据钢筋暴露的程度区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按钢筋暴露的程度进行了分类的损伤图。由此，能够高效地制作点检报告书。

关于剥离及钢筋暴露，还可按照预先规定的评价标准来评价损伤，并按照该评价区分使用颜色进行标记。在该情况下，基于按每种颜色检测到的标记的检测结果，制作按每种颜色进行了分类的损伤图(按每种颜色进行了分层的损伤图)，由此，可自动制作按照评价标准进行了分类的损伤图。

图22是表示剥离及钢筋暴露的评价标准的一例的表。

在该图所示的例子中，根据剥离及钢筋暴露的发生状况，以五个等级(a、b、c、d、e)评价损伤的程度。

在标记时，根据评价类别(a、b、c、d、e)，区分使用粉笔的颜色。例如，类别c使用白色粉笔、类别d使用黄色粉笔、类别e使用红色粉笔，标记损伤部位。

在制作损伤图时，制作按标记的每种颜色进行了分类的损伤图。由此，可自动制作按损伤的评价类别进行了分类的损伤图。

(2)根据损伤的种类区分使用标记的颜色的情况

在该情况下，制作根据损伤的种类进行了分类的损伤图。用户将每种颜色的损伤的种类的信息(标记颜色信息)输入到用户终端20。输入的标记颜色信息被发送到服务器30，并存储于服务器30的标记颜色信息存储部30f。服务器30参照该标记颜色信息，制作根据损伤的种类进行了分类的损伤图。

例如，裂纹用白色粉笔、漏水用蓝色粉笔、游离石灰用绿色粉笔、剥离用黄色粉笔、钢筋暴露用红色粉笔做标记等。用户将所使用的粉笔的颜色(标记的颜色)和该每种颜色的损伤的种类的信息输入到用户终端20。例如，将“白色”为“裂纹”、“蓝色”为“漏水”、“绿色”为“游离石灰”、“黄色”为“剥离”、“红色”为“钢筋暴露”这样的信息输入到用户终端20。

服务器30基于每种颜色的标记的检测结果和标记的颜色的信息，制作损伤图。损伤图制作成按损伤的程度进行了分类的分层构造的损伤图。

图23是表示损伤图的结构的一例的图。

该图表示用白色粉笔标记了裂纹的部位、用蓝色粉笔标记了漏水的部位、用绿色粉笔标记了游离石灰的部位、用黄色粉笔标记了剥离的部位、用红色粉笔标记了钢筋暴露的部位时的损伤图的结构的一例。在该情况下，制作具备五个分层(第一分层l1～第五分层l5)的损伤图df。第一分层l1由标记了裂纹的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由标记了漏水的损伤图构成。该损伤图由追踪蓝色标记而形成的损伤图构成。第三分层l3由标记了游离石灰的部位的损伤图构成。该损伤图由追踪绿色标记而形成的损伤图构成。第四分层l4由标记了剥离的损伤图构成。该损伤图由追踪黄色标记而形成的损伤图构成。第五分层l5由标记了钢筋暴露的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。整体损伤图df由使所有分层重叠后的图构成。

与上述同样，在各分层中标注有进行了分类的损伤的信息。另外，在各分层中，追踪标记的线优选使用不同的线种和/或不同的颜色，以便使分层彼此重叠时能够互相区分。例如，可使用与检测到的颜色相同的颜色。或者，也可以按照预先设定的显示规则来显示。

图24是表示在损伤图上损伤的显示形态的一例的图。

如该图所示，按损伤的种类设定损伤图上的显示形态，按照该设定在损伤图上显示损伤。例如，在检测到漏水的标记(在本实施例中为蓝色标记)时，在损伤图上用阴影线显示标记的部位。

另外，在这样按照预先设定的显示规则在损伤图上表现损伤的情况下，也可以在损伤图上显示或追加其凡例。

图25是表示按损伤的种类进行了分类的损伤图的一例的图。

在该图所示的例子中，表示根据拍摄产生了裂纹、漏水及游离石灰的围堰所得的图像制作损伤图时的例子。在该情况下，如该图所示，检测在裂纹的部位所做的白色标记、在漏水的部位所做的蓝色标记及在游离石灰的部位所做的绿色标记。损伤图制作成作为裂纹的损伤图的第一分层l1、作为漏水的损伤图的第二分层l2以及作为游离石灰的损伤图的第三分层l3(作为剥离的损伤图的第四分层l4及作为钢筋暴露的损伤图的第五分层l5是白纸(透明)的分层。)。整体的损伤图df是显示出所有损伤的图。

根据本例，在根据损伤的种类区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按损伤的种类进行了分类的损伤图。由此，能够高效地制作点检报告书。

(3)根据点检的时间区分使用标记的颜色的情况

例如，在首次点检中使用白色粉笔，在下一次点检中使用红色粉笔，在再下一次点检中使用蓝色粉笔等，每次点检都变换粉笔的颜色进行标记。在该情况下，制作根据点检的时间(次数)进行了分类的损伤图。用户将每种颜色的点检的时间(次数)的信息(标记颜色信息)输入到用户终端20。输入的标记颜色信息被发送到服务器30，并存储于服务器30的标记颜色信息存储部30f。服务器30参照该标记颜色信息，制作根据点检的时间进行了分类的损伤图。损伤图例如制作成分层构造的损伤图。即，制作按点检的时间(次数)进行分类并层叠的构造的损伤图。

图26是表示按点检的时间进行了分类的损伤图的结构的一例的图。

该图表示到目前为止已实施了三次点检时的损伤图的一例。在第一次(2008年12月1日)点检中，用白色粉笔标记损伤部位，在第二次(2013年12月1日)点检中，用红色粉笔标记损伤部位，在第三次(2018年12月1日)点检中，用蓝色粉笔标记损伤部位。在该情况下，制作具备三个分层(第一分层l1～第三分层l3)的损伤图df。第一分层l1由第一次点检的损伤图构成。该损伤图由追踪白色标记而形成的损伤图构成。第二分层l2由第二次点检的损伤图构成。该损伤图由追踪红色标记而形成的损伤图构成。第三分层l3由第三次点检的损伤图构成。该损伤图由追踪蓝色标记而形成的损伤图构成。整体的损伤图df由使所有分层重叠后的图构成。

根据本例，在根据点检的时间(次数)区分使用了标记的颜色的情况下，利用该标记的颜色的信息，可自动制作按点检的时间(次数)进行了分类的损伤图。由此，能够高效地制作点检报告书。另外，通过制作这样的损伤图，能够确认过去和本次点检的差异(损伤的进展)。

《其他实施方式及变形例》

[点检对象]

在上述实施方式中，以点检桥梁的情况为例进行了说明，但本发明的应用不限于此。除此以外，例如，在点检隧道、水坝、建筑物等构造物时，也同样地能够应用。另外，点检对象的构造物不限于混凝土构造物，也能够应用于其他构造物的点检。另外，点检部位的表面构造不限于混凝土，也可以由瓷砖等构成。而且，在将构造物的钢部件作为点检对象的情况下，也能够应用本发明。在点检对象中包括构造物的钢部件的情况下，例如，根据钢部件的龟裂的程度、腐蚀的程度、防腐蚀功能劣化的程度及螺栓的松弛程度等区分使用标记的颜色。例如，关于龟裂，(1)在能够在截面陡变部、焊接接合部等确认到涂膜开裂的情况、及虽然产生龟裂，但不是线状或者即使是线状但其长度也极短且数量较少的情况下，用白色粉笔标记；(2)在产生线状的龟裂或产生不能否定在正下方产生龟裂的怀疑的涂膜开裂的情况下，用红色粉笔标记。另外，例如，关于腐蚀，(1)在损伤的深度较浅(表面生锈、不能视觉确认到显著的板厚减少等的情况)并且损伤的面积较小(损伤部位的面积较小且为局部)的情况下，使用白色粉笔标记；(2)在损伤的深度较浅并且损伤的面积较大(整个损伤关注部分生锈或者在关注部分有多个扩展的生锈部位)的情况下，用蓝色粉笔标记；(3)在损伤的深度较深(在钢材表面产生了显著的膨胀或能够视觉确认明显的板厚减少等)并且损伤的面积较大的情况下，用黄色粉笔标记；(4)在损伤的深度较深并且损伤的面积较大的情况下，用红色粉笔标记。另外，关于防腐蚀功能的劣化，在涂装的情况下，例如，(1)在最外层防腐蚀涂膜产生变色或产生局部空鼓的情况下，用白色粉笔标记；(2)在防腐蚀涂膜局部剥离并且底涂层已暴露的情况下，用黄色粉笔标记；(3)在防腐蚀涂膜的劣化范围较大且发生了锈斑的情况下，用红色粉笔标记。另外，关于防腐蚀功能的劣化，在电镀及金属喷涂的情况下，(1)在防腐蚀皮膜局部劣化且发生了锈斑的情况下，用白色粉笔标记；(2)在防腐蚀皮膜的劣化范围较大且发生了锈斑的情况下，用红色粉笔标记。另外，关于防腐蚀功能的劣化，在耐候性钢材的情况下，(1)在锈的大小为1～5mm左右且较粗的情况下，用白色粉笔标记；(2)在锈的大小为5～25mm左右的鳞状的情况下，用黄色粉笔标记；(3)在存在锈的层状剥离的情况下，用红色粉笔标记。另外，关于螺栓的松弛，(1)在螺栓产生松弛或脱落且其数量较少(小于每组根数的5％。)的情况下，用白色粉笔标记；(2)在螺栓产生松弛及脱落等且其数量较多(在每组根数的5％以上。)的情况下，用红色粉笔标记。在制作损伤图时，按照从图像中检测到的每种标记的颜色的检测结果制作损伤图。即，根据检测到的钢部件的龟裂的程度、腐蚀的程度及防腐蚀功能的劣化程度等，制作对损伤进行了分类的损伤图。

[系统结构]

在上述实施方式中，将本发明设为了损伤图制作辅助系统，且由所谓的客户端服务器型的系统构成，但是本发明例如作为损伤图制作辅助系统，还可由所谓的单机版计算机来实现。

[标记作业]

在上述实施方式中，以使用粉笔进行标记的情况为例进行了说明，但也可使用毡笔(标记笔)等记号笔进行标记作业。只要能够区分使用颜色即可。

另外，在上述实施方式中，以分别进行裂纹、漏水、游离石灰、剥离及钢筋暴露等的点检及标记的情况为例进行了说明，但这些作业可复合进行。例如，可同时实施裂纹及漏水的点检及标记。在该情况下，还可根据裂纹的程度及漏水的程度区分使用粉笔的颜色进行标记。另外，还可同时根据损伤的种类区分使用粉笔的颜色进行标记。由此，可制作按损伤的程度及损伤的种类进行了分类的损伤图。

[标记颜色信息的输入]

在上述实施方式中，设为了用户将每种标记的颜色的信息输入到用户终端20的结构，但是在每种标记的颜色的信息被预先设定的情况下(例如，点检技术人员按照预先规定的颜色的使用规则进行标记的情况等)，也可以设为服务器30保持将该信息(保持于hdd34(存储部)等)并参照该信息制作损伤图的结构。

[损伤图的结构]

在上述实施方式中，制作了可按标记的每种颜色分离的分层构造的损伤图，但损伤图的结构不限于此。也可以按标记的每种颜色分别制作损伤图。或者，也可以以在一个损伤图中可按标记的每种颜色分离的方式来制作(例如，按标记的每种颜色分组，以便按标记的每种颜色切换显示和不显示。)。

[硬件结构的变形例]

实现本发明的损伤图制作辅助装置的硬件可由各种处理器(processor)构成。在各种处理器中，包括执行程序并作为各种处理部发挥功能的通用处理器即cpu(centralprocessingunit)、制造fpga(fieldprogrammablegatearray)等后可改变电路结构的处理器即可编程逻辑器件(programmablelogicdevice；pld)、以及具有为了执行asic(applicationspecificintegratedcircuit)等特定处理而专门设计的电路结构的处理器即专用电路等。构成点检辅助装置的一个处理部可以由上述各种处理器中的一个构成，也可以由同种或异种的两个以上的处理器构成。例如，一个处理部可以通过多个fpga、或cpu与fpga的组合来构成。另外，还可以用一个处理器构成多个处理部。作为用一个处理器构成多个处理部的例子，首先，有诸如以服务器或客户端等计算机为代表，使用一个以上的cpu与软件的组合构成一个处理器、并将该处理器作为多个处理部发挥功能的形态。其次，有诸如以片上系统(systemonchip；soc)等为代表，使用以一个ic(integratedcircuit)芯片实现包括多个处理部的系统整体的功能的处理器的形态。像这样，使用一个以上的上述各种处理器作为硬件结构来构成各种处理部。而且，更具体而言，这些各种处理器的硬件结构是组合了半导体元件等电路元件的电路(circuitry)。

符号说明

1桥梁

2主梁

3横梁

4横撑架

5平纵联

6底板

10损伤图制作辅助系统

20用户终端

20a终端侧图像输入部

20b终端侧发送部

20c终端侧接收部

20d终端侧输出部

20e终端侧记录部

20f标记颜色信息输入部

21cpu(centralprocessingunit)

22ram(randomaccessmemory)

23rom(readonlymemory)

24hdd(harddiskdrive)

25通信if(interface)

26输入装置

27输出装置

28光盘驱动器

30服务器

30a服务器侧接收部

30b全景合成部

30c标记检测部

30d损伤图制作部

30e服务器侧发送部

30f标记颜色信息存储部

31cpu(centralprocessingunit)

32ram(randomaccessmemory)

33rom(readonlymemory)

34hdd(harddiskdrive)

35通信if(interface)

36输入装置

37输出装置

38光盘驱动器

40网络

df损伤图

go围堰

i图像

if0信息

if1信息

if2信息

l1第一分层

l2第二分层

l3第三分层

l4第四分层

l5第五分层

s1～s11损伤图制作的处理顺序