图面制作装置及图面制作方法与流程

本发明涉及一种图面制作装置及图面制作方法，尤其涉及一种简便地制作出桥梁、水坝等大型构造物的图面的技术。

背景技术：

桥梁等社会基础设施构造物需要定期进行检查。在检查构造物时，需要构造物的设计图等图面，但旧的构造物等，存在遗失图面的情况。在该情况下，若要测量构造物以重新制作构造物的图面，则存在花费大量的费用和劳动力这一问题。

专利文献1中公开有利用激光扫描这一技术对工厂、建筑物/街道及文化遗产建筑物等自动生成高精度的三维形状数据的自动生成装置。并且，专利文献1中公开有自动整合(合并)从多个测量地点获得的多个范围图像的技术。

专利文献1中所记载的自动生成装置进行用于提取具有三维坐标的多个点云数据的边缘及面的切片，并根据被切片而生成的切片信息及预先设定的函数(平面方程式或曲面方程式)而判定三维形状。

并且，作为自动匹配从多个测量地点获得的多个范围图像而将所有的范围图像转换为全局坐标系的方法，公开有下述方法。

首先，从各范围图像选择任意3个切片，并将它们假设为所对应的切片。接着，由所对应的切片推算出旋转矩阵及移动向量，由特征值及特征向量求出利用所推算出的旋转矩阵及移动向量重合了2个范围图像时彼此一致的切片的一致度。用所有切片的组合来进行上述处理，并采用一致度最高的旋转矩阵及移动向量。

并且，专利文献2中公开有如下方法：对通过搭载于汽车的三维图像传感器拍摄的桥梁、路面、隧道壁面等的距离图像、彩色图像使用各帧间的旋转矩阵及平移向量而在同一坐标系中展开相邻帧间的距离图像以进行重合，由此不断连结相邻帧间的距离图像以掌握桥梁、路面、隧道壁面等的三维形状。

以往技术文献

专利文献

专利文献1：日本特开2004-272459号公报

专利文献2：日本特开2010-236971号公报

技术实现要素：

发明要解决的技术课题

专利文献1中记载有若要对齐多个范围图像的位置则需要正确的测量地点的位置及测量方向而存在获取这些信息这一缺点。因此，如上所述，专利文献1中所记载的自动生成装置不使用测量地点的位置及测量方向的信息，而选择存在于各范围图像中的多个(任意3个)切片，从各范围图像中所对应的切片推算出旋转矩阵及移动向量，由特征值、特征向量求出使用所推算出的旋转矩阵及移动向量来重合各范围图像时彼此一致的切片的一致度。

因此，在各范围图像中需要包含分别对应的3个以上的切片，且各切片的形状需要具有适合于预先设定的函数(平面方程式或曲面方程式)的三维形状，当在各范围图像中不存在满足这些条件的3个以上的切片时，专利文献1中所记载的发明无法适用。

专利文献2中所记载的发明也是不检测摄影地点的位置及摄影方向而按帧检测相机坐标系的平移及旋转并结合(连结)相邻帧间的距离图像等的方法。

并且，专利文献1、2中所记载的发明均为使用旋转矩阵及移动向量来连结多个图像的发明，若所连结的图像数变多，则存在由连结而引起的累积误差变大这一问题。

本发明是鉴于这种情况而完成的，其目的在于提供一种不发生由图像的连结而引起的累积误差且能够简便地制作出桥梁等大型构造物的图面的图面制作装置及图面制作方法。

用于解决技术课题的手段

为了实现上述目的的一方式所涉及的发明具备：外形形状获取部，获取图面的制作对象即构造物的概略的外形形状；距离图像摄像装置，拍摄构造物，且拍摄包含表示摄影位置及摄影方向的附属信息的距离图像；距离图像获取部，获取作为通过距离图像摄像装置拍摄而获得的多个距离图像的、构成构造物的多个部分的距离图像；连结处理部，使用通过外形形状获取部获取到的构造物的外形形状及距离图像的附属信息来连结通过距离图像获取部获取到的多个部分的距离图像；及图面制作部，根据通过连结处理部被连结的距离图像制作构造物的图面。

根据本发明的一方式，获取图面的制作对象即构造物的概略的外形形状。构造物的概略的外形形状例如构造物为桥梁时，可以是由桥的长度及宽度确定的平面形状。距离图像摄像装置为在多个摄影位置及摄影方向上拍摄构造物的装置，且拍摄包含表示摄影位置及摄影方向的附属信息的距离图像。距离图像获取部获取通过距离图像摄像装置拍摄而获得的构成构造物的多个部分的距离图像。连结处理部使用构造物的外形形状及距离图像的附属信息来连结通过距离图像获取部获取的多个部分的距离图像。通过使用距离图像的附属信息(摄影位置及摄影方向)，能够将距离图像转换为全局坐标系的三维坐标。而且，当将构造物的外形形状以全局坐标系来表示时，通过对该全局坐标系的构造物的外形形状嵌入转换成全局坐标系的距离图像，能够连结各距离图像。而且，图面制作部根据所连结的距离图像自动制作出构造物的图面。如此根据构造物的外形形状而连结距离图像，因此不发生由距离图像的连结而引起的累积误差，从而能够简便地制作出桥梁等大型构造物的图面。

在本发明的另一方式所涉及的图面制作装置中，距离图像摄像装置优选具备由构造物的概略的外形尺寸估算进行拍摄的次数的估算部及通知通过估算部估算出的结果的第1通知部。

在本发明的又一方式所涉及的图面制作装置中，距离图像摄像装置优选具备全球定位系统及方位传感器，并且将拍摄距离图像时分别从全球定位系统及方位传感器获取到的GPS信息及方位信息设为表示摄影位置及摄影方向的附属信息。

在本发明的又一方式所涉及的图面制作装置中，距离图像摄像装置优选具备在拍摄构造物时通知表示拍摄的部分为构造物整体的哪一部分的信息的第2通知部。由此，在分多次拍摄构造物时，能够支持摄影位置及摄影方向。

在本发明的又一方式所涉及的图面制作装置中，优选具备：第1显示部，将通过距离图像摄像装置拍摄到的距离图像以可视化图像来显示；或第2显示部，显示通过拍摄与距离图像摄像装置相同的摄像区域的可视化图像的摄像装置获取到的可视化图像。由于设成通过第1显示部或第2显示部显示可视化图像，因此能够一边观察可视化图像一边拍摄构造物。

在本发明的又一方式所涉及的图面制作装置中，优选具备：第3显示部，以能够识别的方式显示对构造物进行了距离图像的拍摄的已摄像区域及未进行距离图像的拍摄的未摄像区域。由此，能够以不留构造物的未摄像区域的方式拍摄构造物。

在本发明的又一方式所涉及的图面制作装置中，距离图像摄像装置优选为TOF深度相机，但也可以将三维激光扫描仪及立体相机用作距离图像摄像装置。

在本发明的又一方式所涉及的图面制作装置中，图面制作部优选根据被连结的距离图像制作将视为构造物的轮廓的点连结而成的线图。例如，当设成将距离图像的各像素(距离信息)转换为与距离对应的亮度的可视化图像时，该可视化图像中的亮度的变化点是视为构造物的轮廓的点。

在本发明的又一方式所涉及的图面制作装置中，优选具备第1手动校正部，手动校正基于连结处理部的多个部分的距离图像的连结。例如，重叠并显示构造物的外形形状和距离图像的可视化图像，并通过手动修正距离图像的位置(具体而言，进行坐标转换时所使用的摄影位置及摄影方向)，以使和距离图像中的外形形状对应的部分与外形形状一致。

在本发明的又一方式所涉及的图面制作装置中，优选具备第2手动校正部，手动校正通过图面制作部制作出的构造物的图面。例如，当在制作出的图面中存在线图中断的部分等时，进行使线图相连的校正等以使其连续。

在本发明的又一方式所涉及的图面制作装置中，优选具备尺寸补记部，在构造物的图面上补记尺寸线及尺寸。由于存在构造物整体的距离图像(三维信息)，因此能够求出构造物的任意位置之间的距离(尺寸)，从而能够将所求出的尺寸补记在图面上。

在本发明的又一方式所涉及的图面制作装置中，外形形状获取部优选从表现了构造物的概略的外形形状的地图信息获取构造物的外形形状。

在本发明的又一方式所涉及的图面制作装置中，地图信息优选为能够从地理信息系统获取的地图信息或由互联网上的地图信息提供服务提供的地图信息。

在本发明的又一方式所涉及的图面制作装置中，优选具备搭载有距离图像摄像装置的无人飞行器及控制无人飞行器的控制部，距离图像获取部获取通过搭载于无人飞行器的距离图像摄像装置拍摄而获得的多个距离图像。作为无人飞行器，优选使用具有自动驾驶功能的无人驾驶飞机。

在本发明的又一方式所涉及的图面制作装置中，优选距离图像摄像装置以一定的帧率连续拍摄距离图像，距离图像获取部从连续拍摄到的距离图像中获取使用于连结的多个部分的图像。

本发明的又一方式所涉及的图面制作方法包含：获取图面的制作对象即构造物的概略的外形形状的步骤；获取作为通过拍摄构造物的距离图像摄像装置获取到的多个距离图像的、构成构造物的多个部分的距离图像的步骤；使用所获取到的构造物的外形形状及距离图像的附属信息来连结所获取到的多个部分的距离图像的步骤；及根据所被连结的距离图像制作构造物的图面的步骤。

发明效果

根据本发明，设成使用构造物的外形形状及距离图像的附属信息(摄影位置及摄影方向)来连结通过距离图像摄像装置拍摄的构造物的多个部分的距离图像，并且根据所连结的距离图像制作出构造物的图面，因此不发生由图像的连结而引起的累积误差，从而能够简便地制作出桥梁等大型构造物的图面。

附图说明

图1是表示本发明所涉及的图面制作装置的实施方式的主要部分框图。

图2是表示图1所示的TOF相机的内部结构的框图。

图3是表示测距区域内的物体T₁和近处物体T₂的距离的运算处理的图。

图4是表示将距离图像与附属信息建立关联的距离图像文件的一例的图。

图5是表示包含目标构造物的地图(航空照片)的图。

图6是表示分割拍摄桥梁的外形形状及桥梁的摄影次数及全局坐标系等的图。

图7是表示与桥梁的一部分的三维信息对应的可视化图像的图。

图8是与桥梁的一部分的三维信息对应地制作出的图面且补记有尺寸的图面。

图9是无人飞行器的框图。

图10是为了说明能够适用于TOF相机中的图像传感器的另一实施方式而使用的图。

图11是表示本发明所涉及的图面制作方法的实施方式的流程图。

具体实施方式

以下，按照附图对本发明所涉及的图面制作装置及图面制作方法的实施方式进行说明。

[图面制作装置]

图1是表示本发明所涉及的图面制作装置的实施方式的主要部分框图。

如图1所示，图面制作装置由作为距离图像摄像装置而发挥功能的深度相机(以下，称为“TOF(飞行时间(Time Of Flight))相机”)10及图面制作装置主体100构成。

本实施方式的图面制作装置构成为TOF相机10与图面制作装置主体100分离，且具备相互能够通信的无线通信功能，但可以是由带TOF相机的便携信息终端、智能手机及平板终端等的TOF相机一体式移动设备构成的装置，在该情况下，无需无线通信功能。

<TOF相机10>

图2是表示图1所示的TOF相机10的内部结构的框图。

图2所示的TOF相机10为对被摄体照射光并通过测量由传感器接收该反射光为止的时间以求出至被摄体的距离的相机，主要由成像透镜12、距离图像传感器14、A/D(模拟数字转换(Analog-to-Digital))转换器16、接口电路18、存储器19、中央处理器(CPU：Central Processing Unit)20、脉冲光发光部22、曝光控制部24、操作部26、液晶显示器等显示部28、全球定位系统(GPS：Global Positioning System)(以下，称为“GPS装置”)30、方位传感器32及第1通信部34构成。

脉冲光发光部22具备近红外光发光二极管(近红外LED(LED：Light Emitting Diode))，且与来自曝光控制部24的发光定时信号同步地发射一定脉宽的脉冲光。另外，脉冲光发光部22至少对经由成像透镜12拍摄的摄像区域整体照射脉冲光。并且，从脉冲光发光部22的近红外LED发射的脉冲光为近红外光。

成像透镜12使来自被摄体(构造物)的反射光(包含从脉冲光发光部22照射且由构造物的表面反射的脉冲光的反射光)成像于距离图像传感器14。

距离图像传感器14由具有垂直驱动器及水平驱动器等的CMOS(互补型金属氧化物半导体(Complementary Metal-Oxide Semiconductor))驱动器以及由定时信号发生器驱动的CMOS型图像传感器构成。另外，距离图像传感器14并不限定于CMOS型，也可以是XY地址型或CCD(电荷耦合器件(Charge Coupled Device))型图像传感器。

距离图像传感器14优选以二维状排列有多个受光元件(光电二极管)，且在多个受光元件的入射面侧设置有仅通过从脉冲光发光部22发射的近红外脉冲光的波长频带的带通滤光片或去除可见光的可见光截止滤光片。由此，距离图像传感器14的多个受光元件作为对近红外光具有灵敏度的像素而发挥功能。

距离图像传感器14根据由曝光控制部24施加的快门控制信号控制曝光期间(曝光时间及曝光定时)，在距离图像传感器14的各受光元件中积蓄与在曝光期间入射的近红外光的光量对应的电荷。而且，从距离图像传感器14读出来自被摄体的近红外光的入射光量相应的像素信号(与每一像素中所积蓄的电荷对应的模拟信号)。

在此，详细内容将进行后述，但曝光控制部24依次进行如下第1曝光控制及第2曝光控制，该第1曝光控制使脉冲光发光部22发射脉冲光，至少根据被摄体(构造物)的距离在距离图像传感器14所对应的受光元件中的曝光量(脉冲光的受光时间)中产生差异，该第2曝光控制使脉冲光发光部22发射脉冲光，相对于脉冲光的开始曝光的相位与相对于第1曝光控制的脉冲光的开始曝光的相位不同，且距离图像传感器14所有的受光元件全部曝光由构造物反射的脉冲光。

在基于曝光控制部24的曝光控制之后，从距离图像传感器14读出的模拟信号通过A/D转换器16转换为数字信号，并经由作为图像输入控制器而发挥功能的接口电路18存储于存储器19。

存储器19存储CPU20中的处理所需的各种数据等，并且作为CPU20的工作存储器而发挥功能。并且，存储器19能够作为记录通过TOF相机10拍摄的距离图像的记录介质而发挥功能。

操作部26包含电源开关、快门按钮及模式选择部等，操作部26中的命令输入施加于CPU20。

详细内容将进行后述，但CPU20具有作为根据操作部26中的命令输入统一控制曝光控制部24等的各部的设备控制部的功能及作为距离图像生成部20A的功能。

距离图像生成部20A根据距离图像传感器14的传感器输出生成拍摄对象即构造物的三维距离图像。

<TOF法的基本原理>

接着，对通过TOF相机10获取三维距离图像的基本原理进行说明。

由TOF相机10的脉冲光发光部22照射的脉冲光入射测距区域内的被摄体(构造物)，由构造物反射的脉冲光经由成像透镜12并通过距离图像传感器14进行成像(受光)。

图3是表示测距区域内的远处物体T₁和近处物体T₂的距离的运算处理的图。

脉冲光发光部22由曝光控制部24脉冲驱动，如图3(A)及图3(B)所示，距离图像传感器14与脉冲光发光部22的脉冲驱动同步地通过曝光控制部24依次进行第1曝光控制及第2曝光控制这2次曝光控制。

图3(A)所示的第1曝光控制为以使脉冲光发光部22发射脉冲光，且至少根据被摄体的距离在距离图像传感器14所对应的受光元件中的曝光量中产生差异的方式控制曝光期间的曝光控制，在使脉冲光发光部22发射脉冲光之后，经过一定时间(脉冲光从能够测距的最远物体返回为止的时间)后开始进行曝光，至少经过由最远被摄体反射的所有脉冲光返回的时间(规定的曝光时间)后结束曝光。

根据上述第1曝光控制，当物体反射率一定时，若比较远处物体T₁与近处物体T₂，则物体T₁越远，曝光量变得越多。

图3(B)所示第2曝光控制为使脉冲光发光部22发射脉冲光，且相对于脉冲光的开始曝光的相位与相对于第1曝光控制的脉冲光的开始曝光的相位不同的曝光控制，是用于去除由物体反射率的差异而引起的距离图像传感器14中的曝光量的变化的曝光控制。在本例中，是距离图像传感器14所有的受光元件全部曝光由物体反射的脉冲光的曝光控制。具体而言，与从脉冲光发光部22发射的脉冲光的发光定时同步地开始进行曝光，在经过一定时间(至少脉冲光从能够测距的最远物体全部返回为止的规定的曝光时间)后结束曝光。另外，第1曝光控制中的“规定的曝光时间”及第2曝光控制中的“规定的曝光时间”为相同的时间，但如上所述相对于脉冲光的开始曝光的相位不同。

根据上述第2曝光控制，无论物体的远近，根据物体反射率而曝光量不同，能够根据通过第1曝光控制获得的曝光量获取与物体反射率对应的信息。

接着，如图3(C)所示，若将通过第1曝光控制及第2曝光控制从距离图像传感器14获取的与各曝光量对应的传感器输出(某一像素的输出数据)分别设为第1数据L₁及第2数据L₂，则CPU20的距离图像生成部20A通过以下式计算出与物体的距离对应的距离信息D。

[数式1]

D＝L₁÷L₂

即，根据[数式1]，计算出第1数据L₁除以第2数据L₂的除法数据。该除法数据成为物体反射率的影响被消除且整个画面不是相同光量的脉冲光的光量的影响被消除的与相对距离对应的数据(距离信息D)。该距离信息D为与对物体照射光且由距离图像传感器接收该反射光为止的时间(飞行时间)对应的信息。另外，也能够根据第1数据L₁及第2数据L₂求出物体的绝对距离。

而且，距离图像生成部20A通过对距离图像传感器14的所有像素获取距离信息D，能够生成三维距离图像。在此，距离图像是指值通过距离图像摄像装置即TOF相机10获得的到被摄体(构造物)为止的距离值(距离信息D)的二维分布图像，距离图像的各像素具有距离值(距离信息)。

距离图像作为可视化图像并不适合，因此当辨识距离图像时，需要将距离图像转换为可视化图像。例如，通过图2所示的CPU20而将距离图像的各像素(距离信息)转换为与距离对应的亮度，或转换为与距离对应的颜色，并将所转换的距离图像输出至显示部28(第1显示部)。由此，能够设成在显示部28的画面上能够辨识距离图像(所拍摄的构造物)。

并且，只要将具有与基于TOF相机10的距离图像的摄像区域对应的视野的光学取景器设置于TOF相机10，则能够通过光学取景器确认距离图像的摄像区域。

在图2中，GPS装置30接收由多个GPS卫星发送的GPS信号，执行基于所接收的多个GPS信号的定位运算处理，获取由TOF相机10当前的维度、经度及高度特定的位置信息(GPS信息)。若通过TOF相机10进行距离图像的拍摄，则CPU20作为表示摄影位置的信息从GPS装置30获取GPS信息。

并且，方位传感器32为检测表示TOF相机10的摄影方向的方位信息的部分，由陀螺仪传感器及地磁传感器等构成。在此，摄影方向是指成像透镜12的光轴方向及围绕光轴的旋转角，光轴方向为由方位角及仰角(或俯角)特定的方向，围绕光轴的旋转角为将TOF相机10水平的情况设为0°的相机围绕光轴的倾斜角。若通过TOF相机10进行距离图像的拍摄，则CPU20从方位传感器32获取表示距离图像的摄影方向的方位信息。

若按照来自操作部26的摄像命令进行距离图像的拍摄，则CPU20将通过距离图像生成部20A生成的距离图像、距离图像的附属信息即表示从GPS装置30获取的摄影位置的GPS信息及从方位传感器32获取的表示摄影方向的方位信息以建立关联的方式存储于存储器19。

图4是表示距离图像与附属信息已建立关联的距离图像文件的一例的图。图4所示的距离图像文件40构成为在标题部42记录有包含表示摄影位置的GPS信息及表示摄影方向的方位信息的附属信息且在距离图像文件40的主体部44记录有距离图像。另外，将距离图像与GPS信息及表示摄影方向的方位信息建立关联的方法并不限定于上述方法，例如，可以将记录有距离图像的距离图像文件与记录有表示拍摄时的摄影位置及摄影方向的附属信息的文本文件以文件名等来建立关联。

第1通信部34为在与图1所示的图面制作装置主体100的第2通信部110之间经由近距离无线通信或网络进行无线通信的部分，在本例中，已拍摄的距离图像的每次拍摄(距离图像文件)，或在结束多个距离图像(多个部分的距离图像)的拍摄之后，统一发送至图面制作装置主体100。并且，关于图面制作装置主体100的第2通信部110，详细内容将进行后述，但图面制作装置主体100的第2通信部110将用于支持TOF相机10中的距离图像的拍摄的信息发送至TOF相机10。

<图面制作装置主体100>

图1所示的图面制作装置主体100主要由第2通信部110、数据库120、外形形状获取部130、连结处理部140、图面制作部150、尺寸补记部152、估算部160、第1手动校正部180及第2手动校正部190等构成。

在本例中，外形形状获取部130从表现了构造物的概略的外形形状的地图信息170获取图面的制作对象即构造物的概略的外形形状。在此，地图信息170为能够从地理信息系统(GIS：geographic information system)获取的地图信息或由互联网上的地图信息提供服务提供的地图信息(“谷歌地图”(注册商标)位置信息获取页面)，优选包含计算机上能够利用的GPS信息等附加信息的地图信息。

如图5所示，通过地图信息170，将包含目标构造物(本例中为桥梁1)的地图(本例中为航空照片)显示于计算机的画面(未图示)，将光标移动到确定桥梁1的外形形状的多个部位。外形形状获取部130从地图信息170获取桥梁1的用光标指定的多个部位的GPS信息。在此，基于外形形状获取部130的GPS信息的获取包含经由具有地图信息170的编辑功能的计算机软件来自动获取用光标指定的位置对应的GPS信息的方法、及以目视读取与用光标指定的位置对应地显示于画面上的GPS信息并通过手动输入所读取的GPS信息来获取的方法。并且，用光标描摹显示于计算机的画面的桥梁1的外形，并根据桥梁1的多个地点的GPS信息通过最小二乘法推算出表示桥梁1的外形的最佳函数，由此能够获取更准确的桥梁1的外形形状。

估算部160为由通过外形形状获取部130获取的桥梁1的外形形状估算出基于TOF相机10的摄影次数等的部分，根据桥梁1(构造物)整体的大小(外形尺寸)及基于TOF相机10的测距区域(测距可靠性高的测距区域)估算出摄影次数。例如，如图6所示，当桥梁1的长度(长边方向的长度)为65m，宽度为22m，且基于TOF相机10的测距区域为15m×15m时，如图6所示，分为10个区域(12次)进行拍摄。

现在，在图6中，在全局坐标系(XYZ坐标系)的原点O上配置桥梁1的左下角，使桥梁1的长边方向与X方向一致，使宽度方向与Y轴方向一致的情况下，从图6所示的10处摄影位置P₁～P₁₀分别沿X轴的正方向拍摄10次，从两处摄影位置(P₂、P₇)分别沿X轴的反方向拍摄2次。

另外，在摄影位置(P2、P7)中，分别沿X轴的正方向及反方向进行2次拍摄的理由在于，在仅沿X轴的正方向的10次拍摄中，出现因构成桥梁1的位于正前侧的物体将位于背后的物体遮挡的区域(遮挡区域)，为了拍摄该遮挡区域而也沿X轴的反方向进行拍摄。并且，在整个10处摄影位置P₁～P₁₀中，也可以沿X轴的正方向及反方向进行2次拍摄(合计10×2次拍摄)，但当桥梁1构成为相同的结构重复时，如本例，可以减少一方向(反方向)的摄影次数，关于因减少摄影次数而产生的遮挡区域，可以采用类推的方式。

如上所述，估算部160估算出摄影次数(12次)、摄影位置(P₁～P₁₀)及摄影方向等，并将估算出的结果经由第2通信部110(发送部114)发送至TOF相机10。

图2所示的TOF相机10的第1通信部34接收通过估算部160估算出的结果，CPU20将经由第1通信部34接收的所估算出的结果显示于作为第1通知部而发挥功能的显示部28。例如，除了在显示部28以文本方式显示摄影次数等以外，如图6所示，还可以以图形方式显示摄影次数等。

摄影者能够一边根据显示于TOF相机10的显示部28的通过估算部160估算出的结果确定摄影位置及摄影方向等，一边拍摄构成桥梁1的多个部分的距离图像。例如，如图6所示，一边观察通过GPS装置30定位的GPS信息，一边移动至摄影位置(P₁～P₁₀)中的任一摄影位置或其附近的摄影位置，并进行用箭头指定的方向的距离图像的拍摄。如此，通过一边改变摄影位置，一边依次重复距离图像的拍摄，能够拍摄构成桥梁1的多个部分的距离图像。

当拍摄构造物(桥梁1)时，TOF相机10的CPU20将表示这次拍摄的部分为桥梁1整体的哪一部分的信息显示于作为第2通知部而发挥功能的显示部28。例如，如图6所示，CPU20将分为10个区域的桥梁1整体的外形形状显示于显示部28，并以能够与其他分割部分辨识的方式显示这次拍摄的部分(1个分割部分)。在该情况下，优选将由通过TOF相机10连续拍摄的距离图像生成的可视化图像显示于作为第1显示部而发挥功能的显示部28，或将从拍摄与通过TOF相机10拍摄的距离图像相同的视角的可视化图像的摄像部获得的即时显示图像显示于作为第2显示部而发挥功能的显示部28，并且将表示通过显示部28显示的图像与桥梁1整体的哪一部分对应的信息显示于显示部28。由此，摄影者能够确认这次拍摄的部分为桥梁1整体的哪一部分，从而能够移动至为了拍摄该部分的距离图像而所需的摄影位置。

而且，CPU20将已对构造物(桥梁1)进行距离图像的拍摄的已摄像区域及尚未进行距离图像的拍摄的未摄像区域以能够识别的方式显示于作为第3显示部而发挥功能的显示部28。例如，如图6所示，CPU20将分为10个区域的桥梁1整体的外形形状显示于显示部28，且使已摄像区域(分为10个区域的分割区域中已进行拍摄的分割区域)呈灰色，从而以能够识别的方式显示已摄像区域及未摄像区域。由此，能够不留未摄像区域的方式拍摄桥梁1。

在每次拍摄距离图像时，或在结束对桥梁1的所有距离图像的拍摄之后，由TOF相机10的第1通信部34统一发送距离图像(距离图像文件)，图面制作装置主体100的第2通信部110的接收部112接收从TOF相机10发送的距离图像文件，并将所接收的距离图像文件存储于数据库120。

连结处理部140从数据库120依次读出存储于数据库120的桥梁1的多个部分的距离图像(在图6所示例子中为12张距离图像)，并使用通过外形形状获取部130获取的桥梁1的外形形状及各距离图像的附属信息(表示记录于距离图像文件40的标题部42的摄影位置的GPS信息及表示摄影方向的方位信息)来连结所读出的距离图像。

距离图像为包含将以GPS信息来表示的摄影位置设为原点的极坐标空间的矢径及偏角的三维信息，距离图像的各像素的距离信息与矢径对应，距离图像的二维分布图像内的各像素的位置与偏角对应。因此，连结处理部140将以极坐标来表示的距离图像转换为以摄影位置为原点的xyz的3轴正交坐标。将3轴正交坐标的z轴例如设为摄影方向(光轴方向)，能够将x轴及y轴分别设为与z轴正交的面的水平方向及垂直方向。如此，获取将距离图像转换为以摄影位置为原点的3轴正交坐标的TOF相机10的局部坐标系中的桥梁1的三维坐标。

接着，连结处理部140将局部坐标系中的桥梁1的三维坐标转换为图6所示的全局坐标系的三维坐标。

在该情况下，从获取桥梁1的外形形状时的GPS信息已知全局坐标系的原点O的坐标值(GPS信息)及全局坐标系的X轴及Y轴的方位方向，且已获取局部坐标系的原点的坐标值(表示距离图像的摄影位置的GPS信息)，因此能够求出用于将局部坐标系的坐标值转换为全局坐标系的坐标值的平移向量。并且，已获取拍摄距离图像时的摄影方向的信息(成像透镜12的光轴方向及围绕光轴的旋转角)，从而能够求出用于将局部坐标系的坐标值转换为全局坐标系的坐标值的围绕正交3轴的各轴的旋转角。因此，能够根据以上述方式求出的平移向量及旋转角而将局部坐标系的坐标值转换为全局坐标系的坐标值。

连结处理部140通过使用附属于距离图像的表示摄影位置及摄影方向的附属信息而将从数据库120依次读出的距离图像转换为全局坐标系的坐标值来连结各距离图像。如此，所连结的距离图像成为表示桥梁1整体的三维信息的图像。

能够由桥梁1整体的三维信息求出桥梁1的外形形状(平面形状)，由桥梁1整体的三维信息求出的桥梁1的外形形状成为与通过外形形状获取部130获取的外形形状一致的形状最为理想，但因由GPS装置30定位的摄影位置(GPS信息)的误差及由方位传感器32检测的摄影方向的误差而不会一致。连结处理部140对将各距离图像转换为全局坐标系的坐标值时所使用的平移向量及旋转角进行校正，以使由桥梁1整体的三维信息求出的桥梁1的外形形状(平面形状)与通过外形形状获取部130获取的外形形状一致。

并且，连结处理部140具有根据从第1手动校正部180输入的校正命令对多个部分的距离图像的连结进行校正的功能。第1手动校正部180具有重叠并显示构造物(桥梁1)的外形形状与所连结的距离图像的可视化图像的显示部(未图示)，并将对各距离图像的位置(具体而言，进行坐标转换时所使用的摄影位置(平移向量)及摄影方向(角度))进行校正的校正命令输出至连结处理部140，以使和显示于显示部的各距离图像中的外形形状对应的部分与外形形状一致。连结处理部140根据来自第1手动校正部180的校正命令对多个部分的距离图像的连结(距离图像的坐标转换)进行校正。

而且，当在相邻的距离图像之间存在重复区域时，连结处理部140能够对彼此的坐标转换进行校正，以使重复区域坐标转换后的三维坐标值成为相同的坐标值。

图面制作部150根据通过连结处理部140连结的距离图像而制作出构造物(桥梁1)的图面。图面制作部150能够根据所连结的距离图像(桥梁1整体的三维信息)制作出将视为桥梁1的轮廓的点连结而成的线图。另外，已获取构造物(桥梁1)整体的三维信息，因此例如能够通过正投影法制作出构造物的6个视图(主视图、后视图、俯视图、仰视图、右视图、左视图)，或能制作出立体图。

通过图面制作部150制作出的图面以与多个部分的距离图像建立关联的方式保存于数据库120。保存于数据库120的构造物的图面能够根据需要读出、打印输出或显示于显示部。

并且，图面制作部150具有根据从第2手动校正部190输入的校正命令而对构造物(桥梁1)的图面进行校正的功能。第2手动校正部190具有显示通过图面制作部150制作出的图面的显示部(未图示)，当在显示于显示部的图面中存在欠缺的部分(与遮挡区域对应的部分等)时，或在图面中存在明显的错误时，通过手动将图面的校正命令输出至图面制作部150。

尺寸补记部152为在通过图面制作部150制作出的构造物(桥梁1)的图面上补记尺寸线及尺寸的部分。尺寸补记部152具有显示通过图面制作部150制作出的图面的显示部，且在显示部上能够进行加入尺寸线的部分及尺寸的命令输入。另外，由所连结的距离图像已生成构造物的三维信息，因此若有加入尺寸线的部分的命令输入，则能够自动计算出与尺寸线对应的构造物的构成部分的尺寸，并且能够将计算出的尺寸设为在图面上进行补记的信息。

图7是与桥梁的一部分的三维信息对应的可视化图像，图8是与桥梁的一部分的三维信息对应地制作出的图面。如图8所示，图面制作部150在根据来自尺寸补记部152的加入尺寸线的部分及尺寸的命令输入制作出的图面上补记尺寸线及尺寸。

<无人飞行器200>

根据构造物，有时难以将TOF相机10手动移动到适当的摄影位置而对构造物的距离图像进行拍摄。

在该情况下，如图9所示，优选在无人飞行器200上搭载TOF相机10，并通过远程操作部210操作无人飞行器200来对构造物的距离图像进行拍摄。

无人飞行器200具备TOF相机10及对通过TOF相机10拍摄的距离图像进行无线发送的通信部(第1通信部)。另外，当TOF相机10具备第1通信部34(图2)时，无人飞行器200可以不具备第1通信部。

并且，无人飞行器200优选还具备拍摄与TOF相机10相同的摄像区域(包含大致相同的摄像区域)的可视化图像(即时显示图像)的摄像装置及将通过摄像装置拍摄的即时显示图像发送至远程操作部210的通信部。

远程操作部210作为远程控制无人飞行器200的控制部而发挥功能，且具备显示通过无人飞行器200的摄像装置拍摄的即时显示图像的显示部和以无线命令无人飞行器200的飞行及TOF相机10的拍摄的操作部，操作者一边观察显示于显示部的即时显示图像一边对无人飞行器200进行远程操作。

并且，当无人飞行器200为具有自动驾驶功能的无人驾驶飞机时，具备预先对飞行路线及摄影位置等进行程序化的控制部，通过控制部控制无人驾驶飞机的飞行，由此能够不使用远程操作部210，或能够补充性地使用远程操作部210。

图10是为了说明能够适用于TOF相机10中的距离图像传感器(图像传感器)的另一实施方式而使用的图，图10(A)是表示另一实施方式的图像传感器的2×2像素的基本排列的图。另一实施方式的图像传感器构成为该基本排列沿水平方向及垂直方向重复配置。

如图10(A)所示，2×2像素的基本排列具有对近红外光的波长频带具有灵敏度的第1受光元件即近红外光像素(IR(红外线(infrared)像素))及分别对红(R)、绿(G)、蓝(B)可见光的波长频带具有灵敏度的3个第2受光元件(R像素、G像素、B像素)。即，另一实施方式的图像传感器构成为IR像素和R像素、G像素及B像素混在一起而二维排列。

图10(B)示出了配设于R像素、G像素及B像素中的RGB的各彩色滤光片的光谱透过率和从脉冲光发光部22(近红外LED)发射的近红外光的分光特性。

关于距离图像，根据从上述结构的图像传感器的IR像素读出的、与从脉冲光发光部22射出且由物体反射的近红外光对应的信号电荷而能够获取表示物体距离的距离图像。

并且，CPU20内的可视化图像生成部(未图示)能够由从上述构成的图像传感器的R像素、G像素及B像素读出的RGB图像生成摄像区域内的被摄体的彩色图像(可视化图像)。RGB的各滤光片也对近红外光具有透过率，但可以设成所对应的R像素、G像素及B像素对近红外光不具有灵敏度的结构，或能够生成通过与RGB的各滤光片重叠地设置IR截止滤光片而对近红外不具有灵敏度的可视化图像。并且，可以如下进行，即，不是IR截止滤光片或对近红外光不具有灵敏度的结构，而是在图10(B)中，代替具有带通特性的近红外光滤光片而设置可见光截止滤光片，并通过从R像素、G像素及B像素读出的RGB各图像减去IR图像成分来生成可视化图像。

根据上述结构的图像传感器，能够用1个图像传感器来拍摄距离图像及可视化图像(彩色图像)。并且，在该情况下，优选以将所拍摄的距离图像与可视化图像(彩色图像)建立关联的方式保存于数据库120。

[图面制作方法]

图11是表示本发明所涉及的图面制作方法的实施方式的流程图。

在图11中，图1所示的图面制作装置主体100的外形形状获取部130从地图信息170获取构造物的概略的外形形状(步骤S10)。

估算部160根据通过外形形状获取部130获取的构造物(桥梁1)的外形形状建立基于TOF相机10的摄影次数、摄影位置及摄影方向等的摄影计划(步骤S12)。摄影者按照在步骤S12中建立的摄影计划进行基于TOF相机10的构造物的拍摄(距离图像的拍摄)。图面制作装置主体100的距离图像获取部获取通过TOF相机10拍摄的构成构造物的多个部分的距离图像(步骤S14)。

接着，连结处理部140使用在步骤S10中获取的构造物的外形形状及各距离图像的附属信息(摄影位置及摄影方向)来连结在步骤S14中获取的多个部分的距离图像(步骤S16)。

接着，图面制作部150根据连结后的距离图像(构造物整体的三维信息)制作出构造物的图面(步骤S18)。

如此制作出的构造物的图面被电子数据化，或被打印输出，从而能够利用于构造物的维护及检查等。

[其他]

在本实施方式中，设成对构造物分多次(按多个摄影位置)拍摄距离图像，但并不限定于此，也可以设成连续改变摄影位置的同时(移动的同时)，以一定的帧率连续拍摄距离图像，并从连续拍摄的多个距离图像中提取(获取)使用于连结的多个部分的图像。

并且，在本实施方式中，将图面的制作对象即构造物的概略的外形形状设成能够从GIS获取的地图信息等获取，但例如，当已知如桥梁的长度及宽度等与构造物的外形形状相关的信息时，可以从该信息获取，也可以测量构造物的外形形状来获取。

而且，包含表示摄影位置及摄影方向的附属信息的距离图像并不限定于通过无线通信从TOF相机获取的情况，可以设成通过有线从TOF相机获取，也可以设成经由TOF相机的记录介质而获取。

此外，距离图像摄像装置并不限定于TOF相机，也可以使用三维激光扫描仪及立体相机，总之，只要是能够获取构造物的距离图像的摄像装置，则可以是任何摄像装置。

并且，本发明并不限定于上述实施方式，在不脱离本发明的技术思想的范围内，能够进行各种变形是显而易见的。

符号说明

10-TOF相机，12-成像透镜，14-距离图像传感器，20-中央处理器(CPU)，22-脉冲光发光部，24-曝光控制部，28-显示部，30-GPS装置，32-方位传感器，34-第1通信部，100-图面制作装置主体，110-第2通信部，120-数据库，130-外形形状获取部，140-连结处理部，150-图面制作部，152-尺寸补记部，160-估算部，180-第1手动校正部，190-第2手动校正部，200-无人飞行器，210-远程操作部。