三维形状计测装置、三维形状计测方法及三维形状计测程序的制作方法
【技术领域】
[0001]本发明涉及三维形状计测装置、三维形状计测方法及三维形状计测程序。
[0002]本申请以2013年4月19日在日本提交的特愿2013-088555号为基础并享受优先权，其内容援引于此。
【背景技术】
[0003]非专利文献I中记载了基于多个二维图像来生成对象物的三维形状模型的技术的一例，这些二维图像包含一边使拍摄部移动一边拍摄的对象物。在该非专利文献I所记载的三维形状计测系统中，如下那样生成对象物的三维形状模型。首先，一边使构成拍摄部的立体摄像机移动一边以运动图像来拍摄对象物整体。在此，立体摄像机也被称为双眼立体视觉摄像机，是从多个不同的视点拍摄对象物的装置。接着，按照每规定帧，基于I组二维图像计算与各像素对应的三维坐标值。其中，在该时点计算出的三维坐标值通过在立体摄像机的每个视点而不同的多个三维坐标表示。在此，在非专利文献I所记载的三维形状计测系统中，通过遍及多个帧追踪作为运动图像拍摄的多个二维图像中包含的特征点群，来推测立体摄像机的视点的移动。然后，基于视点移动的推测结果，用多个坐标系表示的三维形状模型被整合为同一坐标系，生成对象物的三维形状模型。
[0004]此外，在非专利文献2中记载了基于多个深度图像(也称为景深图像、距离图像等)来生成对象物的三维形状模型的技术的一例，这些深度图像是一边使红外线深度传感器(以下称为拍摄部)移动一边取得的。在此，深度图像指的是以像素单位表示相对于所测定的对象物的距离信息的图像。在非专利文献2所记载的三维形状计测系统中，红外线深度传感器由红外线投射部、红外线拍摄部、信号处理部构成。红外线投射部向对象物投射随机光斑图案，由红外线拍摄部对其反射光进行拍摄。然后，基于由红外线拍摄部拍摄到的随机光斑图案的偏移或形状变化，信号处理部计算相对于对象物的距离信息而生成深度图像。关于该红外线深度传感器的构成等，例如在专利文献I?3中记载。
[0005]另外，在本申请中，对象物的三维形状模型是指，通过将三维空间内的对象物的形状在计算机内部数值化来表现的模型，例如是基于多视点的二维图像或各像素表示距离信息的二维图像将对象物的表面形状通过三维空间内的多个点的集合(即点群)来复原的点群模型。此外，在本申请中，三维形状计测意味着通过拍摄多个二维图像而生成对象物的三维形状模型，并且还意味着为生成对象物的三维形状模型而拍摄多个二维图像。
[0006]现有文献
[0007]专利文献
[0008]专利文献1:日本国特表2011-527790号公报
[0009]专利文献2:日本国特表2009-511897号公报
[0010]专利文献3:日本国特表2009-530604号公报
[0011]非专利文献
[0012]非专利文献1:運天弘樹、増田智仁、三橋徹、安藤真、「立体摄像机移动摄影(乙dth VR模型自动生成手法①検討」、日本八' —于々少y 7 y T ^学会論文誌、Vol.12、N0.2、2007 年
[0013]非专利文献2:Shahram Izadi, David Kim, Otmar Hilliges, David Molyneaux,Richard Newcombe, Pushmeet Kohli , Jamie Shotton, Steve Hodges，Dust inFreeman, Andrew Davison, and Andrew Fitzgibbon，，，Kinect Fus1n:Real_time 3DReconstruct1n and Interact1n Using a Moving Depth Camera，，，October 2011，Publisher:ACM Symposiumon User Interface Software and Technology,[平成 25 年4 月 15 日检索]、因特网 < URL:http://research.microsoft.com/apps/pubs/default,aspx ? id = 155416 >
【发明内容】
[0014]发明所要解决的课题
[0015]如上述那样，在非专利文献I或非专利文献2所示的三维形状计测系统中，一边使拍摄部移动一边拍摄多个二维图像，基于拍摄到的多个二维图像来生成对象物的三维形状模型。在这样的构成中，如果以一定的时间间隔拍摄在生成三维形状模型时成为处理对象的二维图像，例如在拍摄部的移动速度大时，可能会产生未被拍摄到的部分。另一方面，拍摄部的移动速度小时，在多个图像间重复拍摄的区域可能会变大。或者，对于对象物来说，根据形状的复杂程度，有些部分需要更细致拍摄图像，有些部分则不需要，这种情况下，例如在拍摄者不熟练时，可能会难以适当地掌握拍摄方向或频度而拍摄图像。即，拍摄多个在生成三维形状模型时成为处理对象的二维图像的情况下，如果使拍摄各图像的时间间隔为一定，则在移动速度大时或者小时，或者对象物的形状复杂时等，可能无法适当地取得二维图像。此外，如果无用的重复拍摄增多，则二维图像过剩，有存储图像数据的存储器量变多、或者产生多余的处理的可能性。像这样，如果以一定的时间间隔来拍摄在生成三维形状模型时成为处理对象的二维图像，则存在可能无法适当地拍摄多个图像的问题。
[0016]本发明是鉴于以上情况而做出的，其目的在于，提供一种能够适当地拍摄在生成三维形状模型时成为处理对象的二维图像的三维形状计测装置、三维形状计测方法及三维形状计测程序。
[0017]解决课题所采用的手段
[0018]为了解决上述课题，本发明的第一方式的三维形状计测装置具备:拍摄部，逐个输出所拍摄到的规定的二维图像(以下称为第I 二维图像)，并且与规定的输出指示对应地输出与所拍摄到的所述第I二维图像之间设定不同的二维图像(以下称为第2二维图像)；输出指示生成部，基于从拍摄所述第I 二维图像的视点观看基于所述拍摄部所输出的所述第2 二维图像的三维形状模型的情况下的形状缺损比例，生成所述输出指示；以及存储部，存储所述拍摄部所输出的所述第2 二维图像。
[0019]本发明的第一方式的三维形状计测装置优选为，在所述第I 二维图像和所述第2二维图像之间，图像的析像度的设定不同，所述第2 二维图像与所述第I 二维图像相比为高析像度。
[0020]本发明的第一方式的三维形状计测装置优选为，所述形状缺损比例对应于从所述第I二维图像的拍摄时的视点将基于所述第2 二维图像求出的所述三维形状模型作为二维图像来表示的情况下计算出的图像的比例。
[0021]本发明的第一方式的三维形状计测装置优选为，在所述第I 二维图像和所述第2二维图像之间，拍摄图像时的快门速度、光圈值或拍摄元件的灵敏度的至少I个设定不同。
[0022]本发明的第一方式的三维形状计测装置优选为，具备对拍摄对象物进行照明的照明部，所述拍摄部与所述输出指示对应地拍摄所述第2 二维图像，并且所述照明部对于所述拍摄对象物进行规定的照明。
[0023]本发明的第一方式的三维形状计测装置优选为，所述第I 二维图像和所述第2 二维图像是深度图像。
[0024]此外，本发明的第二方式的三维形状计测方法，使用逐个输出所拍摄到的规定的二维图像(以下称为第I 二维图像)、并且与规定的输出指示对应地输出与所拍摄到的所述第I二维图像之间设定不同的二维图像(以下称为第2二维图像)的拍摄部，基于从拍摄所述第I二维图像的视点观看基于所述拍摄部所输出的所述第2 二维图像的三维形状模型的情况下的形状缺损比例，生成所述输出指示(输出指示生成步骤)，存储所述拍摄部所输出的所述第2 二维图像(存储步骤)。
[0025]此外，本发明的第三方式的三维形状计测程序，使计算机执行以下的步骤:输出指示生成步骤，使用逐个输出所拍摄到的规定的二维图像(以下称为第I 二维图像)、并且与规定的输出指示对应地输出与所拍摄到的所述第I二维图像之间设定不同的二维图像(以下称为第2 二维图像)的拍摄部，基于从拍摄所述第I二维图像的视点观看基于所述拍摄部所输出的所述第2 二维图像的三维形状模型的情况下的形状缺损比例，生成所述输出指示；存储步骤，存储所述拍摄部所输出的所述第2 二维图像。
[0026]发明的效果:
[0027]根据本发明的方式，基于逐个输出的第I 二维图像和与第I 二维图像之间设定不同的第2 二维图像，基于从拍摄第I 二维图像的视点观看基于第2 二维图像的三维形状模型的情况下的形状缺损比例，生成对于拍摄部的第2 二维图像的输出指示。因此，与按照一定的时间间隔进行拍摄的情况相比，能够容易地适当设定图像的拍摄定时和所拍摄的图像的量。
【附图说明】
[0028]图1是表示本发明的一个实施方式的构成例的框图。
[0029]图2是表示图1所示的拍摄部11的构成例的框图。
[003