图像处理装置、图像处理系统、图像处理方法及图像处理程序的制作方法
【技术领域】
[0001]本发明涉及图像处理装置、图像处理系统、图像处理方法及图像处理程序。
[0002]本申请以2013年3月26日在日本提交的特愿2013-064829号为基础并主张优先权，其内容援引于此。
【背景技术】
[0003]已知基于从多个方向拍摄有物体的多个图像(以下称为“多视点图像”)来计测该物体的表面形状并复原的3维复原技术。近年来，随着3维复原技术的进步，仅基于多视点图像就能够高精度地生成表示复原后的物体的表面形状的网格模型(3维形状模型)。
[0004]除了计算机视觉的研究机构，基于多视点图像的3维复原技术还在文化财产的数字存档和娱乐产业等广泛的领域受到关注(参照非专利文献I)。
[0005]现有技术文献
[0006]非专利文献
[0007]非专利文献1:運天弘樹，外3名，只亍U才力 > 歹移動撮影(乙A § VR ? r少自動生成手法?検討 _ Stereo Moving - shotModeling System(SM2S)-，日本八'一于-V ；1/ 1J /'J T 4 学会論文誌 Vol.12, N0.2, 2007
【发明内容】
[0008]发明所要解决的课题
[0009]但是，在摄像未能适当地进行的情况下，用户需要重新拍摄多视点图像。但是存在如下的问题:重新拍摄的结果，图像处理装置(立体摄像机)有时会过度地增加多视点图像的摄像张数。
[0010]本发明是鉴于上述情况而做出的，其目的在于，提供一种不会过度地增加多视点图像的摄像张数的图像处理装置、图像处理系统、图像处理方法及图像处理程序。
[0011]解决课题所采用的手段
[0012]本发明的第一方式的图像处理装置，具备:取得部，取得从多方向拍摄了物体的多个图像；计算部，计算表示所述图像的品质的值；判定部，根据表示所述图像的所述品质的值，决定用于计测所述物体的表面形状的处理；以及执行部，执行所决定的所述处理。
[0013]优选为，在本发明的第一方式的图像处理装置中，在表示所述图像的所述品质的值满足规定的品质条件的情况下，所述判定部使所述执行部执行根据表示所述图像的所述品质的值来修正所述图像的处理。
[0014]优选为，在本发明的第一方式的图像处理装置中，在表示所述图像的所述品质的值不满足规定的条件的情况下，所述判定部使所述执行部执行用于根据表示所述图像的所述品质的值来引导所述图像的重新拍摄的信息的输出。
[0015]优选为，在本发明的第一方式的图像处理装置中，所述计算部计算表示所述图像的抖动程度的值，作为表示所述图像的所述品质的值。
[0016]优选为，在本发明的第一方式的图像处理装置中，所述判定部基于表示所述图像的所述抖动程度的值来决定对所述图像实施的滤波处理，所述执行部对所述图像实施所决定的所述滤波处理。
[0017]优选为，在本发明的第一方式的图像处理装置中，所述计算部计算表示所述图像彼此的重合率的值，作为表示所述图像的所述品质的值。
[0018]本发明的第二方式的图像处理系统，具备:摄像装置，输出从多方向拍摄了物体的多个图像；第一方式的图像处理装置；以及输出装置，输出所述图像处理装置执行了处理所得的结果。
[0019]本发明的第三方式的图像处理方法，是在图像处理装置中使用的图像处理方法，计算部计算表示从多方向拍摄了物体的多个图像的品质的值，判定部根据表示所述图像的品质的值，决定用于计测所述物体的表面形状的处理，执行部执行所决定的所述处理。
[0020]本发明的第四方式的图像处理程序，使计算机执行以下的步骤:计算表示从多方向拍摄了物体的多个图像的品质的值的步骤；根据表示所述图像的品质的值来决定用于计测所述物体的表面形状的处理的步骤；以及执行所决定的所述处理的步骤。
[0021]发明的效果
[0022]根据本发明的方式，判定部根据多视点图像的品质来决定用于计测物体的表面形状的处理。执行部执行所决定的处理。由此，图像处理装置、图像处理系统、图像处理方法及图像处理程序不会多度地增加多视点图像的摄像张数。
【附图说明】
[0023]图1是表示本发明的一个实施方式中的图像处理系统的结构例的框图。
[0024]图2是表示本发明的一个实施方式中的图像信息的例子的表。
[0025]图3是表示本发明的一个实施方式中的、基于特征点在图像中决定的区域的例子的图。
[0026]图4是表示本发明的一个实施方式中的、基于图像的抖动程度来决定处理的动作步骤的流程图。
[0027]图5是表示本发明的一个实施方式中的、基于图像彼此的重合率来决定处理的动作步骤的流程图。
【具体实施方式】
[0028]参照附图详细说明本发明的一个实施方式。在图1中用框图示出了图像处理系统的结构例。图像处理系统具备:摄像装置1000、图像处理装置2000、输出装置3000。另外，摄像装置1000和输出装置3000可以是分体的，也可以作为带输出装置的摄像装置Cl 一体地构成。
[0029]摄像装置1000由绕着计测表面形状的对象的物体(例如烧制人偶像)走动的用户保持而能够移动。摄像装置1000通过被该用户操作(例如按下快门按钮)，从多方向对计测表面形状的对象的物体进行拍摄。
[0030]所拍摄到的图像可以是按照静止图像或运动图像的任一形式而被拍摄。此外，摄像装置1000也可以是通过I次操作拍摄I张图像。在以下的说明中说明如下情况:利用多个图像传感器及光学系统通过I次操作来拍摄构成立体对的多个图像(以下称为“立体图像”)，并将所拍摄的立体图像输出到图像处理装置2000。
[0031]另外，摄像装置1000也可以具有传感器。该传感器例如在拍摄对象的物体时检测自装置被施加的加速度。摄像装置1000也可以将表示检测到的加速度的信息与立体图像建立对应地输出到图像处理装置2000。此外，摄像装置1000也可以将在拍摄对象的物体时作为摄像机参数使用的表示视角的信息及表示快门速度的信息，与立体图像建立对应地输出到图像处理装置2000。
[0032]图像处理装置2000具备:取得部2100、存储部2200、计算部2300、判定部2400、执行部2500。取得部2100从摄像装置1000取得立体图像，向构成所取得的立体图像的各图像附加图像编号。取得部2100将构成立体图像的图像的像素值信息作为图像信息(使用图2在后文说明)的项目，按照每个图像编号存储到存储部2200。
[0033]取得部2100也可以是从摄像装置1000取得表示加速度的信息、表示视角的信息及表示快门速度的信息。取得部2100也可以将表示加速度的信息、表示视角的信息及表示快门速度的信息作为图像信息的项目，按照每个图像编号存储到存储部2200。
[0034]存储部2200存储图像信息。在图像信息的项目中，有图像编号、像素值信息及区域。在此，像素值信息是作为2维图像的构成立体图像的图像的像素值的信息。此外，区域是在构成立体图像的图像中决定的区域。关于该决定的区域的详细情况，使用图3在后文说明。此外，在图像信息的项目中，也可以还包括从摄像装置1000取得的表示加速度的信息、表示视角的信息及表示快门速度的信息。
[0035]在图2中通过表来示出了图像信息的例子。在图2中，图像编号“Spl”、像素值信息“P1”、区域“BI”、加速度“Al”、视角“VI”、快门速度“E1”建立了对应。此外，图像编号“ Sp2 ”、像素值信息“P2 ”、区域“B2 ”、加速度“A2 ”、视角“ V2 ”、快门速度“E2 ”建立了对应。此夕卜，图像编号“Sp3”、像素值信息“P3”、区域“B3”、加速度“A3”、视角“V3”、快门速度“E3”建立了对应。
[0036]回到图1，继续说明图像处理系统的结构例。计算部2300具有:抖动计算部2310、重合计算部2320。从取得部2100向抖动计算部2310输入图像信息(参照图2)。抖动计算部2