设计图复查装置、设计图复查方法以及程序与流程

本发明涉及设计图复查(designreview)装置、设计图复查方法以及程序。

背景技术：

为了判断能否实际地制造产品，并进行产品的设计或者制造工序的重新评估，实施设计图复查。作为实施设计图复查的装置，已知如下设计图复查装置，该设计图复查装置具备：头戴式显示器(以下称为hmd)，显示在虚拟空间上映射出的产品的3维模型；以及操作部，对显示于虚拟空间的3维模型进行操作。

作为实施设计图复查的装置，专利文献1公开了如下设计图复查装置，该设计图复查装置具备hmd，该hmd为了判定能否制作鞋子，将虚拟设计图要素与配置于现实的环境的鞋楦重叠地显示。

现有技术文献

专利文献

专利文献1：日本特开2016-189213号公报

技术实现要素：

在实施设计图复查时，当用户佩戴非透射型的hmd时，直接视觉辨认实际空间并不容易，难以操作输入终端。另外，即使在用户佩戴半透射型的hmd的情况下，当hmd的显示与输入终端重叠地显示时，也难以操作输入终端。因此，需要操作输入终端的操作员，需要大量人员实施设计图复查，存在无法高效地实施设计图复查这样的问题。

本发明的目的在于提供能够高效地实施设计图复查的设计图复查装置、设计图复查方法以及程序。

为了实现上述目的，本发明的设计图复查装置具备：通信部，访问数据服务器部，该数据服务器部存储构成产品的构件的3维模型的数据、用于该产品的组装的工卡模具的3维模型的数据以及记载有该产品的设计图复查的结果的复查表的数据；显示控制部，将选择构件的3维模型或者工卡模具的3维模型的画面显示于虚拟空间；以及捕获部，检测用户的动作，根据用户的动作选择显示于虚拟空间的构件的3维模型或者工卡模具的3维模型。

根据本发明，检测用户的动作，根据用户的动作，选择显示于虚拟空间的构件的3维模型或者工卡模具的3维模型，从而能够高效地实施设计图复查。

附图说明

图1是示出本发明的实施方式的设计图复查装置的图

图2a是示出本发明的实施方式的产品模型db存储的数据的图

图2b是示出本发明的实施方式的工卡模具模型db存储的数据的图

图2c是示出本发明的实施方式的复查表db存储的数据的图

图2d是示出本发明的实施方式的构件模型db存储的数据的图

图2e是示出本发明的实施方式的复查模型db存储的数据的图

图3是示出本发明的实施方式的工卡模具的图

图4是示出本发明的实施方式的基准面板以及笔型捕获装置的图

图5是示出本发明的实施方式的菜单画面的图

图6是示出本发明的实施方式的能够滚动地显示的产品的3维模型和物品名的图

图7a是示出本发明的实施方式的能够滚动地显示的构件的3维模型和构件名的图

图7b是示出本发明的实施方式的构件的设计信息的图

图8是示出本发明的实施方式的能够滚动地显示的工卡模具的3维模型和名称的图

图9是示出本发明的实施方式的设计图复查处理的流程图

图10是示出本发明的实施方式的复查结果记录处理的流程图

图11是示出本发明的实施方式的显示于虚拟空间的设计图复查的对象的图

图12是示出本发明的实施方式的显示于虚拟空间的复查表的格式的图

图13是示出本发明的实施方式的显示于虚拟空间并记入有复查结果的复查表的图

图14是示出本发明的实施方式的记入有复查结果的复查表的图

图15是示出本发明的实施方式2的设计图复查装置的图

图16a是示出本发明的实施方式2的人事信息db存储的数据的图

图16b是示出本发明的实施方式2的据点信息db存储的数据的图

图16c是示出本发明的实施方式2的客户规格信息db存储的数据的图

(附图标记说明)

100、500：设计图复查装置；200：数据服务器部；210：产品模型db；220：工卡模具模型db；230：复查表db；240：构件模型db；250：复查模型db；260：人事信息db；270：据点信息db；280：客户规格信息db；300：通信部；310：手套型捕获装置；320：摄像装置；330：笔型捕获装置；331：加速度传感器；332：基准面板；333：按压传感器；340：hmd；350：扳手；351：基准标记；400：控制部；410：姿势捕获部；420：工卡模具捕获部；430：笔迹捕获部；440：显示控制部；450：菜单控制部；460：模型操作部；470：复查记录部；w1：壁板；f1：地板；b1：螺栓；s1：扳手；c1：凹陷部；j1：保持夹具；h1：螺孔。

具体实施方式

(实施方式1)

以下，参照附图，说明用于实施本发明的方式的设计图复查装置。

本实施方式的设计图复查装置100用于实施与包括升降机的产品的规划、对规格进行设计的阶段中的安装施工方法有关的设计图复查。设计图复查的目的在于验证能否实际地实施组装作业或者验证能否安全地实施作业。以下，说明使用设计图复查装置100来实施在使用工卡模具进行基于螺栓紧固的安装作业时是否存在使用工卡模具的空间的验证、是否与其它构件发生干扰的验证的例子。

如图1所示，设计图复查装置100具备：通信部300，访问数据服务器部200，该数据服务器部200存储用于设计图复查的3维模型的数据；手套型捕获装置310，检测用户的手以及指头的动作；摄像装置320，对工卡模具的动作进行摄像；笔型捕获装置330，检测笔迹；头戴式显示器(以下称为hmd)340，显示3维的虚拟空间；以及控制部400，执行设计图复查处理。

数据服务器部200具有存储数据的hdd(harddiskdrive，硬盘驱动器)，数据服务器部200存储：存储有与产品相关的数据的产品模型db(database，数据库)210、存储有与工卡模具相关的数据的工卡模具模型db220、存储有与复查表相关的数据的复查表db230、存储有与构件相关的数据的构件模型db240以及存储有与过去进行了设计图复查的产品、工卡模具、复查表的组合相关的数据的复查模型db250。

如图2a所示，产品模型db210将表示设计图复查对象的产品的id(identification，标识)即产品id、表示产品的物品名的物品名数据、表示图编号的数据、与图编号关联起来的产品的3维模型的数据、示出与图编号关联起来的产品的代表图、数据形式以及数据容量等、产品所包含的构件名的数据、用于组装的工卡模具的id即工卡模具id对应起来存储。产品的3维模型的数据包括用3维cad(computer－aideddesign，计算机辅助设计)系统制作出的产品的3维模型的数据。示出产品的代表图包括产品的主视图或者立体图。此外，在该例中，产品包括升降机所使用的墙壁、顶棚。产品模型db210将产品id与存储于工卡模具模型db220的工卡模具id关联起来，根据被关联起来的产品id和工卡模具id自动地选定针对每个产品模型而使用的工卡模具的候补。所选定的工卡模具模型显示于hmd340。作业员能够从显示的候补之中选择用于组装的工卡模具。

如图2b所示，工卡模具模型db220将用于产品的组装的工卡模具的id即工卡模具id、表示工卡模具的名称的名称数据、工卡模具的图编号、与图编号关联起来的工卡模具的3维模型的数据以及示出与图编号关联起来的工卡模具的代表图、以及数据形式及数据容量对应起来存储。工卡模具的3维模型的数据既可以为用3维扫描仪扫描工卡模具而得到的3维模型的数据，或者也可以为用3维cad系统制作出的工卡模具的3维模型的数据。示出工卡模具的代表图包括工卡模具的主视图或者立体图。

如图2c所示，复查表db230将表示记录设计图复查的结果的复查表的标题的头部信息、复查表的id即复查表id、客户id、实施设计图复查的项目即复查项目名、设计图复查的结果、实施设计图复查的实施者、实施日、包括记入于复查表的语言的种类的数据、记载于备考栏的数据关联起来保存。另外，复查表db230存储复查结果被输入到复查表之前的复查表的格式。在该例中，作为复查项目，有在进行需要螺栓紧固的工卡模具的安装作业时是否存在使用工卡模具的空间、是否与其它构件不发生干扰等。在实施设计图复查之后，被输入复查结果的复查表保存于复查表db230。

如图2d所示，构件模型db240将表示产品所包含的构件的id即构件id、表示构件的名称的构件名、构件的图编号、与图编号关联起来的构件的3维模型、示出与构件id关联起来的构件的代表图、构件的尺寸、以及构件的原材料对应起来存储。构件的3维模型的数据既可以为用3维扫描仪扫描构件的3维模型的数据，也可以为用3维cad系统制作出的构件的3维模型的数据。

如图2e所示，针对每个产品，复查模型db250将表示复查模型的复查模型id、保存的产品模型、工卡模具模型、复查表关联起来保存。在再次复查产品时，调出保存于复查模型db250的数据，从而能够将产品、工卡模具以及复查表汇总地调出。

图1所示的通信部300经由通信线路访问数据服务器部200，调出存储于数据服务器部200的数据，对数据服务器部200执行数据的发送。通信线路只要能够访问数据服务器部200，就不被限定，既可以为配置于设计图复查装置100的内部的访问数据服务器部200的内部总线，也可以为配置于外部的访问数据服务器部200的因特网线路。通信部300将从数据服务器部200调出的产品模型、工卡模具模型、构件模型、复查表的数据输出到控制部400。另外，通信部300将从控制部400输出的设计图复查的数据发送到数据服务器部200。

手套型捕获装置310具有手套的形状，具备检测手的位置以及朝向的传感器和检测各个指头是伸开还是弯曲的传感器。手套型捕获装置310检测佩戴的用户的手的位置和指头的动作，将与手的位置以及朝向和指头的动作相应的信号输出到控制部400。

摄像装置320为了检测工卡模具的位置以及朝向，对工卡模具所附带的作为目标的基准标记的图像进行摄像，将该图像的数据输出到控制部400。在该例中，对图3所示的工卡模具即扳手350所附带的作为目标的基准标记351的图像进行摄像，将该图像的数据输出到控制部400。扳手350为用于产品的组装的工卡模具，既可以为实物，也可以为模型。在工卡模具模型db220中保存有与扳手350对应的工卡模具即扳手的3维模型。

如图4所示，笔型捕获装置330为了检测笔迹而具备检测笔的动作以及倾斜度的加速度传感器331和检测在按压到基准面板332时施加到笔尖的力的按压传感器333。笔型捕获装置330将由加速度传感器331以及按压传感器333检测到的数据输出到控制部400。基准面板332具备触摸面板传感器，检测由笔型捕获装置330按压的部位，将表示检测到的部位的数据输出到控制部400。

hmd340为佩戴于头部的显示器装置，具备显示由右眼观察的图像的右显示部、显示由左眼观察的图像的左显示部以及检测头部的位置以及朝向的传感器。hmd340为非透射型的显示器装置，用户当佩戴hmd340时，无法直接视觉辨认实际空间。根据控制部400的控制，将从右眼的视点观察到的虚拟空间的图像显示于右显示部，将从左眼的视点观察到的虚拟空间的图像显示于左显示部，从而显示立体的虚拟空间的图像。另外，hmd340显示与佩戴的用户的头的位置以及朝向相应的3维的虚拟空间。

图1所示的控制部400具备cpu(centralprocessingunit，中央处理单元)、rom(readonlymemory，只读存储器)、ram(randomaccessmemory，随机存取存储器)。通过由cpu读出存储于rom的程序并在ram上执行，控制部400作为如下单元发挥功能：姿势捕获部410，取得用户的手以及指头的动作；工卡模具捕获部420，取得配置于实际空间的工卡模具的位置以及朝向；笔迹捕获部430，读入基于笔型捕获装置330的笔迹；显示控制部440，控制显示于hmd340的图像；菜单控制部450，调出设计图复查所需的数据；模型操作部460，使显示于虚拟空间的3维模型移动、旋转；以及复查记录部470，将复查结果记录于复查表db230。

姿势捕获部410解析从手套型捕获装置310输出的信号，对作为用户的手的动作的用户的手的加速度进行二次积分，从而取得手的位置以及朝向和指头的动作，存储于ram。指头的动作包括各个指头是伸开还是弯曲的动作。在该例中，姿势捕获部410将弯曲食指的动作识别为点击的动作，将使食指和中指伸开而左右移动的动作识别为滚动的动作。

工卡模具捕获部420获取由摄像装置320摄像而得到的附带有作为目标的基准标记的工卡模具的图像，存储于ram。工卡模具捕获部420解析该图像，取得工卡模具的位置以及朝向。在该例中，工卡模具捕获部420获取图3所例示的附带有作为目标的基准标记351的扳手350的图像，存储于ram，解析该图像，取得扳手350等工卡模具的位置以及朝向。

图1所示的笔迹捕获部430解析从笔型捕获装置330以及基准面板332输出的信号，取得描绘于基准面板332的部位以及利用笔型捕获装置330描绘的笔迹，存储于ram。

显示控制部440控制在用户佩戴的hmd340显示为作为3维的虚拟空间的图像。该图像包括产品的3维模型、工卡模具的3维模型、构件的3维模型以及复查表的格式。工卡模具的3维模型显示于与配置于实际空间的工卡模具重叠的位置。复查表的格式显示于与基准面板332重叠的位置。

菜单控制部450从产品模型db210、工卡模具模型db220、复查表db230、构件模型db240进行数据的调出、选择、编辑。菜单控制部450当受理开始设计图复查处理的指示时，经由hmd340，将图5所例示的菜单画面显示于虚拟空间。菜单画面在执行设计图复查处理的期间显示于虚拟空间。菜单画面包括“产品模型选择”、“工卡模具选择”、“复查表选择”以及“详细内容显示”。

图1所示的菜单控制部450响应于基于佩戴手套型捕获装置310的用户的姿势或者基于笔型捕获装置330的笔迹，执行选择产品模型、工卡模具模型、复查表的处理。

以下，说明菜单控制部450执行的处理。

(1)产品模型的选择

菜单控制部450响应于通过基于用户的姿势点击显示于菜单画面的“产品模型选择”的动作，从产品模型db210调出示出产品的代表图和物品名。之后，菜单控制部450将示出图6所例示的产品的代表图和物品名的一览能够滚动地显示于虚拟空间。菜单控制部450响应于用户的指示滚动的动作，使显示于虚拟空间的示出产品的代表图和物品名滚动。另外，菜单控制部450响应于由用户点击选择对象的产品的动作，选择所指示的产品。当选择出产品时，菜单控制部450如图7a所例示那样将构成选择出的产品的构件的代表图和构件名能够滚动地显示于虚拟空间。

(2)构件的选择

菜单控制部450响应于由用户指示滚动的动作，使显示于虚拟空间的构件的代表图和构件名滚动。另外，菜单控制部450响应于由用户点击实施复查的对象的构件的动作，选择所指示的构件。当用户点击图5所示的“详细内容显示”时，菜单控制部450参照构件模型db240，显示包括选择出的图7b所示的构件名、图编号、尺寸、原材料的设计信息。

(3)工卡模具模型的选择

菜单控制部450响应于点击图5所示的菜单画面的“工卡模具选择”的动作，从工卡模具模型db220调出对象的工卡模具，将图8所示的工卡模具的代表图和名称的一览能够滚动地显示于虚拟空间。在选择出选择对象的工卡模具之后，当未图示的目标联动按钮被点击时，菜单控制部450进行分配，显示控制部440在显示控制部440将工卡模具的3维模型显示于与工卡模具捕获部420取得的配置于实际空间的工卡模具重叠的位置。

(4)复查表的选择

菜单控制部450响应于由用户点击图5所示的菜单画面的“复查表选择”的动作，从复查表db230调出复查表的格式，显示于与基准面板332重叠的位置。根据对由笔型捕获装置330输入的笔迹进行文本变换而输入的名称来进行复查表的格式选择。另外，在再次实施设计图复查的情况下，从复查表db230调出在前次设计图复查中记录的复查表。

模型操作部460根据佩戴手套型捕获装置310的用户的姿势，在不与工卡模具的3维模型以及其它构件的3维模型接触的范围使显示于虚拟空间的构件的3维模型移动以及旋转。当用户使触摸于构件的3维模型的食指上下左右移动时，模型操作部460使显示于虚拟空间的构件的3维模型旋转。当用户用食指和拇指夹持时，移动对象的模型被选择，当在夹持的状态下使手移动时，模型操作部460使构件的3维模型进行移动。当用户用中指点击构件的3维模型内的部分时，反复显示或非显示。

另外，模型操作部460根据配置于实际空间且由摄像装置320摄像而得到的工卡模具的位置以及朝向，在不与其它工卡模具的3维模型以及构件的3维模型接触的范围使显示于虚拟空间的工卡模具的3维模型移动以及旋转。

当用户操作配置于实际空间的工卡模具，实施利用显示于虚拟空间的工卡模具的3维模型组装构件的3维模型的动作时，模型操作部460响应于用户的动作，使显示于虚拟空间的构件的3维模型移动、旋转。当在组装中途构件的3维模型与其它构件的3维模型接触的情况下，模型操作部460判定为构件与其它构件发生干扰而无法组装，报告错误。另外，当在组装中途工卡模具的3维模型与构件的3维模型接触地移动的空间为基准值以下的情况下，模型操作部460判定为没有使用工卡模具的空间，报告错误。在该例中，在能够使作为工卡模具的扳手350移动的角度小于基准角度的情况下，模型操作部460视为使用工卡模具的空间少，报告错误。

复查记录部470将由用户使用笔型捕获装置330而记入的复查结果记录于复查表db230。复查记录部470利用基准面板332所具备的触摸面板传感器来确定由笔型捕获装置330记载于显示于与基准面板332重叠的位置的复查表中的哪个位置，探测由用户使用笔型捕获装置330将复查结果输入到复查表的哪个位置。关于由笔型捕获装置330取得的笔迹，复查记录部470通过图案(pattern)识别来判别笔迹的语言，将笔迹数据变换为文本数据。具体而言，通过图案识别，根据笔迹的图案是表示字母、还是为汉字平假名混合、还是仅为汉字来判别语言。在笔迹为字母的情况下，根据拼写进一步判别语言。另外，复查记录部470将由笔型捕获装置330输入的文本的语言和输入了文本数据的复查表记录于复查表db230。

接下来，参照图9以及图10所示的流程图，以将图11所示的升降机的壁板w1安装于地板f1的工序的设计图复查为例，说明本实施方式的设计图复查装置100执行的设计图复查处理的动作。

用户将hmd340佩戴于头部，将手套型捕获装置310佩戴于手。设计图复查装置100当受理开始设计图复查处理的指示时，响应于此，开始图9所示的设计图复查处理。

当开始设计图复查处理时，设计图复查装置100经由hmd340，将图5所示的菜单画面显示于虚拟空间(步骤s101)。菜单画面包括“产品模型选择”、“工卡模具选择”、“复查表选择”以及“详细内容显示”。接下来，当检测到点击“产品模型选择”的姿势时，菜单控制部450将图6所示的产品的代表图和物品名能够滚动地显示于虚拟空间(步骤s102)。当使产品的代表图和物品名滚动，检测到通过点击选择对象的产品模型而选择产品的姿势时，菜单控制部450从产品模型db210选择产品(步骤s103)。

当产品被选择时，菜单控制部450将图7a所示的构成产品的构件模型的代表图和构件名能够滚动地显示于虚拟空间(步骤s104)。当使显示于虚拟空间的构件的代表图和构件名滚动，检测到通过点击选择对象的构件而选择构件的姿势时，菜单控制部450选择所点击的构件(步骤s105)。选择出的构件的3维模型显示于虚拟空间。在此，选择安装于升降机的地板f1的壁板w1和螺栓b1。

接下来，当检测到点击图5所示的“工卡模具选择”的姿势时，菜单控制部450将图8所示的工卡模具的代表图和构件名能够滚动地显示于虚拟空间(步骤s106)。当使工卡模具的代表图和构件名滚动，检测到通过点击选择对象的工卡模具而选择工卡模具的姿势时，菜单控制部450选择工卡模具(步骤s107)。在此选择出的工卡模具为保持夹具j1和扳手s1。保持夹具j1直至安装壁板w1为止保持于安装预定位置。当在选择对象的工卡模具被选择之后，未图示的目标联动按钮被点击时，菜单控制部450进行分配，显示控制部440将工卡模具的3维模型显示于与配置于实际空间的工卡模具重叠的位置(步骤s108)。具体而言，工卡模具捕获部420解析对工卡模具所附带的作为目标的基准标记进行摄像而得到的图像，检测工卡模具的位置和朝向。根据该工卡模具的位置和朝向，显示控制部440将工卡模具的3维模型显示于与配置于实际空间的工卡模具重叠的位置。

接下来，模型操作部460探测基于用户的姿势的组装作业，如图11所示，显示使用作为工卡模具的扳手s1将作为显示于虚拟空间的构件的壁板w1和螺栓b1组装于地板f1的安装预定位置的作业(步骤s109)。在此，设为预先在虚拟空间显示有地板f1。探测基于用户的姿势，模型操作部460使显示于虚拟空间的壁板w1移动到地板f1的安装预定位置。接下来，探测由用户使配置于实际空间的保持夹具j1移动的动作，模型操作部460使显示于虚拟空间的保持夹具j1移动。根据由用户使保持夹具j1移动的动作，模型操作部460使显示于虚拟空间的保持夹具j1移动到保持壁板w1的位置。接下来，探测基于用户的姿势，模型操作部460使显示于虚拟空间的螺栓b1移动到设置于壁板w1的凹陷部c1的螺孔h1。当探测到用户拧入螺栓b1的姿势时，螺栓b1临时紧固于显示于虚拟空间的螺孔h1。接下来，当探测到利用配置于实际空间的扳手350紧固螺栓b1的动作时，模型操作部460利用显示于虚拟空间的扳手s1实施螺栓b1的最终紧固。此时的扳手s1的可动范围为不与凹陷部c1接触的范围。在能够使扳手s1移动的角度小于基准角度的情况下，模型操作部460视为使用工卡模具的空间少，报告错误。在该例中，无法使扳手s1移动基准角度以上，所以报告错误。

接下来，开始复查结果记录处理(步骤s110)。当图5所示的菜单画面的“复查表选择”被点击时，菜单控制部450如图10所示从复查表db230调出图12所示的复查表的格式(步骤s201)。接下来，显示控制部440将复查表的格式显示于与基准面板332重叠的位置(步骤s202)。当显示复查表时，用户如图13所示利用笔型捕获装置330记入复查结果、实施者、实施日。在此，临时紧固了螺栓b1，所以将○记入于“螺栓b1与壁板w1是否未发生干扰”的项目作为是合格。另外，未能使扳手s1移动基准角度以上，所以将×记入于“是否存在紧固螺栓b1的空间”的复查项目的结果作为不合格。用户将不合格的理由或改善点记入于复查表的备考栏。在此，在备考栏记载“凹陷部c1的空间小，所以最好增大凹陷部c1的大小”这样的意思。当用户使用笔型捕获装置330将复查结果记入于复查表的格式时，复查记录部470根据由笔型捕获装置330取得的笔迹来判别语言(步骤s203)。接下来，复查记录部470确定在显示于与基准面板332重叠的位置的复查表的格式所记入的部位，探测复查结果被输入到复查表的格式中的哪个位置(步骤s204)。接下来，复查记录部470如图14所示将由笔型捕获装置330输入的笔迹变换为文本数据(步骤s205)。接下来，复查记录部470将文本的语言和将文本数据输入到与探测到的位置对应的项目的复查表记录于复查表db230(步骤s206)。

接下来，返回到图9所示的设计图复查处理，判定是否输入了结束的指示(步骤s111)。当判定为未输入结束的指示时(步骤s111；否)，直至输入结束指示为止，重复步骤s104～步骤s111。当判定为输入了结束的指示时(步骤s111；是)，结束设计图复查处理。

具有上述结构的设计图复查装置100根据用户的姿势，对能够滚动地显示的3维模型执行滚动以及点击，从而容易地选择产品、构件、工卡模具。另外，通过对由笔型捕获装置330输入的笔迹进行文本变换，从而记录复查结果。由此，佩戴hmd340的用户能够容易地操作设计图复查装置100，能够高效地实施设计图复查。另外，通过判别用何种语言记入于复查表，能够确定实施设计图复查的国家。

(实施方式2)

实施方式2的设计图复查装置500与实施方式1的设计图复查装置100相比，不同点在于，如图15所示，在数据服务器部200还存储：存储与作业员有关的信息的人事信息db260、存储与制造据点有关的信息的据点信息db270以及存储与客户有关的信息的客户规格信息db280。

如图16a所示，针对每个作业员，人事信息db260将员工人数、姓名、所属的据点、工作开始时期、进修历史、表示技能信息的据点id关联起来保存。设计图复查装置500在实施设计图复查处理时调出保存于人事信息db260的数据，从而能够将员工人数、姓名、据点、工作开始时期、进修历史、技能信息汇总地调出。

如图16b所示，针对每个据点id，据点信息db270将据点、产品、产品id关联起来保存。设计图复查装置500在实施设计图复查处理时，调出保存于据点信息db270的数据，从而能够针对每个据点限定产品而调出。

如图16c所示，针对每个客户id，客户规格信息db280将客户名称、产品、数量、选项1、选项2关联起来保存。设计图复查装置500在实施设计图复查处理时，调出保存于客户规格信息db280的数据，从而能够作为设计图复查处理时的参考信息。

设计图复查装置500活用存储于人事信息db260的每个作业员的工作开始时期、进修历史、技能信息，根据技能、熟练度、经验，针对每个作业员而改变显示的复查表而进行显示。例如，在复查表db230中保持以附加照片的形式详细地记载复查次序的复查表a和简洁地记载复查次序的复查表b，根据作业员的经验年数来判断熟练度，对于经验年数为基准年以上的有经验的人，将复查表a显示于hmd340，对于经验年数小于基准年的初学者，将复查表b显示于hmd340。作业员的经验年数根据存储于人事信息db260的工作开始时期来计算。设计图复查装置500也可以根据进修历史、技能信息，判定是显示复查表a还是显示复查表b。

设计图复查装置500根据表示每个作业员所属的据点的信息来判断所负责的产品，选定对应的产品模型和复查表的候补，显示于hmd340。作业员从显示的候补之中选择产品模型和复查表。表示据点的信息与产品的关联建立通过人事信息db260的表示据点的信息与据点信息db270的表示产品的信息的匹配来进行。从产品模型db210、工卡模具模型db220、复查表db230以及构件模型db240调出作业员负责的产品模型、构成产品的构件的3维模型、用于产品的组装的工卡模具的3维模型以及复查表，显示于hmd340。

将客户规格信息db280与复查表db230关联起来，每当显示复查表时，将客户规格作为参考信息而显示于hmd340。客户规格信息db280与复查表db230的关联建立根据客户id来进行。

具有上述结构的设计图复查装置500能够显示与作业员的熟练度相应的复查表。另外，设计图复查装置500判断作业员所负责的产品，选定对应的产品模型和复查表的候补，显示于hmd340，所以作业员能够容易地调出产品模型和复查表。

(变形例)

在上述实施方式中，说明了设计图复查装置100、500具备手套型捕获装置310，取得用户的手的动作以及指头的动作的例子。设计图复查装置100、500也可以具备取得用户的全身的动作的全身捕获装置。在该情况下，设计图复查装置100、500使用目标联动的工卡模具350，取得实际的组装作业或安装作业中的用户的全身的动作。根据取得的全身的动作，将干扰的有无、干扰长度、干扰构件的干扰检查结果的历史保存于复查表。另外，根据干扰检查的结果来计算不发生干扰的构件的构造，能够滚动地显示候补。根据姿势从候补之中选择，将选择结果保存于构件模型db240。

具备全身捕获装置的设计图复查装置100、500也可以获取用户的手或脚、工卡模具的动作路线的日志数据，使日志数据反映到复查表。例如，针对是否为将螺栓紧固的设计这样的检查项目，当在设计图复查时在虚拟空间拿着工卡模具并实际上进行将螺栓紧固的动作而工卡模具与产品发生干扰而无法紧固的情况下，作为不合格而记录于复查表。另外，也可以活用这些验证结果的日志数据，反映到试制设计时的评价项目检查项目。

另外，设计图复查装置100、500也可以将由穿戴有全身捕获装置的熟练作业员实施的作为模范的作业次序及手或脚的运动作为动画而记录。另外，也可以通过将作业时的注意点作为注释，利用笔型捕获装置330写入到产品或者构件的3维模型上，从而活用为作业简介。另外，通过将作业员间的作业诀窍及联络事项也写入到产品或者构件的3维模型上，能够实现作业员间的信息共享。除此之外，也可以还测量新人作业员的作业次序及手或脚的运动，使熟练作业员与新人作业员的差别可见化，活用于教育。例如，也可以显示熟练作业员与新人作业员的构件单位中的组装顺序的不同、作业姿势、作业时的视线的不同等。

在上述实施方式中，也可以能够经由因特网线路，从主据点以及包括国内外的副据点访问数据服务器部200。在该情况下，将具备能够访问数据服务器部200的通信部300、手套型捕获装置310、摄像装置320、笔型捕获装置330、hmd340以及控制部400的设计图复查装置100、500配置于主据点和副据点，从而能够在主据点和副据点实施设计图复查，能够集中管理保存于数据服务器部200的数据。由此，复查结果实时地被反映，能够在主据点以及副据点共享。例如，在构件的尺寸信息变更的情况下，变更3维cad数据，实时地保存于产品模型db210。另外，设计图复查装置100、500也可以经由因特网线路，访问配置于包括海外据点的其它据点的设计图复查装置100、500，共享显示有虚拟空间中的3维模型的画面，与配置于其它据点的设计图复查装置100、500共同地实施设计图复查。通过这样做，能够在多个据点共同地进行实时的设计图复查。通过这样做，即使当在主据点难以掌握作为海外据点的副据点的法规或趋势的情况下，通过在副据点实施设计图复查，也能够应对。另外，即使在为了确认每个客户的详细的规格而海外据点的工作人员及顾客实施设计图复查的情况下，也能够高效地实施作业。因而，针对包括升降机的产品，由本实施方式的设计图复查装置100、500实施设计图复查，从而易于销售到全世界。

在世界各国中，趋势及爱好嗜好各种各样，所以产品的规格也纷繁复杂。通过实时地反映多个据点处的设计图复查、复查结果，能够进行全球的设计图设计。例如，从利用笔型捕获装置330描绘的笔迹识别实施了设计图复查的国家，将与该国相符的候补的构件显示于虚拟空间，从而能够进行实时的全球的产品设计。另外，在子画面，显示表示显示中的构件的构件结构的结构树。每个构件的树结构从存储于数据服务器部200的设计信息bd调出并显示。

在根据复查的结果而判断为需要变更构件的规格的情况下，根据复查结果，从构件模型db240检索替代的构件的候补并进行显示。例如，在根据复查结果而发现构件a与构件b发生5mm干扰的情况下，从构件模型db240检索规格与构件a相同且比构件a小5mm的构件，作为替代构件的候补而显示于虚拟空间。另外，也可以是数据服务器部200存储将构件名、构件的规格、构件的价格以及交付期限关联起来保存的购买信息db，显示购买信息db所包含的替代构件的候补。在该情况下，也可以按照价格从低到高的顺序、或者交付期限从短到长的顺序排列地显示。

在上述实施方式中，说明了hmd340为非透射型的例子，但hmd340也可以为半透射型。在该情况下，工卡模具的3维模型与配置于实际空间的工卡模具重叠显示。复查表与基准面板332重叠显示。另外，说明了hmd340显示虚拟空间的例子，但只要能够显示虚拟空间，也可以使用除了hmd340以外的显示装置。也可以代替hmd340而使用液晶显示器。

在上述实施方式中，说明了手套型捕获部310探测作为用户的动作的姿势的例子，但用户的姿势也可以由其它单元探测，也可以由摄像装置对手以及指头的运动进行摄像，根据摄像得到的图像来探测姿势。另外，用户的动作包括用户的身体的运动以及声音，既可以为头、胳膊或者脚的运动，也可以为声音。

在上述实施方式中，说明了笔型捕获装置330具备传感器的例子，但也可以是基准面板332具备触摸面板传感器，利用触摸面板传感器探测用不具备传感器的笔描绘于基准面板332的笔迹。

另外，进行由设计图复查装置100、500、数据服务器部200所执行的设计图复查处理的作为中心的部分不依赖于专用的系统，能够使用通用的信息便携终端、个人计算机等来执行。由设计图复查装置100、500、数据服务器部200使用的程序分别能够储存于cd－rom(compactdiscreadonlymemory，光盘只读存储器)、dvd(digitalversatiledisc，数字多功能光盘)，usb闪存驱动器、存储卡、hdd(harddiskdrive，硬盘驱动器)等计算机能够读取的记录介质而分发。而且，通过将上述程序安装于特定的或者通用的计算机，能够使该计算机作为设计图复查装置100、500、数据服务器部200发挥功能。

另外，也可以将上述程序储存于因特网上的其它服务器所具有的存储装置，从该服务器下载上述程序。

本发明能够不脱离本发明的广义的精神和范围地进行各种实施方式以及变形。另外，上述实施方式是用于说明本发明的实施方式，并非限定本发明的范围。即，本发明的范围不是通过实施方式示出，而是通过权利要求书示出。而且，在权利要求书内以及与其等同的发明的意义的范围内实施的各种变形被视为本发明的范围内。

本申请基于在2017年5月25日申请的日本专利申请特愿2017-103675号。在本说明书中，取得日本专利申请特愿2017-103675号的说明书、权利要求书、附图整体作为参照。