显示装置的制作方法

本发明涉及显示装置和计算机程序。

背景技术：

以往，作为康复装置，已知有使患者(用户)观察到已瘫痪的身体部分移动的装置。例如，在专利文献1所记载的康复装置中，在患者(用户)已瘫痪的手上粘贴标记，通过使用头部装配式显示装置而在被标记识别出的手的显示位置显示作为动作的示范的动画。

在专利文献1所记载的康复装置中，需要在患者的已瘫痪的手上粘贴标记，但是已瘫痪的手是不方便的部分，产生了标记的安装并不容易这样的问题。另外，标记成为手的动作的障碍，患者有可能无法顺畅地进行康复运动。此外，期望装置的小型化、低成本化、资源节约化、制造的容易化、可用性的提高等。

现有技术文献

专利文献

专利文献1：日本特开2015－39522号公报

专利文献2：日本特开2015－103010号公报

技术实现要素：

本发明是为了解决上述技术问题中的至少一部分而作成的，能够作为以下的方式来实现。

(1)本发明的一个方式是显示装置。该显示装置具备：显示部，能够用于视觉识别进行协调运动的一对身体部分；拍摄部，能够拍摄已安装到所述一对身体部分中的一方的身体部分的标记；以及显示控制部，使所述显示部显示表示所述一对身体部分中的另一方的身体部分的正常动作的图像，所述显示控制部基于被拍摄到的所述标记的位置来推定所述协调运动时在所述显示部中被视觉识别的有关所述另一方的身体部分的位置，并且，所述显示控制部使所述图像显示于推定出的所述位置。根据该方式的显示装置，由于根据安装于作为健康的一方的身体部分的标记的位置来决定表示存在障碍的另一方的身体部分的正常动作的图像的显示位置，因此无需在存在障碍的另一方的身体部分安装标记。因此，能够消除为安装标记而苦恼的情况，并且能够防止康复运动由于标记而无法顺畅地进行的情况。

(2)在上述方式的显示装置中，也可以是，所述显示控制部预先存储能够确定所述协调运动时所述另一方的身体部分相对于所述一方的身体部分的相对位置的参照信息，并且，所述显示控制部基于被拍摄到的所述标记的位置与所述参照信息而进行被视觉识别的所述位置的推定。根据该构成，能够高精度地推定协调运动时在显示部中被视觉识别的关于存在障碍的身体部分的位置。因此，能够进一步提高将图像错认为自己的手的错觉效果。

(3)在上述方式的显示装置中，也可以是，所述一对身体部分是双手，所述协调运动是将把持物体通过所述双手把持的运动，所述参照信息是所述把持物体的大小。根据该方式的显示装置，能够使图像与存在障碍的身体部分更高精度地重叠。

(4)在上述方式的显示装置中，也可以是，所述显示部是头部装配式的显示部。根据该方式的显示装置，能够通过装配于头部而进一步提高增强现实感。

(5)本发明的另一方式是计算机程序。所述计算机程序用于控制显示装置，所述计算机程序具备：能够用于视觉识别进行协调运动的一对身体部分的显示部、和能够拍摄已安装到所述一对身体部分中的一方的身体部分的标记的拍摄部，所述计算机程序在计算机上实现：使所述显示部显示表示所述一对身体部分中的另一方的身体部分的正常动作的图像显示于所述显示部的功能，所述功能基于被所述拍摄部拍摄到的标记的位置来推定所述协调运动时在所述显示部中被视觉识别的有关所述另一方的身体部分的位置，并且，所述显示控制部使所述图像显示于推定出的所述位置。该方式的计算机程序与上述方式的显示装置同样地能够消除为安装标记而苦恼的情况，并且能够防止康复运动由于标记而无法顺畅地进行的情况。

附图说明

图1是示出作为本发明的一个实施方式的头部装配式显示装置(HMD)的构成的说明图。

图2是详细地示出左眼用显示部的构成的说明图。

图3是功能性地示出HMD的构成的框图。

图4的(a)和(b)是示出标记的粘贴位置的说明图。

图5是示出准备操作的情况的说明图。

图6是示出由控制装置执行的康复处理的前半部分的流程图。

图7是示出由控制装置执行的康复处理的后半部分的流程图。

图8是示出在步骤S170中显示的消息的一个例子的说明图。

图9是示出在通过健康的手抓住名片的状态下被使用者视觉识别的显示画面的说明图。

图10是示出运动模型的一个例子的说明图。

图11是示出再现时被使用者视觉识别的图像的一个例子的说明图。

符号说明

10头部装配式显示装置(HMD)；20显示装置；30L左眼用显示部；30R右眼用显示部；32L左眼用图像形成部；32R右眼用图像形成部；34L左眼用导光部；36L左眼用反射部；36R右眼用反射部；38L左眼用遮光件；38R右眼用遮光件；51照相机；70控制装置；72触摸板；74操作按钮部；80CPU；82存储部；82a康复处理部；84运动模型数据库；86输入信息取得部；88电源部；90电缆；321L左眼用图像生成部；322L左眼用投射光学系统；BL左眼用背光光源；LM左眼用光调制元件；BC名片；HU使用者；NH健康手；FH障碍手；SC显示画面；TB康复台；M1～M4标记；MD运动模型；Ga AR图像

具体实施方式

下面，说明本发明的实施方式。

A.HMD的基本构成：

图1是示出作为本发明的一个实施方式的头部装配式显示装置10的构成的说明图。头部装配式显示装置10是装配于头部的显示装置，也被称为头戴式显示器(Head Mounted Display、HMD)。该HMD10用于进行单侧手的功能恢复训练(康复)。在本实施方式中，HMD10是使用者在视觉识别虚像的同时也能够视觉识别现实空间的光学透射型(透视型)。

HMD10具备：显示装置20，具有眼镜这样的形状；以及控制装置(控制器)70。显示装置20与控制装置70之间通过有线或者无线可通信地连接。在本实施方式中，显示装置20与控制装置70通过有线的电缆90连接。控制装置70在与显示装置20之间经由电缆90针对图像的信号(图像信号)、控制的信号(控制信号)进行通信。

显示装置20具备左眼用的显示部(左眼用显示部)30L和右眼用的显示部(右眼用显示部)30R。

左眼用显示部30L具备左眼用的图像形成部(左眼用图像形成部)32L、左眼用的导光部(图2示出的左眼用导光部34L)、左眼用的反射部(左眼用反射部)36L以及左眼用遮光件38L。右眼用显示部30R具备右眼用的图像形成部(右眼用图像形成部)32R、右眼用的导光部(与图2示出的左眼用导光部34L相同)、右眼用的反射部(右眼用反射部)36R以及右眼用遮光件38R。

图2是详细地示出左眼用显示部30L的构成的说明图。图2是从正上方观察左眼用显示部30L的图。左眼用显示部30L所具备的左眼用图像形成部32L配置于眼镜的镜腿(眼镜腿)的根部，具备左眼用的图像生成部(左眼用图像生成部)321L和左眼用的投射光学系统(左眼用投射光学系统)322L。

左眼用图像生成部321L具备左眼用的背光灯的光源(左眼用背光灯光源)BL和左眼用的光调制元件(左眼用光调制元件)LM。在本实施方式中，背光灯光源BL由各个红色、绿色以及蓝色这样的发光色的光源的集合构成。作为各光源，例如，能够使用发光二极管(LED)等。在本实施方式中，光调制元件LM由作为显示元件的液晶显示装置构成。

左眼用显示部30L如下这样发挥作用。当从控制装置70(图1)向左眼用图像生成部321L输入有左眼用的图像信号时，左眼用背光灯光源BL的各光源射出红色光、绿色光以及蓝色光。从各光源射出的红色光、绿色光以及蓝色光扩散而被投射到左眼用光调制元件LM。左眼用光调制元件LM根据从控制装置70向左眼用图像生成部321L输入的图像信号，对投射的红色光、绿色光以及蓝色光进行空间调制，从而射出与图像信号相对应的图像光。

左眼用投射光学系统322L例如由投射透镜组构成，投射从左眼用图像生成部321L的左眼用光调制元件LM射出的图像光，并形成为平行的状态的光束。通过左眼用投射光学系统322L而形成为平行状态的光束的图像光被投射到左眼用导光部34L。

左眼用导光部34L将来自左眼用投射光学系统322L的图像光导向左眼用反射部36L具有的三棱镜的预先确定的面(半透射反射面)。在形成于左眼用反射部36L的半透射反射面的表里中的、在装配时朝向使用者的左眼EY的一侧施加有镜层等反射涂层。被导向形成于左眼用反射部36L的半透射反射面的图像光通过施加有该反射涂层的面而朝向使用者的左眼EY全反射。由此，从左眼用反射部36L的预先确定的位置的区域(图像取出区域)输出与所述被引导的图像光相对应的图像光。输出的图像光进入使用者的左眼EY而在该左眼EY的视网膜上形成图像(虚像)。

从现实空间向左眼用反射部36L入射的光的至少一部分透过形成于左眼用反射部36L的所述半透射反射面而被导向使用者的左眼EY。由此，使用者能够将由左眼用图像形成部32L形成的图像与来自现实空间的光学图像重叠地看到。

左眼用遮光件38L配置于左眼用导光部34L的与使用者的左眼EY相反的一侧，在本实施方式中，是能够拆卸的。左眼用遮光件38L在明亮的场所或者希望集中于画面时安装，由此使用者能够清晰地看到由左眼用图像形成部32L形成的图像。

如图1所示，右眼用显示部30R具有与上述构成的左眼用显示部30L左右对称的相同的构成，发挥与左眼用显示部30L相同的作用。其结果是，使用者通过将显示装置20装配于头部而看见与从显示装置20的图像取出区域(左眼用反射部36L的图像取出区域、右眼用反射部36R的图像取出区域)输出的图像光相对应的图像被显示，由此能够识别该图像。另外，使用者通过使来自现实空间的光的至少一部分透过显示装置20的图像取出区域(左眼用反射部36L的图像取出区域、右眼用反射部36R的图像取出区域)而能够在维持将显示装置20装配于头部的状态下看到现实空间。

这样，使用者能够同时看到(视觉识别)显示于显示装置20的图像取出区域中的图像(以下，仅称为“显示图像”)和透过而来的现实空间。显示图像成为带给使用者增强现实感(AR：Augmented Reality)的AR图像。

在显示装置20中，在使用者装配了显示装置20时的与使用者的眉间相对应的位置设有照相机51。因此，在使用者将显示装置20装配于头部的状态下，照相机51拍摄使用者朝向的方向的现实空间。照相机51既可以是单眼照相机，也可以是立体照相机。

控制装置70是用于控制显示装置20的装置。控制装置70具备触摸板72和操作按钮部74。触摸板72检测触摸板72的操作面上的接触操作，输出与检测内容相对应的信号。作为触摸板72，能够采用静电式或压力检测式、光学式等各种触摸板。操作按钮部74具有各种操作按钮，通过检测出各操作按钮的操作而输出与检测内容相对应的信号。由使用者操作触摸板72和操作按钮部74。

图3是功能性地示出HMD10的构成的框图。控制装置70具备CPU80、存储部82、运动模型数据库84、输入信息取得部86以及电源部88，各部通过总线等彼此连接。

存储部82由ROM、RAM、DRAM、硬盘等构成。在存储部82中储存有以操作系统(OS)为代表的各种计算机程序。在本实施方式中，作为被储存的计算机程序之一而具有康复用程序。

运动模型数据库84是积存运动模型的数据库。运动模型是将康复时作为目标的运动进行模型化后的动画数据，在本实施方式中，预先积存有左手的运动模型和右手的运动模型。此外，运动模型也可以代替动画数据而设为若干静止图像数据的集合。而且，运动模型也可以是由手的特征点位置的集合构成的数据，只要是能够构筑动画的数据即可，还能够更换为任一种数据。而且，运动模型也可以包括运动的次数、速度等参数。

输入信息取得部86包括所述触摸板72和操作按钮部74。输入信息取得部86输入与来自触摸板72、操作按钮部74的检测内容相对应的信号。

电源部88将电源供应到控制装置70和显示装置20所具备的需要电源的各构成部。

CPU80通过读取并执行储存在存储部82的计算机程序而实现各种功能。具体地说，CPU80实现如下功能：存在来自输入信息取得部86的操作的检测内容的输入情况下执行与该检测结果相对应的处理、对存储部82进行数据的读写、以及控制从电源部88向各构成部的电源的供给。

另外，CPU80也通过读取并执行储存在存储部82的康复用程序而作为执行康复处理的康复处理部82a发挥功能。康复处理是用于通过显示表示存在障碍的身体部分(在此为单侧的手)的正常动作的AR图像而使HMD10的使用者进行协调运动训练的处理。CPU80和作为由CPU80执行的功能的康复处理部82a相当于“显示控制部”的下位概念。

B.关于准备操作：

在本实施方式中，设想康复的对象、即作为HMD10的使用者是单手存在障碍，单手是健康的患者。作为障碍，例如有脑中风导致的瘫痪。以下，将存在障碍的手称为“障碍手”，将没有障碍的手称为“健康手”。此外，“健康的”是指无需限于完全没有障碍的状态，也可以是在功能上稍微存在障碍的情况。

使用者在使用HMD10进行协调运动训练时，需要进行两个准备操作。第一个准备操作是粘贴标记的操作。标记是用于指定在HMD10中显示AR图像的位置的标识。

图4的(a)和(b)是示出标记的粘贴位置的说明图。图4的(a)表示健康手的手掌一侧，图4的(b)表示健康手的手背一侧。在此，将右手设为健康手。准备四个标记。如图4的(a)所示，在健康手NH的手掌一侧粘贴有三个标记M1、M2、M3。详细地说，分别是在手掌的拇指的根部(所谓的金星丘)粘贴第一标记M1，在手掌的中指的前端粘贴第二标记M2，在手掌的小指之下的从手腕起的鼓起部(所谓的火星丘)粘贴第三标记M3。

此外，这些标记M1～M3的粘贴位置是适合于限定健康手NH的外缘的位置，但无需限于上述例子。例如第一标记M1也能够变换为手掌的拇指的前端位置，第三标记M3也能够变换为手掌的小指的前端位置。另外，标记的数量也无需限于三个，能够为各种数量，例如是在第一～第三标记M1～M3将拇指的前端位置、食指的前端位置、无名指的前端位置相加而得到的合计为七个的构成，粘贴在拇指的前端位置和手掌的小指的前端位置的合计为两个的构成等。

如图4的(b)所示，在健康手NH的手背一侧的拇指和食指之间粘贴有第四标记M4。第四标记M4的粘贴位置无需限于此，只要是在后述的协调运动训练的初始姿势下能够识别健康手的位置即可，还能够设为任一种位置。另外，健康手NH的手背一侧的标记也无需限于一个，还能够设为多个。

由康复的辅助者进行各标记M1～M4的粘贴。此外，如果使用者能够通过作为存在障碍的一侧的左手进行标记M1～M4的粘贴，则也可以设为通过使用者自己粘贴。

图5是示出第二个准备操作的情况的说明图。当第一个准备操作完成时，作为第二个准备操作，使用者在将HMD10的显示装置20装配于头部的状态下，位于办公桌或工作台等康复台TB的前面。并且，使用者HU将作为障碍手FH的左手和作为健康手NH的右手伸出到康复台TB之上。健康手NH设为使手掌朝向上侧并手张开的状态。“手张开的状态”是指各手指的关节伸展，各手指之间为张开的状态，即所谓的布的状态。在健康手NH上通过第一个准备操作而粘贴有标记M1～M4。障碍手FH设为使手掌朝向上侧的自然状态、即各手指的关节稍微弯曲的状态。在本实施方式中，在康复台TB之上放置有作为康复用的小道具的把持物体，例如名片BC。

在图5的状态下，通过操作HMD10的控制装置70的触摸板72或操作按钮部74(图1)，从而对HMD10指示执行康复处理。该操作例如由康复的辅助者而作出。此外，也可以是，使用者使用健康手进行上述操作，然后，直接将健康手设为图5的状态。

C.康复处理：

图6和图7是示出由控制装置70执行的康复处理的流程图。该康复处理是康复处理部82a(图3)的处理，当由输入信息取得部86(图3)接收执行康复处理的指示时，通过CPU80开始执行。

如图6所示，当开始处理时，首先，CPU80通过照相机51进行拍摄(步骤S110)，判定在由该拍摄得到的拍摄图像中是否包括粘贴于手掌一侧的标记M1～M3(步骤S120)。在此，包括标记M1～M3是指包括三个标记M1～M3的全部，在不包括标记M1～M3中的一个的情况下，判定为不包括标记M1～M3。

在图5的状态下，使用者当进行康复时将视线转移到手所在的康复台TB。照相机51拍摄使用者朝向的方向的现实空间，因此在将视线转移到康复台TB时，在由照相机51的拍摄图像中包括标记M1～M3，在步骤S120中进行肯定判定。在进行了肯定判定的情况下，CPU80将处理转移到步骤S130。另一方面，在步骤S120中判定为不包括标记M1～M3的情况下，CPU80将处理返回到步骤S110，重复执行步骤S110到步骤S120的处理。

在步骤S130中，CPU80从由步骤S110得到的拍摄图像中检出各标记M1～M3，求出各标记M1～M3的二维位置坐标。表示二维位置坐标的坐标系与显示装置20的显示画面对应。由于三个标记M1～M3限定健康手NH的边缘，因此这些标记M1～M3的二维位置坐标的扩展由使用者的手的(实际的)大小和从标记到照相机51的距离来决定。从标记到照相机51的距离能够基于三个标记M1～M3中的任一个标记的拍摄图像的大小而求出。因此，在接下来的步骤S140中，CPU80基于在步骤S130中求出的各标记M1～M3的二维位置坐标和一个标记的拍摄图像的大小来认定使用者的手的(实际的)大小。

然后，CPU80根据在步骤S130中求出的各标记M1～M3的二维位置坐标，判定粘贴有标记M1～M3的健康手NH是右手还是左手(步骤S150)。各标记M1～M4由于能够单独地识别，所以能够根据设于手掌的拇指的根部的第一标记M1相对于设于手掌的小指之下的从手腕起的鼓起部的第三标记M3是位于右侧还是位于左侧，来判定健康手NH是右手还是左手。此外，该判定的方法是一个例子，只要是根据各标记M1～M3所配置的位置关系进行判定的方法即可，也可以根据任一种方法来判定。

接下来，CPU80将在步骤S150中判定出的一侧的手的相反侧识别为障碍手，从运动模型数据库84读取与该障碍手侧对应的运动模型(步骤S160)。即，在步骤S150中判定为健康手是右手时，由于障碍手是左手，因此读取左手的运动模型，另一方面，在步骤S150中判定为健康手是左手时，由于障碍手是右手，因此读取右手的运动模型。运动模型的详细内容在后面说明。

在执行图6的步骤S160后，CPU80将处理转移到图7的步骤S170。在步骤S170中，CPU80使HMD10的显示装置20显示用于提醒使用者采取康复的初始姿势的消息。在此，“初始姿势”是使用健康手NH把持名片BC的姿态。

图8是示出在步骤S170中显示的消息的一个例子的说明图。图中的SC是显示装置20的显示画面。在步骤S110中，具体地说，例如“请用健康侧的手抓住名片”这一消息MS由显示画面SC显示。从显示画面SC视觉识别到该消息MS的使用者进行通过健康手NH抓住(把持)名片BC(图5)的动作。

图9是示出在通过健康手NH抓住名片BC的状态下被使用者视觉识别的显示画面SC的说明图。如图所示，使用者在显示画面SC内，作为透射而来的现实空间的实像，视觉识别抓住名片BC的状态的健康手NH和障碍手FH。

在执行步骤S170(图7)后，CPU80通过照相机51进行拍摄(步骤S180)，判定通过该拍摄得到的拍摄图像中是否包括粘贴于手背一侧的第四记M4(步骤S190)。第四标记M4由于被粘贴于健康手NH的手背一侧的拇指和食指之间，因此在通过健康手NH抓住名片BC时，照相机51的拍摄图像中包括第四标记M4，在步骤S190中进行肯定判定。在进行了肯定判定的情况下，CPU80将处理转移到步骤S200。另一方面，在步骤S190中判定为不包含第四标记M4的情况下，CPU80将处理返回到步骤S180，重复执行从步骤S180到步骤S190的处理。

在步骤S200中，CPU80从通过步骤S180得到的拍摄图像中检出第四标记M4，求出第四标记M4的二维位置坐标。示出二维位置坐标的坐标系与显示装置20的显示画面对应。

接下来，CPU80基于在步骤S200中求出的第四标记M4的二维位置坐标、第四标记M4的拍摄图像的大小以及作为把持物体的名片的(实际的)大小来推定障碍手的位置(步骤S210)。“障碍手的位置”是指在本实施方式中在使用右手和左手进行把持名片BC的协调运动时障碍手(例如左手)会放置的位置。由于第四标记M4的二维位置坐标决定健康手NH(例如右手)的位置，因此判断在从该第四标记M4的二维位置坐标离开名片的拍摄图像的大小的量的位置存在障碍手。能够基于名片的(实际的)大小和从标记到照相机51的距离来求出名片的拍摄图像的大小。因此，相对于第四标记M4的二维位置坐标、第四标记M4的拍摄图像的大小以及名片的(实际的)大小而唯一地确定协调运动时被视觉识别的障碍手的位置。

在本实施方式中，将第四标记M4的二维位置坐标设为变量X，将第四标记M4的拍摄图像的大小设为变量Y，将名片的(实际的)大小设为常数C，将协调运动时被视觉识别的障碍手的位置设为变量Z，通过实验或模拟求出相对于变量X、Y和常数C表示变量Z的数学式，将其预先存储于存储部82。在步骤S210中，通过使用该数学式而求出协调运动时在显示装置20中被视觉识别的障碍手的位置。名片的(实际的)大小相当于“参照信息”的下位概念。

在执行步骤S210(图7)后，CPU80基于通过步骤S140识别到的使用者的手的大小来调整通过步骤S160读取的运动模型的大小(步骤S220)。

图10是示出通过步骤S160读取的运动模型的一个例子的说明图。图示的运动模型MD是左手的运动模型。运动模型MD是包括多个帧(静止图像)FR1、…、FR2、…、FR3的动画数据。在FR1～FR3的各自之间还包括1个或者多个帧。

最初的帧FR1表示使手掌朝向上侧的自然的状态。该状态与图5的障碍手FH的状态大致一致。最后的帧FR3表示抓住作为把持物体的名片BC(图5)时的手的状态。最初的帧FR1和最后的帧FR3的中间的帧FR2表示从使上述手掌朝向上侧的自然的状态到抓住名片时的状态的中间的状态。

根据如上所述构成的运动模型MD，表示从使手掌朝向上侧的自然的状态到抓住名片时的状态的连续的运动、即把持名片时的运动。在步骤S220中，基于通过步骤S140识别到的使用者的手的大小来调整该运动模型MD的大小。即由运动模型数据库84(图3)存储的运动模型是成人的一般的大小，因此在步骤S220中，进行扩大或者缩小该运动模型的尺寸调整，使其与使用者的手的大小一致。

之后，CPU80在通过步骤S210推定出的障碍手的位置再现(显示)通过步骤S220进行了尺寸调整的运动模型(步骤S230)。通过使前面说明的左眼用显示部30L和右眼用显示部30R动作来进行该显示。

图11是示出再现时被使用者视觉识别的图像的一个例子的说明图。图中通过实线表示的左手的图像是再现的运动模型的图像(AR图像)Ga。图中通过虚线表示的右手、左手的图像是实际存在于透射而可见的现实空间的使用者的健康手NH和障碍手FH。如图所示，就使用者而言，运动模型的图像Ga与障碍手FH重叠而被视觉识别。在图示的例子中，运动模型的图像Ga是抓住名片BC的状态，是图10的最后的帧FR3的图像。使用者从张开手的状态起随着运动模型的图像Ga的动作而张开、合上手，从而进行协调运动训练。

在执行图7的步骤S230后，CPU80判定是否继续进行康复(步骤S240)。通过操作控制装置70的触摸板72或操作按钮部74(图1)而对HMD10指示继续进行康复的。CPU80在通过输入信息取得部86(图2)受理了继续进行康复的意思的指示时，判定为继续进行康复。上述触摸板72或操作按钮部74的操作例如由康复的辅助者而做出。此外，也可以设为，使用者使用健康手来进行上述操作，然后，直接将健康手返回为图5的状态。

在步骤S240中，在判定为继续进行康复的情况下，CPU80将处理返回到步骤S170，重复执行从步骤S170到步骤S240的处理。另一方面，在步骤S240中，在判定为不继续进行康复的情况下，结束该康复处理的子程序。

D.实施方式的效果：

根据如上所示构成的实施方式的HMD10，表示障碍手FH的正常动作的AR图像的显示位置是根据安装于健康手NH的标记M1～M4的位置而决定的。因此，在本实施方式中，无需在存在障碍的身体部分安装标记。因而，能够消除为安装标记M1～M4而苦恼的情况并且能够防止康复运动由于标记M1～M4而无法顺畅地进行的情况。

另外，如前面说明的(参照图11)，由于使用者能够视觉识别运动模型的图像Ga与障碍手FH重合，所以能够将运动模型的图像Ga错认为自己的手而进行协调运动训练。因而，根据本实施方式的康复装置100，能够利用错觉效果来提高改善手的瘫痪的效果。

E.变形例：

本发明不限于上述实施方式或该变形例，能够在不脱离其主旨的范围内通过各种方式来实施，还能够进行例如如下的变形。

·变形例一：

在上述实施方式中，协调运动是使用右手和左手把持把持物体的动作。而作为变形例，协调运动也可以设为使用右手和左手击鼓的动作、将右手和左手交叉的动作、使用右手和左手敲击键盘的动作等。另外，协调运动无需限于使用右手和左手的动作，也可以设为右臂和左臂、右脚和左脚(从脚踝到脚趾)、右腿和左腿(从脚踝到骨盆)等。另外，一对身体部分设为成为左右对称的具有相同的功能的身体部分，但也无需限于此，也可以设为右手和左臂、右手和左脚、右手和左腿等。在上述协调运动中，如果决定一对身体部分中的一方的身体部分的位置，就能够推定另一方的身体部分的位置，所以能够起到与上述实施方式同样的作用效果。

·变形例二：

在上述实施方式中，在协调运动中使用的把持物体设为名片，但也可以代替其而设为尺子、托盘等其它形状的物体。另外，使用的道具也无需限于把持物体，也能够更换为在抓住的状态下保持的物体等、以各种状态保持的物体。另外，协调运动也可以设为不使用道具。此外，在协调运动使用道具的情况下，将该道具的大小存储为参照信息。

·变形例三：

在上述实施方式中，设为在手掌一侧粘贴三个标记，根据上述标记识别使用者的手的大小，基于该手的大小调整运动模型的大小。而作为变形例也可以设为不在手掌一侧粘贴标记且不进行运动模型的大小的调整的构成。即也可以设为仅使用安装于手背侧的第四标记M4来决定AR图像的显示位置。

·变形例四：

在上述实施方式中，将HMD设为在装配的状态下不遮挡使用者的视野的透射式的显示装置。与此相对的，作为变形例，也可以将HMD设为遮挡使用者的视野的非透射式的显示装置。非透射式的HMD通过照相机来拍摄现实空间的图像，使AR图像与该拍摄的图像重叠。另外，将HMD设为具备左眼用显示部和右眼用显示部的构成，但是也可以取而代之地设为仅具备单眼用的显示部的构成。

·变形例五：

在所述各实施方式以及变形例中，作为能够显示AR图像的显示装置，使用了装配于使用者的头部的头部装配式显示装置，但是显示装置并不局限于此，能够进行各种变形。例如，如装配于使用者的肩、颈的被胳膊支承的显示装置那样，也可以装配于头部、肩、颈等使用者的身体的身体装配式显示装置。另外，也可以是不装配于使用者而是载置于工作台等的载置式的显示装置。

·变形例六：

在所述各实施方式和变形例中，记载了康复处理部82a(图3)通过CPU80执行由存储部82储存的计算机程序来实现。但是，这些康复处理部也可以构成为使用为了实现该功能而设计的ASIC(Application Specific Integrated Circuit：专用集成电路)。

·变形例七：

在所述各实施方式和变形例中，记载了在显示装置20中一体地安装有照相机51的构成，但也可以设为显示装置20和照相机51分开而设置的构成。

本发明并不局限于上述实施方式、实施例、变形例，在不脱离其主旨的范围内能够通过各种构成来实现。例如，为了解决上述技术问题的一部分或者全部、或者为了实现上述效果的一部分或者全部，而能够适当地对与发明的内容段落记载的各方式中的技术特征相对应的实施方式、实施例、变形例中的技术特征进行替换、组合。另外，只要该技术特征在本说明书中未作为必要的技术特征进行说明，就能够适当地进行删除。