头部佩戴型显示装置和头部佩戴型显示装置的控制方法与流程

文档序号:17159040发布日期:2019-03-20 00:23阅读:133来源:国知局
本发明涉及头部佩戴型显示装置和头部佩戴型显示装置的控制方法。
背景技术
::以往,头部佩戴型显示装置例如能够进行如下的各种操作:使用指示设备来输入字符、图形等,或者通过对画面的触摸操作来选择图标、窗口。因此,公知有对辅助使用者的操作的辅助性信息进行显示的显示装置(例如,参照专利文献1)。专利文献1所公开的终端使操作引导图像与显示中的图像重叠地显示,该操作引导图像表示用于使用应用的辅助性信息。专利文献1:日本特开2017-16370号公报关于使用了指示体的操作,通过检测部检测指示体的动作、形状、位置等,从而判定所输入的操作。因此,例如,在检测部未进行指示体的检测的情况、显示装置的状态为忙碌的情况、在检测部可检测操作的范围的外侧进行操作的情况下,即使通过指示体进行操作,有时也无法将操作输入到显示装置。因此,需要在使用了指示体的操作中能够掌握头部佩戴型显示装置的状态且使用方便的用户界面。技术实现要素:本发明的目的在于,提供在使用了指示体的操作中能够掌握头部佩戴型显示装置的状态且使用方便的用户界面。为了解决上述课题,本发明具有:显示部,其佩戴于使用者的头部,具有以能够目视外景的方式显示图像的显示区域;拍摄部;检测部,其根据所述拍摄部的拍摄图像检测指示体的动作,受理基于检测出的所述指示体的动作的操作;以及显示控制部,其判定所述检测部是否处于能够检测基于所述指示体的动作的操作的状态,将判定结果显示于所述显示区域。根据该结构,将表示检测部是否处于能够检测基于指示体的动作的操作的状态的判定结果显示于显示区域。因此,在使用了指示体的操作中,能够掌握头部佩戴型显示装置是否处于能够检测操作的状态,能够提供使用方便的用户界面。并且,关于本发明,所述显示控制部将表示所述检测部处于能够检测所述操作的状态的图形、字符、图标、或表示所述检测部检测出的所述指示体的范围的范围图像作为所述判定结果显示于所述显示区域。根据该结构,由于显示图形、字符、图标、范围图像作为判定结果,所以能够向外部通知是否处于能够检测操作的状态。并且,关于本发明,在所述检测部检测到所述指示体的情况下,所述显示控制部将所述范围图像显示于所述显示区域,根据所述检测部是否处于能够检测所述操作的状态,对显示于所述显示区域的所述图形、所述字符或所述图标的显示方式进行变更。根据该结构,在检测到指示体的情况下显示范围图像,根据检测部是否处于能够检测操作的状态来变更图形、所述字符或图标的显示方式。因此,能够向外部通知检测部检测到指示体,能够向外部通知检测部是否处于能够检测操作的状态。并且,关于本发明,在所述检测部处于能够检测所述操作的状态的情况下,作为所述图形或所述图标,所述显示控制部对表示所述检测部检测的所述指示体的动作的图形或图标进行显示。根据该结构,由于显示表示检测部检测的所述指示体的动作的图形或图标,所以,能够使使用者识别使用了指示体的操作。并且,本发明的头部佩戴型显示装置具有处理控制部,该处理控制部根据所述检测部所受理的所述操作对控制对象进行控制,所述显示控制部根据所述控制对象的动作状态,对表示所述检测部检测的预先设定的所述指示体的动作的所述图形或所述图标进行变更。根据该结构,能够使使用者进行与控制对象的动作状态对应的指示体的动作,能够根据指示体的动作使控制对象进行动作。因此,能够提高使用了指示体的操作的便利性。并且,关于本发明,所述检测部判定检测出的所述指示体的动作是否与预先设定的所述指示体的动作对应,在所述检测部检测出与预先设定的所述指示体的动作对应的所述指示体的动作的情况下,所述处理控制部使所述控制对象执行与所述检测部检测出的所述指示体的动作对应的处理。根据该结构,通过进行预先设定的指示体的动作,能够使控制对象执行与该指示体的动作对应的处理。并且,关于本发明,在所述检测部检测到所述指示体的情况下,所述显示控制部使所述范围图像与所述指示体重叠地显示。根据该结构,能够使范围图像与指示体重叠地显示。因此,能够向外部通知被头部佩戴型显示装置识别为指示体的物体。并且,关于本发明,在从所述显示区域显示了所述图形、所述字符或所述图标起经过了预先设定的第1设定时间,所述检测部也未受理所述操作的情况下,所述显示控制部在所述显示区域中显示对基于所述指示体的操作进行引导的操作引导。根据该结构,能够显示操作引导而对使用者引导基于指示体的操作。并且,关于本发明,所述显示控制部在所述显示区域中显示距将所述操作引导显示于所述显示区域为止的剩余时间。根据该结构,能够向不了解操作的使用者通知显示操作引导的时间。并且,关于本发明,在从将所述操作引导显示于所述显示区域起经过了预先设定的第2设定时间的情况下、或者在所述检测部检测出基于所述指示体的动作的操作的情况下,所述显示控制部消除所述操作引导的显示。根据该结构,在判断为不需要显示操作引导的情况下,能够将操作引导的显示消除,能够提高显示区域的可视性。并且,关于本发明,所述处理控制部根据所述检测部所受理的操作对作为所述控制对象的设备进行控制、或者执行作为所述控制对象的应用程序而执行与所述检测部所受理的操作对应的所述应用程序的功能。根据该结构,能够通过指示体的操作对设备进行控制,选择功能而使作为控制对象的应用程序执行。为了解决上述课题,本发明是头部佩戴型显示装置的控制方法,该头部佩戴型显示装置佩戴于使用者的头部,在显示区域以能够目视外景的方式显示图像,其中,该头部佩戴型显示装置的控制方法具有如下的步骤:根据拍摄部的拍摄图像检测指示体的动作;受理基于检测出的所述指示体的动作的操作;在所述受理操作的步骤中,判定是否处于能够检测基于所述指示体的动作的操作的状态,将判定结果显示于所述显示区域。根据该结构,将检测部是否处于能够检测基于指示体的动作的操作的状态的判定结果显示于显示区域。因此,能够提供在使用了指示体的操作中可掌握头部佩戴型显示装置的状态的使用方便的用户界面。为了解决上述课题,显示装置具有:显示部,其使图像与外景重叠地显示,或者将所述图像显示在所述外景的周边;检测部,其检测指示体;以及控制部,其受理基于所述检测部所检测的所述指示体的动作、形状以及位置中的至少任意一项的操作,所述控制部判定是否处于能够通过所述指示体进行输入操作的状态,显示判定结果。根据该结构,判定是否处于能够通过指示体进行输入操作的状态,显示判定结果。因此,能够使显示装置的使用者掌握显示装置的状态,能够提高使用了指示体的操作的使用方便性。并且,在显示装置中,所述控制部通过所述显示部将表示能够受理所述操作的图像、图形、字符或图标显示在所述显示部的显示区域中所设定的位置。根据该结构,显示表示能够受理操作的图像、图形、字符或图标。因此,能够使使用者直观地识别显示装置处于能够受理操作的状态。并且,在显示装置中,所述控制部构成为能够根据所述操作对控制对象进行控制,根据所述控制对象的状态使表示能够受理所述操作的图像、图形、字符或图标变化,其中,所述控制对象根据所述操作而受到控制。根据该结构,表示能够受理操作的图像、图形、字符或图标根据控制对象的状态而发生变化。因此,能够使使用者直观地识别控制对象的状态。并且,在显示装置中,所述检测部检测包含能够与所述显示部显示的所述图像一起目视的所述外景的范围,在通过所述检测部在所述范围内检测到所述指示体的情况下,所述控制部通过所述显示部进行表示能够受理所述操作的显示。根据该结构,由于检测部将包含能够与显示部所显示的图像一起目视的外景的范围作为对象来进行指示体的检测,所以,使用者能够使指示体的位置移动到包含可目视的外景的范围内,能够使显示装置处于能够受理操作的状态。并且,在范围内检测到指示体的情况下,由于进行表示能够受理操作的显示,所以,能够掌握显示装置的状态。并且,在显示装置中,所述检测部具有拍摄部,该拍摄部拍摄包含能够与所述显示部所显示的所述图像一起目视的所述外景的范围,所述控制部从所述拍摄部的拍摄图像检测所述指示体,从而能够受理所述操作,在从所述拍摄部的拍摄图像检测到所述指示体的情况下,通过所述显示部进行表示能够受理所述操作的显示。根据该结构,检测部具有拍摄部,该拍摄部拍摄包含能够与显示部所显示的图像一起目视的外景的范围而对指示体进行检测。因此,使用者通过使指示体的位置移动到包含可目视的外景的范围内,能够使显示装置处于能够受理操作的状态。并且,在范围内检测到指示体的情况下,由于进行表示能够受理操作的显示,所以,能够掌握显示装置的状态。并且,在显示装置中,所述显示部具有通过使外部光透过而目视所述外景的透过型的显示区域,所述检测部在包含能够透过所述显示部目视的所述外景的范围内检测所述指示体。根据该结构,由于检测部在包含能够透过显示部目视的外景的范围内检测指示体,所以,使用者通过使指示体的位置移动到包含可目视的外景的范围内,能够使显示装置处于能够受理操作的状态。并且,在显示装置中,在通过所述检测部检测到所述指示体的情况下,所述控制部使与所述检测部检测出的所述指示体重叠的图像显示。根据该结构,由于显示与检测部所检测出的指示体重叠的图像,所以能够向使用者通知检测出的指示体的位置。因此,在指示体以外的物体被检测为指示体的情况下,使用者能够通过使显示装置再次进行指示体的检测来防止检测到错误的操作。并且,在显示装置中,在通过所述检测部检测到所述指示体且处于能够受理所述操作的状态的情况、未通过所述检测部检测到所述指示体的情况、以及不处于能够受理所述操作的状态的情况下,所述控制部能够对表示能够受理所述操作的显示的显示方式进行变更。根据该结构,根据是否检测到指示体、是否处于能够受理操作的状态来变更表示能够受理操作的显示的显示方式。因此,容易掌握显示装置的状态。并且,在显示装置中,所述控制部根据所述检测部所检测的所述指示体的动作、形状以及位置中的至少任意一项将手势检测为所述输入操作,使所述显示部所显示出的表示能够受理所述操作的、与检测出的所述输入操作对应的图像、图形、字符或图标中的任意一项的显示方式发生变化。根据该结构,能够通过使用了指示体的手势对显示装置进行操作。并且,由于与显示装置所检测出的手势对应的图像、图形、字符或图标中的任意一项的显示方式发生变化,所以,能够向使用者通知检测到的手势。并且,在显示装置中,在表示能够受理所述操作的显示开始之后、在预先设定的第1设定时间内未检测到基于所述指示体的操作的情况下,所述控制部通过所述显示部显示引导所述操作的图像。根据该结构,能够通过引导操作的图像引导指示体的操作。并且,在显示装置中,在显示引导所述操作的图像之后经过了预先设定的第2设定时间的情况下,或者在检测到基于所述指示体的操作的情况下,所述控制部结束引导所述操作的图像的显示。根据该结构,在判定为不需要引导操作的图像的显示的情况下,能够结束引导操作的图像的显示,能够防止外景的可视性降低。并且,在显示装置中,所述控制部根据所述操作对作为控制对象的设备进行控制,或者执行应用程序而执行与所述操作对应的处理。根据该结构,能够通过指示体的操作来控制作为控制对象的设备,或者执行应用程序而执行与操作对应的处理。显示装置的控制方法是显示装置的控制方法,该显示装置具有显示部,该显示部使图像与外景重叠地显示,或者将所述图像显示于所述外景的周边,在该显示装置的控制方法中检测指示体,受理基于检测出的所述指示体的动作、形状以及位置中的至少任意一项的操作,判定是否处于能够通过所述指示体输入操作的状态,显示判定结果。根据该结构,判定是否处于能够通过指示体进行输入操作的状态,显示判定结果。因此,能够使显示装置的使用者掌握显示装置的状态,能够提高使用了指示体的操作的使用方便性。附图说明图1是hmd的外观图。图2是示出hmd的光学系统的结构的主要部分俯视图。图3是示出图像显示部的结构的立体图。图4是hmd的框图。图5是控制装置的功能框图。图6是示出使用者的视野范围的图。图7是示出控制部的动作的流程图。图8是示出显示区域的显示状态的图。图9是示出显示区域的显示状态的图。图10是示出显示区域的显示状态的图。图11是示出显示区域的其他显示状态的图。图12是示出控制部的其他动作的流程图。标号说明10:控制装置;10a:外壳;11:操作按钮;12、67:led指示器;13:操作元件;14:触控板;15:上下键;16:切换开关;17:led显示部;18:电源开关;19:振动器;20:图像显示部;21:右保持部;22:右显示单元;23:左保持部;24:左显示单元;26:右导光板;27:前部框架;28:左导光板;30:耳机;32:右耳机;34:左耳机;40:连接线;46:连接器;61:第1照相机;62:第2照相机;63:麦克风;65:照度传感器;100:头部佩戴型显示装置;111:6轴传感器;113:磁传感器;110:操作部;115:gps接收部;117:通信部;120:控制器基板;121:存储器;123:非易失性存储部;127:设定数据;130:电源部;132:电池;134:电源控制电路;140:主处理器;150:控制部;151:os;152:图像处理部;153:拍摄控制部;154:检测部;155:显示控制部(控制部);156:处理控制部(控制部);160:存储部;161:控制程序;162:设定数据;163:内容数据;164:模式识别词典;165:拍摄图像数据;180:声音接口;182:声音编解码器;184:外部连接器;186:外部存储器接口;188:usb连接器;192:传感器集线器;194:fpga;196、211、231:接口;213、233:接收部;215:eeprom;217:温度传感器;221:oled单元;223:oled面板;225:oled驱动电路;235:6轴传感器;237:磁传感器;239:温度传感器;241:oled单元;243:oled面板;245:oled驱动电路;251:右光学系统;252:左光学系统;261、281:半反射镜;307:图标;309:剩余时间显示;310:第1对象;311:范围图像(与指示体重叠的图像);320:第2对象;321:图标;330:第3对象;331、333:箭头图像;332、334:字符。具体实施方式[第1实施方式]以下,参照附图对本发明的实施方式进行说明。图1是示出应用了本发明的hmd(headmounteddisplay:头部佩戴型显示装置)100的外观结构的说明图。hmd100是具有控制装置10和图像显示部20的显示装置。图像显示部20相当于本发明的“显示部”。控制装置10具有受理使用者的操作的操作部,该控制装置10作为使用者操作hmd100的控制器发挥功能。控制装置10受理使用者的操作而根据所受理的操作对图像显示部20进行控制。图像显示部20佩戴于使用者的头部,使使用者目视虚像。使用者是指将图像显示部20佩戴于头部的人。如图1所示,控制装置10具有扁平的箱形的外壳10a(也称为壳体或主体)。在外壳10a中具有操作按钮11、led指示器12、触控板14、上下键15、切换开关16和电源开关18的各部。将操作按钮11、上下键15、切换开关16和电源开关18统称为操作元件13(图4)。使用者能够通过对操作元件13或触控板14进行操作来操作hmd100。操作按钮11包含菜单键、起始键、返回键等,尤其包含这些键或开关中的通过按压操作而移位的键或开关。led指示器12与hmd100的动作状态对应地点亮或闪烁。触控板14具有检测接触操作的操作面,根据针对操作面的操作来输出操作信号。触控板14的操作面上的操作的检测方式可以采用静电式、压力检测式、光学式等各种检测方式。上下键15用于从右耳机32和左耳机34输出的音量的增减的指示输入、图像显示部20的显示的明亮度的增减的指示输入。切换开关16是切换与上下键15的操作对应的输入的开关。电源开关18是切换hmd100的电源的接通/断开的开关,例如由滑动开关构成。图像显示部20是佩戴于使用者的头部的佩戴体,在本实施方式中,具有眼镜形状。图像显示部20在具有右保持部21、左保持部23和前部框架27的主体上具有右显示单元22、左显示单元24、右导光板26和左导光板28。右保持部21和左保持部23分别从前部框架27的两端部朝后方延伸,如眼镜的镜腿(腿)那样将图像显示部20保持于使用者的头部。这里,设前部框架27的两端部中的、在图像显示部20的佩戴状态下位于使用者的右侧的端部为端部er、位于使用者的左侧的端部为端部el。右保持部21设置成从前部框架27的端部er延伸至在图像显示部20的佩戴状态下与使用者的右侧头部对应的位置。左保持部23设置成从端部el延伸至在图像显示部20的佩戴状态下与使用者的左侧头部对应的位置。右导光板26和左导光板28设置于前部框架27。右导光板26在图像显示部20的佩戴状态下位于使用者的右眼的眼前,使右眼目视图像。左导光板28在图像显示部20的佩戴状态下位于使用者的左眼的眼前,使左眼目视图像。前部框架27具有将右导光板26的一端和左导光板28的一端相互连结起来的形状,在使用者佩戴图像显示部20的佩戴状态下,右导光板26和左导光板28的连结位置对应于使用者的眉间。前部框架27可以设置右导光板26与左导光板28的连结位置处的、在图像显示部20的佩戴状态下与使用者的鼻子抵接的鼻接触部。在该情况下,能够通过鼻接触部、以及右保持部21和左保持部23,将图像显示部20保持于使用者的头部。此外,可以将在图像显示部20的佩戴状态下与使用者的后头部接触的带(省略图示)与右保持部21以及左保持部23连结,在该情况下,能够利用带将图像显示部20保持于使用者的头部。右显示单元22实现基于右导光板26的图像的显示。右显示单元22设置于右保持部21,在佩戴状态下位于使用者的右侧头部的附近。左显示单元24实现基于左导光板28的图像的显示。左显示单元24设置于左保持部23,在佩戴状态下位于使用者的左侧头部的附近。右导光板26和左导光板28是由透光性的树脂等形成的光学部,例如由棱镜构成。右导光板26和左导光板28将右显示单元22和左显示单元24输出的图像光引导至使用者的眼睛。也可以在右导光板26和左导光板28的表面设置调光板(省略图示)。调光板是透过率根据光的波段而不同的薄板状的光学元件,作为所谓的波长滤光器发挥功能。调光板例如被配置成覆盖作为与使用者的眼睛侧相反的一侧的前部框架27的正侧。通过适当选择该调光板的光学特性,能够对可见光、红外光和紫外光等任意波段的光的透过率进行调整,能够对从外部入射到右导光板26和左导光板28并透过右导光板26和左导光板28的外部光的光量进行调整。图像显示部20是通过使外部光透过而以能够目视外景的方式显示图像的透过型显示装置。图像显示部20将右显示单元22和左显示单元24分别生成的图像光引导至右导光板26和左导光板28。被引导至右导光板26和左导光板28的图像光入射到使用者的右眼和左眼而使使用者目视虚像。由此,图像显示部20显示图像。在将图像显示部20佩戴于头部的使用者的视野范围fv中,将图像显示部20可显示图像的区域称为显示区域vr(图6、8~10、12)。在外部光从使用者的前方透过右导光板26和左导光板28而入射到使用者的眼睛的情况下,构成虚像的图像光和外部光入射到使用者的眼睛,虚像的可视性受外部光的强度影响。因此,例如将调光板安装于前部框架27,适当选择或者调整调光板的光学特性,由此能够调整虚像的目视的便利性。在典型的例子中,能够使用如下的调光板,该调光板具有佩戴了hmd100的使用者至少能够目视外部景色的程度的透光性。此外,在使用调光板时,可期待如下的效果:保护右导光板26和左导光板28,抑制右导光板26和左导光板28的损伤和污垢附着等。调光板可以构成为能够分别相对于前部框架27或右导光板26和左导光板28进行拆装,也可以更换多种调光板进行安装。并且,也可以是不设置调光板的结构的图像显示部20。在图像显示部20的前部框架27配置有第1照相机61和第2照相机62。第1照相机61和第2照相机62的结构以及配置被确定成拍摄使用者在佩戴了图像显示部20的状态下目视的外景。外景是将图像显示部20佩戴于头部的使用者的视线方向的外部的景色。例如,第1照相机61和第2照相机62设置于前部框架27的前表面上的、不遮挡透过右导光板26和左导光板28的外部光的位置。在图1所示的例子中,第1照相机61设置在前部框架27的端部er侧,作为将使用者的身体的一部分或佩戴于身体的物体(以下,称为被检测物体)检测为指示体的检测部来发挥功能。并且,第2照相机62配置在右导光板26与左导光板28的边界部分,即、使用者的左右眼睛的中间位置,对作为使用者的视线方向的hmd100的前方进行拍摄。第2照相机62的配置不限于图1所示的例子,例如,可以配置成朝向图像显示部20的内侧而拍摄使用者的眼睛侧,也可以配置成拍摄hmd100的后方。并且,也可以将第2照相机62配置在前部框架27的端部el侧,通过第1照相机61和第2照相机62构成立体照相机。第1照相机61相当于本发明的“拍摄部”。并且,第2照相机62相当于本发明的“控制对象”。第1照相机61和第2照相机62是具有ccd或cmos等摄像元件和摄像镜头等的数字照相机。在本实施方式中,第1照相机61和第2照相机62是单眼照相机,但也可以由立体照相机构成。第1照相机61和第2照相机62对hmd100的正侧方向、换言之、佩戴hmd100的状态下的使用者的视野方向的至少一部分的外景进行拍摄。在另外的表达方式中,可以说第1照相机61和第2照相机62对与使用者的视野重叠的范围或方向进行拍摄,对使用者注视的方向进行拍摄。第1照相机61和第2照相机62的视场角的方向和宽度能够适当设定。在本实施方式中,如后述那样,第1照相机61和第2照相机62的视场角包含使用者通过右导光板26和左导光板28目视的外界。更优选第1照相机61和第2照相机62的视场角被设定为能够拍摄可透过右导光板26和左导光板28目视的使用者的视野的整体。第1照相机61和第2照相机62根据控制部150所具有的拍摄控制部153(图5)的控制来执行拍摄。当电源开关18接通并接受电源部130的电源供给而启动时,主处理器140使电源部130开始对第1照相机61供给电源,使第1照相机61的电源接通。并且,在主处理器140从第1照相机61的拍摄图像数据中检测出预先设定的指示体的操作的情况下,或者在接收到基于操作元件13的操作的情况下,开始对第2照相机62供给电源,使第2照相机62的电源接通。hmd100也可以具有距离传感器(省略图示),该距离传感器检测距位于预先设定的测量方向的测量对象物的距离。距离传感器例如能够配置在前部框架27的、右导光板26与左导光板28的连结部分。在该情况下,在图像显示部20的佩戴状态下,距离传感器的位置在水平方向上是使用者的双眼的大致中间,在铅直方向上是比使用者的双眼靠上方的位置。距离传感器的测量方向例如可以是前部框架27的正侧方向、换言之、与第1照相机61的拍摄方向重叠的方向。距离传感器例如可以构成为具有led或激光二极管等光源、以及接收光源发出的光在测量对象物上反射的反射光的受光部。距离传感器只要按照控制部150的控制来执行三角测距处理或基于时间差的测距处理即可。并且,距离传感器也可以构成为具有:声源,其发出超声波;以及检测部,其接收被测量对象物反射的超声波。在该情况下,距离传感器只要按照控制部150的控制,根据到超声波的反射为止的时间差来执行测距处理即可。图2是示出图像显示部20具有的光学系统的结构的主要部分俯视图。在图2中,为了说明方便,示出使用者的左眼le和右眼re。如图2所示,右显示单元22和左显示单元24构成为左右对称。右显示单元22具有发出图像光的oled(organiclightemittingdiode)单元221、以及具有引导oled单元221发出的图像光l的透镜组等的右光学系统251,作为使使用者的右眼re目视图像的结构。图像光l被右光学系统251引导至右导光板26。oled单元221具有oled面板223、以及驱动oled面板223的oled驱动电路225。oled面板223是矩阵状地配置通过有机电致发光而进行发光并分别发出r(红)、g(绿)、b(蓝)的色光的发光元件而构成的自发光型的显示面板。oled面板223将各包含1个r、g、b的元件的单位作为1个像素而具有多个像素,由配置成矩阵状的像素形成图像。oled驱动电路225依照控制部150(图5)的控制,执行oled面板223具备的发光元件的选择和向发光元件的通电,使oled面板223的发光元件发光。oled驱动电路225利用键合等固定于oled面板223的背面即发光面的里侧。oled驱动电路225例如可以由驱动oled面板223的半导体器件构成,安装在固定于oled面板223的背面的基板上(省略图示)。在该基板上安装有温度传感器217。另外,oled面板223可以是矩阵状地配置发出白色光的发光元件、重叠地配置与r、g、b的各色对应的滤色器的结构。此外,也可以使用除了分别发射r、g、b的色光的发光元件以外、还具有发出w(白色)的光的发光元件的wrgb结构的oled面板223。右光学系统251具有使从oled面板223射出的图像光l成为平行状态的光束的准直透镜。利用准直透镜而成为平行状态的光束的图像光l入射到右导光板26。在右导光板26的内部,在引导光的光路中形成有反射图像光l的多个反射面。图像光l在右导光板26的内部经过多次反射而被引导至右眼re侧。在右导光板26上形成有位于右眼re的眼前的半反射镜261(反射面)。图像光l在半反射镜261上反射,从右导光板26朝向右眼re射出,该图像光l在右眼re的视网膜上成像,使使用者目视图像。此外,左显示单元24具有发出图像光的oled单元241、以及具有引导oled单元241发出的图像光l的透镜组等的左光学系统252,作为使使用者的左眼le目视图像的结构。图像光l被左光学系统252引导至左导光板28。oled单元241具有oled面板243、以及驱动oled面板243的oled驱动电路245。oled面板243是与oled面板223同样构成的自发光型的显示面板。oled驱动电路245依照控制部150(图5)的控制,执行oled面板243具备的发光元件的选择和向发光元件的通电,使oled面板243的发光元件发光。oled驱动电路245利用键合等固定于oled面板243的背面即发光面的里侧。oled驱动电路245例如可以由驱动oled面板243的半导体器件构成,安装在固定于oled面板243的背面的基板上(省略图示)。在该基板上安装有温度传感器239。左光学系统252具有使从oled面板243射出的图像光l成为平行状态的光束的准直透镜。利用准直透镜而成为平行状态的光束的图像光l入射到左导光板28。左导光板28是形成有反射图像光l的多个反射面的光学元件,例如是棱镜。图像光l在左导光板28的内部经过多次反射而被引导至左眼le侧。在左导光板28上形成有位于左眼le的眼前的半反射镜281(反射面)。图像光l在半反射镜281上反射,从左导光板28朝向左眼le射出,该图像光l在左眼le的视网膜上成像,使使用者目视图像。根据该结构,hmd100作为透视型的显示装置发挥作用。即,半反射镜261反射的图像光l和透过了右导光板26的外部光ol入射到使用者的右眼re。此外,半反射镜281反射的图像光l和透过了半反射镜281的外部光ol入射到左眼le。这样,hmd100使在内部处理后的图像的图像光l与外部光ol重叠地入射到使用者的眼睛,对使用者而言,透过右导光板26和左导光板28目视外景,与该外景重叠地或者在外景的周边目视由图像光l形成的图像。半反射镜261、281是反射右显示单元22和左显示单元24分别输出的图像光而取出图像的图像取出部,能够称作显示部。另外,也将左光学系统252和左导光板28统称作“左导光部”,将右光学系统251和右导光板26统称地称作“右导光部”。右导光部和左导光部的结构不限于上述的例子,只要使用图像光而在使用者的眼前形成虚像,则能够使用任意的方式,例如可以使用衍射光栅,也可以使用半透过反射膜。返回到图1,控制装置10和图像显示部20利用连接线40连接起来。连接线40以能够拆装的方式与设置于壳体10a的下部的连接器(省略图示)连接,从左保持部23的前端与设置于图像显示部20的内部的各种电路连接。连接线40可以具有传输数字数据的金属缆线或者光纤缆线,具有传输模拟信号的金属缆线。在连接线40的中途设置有连接器46。连接器46是连接立体声迷你插头的插座,连接器46和控制装置10例如用传输模拟声音信号的线连接。在图1所示的结构例中,具有构成立体声耳机的右耳机32和左耳机34以及麦克风63的耳机30与连接器46连接。可以将控制装置10和图像显示部20无线连接。例如,可以构成为通过依照bluetooth(注册商标)、无线lan(包含wi-fi(注册商标))等标准的无线通信,由图像显示部20和控制装置10相互收发控制信号或数据。例如,如图1所示,麦克风63配置成使麦克风63的集音部朝向使用者的视线方向而采集声音,将声音信号输出到声音接口182(图4)。麦克风63例如可以是单声道麦克风,也可以是立体声麦克风,也可以是具有配向性的麦克风,也可以是无配向性的麦克风。图3是示出图像显示部20的结构的立体图,示出了从使用者的头部侧观察图像显示部20时的主要部分的结构。该图3是图像显示部20与使用者的头部接触的一侧、换言之、使用者的右眼re和左眼le可观察到的一侧。如果换另一说法,则是能够观察到右导光板26和左导光板28的背侧。在图3中,能够将对使用者的右眼re照射图像光的半反射镜261和对左眼le照射图像光的半反射镜281看作大致四边形的区域。此外,包含半反射镜261、281的右导光板26和左导光板28的整体如上所述使外部光透过。因此,使用者可透过右导光板26和左导光板28的整体而目视外景,在半反射镜261、281的位置处目视矩形的显示图像。第1照相机61配置于图像显示部20的右侧的端部,拍摄使用者的双眼所朝向的方向,即对使用者来说拍摄前方。第2照相机62配置于右导光板26和左导光板28的边界部分,对使用者来说拍摄前方。第1照相机61和第2照相机62的光轴设为包含右眼re和左眼le的视线方向的方向。使用者在佩戴了hmd100的状态下可目视的外景不限于无限远。例如,在使用者用双眼注视位于使用者的前方的对象物的情况下,从使用者到对象物的距离多数为30cm~10m左右,更多数为1m~4m左右。因此,可以针对hmd100确定通常使用时的从使用者到对象物的距离的上限和下限的标准。该标准可以通过调査或实验求出,也可以由使用者设定。在通常使用时的到对象物的距离相当于所设定的上限的标准的情况和相当于下限的标准的情况下,第1照相机61和第2照相机62的光轴和视场角优选设定为将该对象物包含在视场角中。一般而言,人的视野角设为水平方向大概200度、垂直方向大概125度,其中的信息接受能力优异的有效视野为水平方向30度、垂直方向20度左右。并且,可迅速且稳定地观察到人注视的注视点的稳定注视视野被设为水平方向60~90度、垂直方向45度~70度左右。在注视点是位于使用者的前方的对象物时,在使用者的视野中,以右眼re和左眼le各自的视线为中心,水平方向30度、垂直方向20度左右是有效视野。此外,水平方向60~90度、垂直方向45度~70度左右为稳定注视视野,水平方向大约200度、垂直方向大约125度为视野角。并且,能够将使用者透过右导光板26和左导光板28而目视的实际的视野称作实际视野(fov:fieldofview)。在图1和图2所示的本实施方式的结构中,实际视野相当于使用者透过右导光板26和左导光板28而目视的实际的视野。实际视野比视野角和稳定注视视野窄,比有效视野宽。第1照相机61和第2照相机62对包含能够与图像显示部20所显示的图像一起目视的外景在内的范围进行拍摄。优选第1照相机61和第2照相机62的视场角能够拍摄比使用者的视野大的范围,具体而言,更优选视场角至少比使用者的有效视野大。并且,更优选视场角比使用者的实际视野大。进一步优选视场角比使用者的稳定注视视野大,最优选视场角比使用者的双眼的视野角大。第1照相机61和第2照相机62也可以构成为具有所谓广角镜头作为摄像镜头、能够拍摄较大的视场角。广角镜头中可以包含称作超广角镜头、准广角镜头的镜头,可以是单焦点镜头,也可以是变焦镜头,也可以是第1照相机61和第2照相机62具有由多个镜头构成的镜头组。图4是示出构成hmd100的各部的结构的框图。控制装置10具有主处理器140,该主处理器140执行程序而控制hmd100。主处理器140与存储器121、非易失性存储部123连接。并且,作为传感器类,6轴传感器111、磁传感器113与主处理器140连接。并且,主处理器140与gps接收部115、通信部117、声音编解码器182、外部连接器184、外部存储器接口186、usb连接器188、传感器集线器192以及fpga194连接。这些部件作为与外部的接口发挥功能。并且,主处理器140与led指示器12、led显示部17、振动器19、操作部110、电源部130连接。主处理器140安装在内置于控制装置10的控制器基板120上。除了主处理器140以外,在控制器基板120上还可以安装存储器121、非易失性存储部123、6轴传感器111、磁传感器113、gps接收部115、通信部117、声音编解码器182等。并且,在本实施方式中,外部连接器184、外部存储器接口186、usb连接器188、传感器集线器192、fpga194以及接口196安装在控制器基板120上。在主处理器140执行控制程序的情况下,存储器121构成临时存储要执行的控制程序和被处理的数据的工作区。非易失性存储部123由闪存和emmc(embeddedmultimediacard)构成。非易失性存储部123存储主处理器140执行的程序、以及主处理器140通过执行程序而处理的各种数据。图4中示出通过一个主处理器140实现控制装置10的功能的结构,但也可以通过多个处理器或半导体芯片实现控制装置10的功能。例如,还可以在控制器基板120上搭载soc(system-on-a-chip)、mcu(microcontrolunit)、fpga(field-programmablegatearray)等协同处理装置(co-processor)。并且,控制装置10也可以使主处理器140和协同处理装置双方协作,或者选择性地使用双方中的一方进行各种控制。6轴传感器111是具有3轴加速度传感器和3轴陀螺仪(角速度)传感器的运动传感器(惯性传感器)。6轴传感器111可以采用对上述的传感器进行了模块化的imu(inertialmeasurementunit)。磁传感器113例如是3轴的地磁传感器。6轴传感器111和磁传感器113根据预先指定的采样周期将检测值输出到主处理器140。并且,6轴传感器111和磁传感器113根据主处理器140的请求,在主处理器140指定的时刻将检测值输出到主处理器140。gps接收部115具有未图示的gps天线,接收从gps卫星发送的gps信号。gps接收部115将接收到的gps信号输出到主处理器140。并且,gps接收部115计测接收到的gps信号的信号强度,输出到主处理器140。信号强度例如可以使用接收信号强度(rssi:receivedsignalstrengthindication)、电场强度、磁场强度、信噪比(snr:signaltonoiseratio)等信息。通信部117与外部设备之间执行无线通信。通信部117具有天线、rf电路、基带电路、通信控制电路等而构成,或者由将这些合并而成的设备构成。通信部117例如进行依据bluetooth、无线lan(包含wi-fi)等标准的无线通信。声音接口180是输入输出声音信号的接口。在本实施方式中,声音接口180包含设置于连接线40的连接器46(图1)。连接器46与耳机30连接。声音接口180所输出的声音信号被输入到右耳机32和左耳机34,由此,右耳机32和左耳机34输出声音。并且,耳机30具有的麦克风63收集声音并将声音信号输出到声音接口180。从麦克风63输入到声音接口180的声音信号被输入到外部连接器184。声音编解码器182与声音接口180连接,进行经由声音接口180而输入输出的声音信号的编码和解码。声音编解码器182可以具有进行从模拟声音信号向数字声音数据的转换的a/d转换器、以及进行其相反的转换的d/a转换器。例如,本实施方式的hmd100利用右耳机32和左耳机34输出声音,用麦克风63进行集音。声音编解码器182将主处理器140输出的数字声音数据转换为模拟声音信号,经由声音接口180输出。并且,声音编解码器182将输入到声音接口180的模拟声音信号转换为数字声音数据,输出到主处理器140。外部连接器184是连接与主处理器140通信的外部装置的连接器。例如,外部连接器184是这样的接口:在将外部装置与主处理器140连接、进行主处理器140执行的程序的调试或hmd100的动作的日志的收集的情况下,连接该外部装置。外部存储器接口186是能够连接可移动型的存储器设备的接口,例如包含存储卡插槽和接口电路,该存储卡插槽安装卡型记录介质而能够进行数据的读取。该情况下的卡型记录介质的尺寸、形状、标准没有限制,能够适当进行变更。usb(universalserialbus)连接器188具有依据usb标准的连接器和接口电路。usb连接器188能够将usb存储器设备、智能手机、计算机等连接起来。usb连接器188的尺寸或形状、适合的usb标准的版本能够适当选择和变更。传感器集线器192以及fpga194经由接口(i/f)196与图像显示部20连接。传感器集线器192取得图像显示部20具有的各种传感器的检测值并输出到主处理器140。并且,fpga194执行在主处理器140与图像显示部20的各部之间收发的数据的处理、以及经由接口196的传输。led指示器12与hmd100的动作状态对应地点亮或闪烁。led显示部17根据主处理器140的控制,控制led指示器12的点亮和熄灭。并且,led显示部17也可以构成为包含配置在触控板14的正下方的led(省略图示)和使该led点亮的驱动电路。在该情况下,led显示部17根据主处理器140的控制,使led点亮、闪烁、熄灭。振动器19具有电机和偏心的转子(均省略图示),也可以具有其他所需的结构。振动器19根据主处理器140的控制,使上述电机旋转,从而产生振动。例如,在检测到针对操作部110的操作的情况、hmd100的电源接通或断开的情况、或其他情况下,hmd100按照规定的振动模式,利用振动器19产生振动。操作部110具有操作元件13和触控板14。操作元件13包含操作按钮11、上下键15、切换开关16以及电源开关18。在操作元件13或触控板14受理了操作的情况下,操作部110将操作信号输出到控制部150,其中,该操作信号包含受理操作的操作元件13或触控板14的识别信息和表示所受理的操作内容的信息。控制装置10具有电源部130,该控制装置10通过从电源部130供给的电力进行动作。电源部130具有可充电的电池132和电源控制电路134,该电源控制电路134进行电池132的剩余量的检测和向电池132的充电的控制。电源控制电路134与主处理器140连接,将电池132的剩余量的检测值或者电压的检测值输出到主处理器140。并且,也可以根据电源部130供给的电力,从控制装置10向图像显示部20供给电力。并且,也可以构成为主处理器140可控制从电源部130向控制装置10的各部和图像显示部20供给电力的状态。图像显示部20的右显示单元22以及左显示单元24分别与控制装置10连接。如图1所示,在hmd100中,连接线40与左保持部23连接,与该连接线40相连的布线铺设于图像显示部20内部,右显示单元22以及左显示单元24分别与控制装置10连接。右显示单元22具有显示单元基板210。在显示单元基板210上安装有与接口196连接的接口(i/f)211、接收经由接口211从控制装置10输入的数据的接收部(rx)213、以及eeprom215。接口211将接收部213、eeprom215、温度传感器217、第1照相机61、第2照相机62、照度传感器65以及led指示器67与控制装置10连接。eeprom(electricallyerasableprogrammableread-onlymemory)215以能够供主处理器140读取的方式存储各种数据。eeprom215例如存储与图像显示部20具备的oled单元221、241的发光特性或显示特性相关的数据、与右显示单元22或者左显示单元24具备的传感器的特性相关的数据等。具体而言,存储对oled单元221、241的伽马校正涉及的参数以及温度传感器217、239的检测值进行补偿的数据等。这些数据通过hmd100的工厂出货时的检查而生成,写入eeprom215中,在出货后,主处理器140可利用eeprom215的数据进行处理。第1照相机61和第2照相机62根据经由接口211输入的信号执行拍摄,将拍摄图像数据或表示拍摄结果的信号输出到控制装置10。如图1所示,照度传感器65设置于前部框架27的端部er,配置成接收来自佩戴图像显示部20的使用者的前方的外部光。照度传感器65输出与受光量(受光强度)对应的检测值。如图1所示,在前部框架27的端部er处,led指示器67配置在第1照相机61的附近。led指示器67在第1照相机61或第2照相机62正在拍摄时点亮,通知处于拍摄中。温度传感器217检测温度,输出与检测温度对应的电压值或者电阻值,作为检测值。温度传感器217安装于oled面板223(图2)的背面侧。温度传感器217例如可以与oled驱动电路225安装于同一基板上。根据该结构,温度传感器217主要检测oled面板223的温度。接收部213经由接口211接收由主处理器140发送的数据。在接收到oled单元221显示的图像的图像数据的情况下,接收部213将接收到的图像数据输出到oled驱动电路225(图2)。左显示单元24具有显示单元基板230。在显示单元基板230上安装有与接口196连接的接口(i/f)231、以及接收经由接口231从控制装置10输入的数据的接收部(rx)233。并且,在显示单元基板210上安装有6轴传感器235和磁传感器237。接口231将接收部233、6轴传感器235、磁传感器237以及温度传感器239与控制装置10连接。6轴传感器235是具有3轴加速度传感器和3轴陀螺仪(角速度)传感器的运动传感器(惯性传感器)。6轴传感器235可以采用对上述的传感器进行了模块化的imu。磁传感器237例如是3轴的地磁传感器。温度传感器239检测温度,输出与检测温度对应的电压值或者电阻值,作为检测值。温度传感器239安装于oled面板243(图2)的背面侧。温度传感器239例如可以与oled驱动电路245安装于同一基板。根据该结构,温度传感器239主要检测oled面板243的温度。此外,温度传感器239可以内置于oled面板243或者oled驱动电路245。此外,上述基板可以是半导体基板。具体而言,在将oled面板243作为si-oled与oled驱动电路245等一起安装为集成半导体芯片上的集成电路的情况下,可以在该半导体芯片上安装温度传感器239。右显示单元22具有的第1照相机61、第2照相机62、照度传感器65、温度传感器217以及左显示单元24具有的6轴传感器235、磁传感器237、温度传感器239与传感器集线器192连接。传感器集线器192根据主处理器140的控制,进行各传感器的采样周期的设定和初始化。传感器集线器192按照各传感器的采样周期,执行向各传感器的通电、控制数据的发送、检测值的取得等。并且,传感器集线器192在预先设定的时刻,将右显示单元22和左显示单元24具有的各传感器的检测值输出到主处理器140。传感器集线器192可以具有如下功能:与针对主处理器140的输出的时刻对应地临时保持各传感器的检测值。并且,传感器集线器192可以具有如下功能:对应于各传感器的输出值的信号形式或数据形式的差异,转换为统一的数据形式的数据,输出到主处理器140。并且,传感器集线器192根据主处理器140的控制,使向led指示器67的通电开始和停止,与第1照相机61开始和结束拍摄的时刻对应地使led指示器67点亮或闪烁。图5是构成控制装置10的控制系统的存储部160和控制部150的功能框图。图5所示的存储部160是由非易失性存储部123(图4)构成的逻辑性的存储部,可以包含eeprom215或存储器121。并且,控制部150以及控制部150具有的各种功能部是通过使主处理器140执行程序,通过软件和硬件的协作而形成的。控制部150以及构成控制部150的各功能部例如由主处理器140、存储器121以及非易失性存储部123构成。存储部160存储由控制部150执行的控制程序和由控制部150处理的各种数据。具体来说,存储部160存储控制程序161、设定数据162、内容数据163、模式识别词典164、拍摄图像数据165等。控制程序161是具有在os151上执行的特定功能的应用程序。应用程序例如包含浏览器软件、业务用程序、文档创建软件、表格计算软件等办公程序等。并且,在应用程序中包含将使用者的手的动作、形状、位置检测为手势、并执行与检测出的手势对应的处理的程序。在后面对控制部150执行该应用程序的情况的详细动作进行叙述。设定数据162包含设定hmd100的动作的各种设定值。并且,在控制部150控制hmd100时使用参数、矩阵式、运算式、lut(lookuptable)等的情况下,也可以将它们包含在设定数据162中。内容数据163是包含通过控制部150的控制而由图像显示部20显示的显示图像或影像的内容的数据,包含图像数据或影像数据。并且,作为内容数据163,也可以包含音乐或声音的数据。并且,内容数据163也可以是双向型的内容数据。即,通过图像显示部20显示内容数据163所包含的图像数据或影像数据,利用操作部110受理针对所显示的图像数据或影像数据的操作,利用控制部150执行与所受理的操作对应的处理。在该情况下,内容数据163也可以具有在受理操作的情况下显示的菜单画面的图像数据、确定与菜单画面所包含的项目对应的处理等的数据等。模式识别词典164是将确定手势的信息与控制部150所执行的处理对应地登记的词典。手势是手(在本说明书中,将从手腕到手指尖的部分称为“手”)的预先设定的动作、形状。并且,利用使用者的手来指示显示区域vr的预先设定的位置的操作也可以包含在手势中。例如,假设手势是使手从左向右移动的动作。在该情况下,在模式识别词典164中登记表示手的移动方向的信息作为确定手势的信息。并且,假设手势是将握紧的手张开、即、手的形状从握掌的状态变更为张开手的状态的动作。在该情况下,在模式识别词典164中登记表示握紧的手的形状的信息、表示张开的手的形状的信息、以及示出表示这些形状的信息的检测顺序的信息。并且,在假设手势是利用手来指示显示区域vr的预先设定的位置的操作的情况下,在模式识别词典164中登记例如表示用手指示的显示区域vr的位置或范围的信息。例如,在判定为使用者的手所指示的位置是与显示区域vr的4个角对应的位置或范围的情况下,控制部150判定为检测到手势。并且,在与确定手势的信息对应地登记于模式识别词典164的处理中,包含对作为控制对象的设备进行控制的处理、执行应用程序而进行的例如检索、动画再现等处理。模式识别词典164的登记信息是可以更新的。例如,也能够对确定手势的信息与控制部150所执行的处理之间的关联进行变更。并且,也可以从网络上的服务器装置(省略图示)下载确定手势的信息。使用者对操作部110进行操作而使想要使控制部150执行的处理与所下载的确定手势的信息对应起来。控制部150根据操作部110所受理的操作,将确定手势的信息与想要使控制部150执行的处理对应地登记在模式识别词典164中。拍摄图像数据165是通过第1照相机61和第2照相机62中的至少一方拍摄到的拍摄图像数据。拍摄图像数据165是临时存储于存储部160的数据,例如,当控制部150的处理结束时,从存储部160删除。第1照相机61所拍摄到的拍摄图像数据相当于本发明的“拍摄图像”。控制部150利用存储部160所存储的数据执行各种处理,对hmd100进行控制。控制部150具有os(operatingsystem)151、图像处理部152、拍摄控制部153、检测部154、显示控制部155以及处理控制部156作为功能块。功能块是为了方便起见将通过主处理器140执行控制程序而实现的功能以块的形式示出的,并不是表示特定的应用程序或硬件。os151的功能是存储部160存储的控制程序的功能,其他各部是在os151上执行的应用程序的功能。图像处理部152例如从存储部160读出内容数据163,从所读出的内容数据163分离垂直同步信号vsync、水平同步信号hsync等同步信号。图像处理部152根据分离出的垂直同步信号vsync、水平同步信号hsync的周期,利用pll(phaselockedloop)电路等(省略图示)生成时钟信号pclk。并且,图像处理部152也可以根据需要,对包含在内容数据163中的图像数据执行分辨率转换、亮度、彩度的调整、2d/3d转换处理等各种图像处理。图像处理部152按照作为图像的显示单位的每1帧,在存储部160内的dram中展开实施了图像处理的图像数据。以下,将展开图像数据的1帧的dram的区域称为帧区域。图像处理部152从帧区域读出图像数据,将所读出的图像数据作为显示图像数据输出到图像显示部20。图像处理部152除了由主处理器140执行程序而实现的结构以外,还可以由与主处理器140不同的硬件(例如dsp(digitalsignalprocessor))构成。拍摄控制部153对第1照相机61和第2照相机62进行控制而执行拍摄,生成拍摄图像数据。拍摄控制部153将所生成的拍摄图像数据临时存储于存储部160。并且,在第1照相机61和第2照相机62构成为包含生成拍摄图像数据的电路的照相机单元的情况下,拍摄控制部153从第1照相机61和第2照相机62取得拍摄图像数据,临时存储于存储部160。检测部154根据第1照相机61所拍摄的拍摄图像数据,检测指示体的动作,受理基于检测出的指示体的动作的操作。检测部154受理的操作是基于预先设定的指示体的动作的操作。在指示体的动作中例如包含使指示体在上下方向或左右方向上移动的操作、使指示体旋转的操作等。检测部154根据第1照相机61的拍摄图像数据,检测指示体的动作,判定检测出的指示体的动作是否与预先设定的指示体的动作对应。在检测出的指示体的动作与预先设定的指示体的动作对应的情况下,检测部154受理基于指示体的动作的操作。当受理了操作时,检测部154执行与预先设定的指示体的动作对应的处理。首先,检测部154从存储部160读出第1照相机61的拍摄图像数据,检测在所读出的拍摄图像数据中拍摄到的指示体。并且,检测部154从第1照相机61所连续拍摄到的拍摄图像数据中检测指示体,从而检测指示体的动作、形状和位置中的至少任意一项。检测部154受理基于检测出的指示体的动作、形状和位置中的至少任意一项的操作。在本实施方式中,对指示体为使用者的手的情况进行说明,但指示体并不限于使用者的手。例如,也可以利用使用者的手指或手臂这样的身体的一部分、使用者用手把持的指示体、佩戴于身体的被检测物体。并且,也可以使用佩戴于使用者的手指的戒指、佩戴于使用者的手臂的手表或带等作为指示体。在使用指示棒、手表、带等作为指示体的情况下,预先将指示体的图像数据存储于存储部160,通过模式匹配等方法检测指示体。检测部154在拍摄图像数据中检测拍摄到使用者的手的区域(以下,称为手区域)。检测部154例如通过肌肤颜色提取处理从拍摄图像数据的区域提取肌肤颜色区域,通过阈值处理将提取出的肌肤颜色区域的像素值与阈值进行比较来检测手区域。并且,检测部154也可以通过边缘检测处理来提取所求出的手区域的轮廓,使用基于轮廓凹凸的特征匹配或曲率判定,检测手的形状或位置。当检测部154在拍摄图像数据中检测到手区域时,指示显示控制部155显示对象300。关于对象300,参照图6进行说明。并且,检测部154根据第1照相机61连续拍摄的每个拍摄图像数据或每规定张数的拍摄图像数据来检测手区域,从而检测手区域的动作、形状、位置。当检测出手区域的动作、形状、位置时,检测部154根据检测出的手区域的动作、形状、位置,参照模式识别词典164确定与检测出的手区域的动作对应的手势。检测部154通过确定与手区域的动作、形状、位置对应的手势,受理基于指示体的动作、形状和位置中的至少任意一项的操作。当确定了手势并受理了操作时,检测部154从模式识别词典164取得与所确定的手势对应的处理。检测部154使处理控制部156执行与所取得的手势对应的处理。显示控制部155生成对右显示单元22和左显示单元24进行控制的控制信号,通过所生成的控制信号,控制右显示单元22和左显示单元24分别进行的图像光的生成和射出。具体来说,显示控制部155对oled驱动电路225、245进行控制而使oled面板223、243执行图像的显示。显示控制部155根据图像处理部152输出的信号,进行由oled驱动电路225、245在oled面板223、243上描绘的时刻的控制、以及oled面板223、243的亮度控制等。并且,显示控制部155判定检测部154是否处于能够受理操作的状态,并显示判定结果。具体来说,在检测部154检测到指示体的情况下,显示控制部155判定hmd100是否处于能够受理基于手势的操作的状态。在显示控制部155判定为能够受理的情况下,对图像显示部20进行控制而使显示区域vr显示出表示能够受理操作的标识。图6是示出将图像显示部20佩戴于头部的使用者的视野范围fv的图。在检测部154检测到指示体的情况下,显示控制部155使显示区域vr显示预先设定的图像、字符、图形、记号、标记、图标等对象300。并且,在检测部154检测到指示体且检测部154处于能够受理指示体的操作的状态的情况下,显示控制部155使显示的图像、字符、图形、记号、标记、图标等对象300的显示方式发生变化。例如,在检测到指示体且没有执行图像处理等处理负荷较大的其他处理的情况下,显示控制部155判定为处于能够受理指示体的操作的状态。图6示出将第1对象310和第2对象320显示为对象300的情况。在本实施方式中,示出了如下情况:将表示手区域的范围的范围图像311显示为第1对象310,将模拟出指示体的形状的图像(以下,称为图标)321显示为第2对象320。范围图像311相当于本发明的“与指示体重叠的图像”。作为第1对象310的范围图像311是表示从拍摄图像数据检测出的使用者的手的范围的图像。在从拍摄图像数据检测到手区域的情况下,范围图像311通过显示控制部155显示在显示区域vr中。当不再从拍摄图像数据中检测到手区域时,显示控制部155从显示区域vr消除范围图像311。显示控制部155可以以围绕检测部154检测出的手区域的周围的方式显示范围图像311,也可以以与手区域的一部分重叠的方式显示范围图像311。并且,范围图像311的形状可以是矩形,也可以是圆形或多边形,也可以是与身体的形状对应的形状。通过在显示区域vr中显示范围图像311,使用者能够判断hmd100检测为指示体的物体是否是手。因此,在hmd100将错误的物体识别为手并检测出的情况下,能够使hmd100再次进行指示体的检测而不执行错误的操作。作为第2对象320的图标321是表示hmd100的状态的图标,表示已检测到手区域并且hmd100处于能够受理基于手势的操作的状态。在本实施方式中,示出了将模拟出作为指示体的手的形状的图标321显示为第2对象320的情况,但例如在指示体为指示棒的情况下,也可以将表示指示棒的形状的图标显示为第2对象320。并且,本实施方式说明了将图标321显示为第2对象320的情况,但第2对象320并不限于图标,也可以是图像、字符、图形、记号、标记。显示控制部155对第2对象320的显示方式进行变更。第2对象320例如在启动应用程序的同时显示于显示区域vr。显示控制部155对第2对象320的显示方式进行变更,以使得在检测到手区域且控制部150处于能够受理操作的状态的情况下的第2对象320的可视性比其他情况下的第2对象320的可视性高。其他情况包括未从拍摄图像数据检测到手区域的情况、检测到手区域但控制部150不处于能够受理操作的状态的情况。例如,显示控制部155能够通过变更第2对象320的透过率来变更第2对象320的显示方式。在检测到手区域且控制部150处于能够受理操作的状态的情况下,显示控制部155将第2对象320的透过率设定为比其他情况下的第2对象320的透过率低。当第2对象320的透过率被设定得较低时,第2对象320成为比显示区域vr的外景更明显的显示。并且,通过将第2对象320的透过率设定得较高,第2对象320变得不比显示区域vr的外景明显。并且,显示控制部155能够通过变更第2对象320的显示颜色来变更第2对象320的显示方式。显示控制部155将检测到手区域且控制部150处于能够受理操作的状态的情况下的第2对象320的显示颜色变更为比其他情况的第2对象320的显示颜色更明显的颜色。例如,在检测到手区域且控制部150处于能够受理操作的状态的情况下,显示控制部155用白色显示第2对象320,在其他情况下,用黑色显示第2对象320。并且,在检测到手区域且控制部150处于能够受理操作的状态的情况下,显示控制部155也可以点亮第2对象320的显示,在其他情况下,熄灭第2对象320的显示。在图6中示出了将第1对象310和第2对象320显示为对象300的情况,但也可以只显示任意一方,例如,也可以与led指示器12、67的显示等其他显示组合而进行显示。例如,也可以在显示区域vr中显示第1对象310,使led指示器12点亮。并且,在图6中示出将第1对象310和第2对象320显示为对象300的情况,但例如也可以在显示区域vr中显示“检测到手”等文本。并且,作为对象300,也可以显示表示检测到手的记号或标记。处理控制部156根据检测部154的控制,对作为控制对象的设备的动作进行控制。并且,处理控制部156根据检测部154的控制,执行应用程序而进行处理。在处理控制部156控制的设备中例如包括第2照相机62、麦克风63、6轴传感器111、235、磁传感器113、237、温度传感器217、239、照度传感器65、led指示器12、67等。并且,在执行应用程序而进行的处理中例如包括再现动态图像或音乐等的内容数据163的处理。并且,在执行应用程序而进行的处理中包括使作为应用程序的浏览器软件启动的处理、根据输入到浏览器软件的检索栏中的关键字执行检索的处理。图7是示出控制部150的动作的流程图。参照图7的流程图对控制部150的动作进行说明。首先,控制部150判定是否受理了使应用程序启动的操作(步骤s1)。在步骤s1中,控制部150判定是否受理了启动通过手势来控制hmd100的应用程序的操作(以下,简称为操作)。在没有受理操作的情况下(步骤s1/否),控制部150等待处理的开始,直到受理操作为止,如果存在能够执行的其他处理,则执行其他处理。在受理了操作的情况下(步骤s1/是),控制部150执行应用程序而使显示区域vr显示第2对象320和第3对象330(步骤s2)。图8是示出显示区域vr的显示状态的图。尤其是,图8是示出在显示区域vr中显示第2对象320和第3对象330作为对象300的状态的图。在图8中示出将第2对象320和第3对象330显示于显示区域vr的右上方的情况,但也可以将第2对象320和第3对象330显示于显示区域vr的左上、右下、左下等其他位置。并且,优选第2对象320和第3对象330可以显示在显示区域vr的设定的位置。通过使第2对象320和第3对象330始终显示在恒定的位置,能够减轻使用者寻找显示于显示区域vr的第2对象320和第3对象330的麻烦。第3对象330是示出控制部150检测的检测对象的手势的图像,是显示状态根据控制对象的设备的状态而变化的图像。控制部150将表示作为手势的指示体的移动方向的箭头图像331、333和表示控制对象和控制动作的字符332、334作为第3对象330显示在显示区域vr内。表示控制对象和控制动作的字符332显示在箭头图像331内。同样,表示控制对象和控制动作的字符334显示在箭头图像333内。箭头图像331是表示从使用者侧看到的显示区域vr的右方向的箭头的图像。并且,箭头图像333是表示从使用者侧看到的显示区域vr的左方向的箭头的图像。表示控制对象的字符332、334是控制部150控制的对象的设备名,表示控制动作的字符332、334表示对控制对象进行的控制部150的控制动作。在本实施方式中,显示出“照相机”的字符作为表示控制对象的字符332、334。在表示显示区域vr的右方向的箭头图像331内,显示出“打开”的字符作为表示控制动作的字符332。并且,在表示显示区域vr的左方向的箭头图像333内,显示出“关闭”的字符作为表示控制动作的字符332。在从使用者侧来看检测到使手从左向右移动的手势的情况下,控制部150将第2照相机62的电源接通。并且,在从使用者侧来看检测到手从右向左移动的手势的情况下,控制部150将第2照相机62的电源断开。并且,控制部150根据控制对象的设备的状态,使第3对象330的显示方式发生变化。在第2照相机62的电源断开的情况下,控制部150将箭头图像331的透过率设定为比第2照相机62的电源接通的情况下的箭头图像331的透过率低的值。在第2照相机62的电源断开的情况下,由于箭头图像331的透过率较低,所以,箭头图像331是比显示区域vr内的外景更明显的显示,提高了箭头图像331的可视性。并且,控制部150也可以在第2照相机62的电源接通的情况和断开的情况下变更箭头图像331的显示颜色。在第2照相机62的电源接通时,控制部150用灰色等不明显的显示颜色来显示箭头图像331,在第2照相机62的电源断开时,用白色等明显的显示颜色来显示箭头图像331。并且,在第2照相机62的电源接通的情况下,控制部150将箭头图像333的透过率设定为比第2照相机62的电源断开的情况下的箭头图像333的透过率低的值。在第2照相机62的电源接通的情况下,由于箭头图像333的透过率较低,所以,箭头图像333是比显示区域vr内的外景更明显的显示,提高了箭头图像333的可视性。并且,控制部150也可以在将第2照相机62的电源接通的情况和断开的情况下对箭头图像333的显示颜色进行变更。在第2照相机62的电源断开时,控制部150用灰色等不明显的显示颜色来显示箭头图像333,在第2照相机62的电源接通时,用白色等明显的显示颜色来显示箭头图像333。并且,在本实施方式中,作为第3对象330的例子,示出了箭头图像331、333和表示控制对象和控制动作的字符332、334,但第3对象330并不限定于图像,也可以是图形、记号、标记、图标。当使显示区域vr显示第2对象320和第3对象330时,控制部150从存储部160读出处理对象的拍摄图像数据。这里,读出手区域的检测未结束的拍摄图像数据中的、拍摄的时间最早的拍摄图像数据。控制部150对所读出的拍摄图像数据进行肌肤颜色提取处理或阈值处理而检测手区域(步骤s3)。在未检测到手区域的情况下(步骤s3/否),控制部150从存储部160读出下一个处理对象的拍摄图像数据,对所读出的拍摄图像数据进行肌肤颜色提取处理或阈值处理而检测手区域(步骤s3)。控制部150也可以将第1照相机61拍摄到的全部拍摄图像数据作为处理对象进行手区域的检测,也可以按照规定的间隔选择处理对象的拍摄图像数据而进行手区域的检测。控制部150将上次选择为处理对象的拍摄图像数据的下一个拍摄到的拍摄图像数据、或从选择为处理对象的拍摄图像数据起的规定张数后拍摄到的拍摄图像数据选择为下一个处理对象的拍摄图像数据。并且,在从拍摄图像数据检测到手区域的情况下(步骤s3/是),控制部150对显示于显示区域vr的第2对象320的显示颜色进行变更(步骤s4)。由此,能够比检测手区域之前提高第2对象320的可视性。并且,控制部150使范围图像311显示于与从拍摄图像数据检测到的手区域对应的显示区域vr(步骤s5)。图9是示出显示区域vr的显示状态的图。尤其是,图9是示出范围图像311的一例的图。当从拍摄图像数据检测到手区域时,控制部150根据检测到的手区域来确定显示范围图像311的显示位置。例如,控制部150可以以包围检测到的手区域的周围的方式设定范围图像311的显示位置,也可以以与手区域的一部分重叠的方式设定范围图像311的显示位置。在设定范围图像311的显示位置后,控制部150使作为第1对象310的范围图像311显示于与所设定的显示位置对应的显示区域vr的位置(步骤s5)。当使范围图像311显示于显示区域vr时,控制部150对第1照相机61连续拍摄到的拍摄图像数据进行解析而检测手势。显示于显示区域vr的第3对象330的图像所示的手势成为检测对象。更详细来说,在第2照相机62的电源未接通的情况下,从使用者侧来看手从左向右移动的手势成为检测对象的手势。并且,在第2照相机62的电源接通的情况下,从使用者侧来看手从右向左移动的手势成为检测对象的手势。控制部150从第1照相机61连续拍摄的各个拍摄图像数据检测手区域,判定在所检测的手区域中是否存在位置的变化。当在手区域的位置处存在变化的情况下,控制部150判定手区域的位置的变化是否与登记于模式识别词典164的手势对应。在手区域的位置的变化与登记于模式识别词典164的手势对应的情况下,控制部150判定为检测到手势(步骤s6)。在检测到手势的情况下,控制部150从模式识别词典164取得与检测到的手势的模式对应的处理。当取得与手势的模式对应的处理的信息时,控制部150执行所取得的处理的信息所示的处理(步骤s7)。例如,在第2照相机62的电源未接通且检测到从使用者侧来看手从左向右移动的手势的情况下,控制部150将第2照相机62的电源接通。当执行与手势对应的处理时(步骤s7),控制部150判定是否存在与接下来能够受理的操作对应的手势(步骤s8)。例如,在步骤s7中将第2照相机62的电源接通的情况下,判定是否存在与按下第2照相机62的快门的操作对应的手势。在存在与按下第2照相机62的快门的操作对应的手势的情况下(步骤s8/是),控制部150使与手势对应的第3对象330的图像显示于显示区域vr(步骤s2)。并且,在判定为不存在与操作对应的手势的情况下(步骤s8/否),控制部150使该处理流程结束。并且,当在步骤s6中没有检测到手势的情况下(步骤s6/否),控制部150判定使范围图像311显示于显示区域vr之后的经过时间是否经过了第1设定时间(步骤s9)。在经过时间未经过第1设定时间的情况下(步骤s9/否),控制部150返回步骤s6,从拍摄图像数据检测手势(步骤s6)。并且,在经过时间经过了第1设定时间的情况下(步骤s9/是),控制部150使操作引导显示于显示区域vr(步骤s10)。图10是示出显示于显示区域vr的操作引导的图。操作引导是对使用者引导手势的图像,是表示控制部150所检测的手势的动作的图像。除了操作引导之外,还可以使将使用者的手描绘为指示体的图像、图形、记号、标记、图标显示于显示区域vr,按照规定时间对所显示的图像、图形、记号、标记、图标的显示位置进行变更而示出手势的动作。图10中示出与将第2照相机62的电源接通的手势对应的操作引导。在该操作引导中,使表示使用者的手的图标307显示于显示区域vr,使所显示的图标307的显示位置从使用者侧来看按照规定的时间从左向右移动。并且,操作引导也可以是事先拍摄的动态图像。当使操作引导显示于显示区域vr时,控制部150根据第1照相机61的拍摄图像数据来执行手势检测(步骤s11)。在未检测到手势的情况下(步骤s11/否),控制部150判定在使操作引导显示于显示区域vr之后是否经过了第2设定时间(步骤s12)。在未经过第2设定时间的情况下(步骤s12/否),控制部150返回步骤s11的判定,继续检测手势(步骤s9)。并且,在经过了第2设定时间的情况下(步骤s12/是),控制部150结束操作引导的显示(步骤s13)。之后,控制部150返回步骤s9的判定,判定在使操作引导的显示结束之后是否经过了第1设定时间(步骤s9)。在经过了第1设定时间的情况下(步骤s9/是),控制部150再次显示操作引导(步骤s10),在未经过第1设定时间的情况下(步骤s9/否),返回步骤s6,从拍摄图像数据进行手势检测。图11是示出显示区域vr的其他显示例的图。在上述的流程图中,说明了在使范围图像311显示于显示区域vr之后经过了第1设定时间的情况下显示操作引导的例子。作为其他动作,也可以在第1设定时间的计时中进行表示到操作引导的显示为止的剩余时间的显示(称为剩余时间显示)309。通过显示剩余时间显示309,能够使使用者选择是否显示操作引导。如以上所说明的那样,第1实施方式的hmd100具有图像显示部20、作为检测部进行动作的第1照相机61和拍摄控制部153、作为控制部进行动作的检测部154、显示控制部155以及处理控制部156。图像显示部20将图像与外景重叠而进行显示,或者将所述图像显示在所述外景的周边。第1照相机61和拍摄控制部153检测指示体。检测部154受理基于所检测的指示体的动作、形状以及位置中的至少任意一项的操作。显示控制部155判定是否处于能够利用指示体进行输入操作的状态,显示判定结果。因此,能够使使用者掌握hmd100的状态,提高使用指示体的操作的使用方便性。并且,显示控制部155通过图像显示部20将表示能够受理操作的图像、图形、字符或图标显示在图像显示部20的显示区域中所设定的位置。因此,能够使使用者直观地识别hmd100处于能够受理操作的状态。并且,显示控制部155构成为能够根据操作对控制对象进行控制,使表示能够受理操作的图像、图形、字符或图标根据控制对象的状态而变化,其中,该控制对象根据操作而受到控制。因此,能够使使用者直观地识别控制对象的状态。并且,第1照相机61检测包含能够与图像显示部20显示的图像一起目视的外景的范围。当根据第1照相机61的拍摄图像数据在范围内检测到指示体时,显示控制部155通过图像显示部20进行表示能够受理操作的显示。因此,使用者通过使指示体的位置移动到包含可目视的外景的范围内,能够使hmd100处于能够受理操作的状态。并且,当在范围内检测到指示体时,进行表示能够受理操作的显示,因此,能够掌握hmd100的状态。并且,图像显示部20具有通过使外部光透过而目视外景的透过型的显示区域vr。第1照相机61在包含能够透过图像显示部20目视的外景的范围内检测指示体。因此,使用者通过使指示体的位置移动到包含可目视的外景的范围内,能够使hmd100处于能够受理操作的状态。并且,在第1照相机61的拍摄图像数据中检测到指示体且处于能够受理操作的状态的情况、以及在第1照相机61的拍摄图像数据中未检测到指示体且不处于能够受理操作的情况下,显示控制部155对表示能够受理操作的显示的显示方式进行变更。因此,能够向使用者通知hmd100是否处于检测到指示体的状态。并且,显示控制部155根据在第1照相机61的拍摄图像数据中检测到的指示体的动作、形状以及位置中的至少任意一项而将手势检测为输入操作。显示控制部155使与检测出的输入操作对应的图像、图形、字符或图标中的任意的显示方式发生变化。因此,能够通过使用了指示体的手势来操作hmd100。并且,由于与hmd100检测到的手势对应的图像、图形、字符或图标中的任意的显示方式发生变化,所以能够向使用者通知检测到的手势。并且,在通过检测部154检测到指示体的情况下,显示控制部155将范围图像311与指示体重叠地显示。因此,能够将范围图像311与指示体重叠地显示。因此,能够通知hmd100识别为指示体的物体。并且,在即使使图像、图形、字符或图标显示于显示区域vr之后经过了预先设定的第1设定时间但检测部仍未受理操作的情况下,显示控制部155将对基于指示体的操作进行引导的操作引导显示于显示区域vr。因此,能够显示操作引导而对使用者引导基于指示体的操作。并且,显示控制部155在显示区域vr中显示到操作引导显示于显示区域为止的剩余时间。因此,能够向不熟悉操作的使用者通知显示操作引导的时间。并且,在使操作引导显示于显示区域vr之后经过了预先设定的第2设定时间的情况下,或者在检测部154检测到基于指示体的动作的操作的情况下,显示控制部155将操作引导的显示消除。因此,在判断为不需要显示操作引导的情况下,能够将操作引导的显示消除,能够提高显示区域vr的可视性。并且,处理控制部156根据检测部154受理的操作来控制作为控制对象的设备,或者执行作为控制对象的应用程序而执行与检测部154受理的操作对应的应用程序的功能。因此,能够通过指示体的操作来控制设备,选择功能而使作为控制对象的应用程序执行。[第2实施方式]以下,参照附图对本发明的第2实施方式进行说明。在检测部154从第1照相机61的拍摄图像数据检测到指示体的图像的情况下,显示控制部155使对象300显示于显示区域vr。本实施方式将作为第1对象310的范围图像311显示为对象300。当从拍摄图像数据检测指示体时,检测部154将表示拍摄到指示体的拍摄图像数据上的范围的坐标数据输出到显示控制部155。显示控制部155根据从检测部154输入的坐标数据进行运算,如图6所示,求出包围指示体的显示区域vr的坐标数据。显示控制部155使范围图像311显示于与求出的坐标数据对应的显示区域vr。在存储部160存储的设定数据162中包含校正数据。校正数据是将第1照相机61的拍摄图像数据与图像显示部20的显示区域vr对应起来的数据。更详细地说,是将拍摄图像数据上的坐标转换为显示区域vr上的坐标的数据。例如,在通过第1照相机61对标记等实物体进行拍摄、通过图像显示部20在与拍摄到的实物体重叠的位置显示图像的情况下,需要校正数据145,该校正数据145是将拍摄图像数据上的坐标转换为显示区域vr上的坐标的数据。因此,预先使hmd100执行校正而生成用于将拍摄图像数据上的坐标转换为显示区域vr上的坐标的校正数据。并且,在检测部154从第1照相机61的拍摄图像数据检测到指示体的图像的情况下,显示控制部155也可以将作为第2对象320的图标321、作为第3对象330的箭头图像331、333以及字符332、334与第1对象310一起进行显示。并且,第2对象320或第3对象330的显示时刻也可以是执行打开或关闭第2照相机62的处理的应用程序启动的时刻。并且,第2对象320或第3对象330的显示时刻也可以是判定为检测部154能够受理操作的时刻。接着,在检测部154检测到指示体的情况下,显示控制部155判定检测部154是否处于能够受理基于手势的操作的状态,将判定结果显示于显示区域vr。例如,在执行图像处理等处理负荷较大的处理的期间、即hmd100为忙碌状态的情况下,显示控制部155判定为检测部154无法受理基于手势的操作。当显示控制部155判定为hmd100不是忙碌状态且检测部154处于能够受理基于手势的操作的状态时,在显示区域vr中进行表示能够受理操作的显示。并且,当显示控制部155判定为hmd100为忙碌状态且检测部154不处于能够受理基于手势的操作的状态时,在显示区域vr中进行表示无法受理操作的显示。在这些显示中例如使用图像、图形、图标。并且,也可以显示表示是否处于能够受理操作的状态的字符或记号。在本实施方式中,显示控制部155通过对范围图像311和图标321中的至少任意一方的显示方式进行变更,对检测部154处于能够受理操作的状态的情况和无法受理操作的情况进行显示。例如,在检测部154处于能够受理操作的状态的情况下,显示控制部155用实线显示范围图像311或图标321,在检测部154不处于能够受理操作的状态的情况下,用虚线显示范围图像311或图标321。并且,在检测部154不处于能够受理操作的状态的情况下,显示控制部155使范围图像311或图标321闪烁,在检测部154处于能够受理操作的状态的情况下,使范围图像311或图标321点亮。并且,显示控制部155也可以在检测部154处于能够受理操作的状态的情况和不处于能够受理操作的状态的情况下,对范围图像311或图标321的显示颜色进行变更。并且,也可以是,在检测部154处于能够受理操作的状态的情况下,显示控制部155使范围图像311或图标321显示,在检测部154不处于能够受理操作的状态的情况下,将范围图像311或图标321的显示消除。在该情况下,显示控制部155也可以通过变更透过率来切换范围图像311或图标321的显示和非显示。即,在使范围图像311或图标321显示于显示区域vr的情况下,显示控制部155将范围图像311或图标321的透过率设定得较低。并且,在不使范围图像311或图标321显示于显示区域vr的情况下,显示控制部155将范围图像311或图标321的透过率设定得较高。通过将透过率变更为较低的值,范围图像311或图标321成为比穿过图像显示部20而目视的外景明显的显示。并且,通过将透过率变更为较高的值,范围图像311或图标321变成不比穿过图像显示部20而目视的外景明显的显示。并且,也可以在不同的时刻将第1对象310和第2对象320显示于显示区域vr。例如,在从拍摄图像数据检测到使用者的手区域的情况下,检测部154使作为第1对象310的范围图像311显示。并且,在从拍摄图像数据检测到手区域且hmd100处于能够受理操作的状态时,也可以使第2对象320显示。进而,也可以使第3对象330与第2对象320一起显示。并且,显示控制部155与作为控制对象的设备或应用程序的动作状态对应地对第3对象330的显示方式进行变更。第3对象330是表示检测部154检测的指示体的动作的图像、图形、图标。即,是表示登记于模式识别词典164的手势的图像、图形、图标。例如,在控制对象为第2照相机62且第2照相机62的动作状态为断开状态的情况下,显示控制部155使表示与打开第2照相机62的操作对应的手势的第3对象330闪烁或使该第3对象330点亮。并且,显示控制部155将表示与打开第2照相机62的操作对应的手势的第3对象330的透过率设定为比表示与关闭第2照相机62的操作对应的手势的第3对象330的透过率低的值。因此,能够使与打开第2照相机62的操作对应的第3对象330成为比与关闭第2照相机62的操作对应的第3对象330明显的显示。并且,在控制对象是动画再现的应用程序且正在再现动画的情况下,显示控制部155将与使动画的再现停止、快进、倒回的操作对应的手势显示为第3对象330。并且,在动画再现的应用程序已启动但没有进行动画的再现的情况下,显示控制部155将与再现动画的操作对应的手势显示为第3对象330。图12是示出控制部150的其他动作的流程图。当电源开关18接通时(步骤s21),存储于非易失性存储部123的控制程序161载入到存储器121中。控制部150启动(步骤s22)而开始执行载入的控制程序161。控制部150使第1照相机61开始拍摄(步骤s23)。并且,当控制部150使第1照相机61开始拍摄时,使第2对象320和第3对象330显示于显示区域vr(步骤s24)。第2对象320的透过率被设定得较高,以不比显示区域vr的外景明显的方式显示第2对象320。当控制部150从第1照相机61的拍摄图像数据检测出使用者的手区域时,将第2对象320的透过率变更为较低的值。由此,第2对象320是比穿过图像显示部20而目视的外景更明显的显示,使用者可目视第2对象320。并且,在显示区域vr中,如图9所示,显示有箭头图像331和箭头图像333作为第3对象330,其中,在该箭头图像331中显示有“打开照相机”的字符332,在该箭头图像333中显示有“关闭照相机”的字符334。由于在检测手区域之前的状态下不会打开第2照相机62,所以,显示有“打开照相机”的字符332的箭头图像331的透过率被显示得较低,显示有“关闭照相机”的字符334的箭头图像333的透过率被显示得较高。由此,显示有“打开照相机”的字符332的箭头图像331是比穿过图像显示部20而目视的外景更明显的显示。并且,显示有“关闭照相机”的字符334的箭头图像333是不比穿过图像显示部20而目视的外景明显的显示。因此,使用者识别为仅使显示有“打开照相机”的字符332的箭头图像331显示于显示区域vr,不使显示有“关闭照相机”的字符334的箭头图像333显示。接着,控制部150取得第1照相机61的拍摄图像数据,对所取得的拍摄图像数据进行手区域的检测(步骤s25)。在无法从拍摄图像数据检测到手区域的情况下(步骤s25/否),控制部150取得下一个拍摄图像数据,对所取得的拍摄图像数据进行手区域的检测。并且,当从拍摄图像数据检测到手区域时(步骤s25/是),控制部150判定控制部150是否处于能够受理操作的状态(步骤s26)。例如,在正在执行其他处理的、不处于能够受理新的命令的状态的情况下,控制部150判定为不处于能够受理操作的状态(步骤s26/否)。在该情况下,控制部150判定在步骤s25中开始检测手区域之后的经过时间是否经过了超时时间(步骤s27)。在未经过超时时间的情况下(步骤s27/否),控制部150等待预先设定的一定时间(步骤s28)。当经过一定时间时,控制部150再次判定在步骤s26中控制部150是否处于能够受理操作的状态(步骤s26)。并且,在经过了预先设定的超时时间的情况下(步骤26/是),控制部150通过图像显示部20显示错误显示(步骤s29)。并且,在控制部150处于能够受理操作的状态的情况下(步骤s26/是),控制部150对第2对象320的显示方式进行变更、或使第2对象320显示于显示区域vr(步骤s30)。具体来说,控制部150将第2对象320的透过率变更为较低的值而提高第2对象320的可视性,使第2对象320的显示比穿过图像显示部20而目视的外景明显。并且,当在步骤s24中不使第2对象320显示的情况下,控制部150在步骤s30中使第2对象320显示。并且,控制部150使范围图像311显示于与检测到手区域的拍摄图像数据的区域对应的显示区域vr(步骤s31)。例如,控制部150以包围检测出的手区域的周围的方式使范围图像311显示于显示区域vr。接着,控制部150开始手势的检测(步骤s32)。当控制部150使范围图像311显示于显示区域vr时,从第1照相机61连续拍摄的各个拍摄图像数据检测手区域,从而检测由使用者输入的手势。显示于显示区域vr的第3对象330的图像成为检测对象的手势。详细来说,在第2照相机62的电源未接通的情况下,从使用者侧来看手从左到右移动的手势成为检测对象的手势。并且,在第2照相机62的电源接通的情况下,从使用者侧来看手从右向左移动的手势成为检测对象的手势。控制部150从第1照相机61连续拍摄的各个拍摄图像数据中检测手区域,从而检测手区域的动作(步骤s33)。在从各个拍摄图像数据检测到的手区域的位置无变化的情况下,控制部150判定为在手区域中没有动作(步骤s33/否),继续检测手区域的动作。并且,在检测出的手区域的位置存在变化且在手区域中存在动作的情况下(步骤s33/是),控制部150判定与检测出的手区域的动作对应的手势是否登记在模式识别词典164中(步骤s34)。在与检测出的手区域的动作对应的手势未登记在模式识别词典164中的情况下(步骤s34/否),控制部150返回步骤s33,再次进行手区域的动作的检测。并且,在与检测出的手区域的动作对应的手势登记在模式识别词典164中的情况下(步骤s34/是),控制部150执行与所登记的手势对应的处理(步骤s35)。如以上所说明的那样,第2实施方式的hmd100具有图像显示部20、第1照相机61、检测部154以及显示控制部155。图像显示部20佩戴于使用者的头部,具有以能够目视外景的方式显示图像的显示区域vr。检测部154根据第1照相机61的拍摄图像数据来检测指示体的动作,受理基于检测出的指示体的动作的操作。显示控制部155判定检测部154是否处于能够对基于检测出的指示体的动作的操作进行检测的状态,将判定结果显示于显示区域vr。因此,判定检测部154是否处于能够检测基于指示体的动作的操作的状态的判定结果显示于显示区域vr。因此,能够提供在使用了指示体的操作中能够掌握hmd100的状态的使用方便的用户界面。并且,显示控制部155将表示检测部154处于能够检测操作的状态的图形、字符、图标或表示检测部154所检测出的指示体的范围的范围图像311作为判定结果显示于显示区域vr。因此,由于显示图形、字符、图标、范围图像作为判定结果,所以,能够向外部通知是否处于能够检测操作的状态。并且,在检测部154检测到指示体的情况下,显示控制部155将范围图像311显示于显示区域vr,根据检测部154是否处于能够检测操作的状态,对显示于显示区域vr的图形、字符或图标的显示方式进行变更。在图形、字符或图标中包含第2对象320的图标321、第3对象330的箭头图像331、333和字符332、334。因此,能够向外部通知检测部154检测到指示体,能够向外部通知检测部154是否处于能够检测操作的状态。并且,在检测部154处于能够检测操作的状态的情况下,显示控制部155将表示检测部154检测的指示体的动作的图形或图标显示为图形或图标。因此,由于显示表示检测部154所检测的指示体的动作的图形或图标,所以,能够使使用者识别使用了指示体的操作。并且,hmd100具有处理控制部156,该处理控制部156根据检测部154所受理的操作对控制对象进行控制。显示控制部155根据控制对象的动作状态对表示检测部154所检测的预先设定的指示体的动作的图形或图标进行变更。因此,能够使使用者进行与控制对象的动作状态对应的指示体的动作,能够根据指示体的动作使控制对象进行动作。因此,能够提高了使用指示体的操作的便利性。并且,检测部154判定检测出的指示体的动作是否与预先设定的指示体的动作对应。在检测部检测出与预先设定的指示体的动作对应的指示体的动作的情况下,处理控制部156使控制对象执行与检测部154检测出的指示体的动作对应的处理。根据该结构,通过进行预先设定的指示体的动作,能够使控制对象执行与该指示体的动作对应的处理。上述实施方式是本发明的优选的实施方式。但并不限于此,能够在不脱离本发明的主旨的范围内实施各种变形。例如,在上述实施方式中,根据第1照相机61的拍摄图像数据来检测指示体的动作、形状、位置,但也可以通过红外线传感器、电磁波传感器、光学式传感器、超声波传感器等传感器类来检测指示体的动作、形状、位置。并且,也可以是,在检测到手区域且控制部150处于能够受理操作的状态的情况、未检测到手区域的情况、以及检测到手区域但不处于能够受理操作的状态的情况下,显示控制部155对第2对象320的显示方式进行变更。例如,在检测到手区域且控制部150处于能够受理操作的状态的情况下,显示控制部155将第2对象320的透过率设定为最低。并且,在未检测到手区域的情况下,显示控制部155将第2对象320的透过率设定为最高。并且,在检测到手区域但控制部150不处于能够受理操作的状态的情况下,显示控制部155将第2对象320的透过率设定为处于能够受理操作的状态的情况与未检测到手区域的情况的中间的透过率。并且,hmd100也可以具有接口(省略图示),该接口与作为内容的提供源的各种外部设备连接。例如,可以是usb接口、微型usb接口、存储卡用接口等支持有线连接的接口,也可以由无线通信接口构成。该情况下的外部设备是向hmd100提供图像的图像提供装置,可使用个人计算机(pc)、移动电话终端、便携式游戏机等。在该情况下,hmd100能够输出基于从这些外部设备输入的内容数据163的图像或声音。并且,在上述实施方式中,例示了控制装置10与图像显示部20有线连接的结构,但本发明不限于此,也可以是图像显示部20与控制装置10无线连接的结构。该情况的无线通信方式可以采用例示为通信部117支持的通信方式的方式,也可以是其他通信方式。并且,可以在图像显示部20中设置控制装置10所具有的一部分功能,也可以通过多个装置实现控制装置10。即,控制装置10不限于具有箱形的外壳10a的结构。例如,也可以代替控制装置10而利用使用者的身体、服装或使用者随身携带的设备。使用者随身携带的设备例如可以是手表型的装置、戒指型的装置、激光指示器、鼠标、空中鼠标、游戏控制器、笔型的设备等。此外,在上述实施方式中,以图像显示部20与控制装置10分开而经由连接线40连接的结构为例进行了说明。本发明并不限于此,也可以采用控制装置10与图像显示部20构成为一体而佩戴于使用者的头部的结构。并且,作为控制装置10,也可以使用膝上型计算机、平板型计算机或台式型计算机。并且,作为控制装置10,也可以使用包括游戏机、移动电话、智能手机、便携式媒体播放器在内的便携式电子设备、其他专用设备等。并且,例如,也可以代替图像显示部20而例如采用像帽子那样佩戴的图像显示部等其他方式的图像显示部,只要具有与使用者的左眼le对应地显示图像的显示部和与使用者的右眼re对应地显示图像的显示部即可。并且,也可以代替图像显示部20而使用头戴显示器,从而能够搭载于汽车或飞机等车辆中。例如,在将头戴显示器搭载于车辆的情况下,将与触控板14的操作面相当的操作面搭载于车辆的方向盘等。并且,例如,也可以构成为内置于头盔等身体防护具的头部佩戴型显示装置。在该情况下,可以将对相对于使用者身体的位置进行定位的部分、以及相对于该部分定位的部分设为安装部。并且,作为将图像光引导至使用者眼睛的光学系统,例示了在右导光板26和左导光板28的一部分上通过半反射镜261、281形成虚像的结构。本发明并不限于此,也可以构成为在具有占据了右导光板26和左导光板28的整个面或大部分的面积的显示区域中显示图像。在该情况下,在使图像的显示位置发生变化的动作中也可以包含缩小图像的处理。此外,本发明的光学元件并不限于具有半反射镜261、281的右导光板26、左导光板28,只要是使图像光入射到使用者的眼睛的光学部件即可,具体来说,也可以使用衍射光栅、棱镜、全息显示部。并且,图4、图5等所示的各功能块中的至少一部分可以由硬件实现,也可以构成为通过硬件和软件的协作来实现,并不限于像附图所示那样配置独立的硬件资源的结构。并且,控制部150所执行的程序也可以存储于非易失性存储部123或控制装置10内的其他存储装置(省略图示)。并且,也可以构成为经由通信部117或外部连接器184取得并执行存储于外部的装置的程序。并且,形成于控制装置10的结构中的操作部110也可以形成为用户界面(ui)。并且,图7和图12所示的流程图的处理单位是为了容易理解hmd100的控制部150的处理而按照主要的处理内容分割的,本发明并不受处理单位的分割方法或名称限制。并且,控制部150的处理可以根据处理内容被分割成更多的处理单位,1个处理单位也可以被分割成包含更多的处理。并且,上述的流程图的处理顺序也不限于图示的例子。在通过计算机实现本发明的头部佩戴型显示装置的控制方法的情况下,能够以计算机所执行的程序、以计算机可读取的方式记录程序的记录介质或传输程序的传输介质的方式构成。记录介质可以使用磁、光学记录介质或半导体存储器设备。具体来说,可举出软盘、hdd(harddiskdrive)、cd-rom(compactdiskreadonlymemory)、dvd(digitalversatiledisk)、blu-ray(注册商标)disc、光磁盘、闪存、卡式记录介质等可移动型或固定式的记录介质。并且,记录介质也可以是作为图像显示装置所具有的内部存储装置的ram(randomaccessmemory)、rom(readonlymemory)、hdd等非易失性性存储装置。当前第1页12当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1