信息显示终端、信息显示系统以及信息显示方法
【专利摘要】在可穿戴的信息显示终端中，在用户需要的时机以易于识别的形式来显示与对象有关的信息。针对视野方向进行摄像，从摄像得到的第1图像检测第1对象，从网络取得与第1对象相关的关联信息，生成与关联信息相关的第2图像。从第1图像检测与第1对象不同的第2对象，将所述第2对象作为显示触发，在第1对象和第2对象接近的情况下显示第2图像。
【专利说明】
信息显示终端、信息显示系统以及信息显示方法
技术领域
[0001]本发明涉及信息显示终端、信息显示系统以及信息显示方法。
【背景技术】
[0002]关于与使用护目镜型、眼镜型的头戴式显示器对预定的信息进行显示的所谓可穿戴的信息显示终端有关的信息显示方法，提出了各种方法。
[0003]在例如专利文献I中，记载了根据用户的状况而以摘要模式和详细模式来切换信息的显示模式的方法。另外，在例如专利文献2中记载了如下方法:将由用户经由输入单元针对根据当前位置或者对象物(对象)信息而确定的现实世界的状况赋予的信息，与通过摄像单元摄像得到的信息进行合成来显示。
[0004]专利文献I:日本特开2007-163634号公报
[0005]专利文献2:日本特开2011-28763号公报
【发明内容】
[0006]眼镜型等的可穿戴的信息显示终端相对智能手机等便携终端的不同点在于，在取得预定的信息时，在便携终端中用户必须主动地去看便携终端的显示内容，相对于此，在可穿戴的信息显示终端中，只要处于动作状态，用户就能够在视野内被动地确认信息显示。但是，在所述可穿戴的信息显示终端中，与用户的想法无关地开始和结束信息的显示，所以即使在不特别必要的情况下也进行信息的显示等，根据状况，用户有时感到烦扰。
[0007]在上述专利文献I记载的以往技术中，根据用户是否正在步行、是否正在注视显示影像、或者是否正在说话等状况，切换信息的显示模式，但并未特别考虑如何判断是否为用户希望显示与任意的对象有关的信息的时机(timing)，如何开始或者结束与该对象有关的信息的显示。
[0008]另外，在上述专利文献2记载的以往技术中，将由用户赋予的与对象有关的信息与通过摄像单元摄像得到的信息进行合成来显示，但同样地，并未特别考虑如何在有效的时机开始或者结束与该对象有关的信息的显示。
[0009]本发明是鉴于这些课题而完成的，其目的在于提供一种在可穿戴的信息显示终端等中适时地开始或者结束与对象有关的信息的显示、并且以用户易于识别的形式来显示所述信息的信息显示终端以及信息显示方法。
[0010]上述课题例如通过权利要求书记载的发明来实现。
[0011 ]根据本发明，具有如下效果:能够适时地开始或者结束与对象有关的信息的显示，另外能够以用户易于识别的形式来显示信息，能够提高例如可穿戴的信息显示终端中的用户的便利性。
【附图说明】
[0012]图1是示出信息显示终端的结构的一个例子的框图。
[0013]图2是示出用户佩戴了信息显示终端时的一个例子的示意图。
[0014]图3是第I实施方式中的动作流程图。
[0015]图4A是示出第I实施方式中的关联信息显示的一个例子的第I图。
[0016]图4B是示出第I实施方式中的关联信息显示的一个例子的第2图。
[0017]图5是示出网络上的系统结构的框图。
[0018]图6是第2实施方式中的动作流程图。
[0019]图7是示出显示触发登记时的显示例的图。
[0020]图8A是示出第2实施方式中的关联信息显示的一个例子的第I图。
[0021]图SB是示出第2实施方式中的关联信息显示的一个例子的第2图。
[0022]图9是第3实施方式中的动作流程图。
[0023]图1OA是示出第3实施方式中的关联信息显示的一个例子的第I图。
[0024]图1OB是示出第3实施方式中的关联信息显示的一个例子的第2图。
[0025]图11是第4实施方式中的动作流程图。
[0026]图12A是示出第4实施方式中的关联信息显示的一个例子的第I图。
[0027]图12B是示出第4实施方式中的关联信息显示的一个例子的第2图。
[0028](符号说明)
[0029]101、504:信息显示终端；102:控制部；103:摄像部；104:图像处理部；105:显示控制部；106:声音输入输出部；107:声音处理部；108:通信处理部；109:通信输入输出部；110:位置检测部；111:传感器输入输出部；112:各种传感器;201:用户；202、401、701、801、1001、1201:摄像区域;203:图像区域;402、802、1002、1202:预定对象;406、805、1007、1210:关联信息的图像;407、804,1209:显示触发;501:因特网；502:个人计算机;503:便携终端;505:服务器;506:存储设备;702:登记框;1006:注视点；1206、1207、1208:候选标志。
【具体实施方式】
[0030]以下，使用附图，说明本发明的实施方式。
[0031]实施例1
[0032]图1是示出信息显示终端101的结构的一个例子的框图。使用其来说明第I实施方式。
[0033]101是彳目息显不终端，102是对彳目息显不终端101整体进彳丁控制的控制部，103是摄像部，104是图像处理部，105是显示控制部，106是与麦克风、耳机相当的声音输入输出部，107是声音处理部，108是通信处理部，109是通信输入输出部，110是以GPS(GlovalPosit1ning System，全球定位系统)为首的位置检测部，111是传感器输入输出部，112是各种传感器。
[0034]通信输入输出部109通过无线通信而与网络连接。在本实施方式中，说明信息显示终端101直接与因特网等连接而取得信息的情况。但是，也可以构成为所述信息终端通过Bluetooth(蓝牙)(注册商标)等近距离无线通信而与作为其他装置的信息终端(智能手机等)进行通信，进行与因特网等的连接和主要的处理。
[0035]信息显示终端101是至少具备摄像部103以及显示控制部105的头戴式显示器。作为各种传感器112，能够搭载以如下传感器为代表的多个传感器:倾斜传感器、加速度传感器等对用户的姿势、活动进行检测的传感器;视线传感器、温度传感器等对用户的身体状态进行检测的传感器;压敏传感器、静电电容传感器等对用户的指示输入进行探测的被用作输入输出Ι/F的传感器。
[0036]图2是示出用户佩戴了信息显示终端101时的一个例子的示意图。对与图1共同的构成要素附加了同一符号。
[0037]201示意性地表示用户，202示意性地表示由摄像部103摄影的第I图像的区域，203示意性地表示通过显示控制部105显示的第2图像的区域。另外，所述第2图像的区域不限于由203示出的尺寸或者范围，也可以是宽阔地覆盖视野的区域。另外，关于信息显示终端101的形态，只要是佩戴于头部且配置了在用户201的视野内投射例如与信息对应的光来显示信息的显示控制部105以及能够对用户201的视野方向进行摄像的摄像部103的形态即可。也可以是例如眼镜型、护目镜型、佩戴到单眼的类型、佩戴到双眼的类型等，不限于在图2中作为一个例子不出那样的形式。
[0038]由图像处理部104解析由摄像部103摄像的区域202的第I图像，并检测其中包含的预定的对象。将表示检测出的该对象的特征的信息、例如表示与后述的图案相关的特征的信息，经由通信处理部108发送到网络，与此对应地，将从网络取得的与所述对象有关的信息供给到图像处理部104。图像处理部104根据该信息，生成所述第2图像并供给到显示控制部105。显示控制部105将所述第2图像显示到区域203。
[0039]显示控制部105将图像显示到在例如与区域203相当的位置处设置的半透半反镜(half mirror)、或者将第2图像直接投影到用户201的视网膜上来显示，但是作为头戴式显示器至少是透射型，在不显示第2图像的情况下，区域203不遮挡用户201的视野。
[0040]图3是第I实施方式中的动作流程图。
[0041]图4A和图4B是示出第I实施方式中的关联信息显示的一个例子的图，示出了用户的视野。
[0042]使用图3、图4A、图4B，详细说明本实施方式中的信息显示终端101的动作。在本实施方式中，说明特别是用户在店铺内等物色商品的情况下信息显示终端101将与预定的对象有关的关联信息显示为第2图像的情况。
[0043]首先，在步骤301中开始处理。也可以通过传感器112中的压敏传感器等的触摸输入、来自声音输入输出部106的用户的声音输入而开始整体的处理。另外，也可以根据由位置检测部110检测到的位置信息、或者通过摄像部103摄像的图像来识别用户处于特定的店铺内，而自动地进行。
[0044]接下来，在步骤302中，进行预定对象的检测。具体而言，图像处理部104针对由摄像部103持续地摄像的图像进行图像识别，所切出的多个对象与预定图案的形状、颜色或者其变形预测值取得匹配等，检测预定对象。所述预定图案既可以是与店铺信息对应的默认的图案(例如“西服”等体裁)，也可以与店铺信息关联起来而从因特网等取得该图案。
[0045]另外，在用户决定期望的商品的情况下，也可以预先指定商品名、型号、体裁等，从因特网上的服务器、其他公开信息，取得预定图案，并进行更具体的预定对象检测。另外，在步骤302中检测的预定对象不限于是单一的对象，也有在摄像区域内同时检测多个的情况。
[0046]如果检测到预定对象，则在步骤303中取得关于该预定对象的关联信息。具体而言，通过通信处理部108，从因特网等经由通信输入输出部109而取得与所述预定对象有关的信息。从通过摄像部103摄像的预定对象的图像，根据商品标签等而能够确定商品名、型号等的情况下，也可以根据它们来取得关联信息。
[0047]接下来，在步骤304中进行显示触发的判定。显示触发是用于使基于关联信息的所述第2图像的显示开始的特定的对象，在该情况下将“手”设为显示触发。即便在步骤302中检测到预定对象，并在步骤303中取得了该预定对象的关联信息，只要所述显示触发未被摄像部103所摄像且被图像处理部104所识别，就不进行所述第2图像的显示。另外，图像显示部104识别“手”的方法是与步骤302中的对象的识别同样的方法。
[0048]例如，如图4A所示，即便在摄像区域401中402至405分别被检测为预定对象，也由于在摄像区域401内不存在显示触发，所以不进行所述第2图像的显示(步骤304的“否”)。
[0049]另一方面，如图4B所示，在摄像区域401内识别出作为显示触发的特定对象407，判断为接近预定对象时(步骤304的“是”)，在步骤305中，由图像处理部104生成基于所确定的预定对象402的关联信息的所述第2图像。而且，所述第2图像按照可识别为与预定对象402关联的信息的形式，通过显示控制部105而被显示。
[0050]在该情况下，作为第2图像406而显示的内容是与预定对象402有关的商品信息。此处，与该商品有关的评价信息、价格行情信息等按照易于被用户识别的形式而被显示。另夕卜，关于所显示的内容，只要是对于用户而言有用的信息即可，没有特别限定。另外，摄像区域401的虚线只是为了便于说明而示出，并非是在用户的视野内显示的线。
[0051]在步骤306中，持续地进行所述显示触发的判定，在识别出显示触发的期间进行所述关联信息的显示。另外，在显示触发的位置被变更，预定对象被变更的情况下，切换到与变更后的预定对象有关的第2图像(步骤306的“是”)。另外，在摄像区域401中无法识别出作为显示触发的特定对象407的情况下，在步骤307中结束所述第2图像的显示，再次返回到步骤302的预定对象的检测(步骤306的“否”)。
[0052]图5是示出网络上的系统结构的框图。使用图5，简单地说明经由通信处理部108取得所述关联信息。
[0053]信息显示终端101通过上述结构，从因特网501取得预定对象402的关联信息。由不特定的第三人使用例如个人计算机502、便携终端503、信息显示终端504等，经由因特网501发送该信息，通过例如服务器505而储存到存储设备506。信息显示终端101发送对从摄像部103摄像的图像检测出的预定对象402进行识别的信息，服务器505从在存储设备506中储存的信息中，将与预定对象402关联的信息提供给信息显示终端101。
[0054]另外，服务器505预先针对预定的店铺、预定的地域等汇集信息，并面向信息显示终端提供信息。相反地，在特定的服务器505未汇集关联信息的情况下，信息显示终端101还能够从与因特网连接的多个服务器所公开的信息中，检索并取得与预定对象402关联的信息。
[0055]如以上那样，根据本发明的第I实施方式，在可穿戴的信息显示终端中，针对预定对象的关联信息，利用例如使手接近对象这样的显示触发，来进行所述第2图像的显示开始或者结束。由此，能够在反映了用户的想法或者行动(例如将商品拿到手中=想看与商品关联的信息)的时机以及期间进行所述第2图像的显示。用户在佩戴了信息显示终端的状态下能够自由地使用双手，在选择对象时无需操作信息显示终端101自身，便利性提高。另外，不会在不需要的时机显示所述第2图像或者同时显示针对多个对象的信息，所以具有能够避免成为对于用户而言烦扰的显示这样的效果。
[0056]实施例2
[0057]接下来，使用图6至图SB，说明信息显示终端101的第2实施方式。关于信息显示终端101的结构，基本上与上述图1的情况相同，所以使用对图1的各构成要素附加的编号来进行说明。另外，与第I实施方式同样地，说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像的情况。
[0058]图6是第2实施方式中的动作流程图。
[0059]图7是示出显示触发登记时的显示例的图。
[0060]在本实施方式中特征性的点在于，用户能够登记上述显示触发。图6示出了显示触发登记时的动作流程，图7示出了显示触发登记时的用户的视野。
[0061]首先，在步骤601中，开始处理。作为处理开始，能够通过压敏传感器等的触摸输入、利用声音输入的用户指示来进行。接下来，在步骤602中，显示用于登记显示触发的框。具体而言，图像处理部104生成表示登记框的图像，显示控制部105如图7那样，在摄像部103的摄像区域701的范围内、即在用户的视野方向上，显示登记框702。
[0062]在步骤603中，用户使希望登记为显示触发的特定对象收敛于登记框702内。在该情况下，将“手掌”设为特定对象703。接下来，在步骤604中，从由摄像部103摄像的图像，图像处理部104识别出在登记框702的范围内存在特定对象703时，向用户询问是否将该对象登记为显示触发。关于向用户的询问，既可以如图7所示通过文字的显示来进行，也可以通过从声音输入输出部106的声音输出来进行。
[0063]如果通过用户的指示输入而进行了登记指示(步骤604的“是”)，则将特定对象703作为显示触发而存储到信息显示终端101内的存储器(未图示)。另外，该存储器也可以设置成可从控制部102或者图像处理部104访问、或者由它们所内置。之后，在步骤606中结束处理。另外，也可以在步骤604中在图像处理部104识别出存在特定对象703的阶段，生成表示特定对象703的轮廓的图像并由显示控制部105进行显示，并且从声音输入输出部106输出声音，对用户通知识别出特定对象703。
[0064]图8A和图SB是示出第2实施方式中的关联信息显示的一个例子的图。此处，与第I实施方式的情况同样地，使用图8A和图SB来说明如下情况:用户在店铺内等物色商品的情况下，信息显示终端101针对预定的对象将关联信息显示为第2图像。此处，设为在步骤605中作为特定对象703而登记了 “手掌”。
[0065]动作流程基本上与图3的情况相同，所以省略详细的说明。在上述步骤304的显示触发的判定中，如图8A所示在摄像区域801内存在预定对象802，从因特网等取得了关联信息，但特定对象803是“手背”，未被识别为所登记的显示触发，所以不进行关联信息的显示。关于与所登记的显示触发的一致判定，在图像处理部104中与对象的形状、颜色、或者它们的变形预测值等取得匹配等来进行判断。在图SB中，特定对象804是“手掌”，在图6的步骤605中，被判断为已登记的显示触发。
[0066]而且，在步骤305中，通过图像处理部104，将根据显示触发而确定的预定对象802的关联信息生成为第2图像805。而且，通过显示控制部105，将所述第2图像805以可识别为与预定对象802关联的信息的形式进行显示。
[0067]与上述同样地，作为第2图像805而显示的内容只要是作为与预定对象802有关的商品信息对于用户而言有用的信息即可，没有特别地限定。另外，摄像区域701以及801的虚线只是为便于说明而示出的线，并非是在用户的视野内显示的线。
[0068]如以上那样，根据本发明的第2实施方式，在可穿戴的信息显示终端中，通过将特定的对象登记为显示触发，能够进行与用户的意图对应的所述第2图像的显示开始或者结束。与实施方式I的情况同样地，用户在佩戴了信息显示终端的状态下能够自由地使用双手，在选择对象时无需操作信息显示终端101自身，另外能够根据用户的期望来适宜地变更显不触发，所以便利性提尚。
[0069]作为本实施方式的变形例，考虑根据所登记的显示触发来进行图3的步骤301中的处理开始的实施方式。即，作为信息显示终端101的动作，首先在步骤301中持续地仅进行显示触发的判定。然后，是根据由摄像部103摄像的图像而判定为在图像识别部104中识别的对象与所登记的显示触发一致的情况下，进行步骤302以后的动作的实施方式。在本实施方式的例子中，能够通过在摄像区域401中示出“手掌”来进行一连串的动作。动作的开始变得简单，所以还具有能够提高用户的便利性这样的效果。
[0070]实施例3
[0071]接下来，使用图9、图1OA和图10B，说明信息显示终端101的第3实施方式。关于信息显示终端101的结构，基本上与上述图1的情况相同，所以使用对图1的各构成要素附加的编号来进行说明。另外，在本实施方式中也与上述实施方式同样地，说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像那样的情况。
[0072]图9是第3实施方式中的动作流程图。
[0073]图1OA和图1OB是示出第3实施方式中的关联信息显示的一个例子的图，示出了用户的视野。
[0074]关于步骤901至步骤903的动作，与上述图3中的步骤301至步骤303的动作相同，省略详细的说明。如果在步骤901中开始处理，则在步骤902中检测预定对象，在步骤903中从因特网等取得与所述预定对象有关的关联信息。另外，在步骤902中检测的预定对象不限于单一，而也有在摄像区域内同时检测多个的情况。
[0075]接下来，在步骤904中，进行用户的视线判定。关于佩戴信息显示终端101的用户的视线，通过在传感器112中包括的视线传感器而检测其注视点。关于视线传感器，已知例如上述专利文献I记载的利用了红外线的方法、利用了 CMOS(Complementary Metal-OxideSemiconductor，互补金属氧化物半导体)传感器的方法等。在注视点未处于与所述检测出的预定对象相关的范围的情况下(步骤904的“否”)，不进行与所述关联信息相关的第2图像的显示。例如，如图1OA所示，即使在摄像区域1001中将1002至1005分别检测为预定对象，在注视点1006与任一个预定对象都不相关的情况下，不进行与关联信息相关的第2图像的显示。
[0076]另一方面，如图1OB那样，在注视点1006与预定对象1002相关时，在其状态持续了预定时间(例如3秒)以上的情况下(步骤904的“是”)，在步骤905中将该预定对象1002的关联信息通过图像处理部104生成为第2图像1007，并以可识别为与预定对象1002关联的信息的形式，通过显示控制部105进行显示。被显示为第2图像1007的内容与上述实施例同样地是与预定对象1002有关的商品信息，以用户易于识别的形式，显示了与该商品有关的评价信息、价格行情信息等。
[0077]另外，所显示的内容只要是对于用户而言有用的信息即可，没有特别地限定。另夕卜，摄像区域1001的虚线以及注视点1006的标志只是为便于说明而示出的，并非在用户的视野内显示。其中，关于注视点1006的标志，还能够设置显示为图像的模式而使用户能够识另IJ，在该情况下标志的形状不限于注视点1006的形状。
[0078]在步骤906中，持续地进行视线判定，在注视点1006处于与预定对象1002或者第2图像1007相关的范围的期间，显示第2图像1007(步骤906的“是”)。其原因为，在显示了第2图像1007的时间点，注视点1006移动到第2图像1007侧。另外，在注视点1006脱离了与预定对象1002或者第2图像1007相关的范围的情况、或者脱离持续预定时间(例如3秒)以上的情况下，结束第2图像1007的显示(步骤906的“否”)，再次返回到步骤902的预定对象的检测。
[0079]如以上那样，根据第3实施方式，在可穿戴的信息显示终端101中，针对预定对象的关联信息，根据用户的注视点进行第2图像的显示开始或者结束，从而能够在反映了用户的想法或者行动(例如关注商品=想看与商品关联的信息)的时机以及期间进行图像的显示。与上述实施方式的情况同样地，用户在佩戴信息显示终端101的状态下能够自由地使用双手，在选择对象时无需操作信息显示终端101自身，便利性提高。另外，避免在不需要的时机显示第2图像、或者同时显示针对多个对象的信息，所以具有能够避免成为对于用户而言烦扰的显示这样的效果。
[0080]实施例4
[0081]接下来，使用图11、图12A和图12B，说明信息显示终端101的第4实施方式。关于信息显示终端101的结构，基本上与上述图1的情况相同，所以使用对图1的各构成要素附加的编号来进行说明。另外，在本实施方式中也与上述实施方式同样地，说明特别是用户在店铺内等物色商品的情况下信息显示终端101针对预定的对象将关联信息显示为第2图像那样的情况。
[0082]图11是第4实施方式中的动作流程图。
[0083]图12A和图12B是示出第4实施方式中的关联信息显示的一个例子的图，示出了用户的视野。
[0084]关于步骤1101至步骤1103的动作，与上述图3中的步骤301至步骤303的动作相同，省略详细的说明。如果在步骤1101中开始处理，则在步骤1102中检测预定对象，在步骤1103中从因特网等取得与所述预定对象有关的关联信息。另外，在本实施方式中，说明在步骤1102中在摄像区域内同时检测多个预定对象的情况。
[0085]如果检测到多个预定对象而取得关联信息，则在步骤1104中进行候选标志的显示。候选标志是指，在检测到的预定对象中作为关联信息取得了有效的信息的情况下所显示的标志。例如，图12A示出了如下情况:在步骤1102中在摄像区域1201内将1202至1205检测为预定对象，在步骤1103中针对1202、1204、1205取得了有效的关联信息。1206至1208是候选标志，通过图像处理部104而生成为图像，并通过显示控制部105，以与相应的预定对象的一部分重叠的方式显示。另外，关于候选标志，只要是用户能够识别的程度的大小且能够判别与哪个预定对象关联的标志，则其形状不限于图12A所示的形状。
[0086]接下来，在步骤1105中，进行显示触发的判定。在该情况下，与上述实施例同样地，将“手”设为显示触发。在图12A中，在摄像区域1201中不存在显示触发，所以仅显示候选标志1206、1207、1208，不进行与各预定对象的关联信息相关的第2图像的显示。
[0087]另一方面，如图12B那样，作为显示触发的特定对象1209在摄像区域1201内被识另IJ，并被判断为接近预定对象1202时，在步骤1106中，根据显示触发确定的预定对象1202的关联信息通过图像处理部104而被生成为第2图像1210，并作为替代候选标志1206的图像而通过显示控制部105被显示。
[0088]在该情况下，预定对象1202接近其他对象1203至1205。因此，以与预定对象1202的一部分重叠的方式显示第2图像1210。由此，明确了第2图像1210是与哪个对象相关的显示。另外，即使在其他实施方式中，为了明确第2图像是与哪个对象相关的图像，将所述第2图像以与所关联的对象重叠一部分的方式进行显示即可。
[0089]与上述实施方式同样地，作为第2图像1210而显示的内容是与预定对象1202有关的商品信息，以用户易于识别的形式显示了与该商品有关的评价信息、价格行情信息等。另夕卜，所显示的内容只要是对于用户而言有用的信息即可，没有特别地限定。另外，候选标志1207以及1208是未选择相应对象的状态，所以持续原样地显示为候选标志。另外，摄像区域1201的虚线只是为便于说明而示出的线，并非是在用户的视野内显示的线。
[0090]在步骤1107中，持续地进行所述显示触发的判定，在识别出显示触发的期间，进行所述关联信息的显示(步骤1107的“是”)。另外，在显示触发的位置被变更，接近显示触发的预定对象变更的情况下，将关于变更后的预定对象的候选标志切换为与关联信息相关的第2图像的显示。另外，关于变更前的预定对象，从与关联信息相关的第2图像再次切换为候选标志显示。在摄像区域1201中无法识别作为显示触发的特定对象1209的情况下(步骤1107的“否”)，在步骤1108中结束与所述关联信息相关的第2图像显示，返回到步骤1102的预定对象的检测。但是，关于在摄像区域1201内已显示的候选标志，继续显示。
[0091]如以上那样，根据第4实施方式，在可穿戴的信息显示终端101中，在预定对象的关联信息显示之前显示候选标志，由此用户能够识别可预先显示关联信息的对象是哪个。关于关联信息自身，使用显示触发来进行第2图像的显示开始或者结束，所以能够在反映了用户的想法或者行动的时机以及期间进行第2图像的显示。用户在佩戴信息显示终端101的状态下能够自由地使用双手，能够一边识别可针对哪个对象显示关联信息、一边进行第2图像的显示。而且，具有如下效果:在选择对象时无需操作信息显示终端101自身，便利性提高。
[0092]作为本实施方式的变形例，考虑针对图12A中的候选标志1206至1208的大小或者颜色，通过相应的关联信息的内容的有效性来附加差异的实施方式。在显示候选标志的时间点，已取得各关联信息，所以在例如附加信息的量多的情况、或者是用户事先指定的商品的情况下等，增大显示标志或者设为红色系的框。由此，能够使用户在事先更容易识别。
[0093]另外，在本实施方式中，关于显示候选标志的动作，说明了与第I实施方式组合那样的情况，但还能够与其他实施方式组合来实施。
[0094]在以上说明的所有实施方式中，说明了特别是用户在店铺内、特别是在服装店内物色商品的情况下信息显示终端针对预定的对象将关联信息显示为第2图像那样的情况。但是，应用情景不限于此，也能够应用于其他类型的店铺、室外中的信息显示等。另外，说明了作为显示触发主要使用“手”的情况，但也能够指定其他来作为显示触发。
[0095]另外，本发明不限于上述实施方式，而包括各种变形例。例如，上述实施例是为了易于理解地说明本发明而详细说明的例子，不限于一定具备所说明的所有结构的例子。而且，上述的各功能、处理部等既可以利用硬件实现它们的一部分或者全部，也可以通过处理器解释并执行用于实现各个功能的程序而利用软件来实现。另外，控制线、信息线示出说明方面认为必要的部分，未必示出所有控制线、信息线。
【主权项】
1.一种信息显示终端，在使用者的视野方向上显示信息，其特征在于，具有: 通信处理部，进行用于从网络取得信息的通信； 摄像部，针对所述视野方向进行摄像； 图像处理部，从所述摄像部摄像得到的第I图像检测第I对象，将经由所述通信处理部从所述网络取得的所述第I对象的关联信息作为第2图像来生成； 显示控制部，在所述视野方向上显示所述第2图像； 控制部，控制所述信息显示终端的构成要素的动作， 在所述图像处理部从所述第I图像检测用于确定任意的对象的第2对象，而且判断为所述第I对象与所述第2对象位于接近的位置的情况下，所述控制部控制所述显示控制部使得显示所述第2图像。2.根据权利要求1所述的信息显示终端，其特征在于， 所述控制部控制所述显示控制部，使得与所述第I对象的一部分重叠地进行所述第2图像的显示。3.根据权利要求1所述的信息显示终端，其特征在于， 在判断为所述接近的状态被解除的情况下，所述控制部控制所述显示控制部使得停止所述第2图像的显示。4.根据权利要求1所述的信息显示终端，其特征在于， 所述控制部控制所述图像处理部，使得从所述摄像部摄像得到的所述第I图像取得确定所述第2对象的信息。5.根据权利要求4所述的信息显示终端，其特征在于， 所述控制部使所述图像处理部生成表示预定的区域的图像并使所述显示控制部显示表示预定的区域的图像，所述控制部控制所述图像处理部使得从位于所显示的所述区域内的对象取得确定所述第2对象的信息。6.一种信息显示终端，在使用者的视野方向上显示信息，其特征在于，具有: 通信处理部，进行用于从网络取得信息的通信； 摄像部，针对所述视野方向进行摄像； 图像处理部，从所述摄像部摄像得到的第I图像检测第I对象，将经由所述通信处理部从所述网络取得的所述第I对象的关联信息作为第2图像来生成； 显示控制部，在所述视野方向上显示所述第2图像； 视线传感器，检测所述使用者的注视点；以及 控制部，控制所述信息显示终端的构成要素的动作， 在所述视线传感器检测到的使用者的注视点在与所述第I对象相关的位置处存在预定时间以上的情况下，所述控制部控制所述显示控制部使得显示所述第2图像。7.根据权利要求6所述的信息显示终端，其特征在于， 所述控制部控制所述显示控制部，使得与所述第I对象的一部分重叠地进行所述第2图像的显示。8.根据权利要求6所述的信息显示终端，其特征在于， 在所述注视点脱离与所述第I对象相关的位置或者与所述第2图像相关的位置之后经过了预定时间的情况下，所述控制部控制所述显示控制部使得停止所述第2图像的显示。9.根据权利要求1所述的信息显示终端，其特征在于， 所述控制部使所述图像处理部生成与所述第I对象相关的特定的标志图像，在所述显示控制部不显示所述第2图像的情况下，所述控制部控制所述显示控制部以使所述标志图像以与所述第I对象重叠一部分的方式进行显示。10.根据权利要求9所述的信息显示终端，其特征在于， 在所述图像处理部从所述网络取得了与所述第I对象相关的有效的关联信息的情况下，所述控制部控制所述显示控制部使得显示所述标志图像。11.根据权利要求9所述的信息显示终端，其特征在于， 在进行所述第2图像的显示的情况下，所述控制部控制所述显示控制部使得将所述标志图像的显示切换为所述第2图像的显示。12.根据权利要求9所述的信息显示终端，其特征在于， 所述控制部控制所述显示控制部，使得根据所述关联信息的有效性来变更所述标志图像的显示状态。13.根据权利要求1所述的信息显示终端，其特征在于， 具备位置信息检测部，该位置信息检测部检测所述信息显示终端的位置， 所述控制部进行控制，使得根据所述位置信息检测部检测到的位置和由所述摄像部摄像得到的图像，通过所述通信处理部从所述网络取得信息，判断所述使用者的详细的位置?目息O14.一种信息显示系统，具有权利要求1所述的信息显示终端、以及与网络连接且对信息进行通信的信息终端，所述信息显示系统的特征在于， 所述信息显示终端的通信处理部经由所述信息终端而与所述网络通信信息。15.—种信息显示方法，在使用者的视野方向上显示信息，其特征在于， 针对所述视野方向进行摄像， 从摄像得到的第I图像，检测第I对象， 从网络取得与该第I对象相关的关联信息， 生成与所述关联信息相关的第2图像， 从所述第I图像，检测用于确定任意的对象的第2对象， 在判断为所述第I对象与所述第2对象位于接近的位置的情况下，在所述视野方向上显示所述第2图像。16.根据权利要求15所述的信息显示方法，其特征在于， 与所述第I对象的一部分重叠地进行所述第2图像的显示。17.根据权利要求15所述的信息显示方法，其特征在于， 从所述第I图像取得确定所述第2对象的信息。18.—种信息显示方法，在使用者的视野方向上显示信息，其特征在于， 针对所述视野方向进行摄像， 从摄像得到的第I图像，检测第I对象， 从网络取得与该第I对象相关的关联信息， 生成与所述关联信息相关的第2图像， 检测所述使用者的注视点， 在所述注视点在与所述第I对象相关的位置处存在预定时间以上的情况下，在所述视野方向上显示所述第2图像。19.根据权利要求18所述的信息显示方法，其特征在于， 与所述第I对象的一部分重叠地进行所述第2图像的显示。20.根据权利要求15所述的信息显示方法，其特征在于， 生成与所述第I对象相关的特定的标志图像， 在不显示所述第2图像的情况下，将所述标志图像以与所述第I对象的一部分重叠的方式进行显示。
【文档编号】G09G5/38GK105874528SQ201480072277
【公开日】2016年8月17日
【申请日】2014年1月15日
【发明人】吉田进, 大内敏, 多田行伸, 桑原祯司, 濑尾欣穗
【申请人】日立麦克赛尔株式会社