动比在实际重力作用下的移动更缓慢。
[0256]当第一物体和第二物体的距离与选择三维对象时相比缩小时(步骤S109 “否”的情况)，作为步骤SI15，控制部22根据距离使三维对象变形。然后，控制部22再次从步骤S1l执行。使三维对象变形的程度也可以例如根据作为属性对三维对象设定的弹性而改变。
[0257]如上所述，在第三实施例中，由于从检测到三维对象处于手指等的物体之间时开始根据操作使三维对象变化，因此使用者易于识别三维对象的选择。
[0258]如图39示出的步骤S81至步骤S83，也可以设定选择三维对象的条件为:在第一物体和第二物体之中至少一个与三维对象接触后，第一物体和第二物体的距离保持大致固定持续预定时间以上。通过以与三维对象的接触作为选择条件，使得当多个三维对象被显示为彼此靠近时，使用者易于选择希望的三维对象。
[0259]在上述实施例中说明的显示装置I可以应用于各种用途。作为操作对象的三维对象(显示物)可以是模仿例如书、积木、勺、筷子、扑克、粘土、乐器等真实存在的物体的对象，也可以是假想的虚拟使用者、游戏角色、假想现实的AR标识(AR夕夕' )等实际不存在的对象。另外，根据检测到的操作对三维对象施加的变化不限于上述的移动、变形、消失等。例如，在一个对象中的变化包括一个对象与其他对象置换。另外，根据按压操作对三维对象施加的变化不限于上述实施例，可以根据三维对象的种类变更。
[0260]例如，在模仿粘土的三维对象(下文仅称为“粘土”)为操作对象时，也可以根据按压操作使粘土变形，使得使用者可以使粘土成形为任意形状。另外，随着时间的经过，也可以降低粘土的粘性以使得粘土像干了一样。另外，当检测到用浸过水的三维对象的手指或手按压粘土的操作时，也可以提高粘土的粘性。
[0261]例如，在模仿唱片的三维对象(下文仅称为“唱片”)为操作对象时，也可以使唱片根据按压操作以支点为中心旋转，并播放声音。也可以通过使旋转和声音的播放联动，假想地实现由唱片播放员进行的搓盘等技术。
[0262]实施例2
[0263]说明将显示装置I通过互联网进行商品贩卖的实施例。图40至图44是用于说明将显示装置I应用于通过互联网的比萨贩卖的实施例的图。
[0264]图40是用于说明开始比萨的订购处理的图。开始订购比萨时，使用者佩戴显示装置1，看具有某种程度范围的平面的地方。例如，当使用者看桌子Tl时，显示装置I显示映现实际的桌子Tl的图像P3h。显示装置I根据使用者的指示通过由通信部16进行的通信从比萨的贩卖网站获得对象数据24b、作用数据24c以及假想空间数据24d，根据获得的数据生成假想空间。显示装置I通过将生成的假想空间图像和真实空间图像重叠来显示图像P3i0
[0265]在图像P3i中，在桌子Tl上配置有多个三维对象。所配置的三维对象包括大饼底61L、中等饼底61M、小饼底61S、盛有芝麻、西红柿、奶酪等材料的盒子62a至62f、棒63、番茄酱软瓶64和烤箱65。饼底61L是用于L尺寸的比萨的饼底、饼底61M是用于M尺寸的比萨的饼底、饼底61S用于S尺寸的比萨的饼底。这样，通过开始比萨的订购处理，在平面上配置比萨的材料和烤箱65作为三维对象。
[0266]显示装置I也可以使用预先存储在存储部24中的对象数据24b、作用数据24c以及假想空间数据24d显示比萨的材料和烤箱65。
[0267]图41是用于说明决定饼底的尺寸和厚度的工序的图。作为图41的步骤S111，使用者用手Hl抓住饼底61M。通过抓住而选择饼底61M，其根据手Hl的移动成为移动状态。在步骤S112中，使用者将饼底61M置于桌子Tl的平面大致中央位置，用手Hl抓住棒63。通过抓住而选择棒63，其根据手Hl的移动成为移动状态。
[0268]在步骤S113中，使用者将棒63置于饼底61M上，用手Hl和H2滚动。在对象数据24b中定义棒63为刚体，饼底61M为塑性体。而且，在作用数据24c中，定义塑性体在被刚体按压时被按压的部分凹陷。因此，如果使用者用棒63在饼底61M上滚动，则饼底61M呈圆状延伸并变薄。使用者用棒63在饼底61M上滚动，到如步骤S114所示饼底61M成为希望的尺寸和厚度为止。
[0269]决定饼底的尺寸和厚度的操作不限于图41示出的实施例。例如，也可以是当使用者用双手夹住饼底61M后扩大双手的间隔时，饼底61M呈以双手的间隔为直径的圆状延伸。或者，也可以是当使用者用2个手指掐住饼底61M的一部分时，饼底61M整体变形为以2个手指的间隔为厚度的圆状薄形。在这些操作中，通过调整手的间隔或手指的间隔，可以容易地调整饼底的尺寸和厚度。
[0270]图42是用于说明放上材料的工序的图。作为图42的步骤S115，使用者用手Hl的手指捏住盛在盒子62d中的芝麻。通过捏住而选择芝麻，其根据手Hl的移动成为移动状态。在步骤S116中，使用者将芝麻移动到饼底61M上希望的位置之后，扩大手指Hl的间隔。这样，芝麻被放置在饼底6IM上希望的位置。
[0271]通过重复同样的操作，使用者将希望量的希望材料放置在希望的位置。
[0272]在步骤S117中，使用者用手Hl抓住番茄酱软瓶64。通过抓住而选择番茄酱软瓶64，其根据手Hl的移动成为移动状态。在步骤SI 18中，使用者拿住番茄酱软瓶64使其出口朝下，一边按压瓶身部分一边在饼底61M上移动。在作用数据24c中，定义当按压软瓶的瓶身部分时从出口挤出容纳物。利用这个作用，在步骤S118中，由使用者在饼底61M上用番前酱画出图画。
[0273]图43是用于说明订购比萨的工序的图。作为图43的步骤S119，使用者用手Hl打开烤箱65的前门。在步骤S120中，使用者用手Hl和H2拿着饼底61M放入烤箱65中，在步骤S121中，用手Hl的手指按压烤箱65的开关。
[0274]这样，当进行加热比萨的动作时，确认比萨的订购，并向比萨的贩卖网站发送订购数据。通过将用于制作商品的最后工序与进行订购建立对应，使得使用者可以一边进行制作商品的工序，一边直观地进行订购而没有无用的操作。用于订购比萨的操作也可以是其他操作。例如，也可以显示具有与比萨材料一起显示的订购用按钮的三维对象，将按压该按钮的操作作为用于订购比萨的操作。
[0275]使用订购数据的目的在于决定比萨的价格并再现所订购的比萨。订购数据中包括关于所选择的饼底尺寸，延伸的饼底的尺寸和厚度，材料的种类、量、位置等的信息。订购数据也可以包括使用者制作的比萨三维对象的图像，或者使用者制作比萨三维对象时的操作经过。这些信息在使用者操作比萨材料的三维对象再现与实际制作比萨相同的工序的过程中获得。因此，使用者可以不进行输入数量这样麻烦的操作，用可容易地想象做好的比萨的方法订购比萨。
[0276]之后，如图44所示，根据订购数据，配送放入比萨盒71中的比萨72。以尽可能正确地再现在图40至图43中作成的比萨三维对象的方式制作比萨72。也可以是厨师一边参考订购数据一边进行比萨72的再现。厨师也可以一边看着使用者用三维对象作成的比萨72的图像，或者一边看着再现使用者操作经过的影像制作比萨72。或者也可以根据订购数据由制作机器(机器人)制作比萨72。
[0277]这样，通过根据对三维对象的操作制作订购数据，从而可以容易地实现按照自己的喜好订购商品。
[0278]接着，参考图45说明订购处理的处理顺序。图45示出的处理顺序通过控制部22执行控制程序24a而实现。
[0279]如图45所示，首先，作为步骤S131，控制部22合成包括与商品相关的三维对象的假想空间图像和真实空间图像并使其显示。接着，作为步骤S132，控制部22初始设定订购数据。具体地，控制部22使现状三维对象表示的商品状态和订购数据表示的商品状态一致。
[0280]作为步骤S133，控制部22检测对三维对象的操作。然后，作为步骤S134，控制部22判断检测到的操作是否是与进行订购对应的操作。当检测到的操作不是与进行订购对应的操作时(步骤S134中“否”的情况)，控制部22进入步骤S135。在步骤S135中，控制部22根据检测到的操作更新订购数据。然后，作为步骤S136，控制部22根据检测到的操作更新显示部32a和32b的显示。之后，控制部22返回步骤S133。
[0281]在步骤S134中，当检测到的操作是与进行订购对应的操作时(步骤S134中“是”的情况)，作为步骤S137，控制部22进行订购处理。具体地，控制部22通过由通信部16进行的通信向供货方发送订购数据。之后，控制部22结束订购处理。
[0282]上述订购方式也可以用于通过互联网订购其他食物的情况。例如，当订购面类时，通过使用三维对象再现煮面的工序、做汤的工序以及放材料的工序，可以指定面量、煮面火候(硬度)、味道浓度、材料种类、量和配置。例如，当订购便当时，通过使用三维对象再现向便当箱中装入菜的工序、向便当箱中装入饭的工序，可以指定菜的种类、量和配置以及饭的量。例如，当订购寿司时，通过使用三维对象再现捏寿司的工序，可以指定寿司材料的种类、在寿司箱中排列寿司的方式。
[0283]在上述订购方式中，也可以使多个使用者共用假想空间。在这种情况下，通过多个使用者具有的显示装置I中的一个或服务器装置等其他装置管理假想空间，通过通信向管理假想空间的装置发送与各个显示装置I检测到的操作相关的信息。管理假想空间的装置根据所发送的与操作相关的信息更新假想空间中的三维对象和订购数据。这样，通过多个使用者共用假想空间，从而可以在假想空间中共同进行制作比萨的操作。
[0284]上述订购方式也可以应用于通过互联网订购食物以外的商品的情况。例如，当订购花束或插花时，也可以将在花店中库存的花作为三维对象显示。在这种情况下，使用者通过再现组合喜欢的花的三维对象制作花束或插花的工序，可以购买通过喜欢的配置组合喜欢的花而成的花束或插花。在这种情况下，也可以以三维对象再现花店的店内，通过将做好的花束或插花拿到收款台来进行订购。花束或插花可以让人送到自家或送货地，也可以在向花店指示商品做好的时间或收到花店通知后，使用者到花店取货。
[0285]上述订购方式也可以应用于通过互联网订购衣服或饰品的情况。在这种情况下，使用者可以组合衣服和饰品三维对象，在确认协调性的基础上购买商品。也可以组合不同卖场的商品三维对象。而且，使用者还可以将商品三维对象与已经购买的真实衣服或饰品组合。这样，通过将衣服和饰品显示为可以进行移动等操作的三维对象，从而可以一边确认各种组合一边购买商品。
[0286]而且，通过将衣服和饰品作为三维对象与真实空间重叠显示，使用者可以正确把握商品尺寸。
[0287]当通过互联网订购衣服和饰品时，也可以将商品陈列在模仿实际店铺的假想购物中心中。在这种情况下，可以预先使商品悬浮在空中等，进行现实中不可能的展示。而且，与纸质目录不同，也可以将库存与显不对应，例如，如果商品没有库存则不显不商品等。另夕卜，由于只不过是假想的商品，因此也可以设定为无论是哪个店铺的商品，使用者都可以在一个店铺完成所有商品的价格支付。在这种情况下，每个店铺的销售额的分配在后台处理中进行。
[0288]例如进行将商品的三维对象拿到收款台进行商品的订购。或者通过进行从钱包取出模仿信用卡的三维对象的操作或提示的操作进行商品的订购。通过预先登录的实际信用卡进行实际的价格支付。
[0289]也可以使多个使用者共用包括购物中心的假想空间。在这种情况下，也可以在与假想空间中的各个使用者的视点对应的位置显示表示虚拟使用者的三维对象。通信显示表示使用者的三维对象，易于把握店铺和商品的人气。
[0290]另外，上述实施例中示出的本发明的方式在不脱离本发明的主旨的范围内可以任意变更。另外，也可以适当组合上述各实施例。例如，上述实施例示出的控制程序也可以分割为多个模块，也可以与其他程序合并。
[0291 ] 另外，在上述实施例中，显示装置单独检测对三维对象的操作，但是也可以是显示装置和服务器装置协作检测对三维对象的操作。在这种情况下，显示装置将摄影部拍摄到的图像或检测部检测到的信息依次向服务器装置发送，服务器装置检测操作并将检测结果向显示装置通知。通过设定为上述构造，可以减少显示装置承载的负荷。
[0292]附图标记说明
[0293]I?4 显示装置
[0294]Ia 前面部
[0295]Ib 侧面部
[0296]Ic 侧面部
[0297]4d 外部装置
[0298]13 操作部
[0299]16 通信部
[0300]22控制部
[0301]24存储部
[0302]24a控制程序
[0303]24b对象数据
[0304]24c作用数据
[0305]24d假想空间数据
[0306]25检测处理部
[0307]26显示对象控制部
[0308]27视点控制部
[0309]28图像合成部
[0310]32a、32b 显示部
[0311]40、42摄影部
[0312]44检测部
[0313]46测距部
[0314]48动作传感器
【主权项】
1.一种显示装置，其特征在于，包括: 显示部，当所述显示装置被佩戴时，通过显示与用户两只眼睛各自对应的图像来以三维方式显示对象； 检测部，检测操作所述对象的真实物体；以及 控制部，根据所述真实物体的动作，使所述对象变化，并且进行用于订购与所述对象对应的商品的订购处理。
2.如权利要求1所述的显示装置，其特征在于，所述控制部在所述真实物体进行了预定操作的情况下，进行订购所述商品的订购处理。
3.如权利要求1所述的显示装置，其特征在于，所述控制部根据所述真实物体的动作，将第一对象与第二对象组合，并且进行所述订购处理，以订购将与所述第一对象对应的商品或构成商品的材料、和与所述第二对象对应的商品或构成商品的材料相组合的商品。
4.如权利要求3所述的显示装置，其特征在于，所述控制部将表示将所述第一对象与所述第二对象组合的方式的信息包含在所述订购处理中。
5.如权利要求1所述的显示装置，其特征在于，所述显示装置使配置有所述对象的假想空间与其他显示装置共用。
6.如权利要求1所述的显示装置，其特征在于，所述控制部根据所述显示装置的位置或方向变化使所述对象变化，并且进行所述订购处理。
7.—种显示装置的控制方法，其特征在于，包括: 通过显示与用户两只眼睛各自对应的图像来以三维方式显示对象； 检测操作所述对象的真实物体； 根据所述真实物体的动作，使所述对象变化；以及 根据所述真实物体的动作，进行用于订购与所述对象对应的商品的订购处理。
【专利摘要】一种方式的显示装置(1)，包括：显示部(32a和32b)，当显示装置被佩戴时，通过显示与用户两只眼睛各自对应的图像来以三维方式显示对象；检测部(44)，检测操作对象的真实物体；以及控制部(22)，根据真实物体的动作，使对象变化，并且进行用于订购与对象对应的商品的订购处理。控制部(22)也可以在真实物体进行了预定操作后进行订购商品的订购处理。
【IPC分类】H04N5-64, G09G5-00, G06F3-01, H04N13-04, G09G5-36, G06Q30-06
【公开号】CN104662494
【申请号】CN201380050402
【发明人】上野泰弘, 田边茂辉
【申请人】京瓷株式会社
【公开日】2015年5月27日
【申请日】2013年9月26日
【公告号】EP2902875A1, US20150260990, WO2014050959A1