信息处理装置以及信息处理方法与流程

本发明涉及信息处理装置以及信息处理方法。

背景技术：

增强现实技术(ar)已普遍地为人所知，其用于显示由照相机(camera)捕捉的描绘真实空间的捕捉图像，该捕捉的图像与在其上的虚拟物体结合。例如，已知用于三维显示的ar技术，当用户捕捉包含预定图案(ar标识)等等的纸张的图像时，根据照相机与那纸张之间的位置关系，虚拟物体出现在捕捉图像上。当用户参考在捕捉图像上显示的虚拟物体时，该用户能够掌握该用户在已实际放置对应于虚拟物体的物体的情况下的图像。

在专利号为no.4032776的日本专利中，公开了现实显示装置的合成感官的发明，其用于没有在真实空间中放置真实物体的情况下，呈现给用户诸如真实物体的尺寸、颜色之类的外观以及周围环境相一致的虚拟的真实世界。

然而，通过常规技术，即使在捕捉图像上显示代表要放置的目标的虚拟物体，也很难掌握在操作要放置的目标的情况下的图像。

鉴于以上做出本发明，并且其目标是提供使用户能更清楚地掌握在操作要放置的目标的情况下的图像的信息处理装置以及信息处理方法。

技术实现要素：

根据本发明的一个方面，信息处理装置包含图像捕捉单元、生成单元、操作接收单元以及显示控制单元。所述图像捕捉单元配置来获得捕捉图像，所述捕捉图像包含位置识别信息，该信息识别代表要放置的目标的虚拟物体要被显示的位置。所述生成单元配置来生成合成图像，在所述合成图像中虚拟物体在捕捉图像上的位置处被结合，由位置识别信息识别所述位置。所述操作接收单元配置来接收导致虚拟物体操作的操作，所述虚拟物体包含于在显示单元上显示的合成图像中。响应于所述操作接收单元接收导致虚拟物体操作的操作，所述显示控制单元配置来基于显示设置信息控制描绘虚拟物体的操作，所述显示设置信息包含定义要放置的目标的规格的规格信息。

根据本发明，可能达到使用户能更清楚地掌握在操作要放置的目标的情况下的图像的效果。

附图说明

图1是根据第一实施例的信息处理系统的配置的示例图；

图2a是根据第一实施例的显示虚拟物体的方法的概览的第一示例图；

图2b是根据第一实施例的显示虚拟物体的方法的概览的第二示例图；

图3a是根据第一实施例的虚拟物体的概括示例图；

图3b是根据第一实施例的具有被操作的可移动部件的虚拟物体的概括示例图；

图4是根据第一实施例的信息处理装置的配置的示例图；

图5是根据第一实施例的(用于打印机)初始显示的图像信息的示例图；

图6是根据第一实施例的(用于存纸器)可附接并可拆卸的部件图像信息的示例图；

图7是根据第一实施例的(用于修整器)可附接并可拆卸的部件图像信息的示例图；

图8是根据第一实施例的(用于adf)可移动部件图像信息的示例图；

图9是根据第一实施例的(用于色粉盖)可移动部件图像信息的示例图；

图10是根据第一实施例的(用于纸盒)可移动部件图像信息的示例图；

图11是根据第一实施例的(用于双工单元盖)可移动部件图像信息的示例图；

图12是根据第一实施例的(用于打印操作)规格信息的示例图；

图13是根据第一实施例的模型选择屏幕的示例图；

图14是根据第一实施例的(当显示列表时)模型选择屏幕的示例图；

图15是根据第一实施例的(用于打印机a)模型选择屏幕的示例图；

图16是根据第一实施例在按下adf操作按钮后的模型显示屏幕的示例图；

图17是根据第一实施例的在按下打印操作显示按钮后的模型显示屏幕的示例图；

图18a是根据第一实施例的存纸器选择屏幕的示例图；

图18b是根据第一实施例的在已选择存纸器后的模型显示屏幕的示例图；

图19是根据第一实施例的布置限制区域规格屏幕的示例图；

图20是根据第一实施例的产品规格屏幕的示例图；

图21是根据第一实施例的地图显示屏幕的示例图；

图22是根据第一实施例的信息处理方法的示例的流程图；

图23是根据第一实施例的信息处理装置的硬件配置的示例图；

图24是根据第二实施例的(用于投影仪)初始显示的图像信息的示例图；

图25是根据第二实施例的(用于投影操作)规格信息的示例图；

图26是根据第二实施例的(用于投影仪pa)模型显示屏幕的示例图；

图27是在按下根据第二实施例的操作按钮后，根据第二实施例的模型显示屏幕的示例图；

图28a是根据第二实施例的(用于类型40)投影图像的示例的示意图；

图28b是根据第二实施例的(用于类型100)投影图像的示例的示意图；

图29是根据第三实施例的(用于洗衣机)初始显示的图像信息的示例图；

图30是根据第三实施例的(用于门)可移动部件图像信息的示例图；

图31是根据第三实施例的(用于洗涤操作)规格信息的示例图；

图32是根据第三实施例的模型选择屏幕的示例图；

图33是根据第三实施例的(当显示列表时)模型选择屏幕的示例图；以及

图34是根据第三实施例的(用于洗衣机wa)模型显示屏幕的示例图。

附图意图描述本发明的示例性的实施例并且不应被解释为限制其范围。贯穿各图中的同一或类似的参考数字被指派给同一或类似的组件。

具体实施方式

在此使用的术语仅用于描述特别的实施例的目的，并不意图限制本发明。

如在此使用的单数形式“一”、“一个”和“所述”也意图包含复数形式，除非上下文清楚地另作指示。

在图中所示的描述的优选实施例中，为了清楚的目的可采用特定的术语。然而，本专利说明书的公开不意图被限制于如此选择的特定术语，并且要理解为每个特定的元件包含所有具有相同的功能、以类似的手段操作并达到类似效果的技术等价物。

在下文中，将参考附图，具体描述信息处理装置和信息处理方法的实施例。

第一实施例

图1是根据第一实施例的信息处理系统1的配置的示例图。根据这个实施例的信息处理系统1包含信息处理装置10以及服务器设备20。所述信息处理装置10与服务器设备20经由网络100相连接。用于网络100的通信系统可以是无线系统、有线系统或是无线系统与有线系统的结合体。例如，网络100为互联网。

信息处理设备10显示包含通过捕捉任意定位(location)的图像获得的捕捉图像的合成图像，所述捕捉图像与在其上的虚拟物体(virtualobject)相结合。所述虚拟物体为任意物体(要放置的目标)的3d模型。在描述第一实施例中，将描述与虚拟物体相对应的物体为办公器材的情况。在描述第一实施例中，虽然将利用办公器材为打印机(打印设备)的示例作出描述，但所述办公器材不限于打印机，并且可以是任何办公器材。例如，所述办公器材可以是投影仪(投影设备)。在第二实施例中，将描述与虚拟物体相对应的物体为投影仪的情况。例如，信息处理装置10为装配照相机的智能装置。

所述服务器设备20在其中储存信息，诸如：用于信息处理装置10以显示包含虚拟物体的合成图像的应用(电脑程序)；代表ar标识的图像信息；以及用于显示虚拟物体的显示设置信息。所述ar标识为在合成图像中识别在捕捉图像上虚拟物体要被放置的位置的位置识别信息。参考图5至图12，将在后文描述显示设置信息的细节。例如，由信息处理装置10经由在服务器设备20上建立的网页下载储存于服务器设备20中的信息。

图2a是根据第一实施例显示虚拟物体40的方法的概览的第一示例图。首先，信息处理装置10的用户打印出代表ar标识30的图像信息，所述图像信息储存于服务器设备20或信息处理装置10中，并将描绘ar标识30的印出品放置于虚拟物体40要被显示的定位处。随后，信息处理装置10从服务器设备20中下载作为虚拟物体40显示的模型的显示设置信息。接下来，当信息处理装置10捕捉包含描绘ar标识30的印出品的捕捉图像时，在包含于捕捉图像中的印出品的位置处显示与显示设置信息相对应的虚拟物体40。

在图1和图2a中，所述配置具有一个服务器设备20，但用于信息处理装置10的、以获得储存在服务器设备20中信息的配置不限于此示例。

图2b是根据第一实施例的显示虚拟物体40的方法的概览的第二示例图。在图2b中的示例示出服务器设备20在网络100上被分配为服务器设备20a和服务器设备20b的情况。首先，应用商店的开发者，在服务器设备20a(开发者公司的服务器等)中的应用预先具有包含虚拟物体40的图像数据的信息(作为3d模型显示的图像的模型数据等)等的显示设置信息。随后，从服务器设备20a中将所述应用释放到管理在网络100上的应用售卖网站等的服务器设备20b。随后，信息处理装置10从服务器设备20b下载应用。因此，在图2b中的配置的示例中，还能够形成信息处理装置10能够安装所述应用的环境。根据要求，可从服务器设备20a由信息处理装置10下载ar标识30。

接下来，将描述根据第一实施例的信息处理装置10上显示的虚拟物体40的概览。

图3a是根据第一实施例的虚拟物体40的示意图。根据第一实施例的虚拟物体40具有代表固定部件的第一区域41以及代表可移动部件的第二区域42。为了简化，图3a和3b中虚拟物体40的示例具有一个代表可移动部件的第二区域42，但是代表可移动部件的第二区域42的数量是任意的。例如，在图3a中的虚拟物体40为打印机，以及例如，第二区域42为打印机的自动文件输送器(adf)部件。

图3b是根据第一实施例的虚拟物体40(当操作可移动部件时)的概览的示意图。在图3b中的示例图示出能够打开和关闭虚拟物体40的第二区域42的情况。首先在信息处理装置10上显示处于图3a中的初始显示状态下的虚拟物体40。当信息处理装置10接收操作第二区域42的输入时，虚拟物体40的显示从图3a中的状态改变为图3b中的状态。然后通过使用移动图像来显示第二区域42的打开和关闭操作。所述移动图像，例如为动画。在图3a和图3b中的显示参考点p代表了指定移动图像要被显示的位置的参考点。显示参考点p的坐标，例如，通过在虚拟物体40的预定点o处具有原点的坐标系而被表示。

接下来，将描述根据第一实施例的信息处理装置10的配置的示例。

图4是根据第一实施例的信息处理装置10的配置的示例图。根据第一实施例的信息处理装置10包含储存单元11、图像捕捉单元12、显示控制单元13、显示单元14、操作接收单元15、生成单元16、通信单元17、gps单元18以及输出单元19。信息处理装置10可以为任意装置，但在描述第一实施例中，信息处理装置10为智能装置的情况，诸如智能电话或平板类装置，将作为示例而被描述。即显示单元14和操作接收单元15为液晶触摸面板等。

对于虚拟物体40的每个类型，储存单元11在其中储存用于显示虚拟物体40的显示设置信息。显示设置信息包含，例如，初始显示的图像信息、可附接并可拆卸的部件图像信息、可移动部件图像信息以及规格(specification)信息。此外，储存单元11还在其中储存信息，诸如：与虚拟物体40相对应的打印机的具体规格信息；网页地址，从该网页地址能够获得(购买)与虚拟物体40相对应的打印机；以及地点(商店)地址，从该地点地址能够获得(购买)与虚拟物体40相对应的打印机。通过通信单元17与服务器设备20通信更新在储存单元11中的信息。例如，通过通信单元17从服务器设备20中新获得虚拟物体40的显示设置信息并且将显示设置信息储存于储存单元11中，能够在信息处理装置10上显示新的虚拟物体40，诸如新产品。

例如，对于虚拟物体40为打印机的情况，将描述显示设置信息(初始显示的图像信息、可附接并可拆卸的部件图像信息、可移动部件图像信息以及规格信息)。

首先，将描述根据第一实施例的初始显示的图像信息的示例。

图5是根据第一实施例，初始显示的图像信息(用于打印机)的示例图。初始显示的图像信息指示当开始虚拟物体40的显示时的状态。初始显示的图像信息具有包含“模型名称”、“主体”、“存纸器(bank)”以及“修整器(finisher)”的项目。所述项目“模型名称”指示打印机的模型的名称。在这个第一实施例中，所述项目“模型名称”为识别虚拟物体40的类型的识别信息。所述项目“主体”指示特定信息，所述特定信息指定了主体的图像，所述主体处于其可附接并可拆卸的部件(可选零件)没有被附接到其上的状态。所述特定信息为，例如，图像文件名称。在包含于由信息处理装置10捕捉的捕捉图像中的ar标识30的位置处显示主体的图像。

存纸器为可选零件，打印中使用的纸张储存于其中。对于所述项目“存纸器”；设置“-”、“否”或数字值，诸如“1”或“2”。符号“-”指示存纸器不能被附接到打印机主体上。“否”指示存纸器尚未被附接到可与一个或多个存纸器附接的模型。数字值“1”指示一个存纸器已被附接到可与一个或多个存纸器附接的模型。数字值“2”指示两个存纸器已被附接到可与一个或多个存纸器附接的模型。由后文描述的可附接并可拆卸的部件图像信息指定描绘存纸器的图像。

修整器为可选零件，其执行在打印之后的处理，诸如印出品的打孔和装订。对于项目“修整器”；设置“-”、“否”或“是”。符号“-”指示修整器不能附接到打印机的主体。“否”指示修整器尚未被附接到可与修整器附接的模型。“是”指示修整器已附接到可与修整器附接的模型。由后文描述的可附接并可拆卸的部件图像信息指定描绘修整器的图像。

例如，在图5的示例中，当代表打印机b的虚拟物体40被初始显示在信息处理装置10上时，通过使用“主体图像b”来显示尚未与存纸器或修整器附接的虚拟物体40。

接下来，将描述根据第一实施例的可附接并可拆卸的部件图像信息。

图6是根据第一实施例可附接并可拆卸的部件图像信息(用于存纸器)的示例图。图6中的可附接并可拆卸的部件图像信息具有包含“模型名称”、“存纸器”、“显示参考点”以及“存纸器最大数”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“存纸器”指示指定描绘存纸器的图像的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在“存纸器”中，其指示存纸器不能被附接到打印机的主体。所述项目“显示参考点”指示描绘存纸器的图像要被显示的位置。例如，信息处理装置10显示描绘作为虚拟可附接并可拆卸的物体的存纸器的图像，以使描绘存纸器的图像的端点位于显示参考点的坐标处。所述项目“存纸器最大数”指示可被附接到打印机主体的存纸器数量。如果存在可附接到相同打印机的多个类型的存纸器，储存单元11在其中储存用于每个存纸器类型的可附接并可拆卸的部件图像信息。

例如，图6中的打印机b的示例中，描绘打印机b的存纸器的图像为“存纸器图像b”。此外，由显示参考点的坐标(x_b6,y_b6,z_b6)指定“存纸器图像b”要被显示的位置。而且，可附接到打印机b的存纸器数量为三。

图7是根据第一实施例的可附接并可拆卸的部件图像信息(用于修整器)的示例图。图7中的可附接并可拆卸的部件图像信息具有包含“模型名称”、“修整器”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“修整器”指示指定描绘修整器的图像的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在项目“修整器”中，其指示修整器不能被附接到打印机的主体。所述项目“显示参考点”指示描绘修整器的图像要被显示的位置。例如，信息处理装置10显示描绘作为虚拟可附接并可拆卸的物体的修整器的图像，以使描绘修整器的图像的端点位于显示参考点的坐标处。如果存在可附接到相同打印机的多个类型的修整器，储存单元11在其中储存用于每个修整器类型的可附接并可拆卸的部件图像信息。

例如，图7中的打印机b的示例中，描绘打印机b的修整器的图像为“修整器图像b”。此外，由显示参考点的坐标(x_b7,y_b7,z_b7)指定“修整器图像b”要被显示的位置。

接下来，将描述根据第一实施例的可移动部件图像信息的示例。

图8是根据第一实施例的可移动部件图像信息(用于adf)的示例图。图8中的可移动部件图像信息具有包含“模型名称”、“adf(打开)”、“adf(关闭)”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“adf(打开)”指示指定描绘打开adf操作的图像(动画)的特定信息。所述项目“adf(关闭)”指示指定描绘关闭adf操作的图像(动画)的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在项目“adf(打开)”以及“adf(关闭)”中，其指示adf在打印机的主体中不可用。所述项目“显示参考点”指示描绘打开adf的操作的图像(动画)或描绘关闭adf的操作的图像(动画)要被显示的位置。

例如，图8中的打印机a的示例中，描绘打开打印机a的adf的操作的图像(动画)为“adf_打开图像a”。此外，描绘关闭打印机a的adf的操作的图像(动画)为“adf_关闭图像a”。而且，由显示参考点的坐标(x_a1,y_a1,z_a1)指定“adf_打开图像a”或“adf_关闭图像a”要被显示的位置。

图9是根据第一实施例的可移动部件图像信息(用于色粉盖)的示例图。在图9中的可移动部件图像信息具有包含“模型名称”、“色粉盖(打开)”、“色粉盖(关闭)”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“色粉盖(打开)”指示指定描绘打开色粉盖操作的图像(动画)的特定信息。所述项目“色粉盖(关闭)”指示指定描绘关闭色粉盖操作的图像(动画)的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在项目“色粉盖(打开)”以及“色粉盖(关闭)”中，其指示色粉盖在打印机的主体中不可用。所述项目“显示参考点”指示描绘打开色粉盖的操作的图像(动画)或描绘关闭色粉盖的操作的图像(动画)要被显示的位置。

例如，图9中的打印机a的示例中，描绘打开打印机a的色粉盖的操作的图像(动画)为“色粉_打开图像a”。此外，描绘关闭打印机a的色粉盖的操作的图像(动画)为“色粉_关闭图像a”。而且，由显示参考点的坐标(x_a2,y_a2,z_a2)指定“色粉_打开图像a”或“色粉_关闭图像a”要被显示的位置。

图10是根据第一实施例的可移动部件图像信息(用于纸盒)的示例图。图10中的可移动部件图像信息具有包含“模型名称”、“纸盒(打开)”、“纸盒(关闭)”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“纸盒(打开)”指示指定描绘打开纸盒操作的图像(动画)的特定信息。所述项目“纸盒(关闭)”指示指定描绘关闭纸盒操作的图像(动画)的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在项目“纸盒(打开)”以及“纸盒(关闭)”中，其指示纸盒在打印机的主体中不可用。所述项目“显示参考点”指示描绘打开纸盒的操作的图像(动画)或描绘关闭纸盒的操作的图像(动画)要被显示的位置。

例如，图10中的打印机a的示例，描绘打开打印机a的纸盒的操作的图像(动画)为“盒_打开图像a”。此外，描绘关闭打印机a的纸盒的操作的图像(动画)为“盒_关闭图像a”。而且，由显示参考点的坐标(x_a3,y_a3,z_a3)指定“盒_打开图像a”或“盒_关闭图像a”要被显示的位置。

图11是根据第一实施例的可移动部件图像信息(用于双工单元盖)的示例图。图11中的可移动部件图像信息具有包含“模型名称”、“双工单元盖(打开)”、“双工单元盖(关闭)”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“双工单元盖(打开)”指示指定描绘打开双工单元盖操作的图像(动画)的特定信息。所述项目“双工单元盖(关闭)”指示指定描绘关闭双工单元盖操作的图像(动画)的特定信息。所述特定信息为，例如，图像文件名称。符号“-”，设置在项目“双工单元盖(打开)”以及“双工单元盖(关闭)”中，其指示双工单元盖在打印机的主体中不可用。所述项目“显示参考点”指示描绘打开双工单元盖的操作的图像(动画)或描绘关闭双工单元盖的操作的图像(动画)要被显示的位置。

例如，在图11中的打印机a的示例中，描绘打开打印机a的双工单元盖的操作的图像(动画)为“盖_打开图像a”。此外，描绘关闭打印机a的双工单元盖的操作的图像(动画)为“盖_关闭图像a”。而且，由显示参考点的坐标(x_a4,y_a4,z_a4)指定“盖_打开图像a”或“盖_关闭图像a”要被显示的位置。

图12是根据第一实施例的规格信息(用于打印操作)的示例图。图12中的规格信息具有包含“模型名称”、“尺寸”、“彩色/单色”、“ppm(每分钟页数)”、“打印操作”以及“显示参考点”的项目。所述项目“模型名称”指示打印机的模型的名称。所述项目“尺寸”指示印出品的尺寸。所述项目“彩色/单色”指示印出品的颜色、所述项目“ppm”指示每分钟打印页的数量。所述项目“打印操作”指示指定描绘印出品如何从打印机输出的图像(动画)的特定信息。所述特定信息为，例如，图像名称。在图12中的示例中，根据“模型名称”、“尺寸”、“彩色/单色”以及“ppm”准备用于打印操作的图像(动画)。符号“-”，设置在项目“打印操作”中，其指示描绘在执行打印时印出品如何从打印机输出的图像(动画)不可用。所述项目“显示参考点”指示图像(动画)要被显示的位置，所述图像(动画)描绘印出品如何从打印机输出。

例如，在图12中的打印机的示例中，描绘在执行a4尺寸的彩色打印时印出品如何从打印机a中输出的图像(动画)为“打印图像ac”。“打印图像ac”描绘印出品如何以18ppm输出。此外，由显示参考点的坐标(x_a5,y_a5,z_a5)指定“打印图像ac”要被显示的位置。而且，描绘在执行a4尺寸的单色打印时印出品如何从打印机a输出的图像(动画)为“打印图像am”。“打印图像am”描绘印出品如何以20ppm输出。此外，由显示参考点的坐标(x_a5,y_a5,z_a5)指定“打印图像am”要被显示的位置。

回到图4，当图像捕捉单元12捕捉包含ar标识30的捕捉图像时，所述图像捕捉单元12将捕捉图像输入进显示控制单元13，所述ar标识指示虚拟物体40要被显示的位置。图像捕捉单元12连续地捕捉所述捕捉图像。即将捕捉图像作为移动图像输入进显示控制单元13。

当显示控制单元13接收来自图像捕捉单元12的捕捉图像时，显示控制单元13在显示单元14上显示具有作为屏幕背景使用的捕捉图像的模型选择屏幕。

图13是根据第一实施例的模型选择屏幕的示例图。第一实施例的模型选择屏幕具有模型选择按钮101、设置按钮102、帮助按钮103以及照相机按钮104。

模型选择按钮101为用于选择打印机模型的下拉列表。当按下操作接收单元15的模型选择按钮101时，显示控制单元13在显示单元14上显示打印机的模型的名称的列表，所述列表作为如上文描述的显示设置信息储存于储存单元11中。

设置按钮102为用于显示设置屏幕的按钮，所述屏幕用于改变显示设置，诸如显示语言(日语、英语、中文等)以及字符尺寸。

帮助按钮103为用于显示指示如何操作的帮助屏幕的按钮。

照相机按钮104为用于捕捉作为背景显示的捕捉图像的按钮。当显示虚拟物体40时，如果按下操作接收单元15的照相机按钮104，在储存单元11等中储存包含虚拟物体40的合成图像。

图14是根据第一实施例的模型选择屏幕(当显示列表时)的示例图。图14中的示例示出通过按下模型选择按钮101，作为列表显示打印机a、打印机b以及打印机c的情况。当操作接收单元15接收从列表中选择的模型名称的操作时，利用描绘在捕捉图像上的ar标识30的位置处被结合的虚拟物体40的图像，生成单元16生成包含描绘与模型名称相关联的虚拟物体40的图像的合成图像。显示控制单元13然后在显示单元14上显示屏幕，在所述屏幕上已将后文中描述的ui部分(各种按钮等，见图15)添加到合成图像上。例如，如果选择打印机a，在ar标识30的位置显示由包含于显示设置信息中的初始显示的图像信息(见图5)中的“主体图像a”代表的虚拟物体40。

显示控制单元13以及生成单元16根据信息处理装置10的图像捕捉单元12与ar标识30之间的位置关系，使用ar技术改变虚拟物体40的外观。具体地，首先，显示控制单元13检测包含于捕捉图像中的ar标识30，并且判定ar标识的外观(在捕捉图像上的其位置和形状中的至少一个)是否已被改变。如果已改变ar标识30，则根据ar标识30外观的改变程度，生成单元16执行虚拟物体40的显示模式(放大、缩小、移动、旋转等)的改变，并生成合成图像，在其中虚拟物体40与捕捉图像相结合。显示控制单元13然后在显示单元14上显示屏幕，在所述屏幕上已将后文中描述的ui部分(各种按钮等，见图15)添加到合成图像上。因此，参考在显示单元14上三维显示的虚拟物体40的同时，通过将图像捕捉单元12转到用户想要看到虚拟物体40的方向，信息处理装置10的用户能够从各个方向看到虚拟物体40。

图15是根据第一实施例的模型显示屏幕(用于打印机a)的示例图。根据第一实施例的模型显示屏幕具有模型选择按钮101、设置按钮102、帮助按钮103、照相机按钮104、模型名称显示部105、操作按钮106、存纸器选择按钮107、修整器选择按钮108、布置限制区域规格按钮109、产品规格显示按钮110、推荐产品显示按钮111、产品购买按钮112、地图显示按钮113以及共享按钮114。

由于模型选择按钮101、设置按钮102、帮助按钮103以及照相机按钮104的描述与图13中的描述相同，将省略描述。

模型名称显示部105在其中显示由模型选择按钮101选择的模型名称。此外，在其中显示在模型中的可使用的功能。具体地，显示控制单元13从储存单元13中，获得由在模型名称显示部105中显示的模型名称指定的具体的规格信息，以在显示单元14上显示在模型中可使用的功能。图15中的示例图示出复制、打印、扫描以及传真在打印机a中为可使用的功能的情况。

操作按钮106包含adf操作按钮106a、色粉盖操作按钮106b、纸盒操作按钮106c、双工单元操作按钮106d以及打印操作显示按钮106e。

adf操作按钮106a为用于操作adf的打开和关闭的按钮。adf的操作按钮106a导致要显示的操作，由图8中的包含于显示设置信息中的(用于adf)可移动部件图像信息指定的图像文件代表所述操作。如果在(用于adf)可移动部件图像信息中没有指定图像文件，则显示控制单元13不显示adf操作按钮106a，或以一半亮度(半透明)等方式显示adf操作按钮106a。

当按下adf操作按钮106a时，显示描绘打开adf的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图8)的“adf_打开图像a”，显示描绘打开adf的操作图像(动画)。

图16是根据第一实施例在已按下adf操作按钮106a后的模型显示屏幕的示例图。当在该状态下再次按下adf操作按钮106a时，显示描绘关闭adf的操作的图像(动画)。具体地，如果虚拟物品40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图8)的“adf_关闭图像a”，显示描绘关闭adf的操作图像(动画)，以及打印机a回到图15所示的状态的显示。

回到图15，色粉盖操作按钮106b为用于操作色粉盖的打开和关闭的按钮。色粉盖操作按钮106b导致要显示的操作，由图9中的包含于显示设置信息中的(用于色粉盖)可移动部件图像信息指定的图像文件代表所述操作。如果在(用于色粉盖)可移动部件图像信息中没有指定图像文件，则显示控制单元13不显示色粉盖操作按钮106b，或以一半亮度(半透明)等方式显示色粉盖操作按钮106b。

当按下色粉盖操作按钮106b时，显示描绘打开色粉盖的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图9)的“色粉_打开图像a”，显示描绘打开色粉盖的操作图像(动画)。当再次按下色粉盖操作按钮106b时，显示描绘关闭色粉盖的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图9)的“色粉_关闭图像a”，显示描绘关闭色粉盖的操作图像(动画)。

纸盒操作按钮106c为用于操作纸盒的打开和关闭的按钮。纸盒操作按钮106c导致要显示的操作，由图10中的包含于显示设置信息中的(用于纸盒)可移动部件图像信息指定的图像文件代表所述操作。如果在(用于纸盒)可移动部件图像信息中没有指定图像文件，则显示控制单元13不显示纸盒操作按钮106c，或以一半亮度(半透明)等方式显示纸盒操作按钮106c。

当按下纸盒操作按钮106c时，显示描绘打开纸盒的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图10)的“盒_打开图像a”，显示描绘打开纸盒的操作图像(动画)。当再次按下纸盒操作按钮106c时，显示描绘关闭纸盒的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图10)的“盒_关闭图像a”，显示描绘关闭纸盒的操作图像(动画)。

双工单元操作按钮106d为用于操作双工单元打开和关闭的按钮。双工单元操作按钮106d导致要显示的操作，由图11中的包含于显示设置信息中的(用于双工单元)可移动部件图像信息指定的图像文件代表所述操作。如果在(用于双工单元)可移动部件图像信息中没有指定图像文件，则显示控制单元13不显示纸盒操作按钮106d，或以一半亮度(半透明)等方式显示双工单元操作按钮106d。

当按下双工单元操作按钮106d时，显示描绘打开双工单元的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图11)的“盖_打开图像a”，显示描绘打开双工单元的操作图像(动画)。当再次按下双工单元操作按钮106d时，显示描绘关闭双工单元的操作图像(动画)。具体地，如果虚拟物体40为打印机a，通过使用包含于显示设置信息中的可移动部件图像信息(见图11)的“盖_关闭图像a”，显示描绘关闭双工单元的操作图像(动画)。

打印操作显示按钮106e为导致在执行打印时印出品如何从打印机输出的按钮，将通过动画而被显示。打印操作显示按钮106e导致操作被显示，由图12中的包含于显示设置信息中的规格信息指定的图像文件代表所述操作。如果在规格信息中没有指定图像文件，则显示控制单元13不显示打印操作显示按钮106e，或以一半亮度(半透明)等方式显示打印操作显示按钮106e。

图17是根据第一实施例在已按下打印操作显示按钮106e后的模型显示屏幕的示例图。当按下打印操作显示按钮106e时，通过显示控制单元13显示与打印速度(ppm)相对应的速度打印出的印出品211的动画，用户能够感受到打印机的打印速度，所述打印速度(ppm)包含于打印机的规格信息(见图12)中。例如，如果例如打印机的打印速度为30ppm，则显示控制单元13显示描绘每张印出品211如何从打印机中在两秒内输出的动画。此外，例如，如果打印机的打印速度为20ppm，则显示控制单元13显示描绘每张印出品211如何从打印机中在三秒内输出的动画。如果动画中包含声音，则输出单元19输出声音。

存纸器选择按钮107为导致要显示的存纸器选择屏幕的按钮。存纸器选择屏幕为用于选择存纸器，所述存纸器可附接到在模型名称显示部105中显示的模型。

图18a是根据第一实施例的存纸器选择屏幕的示例图。显示控制单元13基于可附接并可拆卸的部件图像信息(见图6)来显示存纸器选择屏幕，所述部件图像信息包含于在显示单元14上模型名称显示部105中显示的模型的显示设置信息中。具体地，如果存在用于在模型名称显示部105中被显示的模型的多个类型的存纸器，则通过被显示的多个描绘存纸器的图像来显示用于选择存纸器类型的屏幕。此外，如果模型名称显示部105中被显示的模型能够具有多存纸器，则显示使存纸器数量能够达到存纸器最大数量的屏幕，在图6中的可附接并可拆卸的部件图像信息中指示存纸器最大数量。

对于包含于打印机a的显示设置信息中的可附接并可拆卸的部件图像信息(见图6)，由于存纸器类型的数量为一并且存纸器最大数量为一，在图18a中，单一地显示“存纸器图像a”的正面。

图18b是根据第一实施例在已选择存纸器后的模型显示屏幕的示例图。当操作接收单元15接收指示在图18a中的存纸器选择屏幕上的存纸器的选择的操作时，如图18b所示，代表存纸器的虚拟可附接并可拆卸的物体43被添加到代表打印机a的主体的虚拟物体40。具体地，在“主题图像a”与捕捉图像相结合中的合成图像，进一步与“存纸器a”结合以形成合成图像，其由显示控制单元13在显示单元14上显示。因此，用户能够更清楚地掌握可附接并可拆卸的部件(可选部件)已被附接到打印机a的主体的哪里的情况的图像。

回到图15，修整器选择按钮108为用于导致要显示的修整器选择屏幕的按钮。由于修整器选择屏幕的描述与存纸器选择屏幕的描述类似，将省略修整器选择屏幕的描述。

布置限制区域规格按钮109为用于导致要显示的布置限制区域规格屏幕的按钮。布置限制区域规格屏幕为用于指定代表在区域上的限制的屏幕，在所述区域中与虚拟物体40相对应的物体将被放置。

图19是根据第一实施例的布置限制区域规格屏幕的示例图。除在图15中的屏幕上的显示以外，根据第一实施例的布置限制区域规格屏幕进一步具有框架120、宽度规格按钮121、深度规格按钮122、高度规格按钮123以及框架移动按钮124。

框架120代表布置限制区域的尺寸。根据在宽度规格按钮121、深度规格按钮122、高度规格按钮123以及框架移动按钮124上的操作，来改变框架120的宽度、深度、高度以及显示的位置。

具体地，如果按下宽度规格按钮121的“+”，则框架120的宽度变宽，并且如果按下宽度规格按钮121的“-”，则框架120的宽度变窄。类似地，如果按下深度规格按钮122的“+”，则框架120的深度增加，并且如果按下深度规格按钮122的“-”，则框架120的深度减小。类似地，如果按下高度规格按钮123的“+”，则框架120的高度增加，并且如果按下高度规格按钮123的“-”，则框架120的高度减小。

用于指定框架120的宽度、深度以及高度的用户界面可以是任意的。例如，显示控制单元13可在显示单元14上以十键位的排布显示数字输入单元，并且操作接收单元15可接收指示宽度、深度以及高度的数字的输入。

此外，如果按下框架移动按钮124，根据所按下的方向，框架120在布置限制区域规格屏幕的背景图像(捕捉图像)上向上、向下、向右或向左移动。

当虚拟物体40不适合于由框架120代表的布置限制区域内时，显示控制单元13改变代表布置限制区域的框架120的显示模式。改变显示模式的方法可为任意的。改变显示模式的方法包含，例如，改变代表框架120的线条的颜色、改变代表框架120的线条的粗度或导致代表框架120的线条的闪烁。

例如，在图19的示例中，由于代表具有关闭的adf的打印机a的虚拟物体40适合于框架120中，显示控制单元13以黄色显示框架120。与之相反，由于代表具有打开的adf的打印机a的虚拟物体40不适合于框架120中，显示控制单元13以红色显示框架120。因此，用户能够更加清楚地掌握当在要被放置的区域中操作打印机a的可移动部件时，虚拟物体40是否适合于要被放置的、由框架120代表的任意的区域中的图像。

回到图15，产品规格显示按钮110为导致要显示的产品规格屏幕的按钮，所述产品规格屏幕显示由在模型名称显示部105中显示的模型名称指定的具体的规格信息。

图20是根据第一实施例的产品规格屏幕的示例图。当操作接收单元15接收指示已按下产品规格显示按钮110的操作时，显示控制单元13从储存单元11中获得由在模型名称显示部105中显示的模型的具体规格信息，并且在显示单元14上显示包含具体规格信息的产品规格屏幕。具体规格信息包含，例如，最大打印尺寸、打印机的维度、兼容的os、打印速度、分辨率以及兼容的界面。

此外，显示控制单元13在产品规格屏幕上显示用于显示网页的具体规格的链接，所述网页显示具体的规格。当操作接收单元15接收指示已按下具体规格链接的操作时，显示控制单元13在显示单元14上显示由通信单元17获得的网站，所述通信单元访问由具体的规格链接指示的地址。

回到图15，推荐产品显示按钮111为用于显示用于为用户推荐模型的模型显示屏幕的按钮。为用户推荐的模型为，例如，具有类似于在模型名称显示部105中显示的模型的产品规格的模型。当操作接收单元15接收指示已按下推荐产品显示按钮111的操作时，生成单元16生成合成图像，所述合成图像包含捕捉图像与初始显示的图像信息的主体图像，所述图像信息包含于为用户推荐的模型的显示设置信息中，主体图像在捕捉图像上的ar标识30的位置处被结合。显示控制单元13然后在显示单元14上显示与合成图像相对应的模型显示屏幕。

产品购买按钮112为用于显示网站的按钮，从所述网站中能够购买在模型名称显示部105中显示的模型。当操作接收单元15接收指示已按下产品购买按钮112的操作时，通信单元17从储存单元11中获得网站的地址，从所述网站中能够购买在模型名称显示部105中显示的模型。显示控制单元13然后在显示单元14上显示通过通信单元17访问该地址获得的网站。

地图显示按钮113为用于显示指示商店位置的地图显示屏幕的按钮，从所述商店中能够购买在模型名称显示部105中显示的模型。

图21是根据第一实施例的地图显示屏幕的示例图。当操作接收单元15接收指示已按下地图显示按钮113的操作时，gps单元18获得信息处理装置10的当前位置200。当显示控制单元13在显示单元14上显示在当前位置200周围的地图，以及在当前位置200周围呈现能够从其中购买在模型名称显示部105中显示的模型的商店，商店的位置清楚地被指示在地图显示屏幕上。图21的示例图示出在地图显示屏幕上清楚地指示出商店201和商店202的位置的情况。

回到图15，共享按钮114为用于弹出显示共享应用的列表，诸如facebook(注册商标)以及twitter(注册商标)。当操作接收单元15接收指示共享应用的选择的操作时，在显示单元14上显示的信息等能够通过使用共享应用被共享到另一用户。

接下来，将描述根据第一实施例的信息处理方法的示例。

图22是根据第一实施例的信息处理方法的示例的流程图。首先，图像捕捉单元12开始捕捉包含ar标识30的捕捉图像，所述标识指示要放置的虚拟物体40处的位置(步骤s1)。

接下来，当显示控制单元13从图像捕捉单元12接收捕捉图像，显示控制单元13在显示单元14上显示模型选择屏幕(见图13)(步骤s2)。随后，操作接收单元15从模型选择按钮101的下拉菜单接收选择模型名称的操作(步骤s3)。

接下来，显示控制单元13在显示单元14显示模型的模型显示屏幕(见图15)，所述模型由步骤s3中选择的模型名称识别(步骤s4)。具体地，生成单元16首先生成包含描绘与步骤s3中选择的模型名称相关联的虚拟物体40的图像的合成图像，所述图像在捕捉图像上的ar标识30的位置处结合。显示控制单元13然后在显示单元14上显示屏幕，在所述屏幕上已将后文中描述的、诸如各种按钮的ui部分添加到合成图像的上。

接下来，显示控制单元13判定信息处理装置10的图像捕捉单元12与ar标识30之间的位置关系是否已改变(步骤s5)。具体地，显示控制单元13检测包含于捕捉图像中的ar标识30，并且基于ar标识的外观(在捕捉图像上的其位置和形状中的至少一个)是否已改变，来判定信息处理装置10的图像捕捉单元12与ar标识30之间的位置关系是否已改变。

如果图像捕捉单元12与ar标识30之间的位置关系已改变(步骤s5；是)，则显示控制单元13通过使用ar技术根据改变的位置关系来改变虚拟物体40的外观(步骤s6)。如果图像捕捉单元12与ar标识30之间的位置关系未改变(步骤s5；否)，则将处理进至步骤s7。

接下来，操作接收单元15判定模型显示屏幕(见图15)上的按钮是否已被按下(步骤s7)。

如果已按下按钮(步骤s7；是)，信息处理装置10运行上文所述的与各种按钮相对应的处理(步骤s8)。例如，如果已按下在模型显示屏幕上的打印操作显示按钮106e，显示控制单元13显示与打印速度(ppm)相对应的速度打印印出品的动画(见图17)，所述打印速度(ppm)包含于打印机规格信息(见图12)中。如果未按下按钮(步骤s7；否)，则将处理进至步骤s9。

接下来，操作接收单元15判定是否已接收涉及虚拟物体40的显示的处理结束的操作(步骤s9)。如果未收到结束操作(步骤s9；否)，将处理进至步骤s5。如果已收到结束操作(步骤s9；是)，结束处理。

接下来，将描述根据第一实施例的信息处理装置10的硬件配置的示例。

图23是根据第一实施例的信息处理装置的硬件配置的示例图。根据第一实施例的信息处理装置10包含控制装置301、主储存装置302、辅助储存装置303、显示装置304、输入装置305、通信装置306、图像捕捉装置307、gps装置308以及扬声器309。控制装置301、主储存装置302、辅助储存装置303、显示装置304、输入装置305、通信装置306、图像捕捉装置307、gps装置308以及扬声器309经由总线310彼此相连。

控制装置301运行从辅助储存装置303中读出到主储存装置302的计算机程序。主储存装置302为存储器，诸如rom或ram。辅助储存装置303为存储卡等。图4中的储存单元11与主储存装置302和辅助储存装置303相对应。

显示装置304和输入装置305为具有显示功能和输入功能的液晶触摸面板。通信装置306与彼此通信。图像捕捉装置307捕捉描绘信息处理装置10周围环境的状态的捕捉图像。gps装置308接收来自多个gps卫星的信号以获得指示信息处理装置10位置的gps信息。扬声器309输出声音。

在信息处理装置10中运行的计算机程序以可安装的格式或可运行的格式储存于计算机可读储存介质中，诸如cd-rom、存储卡、cd-r或数字多功能光盘(dvd)，以作为计算程序产品而被提供。

此外，可将在信息处理装置10中运行的计算机程序配置为被储存于连接至网络的计算机上，以及配置为被提供经由网络被下载，所述网络诸如互联网。此外，可将在信息处理装置10中运行的计算机程序配置为在没有被下载的情况下经由网络而被提供，所述网络诸如互联网。

此外，信息处理装置10的计算机程序可配置来在rom等中预先被合并以被提供。

在信息处理装置10中运行的计算机程序具有包含功能块的模块配置，从上文所述的各自的功能块之中，所述功能块能够由计算机程序来实现。能够由计算机程序实现的功能块为，例如，显示控制单元13、操作接收单元15、生成单元16以及通信单元17。至于实际的硬件，控制装置301读出并运行来自储存介质的计算机程序，诸如辅助储存装置303，以因此在主储存装置302上载入由计算机程序实现的功能块。即在主储存装置302上生成由计算机程序实现的功能块。

由计算机程序实现的功能块的部分或全部在不由计算机程序实现的情况下，可由硬件实现，诸如集成电路。

如上文所述，在根据第一实施例的信息处理装置10中，图像捕捉单元12获得包含ar标识30(位置识别信息)的捕捉图像，所述ar标识识别要放置的代表打印机的虚拟物体40处的位置。此外，生成单元16生成合成图像，在所述合成图像中虚拟物体40在由包含于捕捉图像中的ar标识30识别的位置处被结合。此外，操作接收单元15接收导致虚拟物体40操作的操作，所述虚拟物体40包含于在显示单元14上显示的合成图像中。当操作接收单元15接收导致虚拟物体40操作的操作时，显示控制单元13然后基于包含定义打印机规格的规格信息的显示设置信息，控制描绘虚拟物体40的操作的显示。因此，用户能够更清楚地掌握操作打印机的情况的图像。

在描述的第一实施例中，虽然已将指示要放置的目标具有的功能的操作速度的速度信息包含于规格信息中的情况作为示例描述；所述要放置的目标可为任意的设备，并不限于打印机。

第二实施例

接下来，将描述第二实施例。在描述的第二实施例中将描述与虚拟物体40相对应的物体为投影仪的情况。在描述的第二实施例中，将省略与第一实施例类似的任何描述，并将描述与第一实施例不同的部件。

根据第二实施例的信息处理系统1的配置与根据第一实施例的信息处理系统1(见图1)相同。根据第二实施例的信息处理装置10的配置与根据第一实施例的信息处理装置10的配置(见图4)相同。

将首先描述根据第二实施例的显示设置信息(初始显示的图像信息和规格信息)。

图24是根据第二实施例(用于投影仪)初始显示的图像信息的示例图。初始显示的图像信息指示当代表投影仪的虚拟物体40的显示开始时的状态。初始显示的图像信息具有项目“模型名称”和“主体”。项目“模型名称”指示投影仪的模型的名称。在第二实施例中，项目“模型名称”为识别虚拟物体40的类型的识别信息。项目“主体”指示指定描绘投影仪的图像的特定信息。所述特定信息为，例如，图像文件名称。在包含于由信息处理装置10捕捉的捕捉图像中的ar标识30的位置处显示主体的图像。

例如，在图24中的示例中，当在信息处理装置10上初始显示代表投影仪pa的虚拟物体40时，通过使用“主体图像pa”来显示虚拟物体。

接下来，将描述根据第二实施例的规格信息。

图25是根据第二实施例(用于投影操作)规格信息的示例图。图25中的规格信息具有包含“模型名称”、“亮度[lm]”、“尺寸”、“距离[m]”、“投影操作”以及“显示参考点”的项目。所述项目“模型名称”指示投影仪的模型的名称。所述项目“亮度”指示由投影仪投影的图像的亮度。项目“尺寸”指示由投影仪中投影的图像的尺寸。项目“距离”指示在投影仪与由投影仪投影的图像之间的距离。项目“投影操作”指示特定信息，所述特定信息指定描绘图像如何从投影仪投影的图像(动画)。所述特定信息为，例如，图像文件名称。项目“显示参考点”指示图像(动画)要被显示的位置，所述图像(动画)描绘图像如何从投影仪中投影。

例如，在图25中的投影仪pa的示例中，描绘类型40尺寸的图像如何从投影仪pa中投影的图像(动画)为“投影图像pa1”。“投影图像pa1”描绘类型40尺寸的图像如何从以3600lm的亮度从投影仪pa投影1.23m远的距离。由显示参考点的坐标(x_pa1,y_pa1,z_pa1)指定“投影图像pa1”要被显示的位置。此外，描绘类型100尺寸的图像如何从投影仪pa中投影的图像(动画)为“投影图像pa3”。“投影图像pa3”描绘类型100尺寸的图像如何以3600lm的亮度从投影仪pa投影3.15m远的距离。此外，由显示参考点的坐标(x_pa3,y_pa3,z_pa3)指定“投影图像pa3”要被显示的位置。

图26是根据第二实施例(用于投影仪pa)模型显示屏幕的示例图。根据第二实施例的模型显示屏幕具有模型选择按钮101、设置按钮102、帮助按钮103、照相机按钮104、模型名称显示部105、操作按钮106、布置限制区域规格按钮109、产品规格显示按钮110、推荐产品显示按钮111、产品购买按钮112、地图显示按钮113以及共享按钮114。

由于模型选择按钮101、设置按钮102、帮助按钮103以及照相机按钮104的描述与图13中的描述相同，将省略描述。

模型名称显示部105在其中显示由模型选择按钮101选择的模型名称。在图26中的示例中，投影仪pa在其中被显示。

操作按钮106包含用于类型40图像的投影按钮106f以及用于类型100图像的投影按钮106g。

用于类型40图像的投影按钮106f用于显示由“投影图像pa1”代表的投影操作。用于类型100图像的投影按钮106g用于显示由“投影图像pa3”代表的投影操作。

图27是在按下根据第二实施例的操作按钮106后，根据第二实施例的模型显示屏幕的示例图。当按下操作按钮106时，显示移动图像(动画)，所述移动图像描绘图像如何以根据投影仪pa规格定义的规格信息的亮度投影。当再次按下操作按钮104，结束移动图像(动画)的显示，所述移动图像描绘图像如何以根据投影仪pa规格定义的规格信息的亮度投影。

图28a是根据第二实施例的(用于类型40)“投影图像pa1”的示例的示意图。图28b是根据第二实施例的(用于类型100)“投影图像pa3”的示例的示意图。如图28a和图28b所示，通过显示移动图像(动画)，所述移动图像描绘图像如何在由捕捉图像代表的空间内从代表投影仪pa的虚拟物体40中投影；用户能够更清楚地掌握投影仪pa的操作的图像。

布置限制区域规格按钮109为用于显示布置限制区域规格屏幕的按钮。布置限制区域规格屏幕为用于指定代表在区域上的限制的屏幕，所述区域中与虚拟物体40相对应的物体要被放置。根据第二实施例的布置限制区域规格屏幕与根据第一实施例的布置限制区域规格屏幕(见图19)类似，因此，将省略它的描述。

产品规格显示按钮110为用于显示产品规格屏幕的按钮，所述产品规格屏幕显示由在模型名称显示部105中显示的模型名称指定的具体的规格信息。根据第二实施例的产品规格屏幕与根据第一实施例的产品规格屏幕(见图20)类似，因此，将省略它的描述。

推荐产品显示按钮111为用于显示用于为用户推荐的模型的模型显示屏幕的按钮。为用户推荐的模型为，例如，具有类似于在模型名称显示部105中显示的模型的产品规格的模型。当操作接收单元15接收指示已按下推荐产品显示按钮111的操作时，生成单元16生成包含初始显示的图像信息的主体图像的合成图像，所述图像信息包含于为用户推荐的模型的显示设置信息中，主体图像在捕捉图像上的ar标识30的位置处被结合。显示控制单元13然后在显示单元14上显示与合成图像相对应的模型显示屏幕。

产品购买按钮112为用于显示网站的按钮，从所述网站中能够购买在模型名称显示部105中显示的模型。当操作接收单元15接收指示已按下产品购买按钮112的操作时，通信单元17从储存单元11中获得网站的地址，从所述网站中能够购买在模型名称显示部105中显示的模型。显示控制单元13然后在显示单元14上显示通过通信单元17访问该地址获得的网站。

地图显示按钮113为用于显示地图显示屏幕的按钮，所述屏幕显示商店的位置，从所述商店中能够购买在模型名称显示部105中显示的模型。根据第二实施例的地图显示屏幕与根据第一实施例的地图显示屏幕(见图21)类似，因此，将省略它的描述。

共享按钮114为用于弹出显示共享应用的列表，诸如facebook(注册商标)以及twitter(注册商标)。当操作接收单元15接收指示共享应用的选择的操作时，在显示单元14上显示的信息等能够通过使用共享应用被共享到另一用户。

根据第二实施例的信息处理方法与根据第一实施例的信息处理方法(见图22)类似，因此，将省略它的描述。此外，根据第二实施例的信息处理装置10的硬件配置与根据第一实施例的信息处理装置10的硬件配置(见图23)类似，因此将省略它的描述。

如上文所述，在第二实施例的信息处理装置10中，生成单元16生成合成图像，所述合成图像包含代表投影仪的虚拟物体40，虚拟物体40在包含于捕捉图像中的ar标识30识别的位置处结合。此外，操作接收单元15接收导致虚拟物体40操作的操作，所述虚拟物体40包含于在显示单元14上显示的合成图像中。当操作接收单元15接收导致虚拟物体40操作的操作时，显示控制单元13然后基于包含由投影仪的规格定义的规格信息的显示设置信息，控制描绘虚拟物体40的操作的显示。因此，用户能够更清楚地掌握投影仪被操作的情况的图像。

在描述的第二实施例中，虽然已将当要放置的目标为投影仪时亮度信息包含于规格信息中的情况作为示例描述，亮度信息指示要放置的目标具有的功能的亮度；要放置的目标可为任意设备，并不限于投影仪。

第三实施例

接下来，将描述第三实施例。将在描述的第三实施例中描述与虚拟物体40相对应的物体为洗衣机的情况。在描述的第三实施例中，将省略与第一实施例类似的任何描述，并将描述与第一实施例不同的部件。

根据第三实施例的信息处理系统1的配置与根据第一实施例的信息处理系统1(见图1)相同。此外，根据第三实施例的信息处理装置10的配置与根据第一实施例的信息处理装置10的配置(见图4)相同。

首先，将描述根据第三实施例的显示设置信息(初始显示的图像信息、可移动部件图像信息以及规格信息)。

图29是根据第三实施例(用于洗衣机)初始显示的图像信息的示例图。初始显示的图像信息指示当代表洗衣机的虚拟物体40的显示开始时的状态。初始显示的图像信息具有项目“模型名称”以及“主体”。所述项目“模型名称”指示洗衣机的模型的名称。在第三实施例中，所述项目“模型名称”为识别虚拟物体40的类型的识别信息。项目“主体”指示指定描绘洗衣机的图像的特性信息。所述特定信息为，例如，图像文件名称。在包含于由信息处理装置10捕捉的捕捉图像的ar标识30的位置处显示主体的图像。

例如，在图29中的示例中，当在信息处理装置10上初始显示代表洗衣机wa的虚拟物体40时，通过使用“主体图像wa”来显示虚拟物体。

接下来，将描述根据第三实施例的可移动部件图像信息。

图30是根据第三实施例(用于门)可移动部件图像信息的示例图。图30中的可移动部件图像信息具有包含“模型名称”、“门(打开)”、“门(关闭)”以及“显示参考点”的项目。所述项目“模型名称”指示洗衣机的模型的名称。所述项目“门(打开)”指示指定描绘打开门的操作的图像(动画)的特定信息。所述项目“门(关闭)”指示指定描绘关闭门的操作的图像(动画)的特定信息。所述特定信息为，例如，图像文件名称。所述项目“显示参考点”指示描绘打开门的操作的图像(动画)或描绘关闭门的操作的图像(动画)要被显示的位置。

例如，在图30中的洗衣机wa的示例中，描绘打开门的操作的图像(动画)为“门_打开图像wa”。此外，描绘关闭门的操作的图像(动画)为“门_关闭图像wa”。而且，由显示参考点的坐标(x_wa,y_wa,z_wa)指定“门_打开图像wa”或“门_关闭图像wa”要被显示的位置。

接下来，将描述根据第三实施例的规格信息的示例。

图31是根据第三实施例(用于洗涤操作)规格信息的示例图。在图31中的规格信息具有包含“模型名称”、“操作声音(db)”、“洗涤操作”以及“显示参考点”的项目。所述项目“模型名称”指示洗衣机的模型的名称。所述项目“洗衣操作”指示指定图像(动画)的特定信息，所述图像(动画)描绘衣物如何通过洗衣机的洗衣滚筒旋转来洗涤。所述特定信息为，例如，图像文件名称。所述项目“显示参考点”指示图像(动画)要被显示的位置，所述图像(动画)描绘衣物如何通过洗衣机的洗衣滚筒旋转来洗涤。

例如，在图31中的洗衣机wa示例中，描绘衣物如何通过洗衣机的洗衣滚筒旋转来洗涤的图像(动画)为“洗涤图像wa”。“洗涤图像wa”描绘衣物如何连同与30db的操作声音相对应的音量一起通过洗衣机的洗衣滚筒旋转来洗涤。此外，由显示参考点的坐标(x_wa,y_wa,z_wa)指定“洗涤图像wa”要被显示的位置。

接下来，将描述根据第三实施例的模型选择屏幕的示例。

图32是根据第三实施例的模型选择屏幕的示例图。根据第三实施例的模型选择屏幕具有模型选择按钮101、设置按钮102、帮助按钮103以及照相机104。

模型选择按钮101为下拉列表，从其中选择洗衣机的模型。当按下操作接收单元15的模型选择按钮101时，显示控制单元13在显示单元14上显示在储存单元11中以如上文所述的显示设置信息储存的洗衣机的模型名称的列表。

设置按钮102为用于显示设置屏幕的按钮，所述设置屏幕用于改变显示设置，诸如显示语言(日语、英语、中文等)以及字符尺寸。

帮助按钮103为用于显示指示如何操作的帮助屏幕的按钮。

照相机按钮104为用于捕捉作为背景显示的捕捉图像的按钮。当处于在ar标识30的位置处显示描绘洗衣机的虚拟物体40的状态下，按下操作接收单元15的照相机按钮104时，在储存单元11等中储存包含描绘洗衣机的虚拟物体40的合成图像。

图33是根据第三实施例的(当显示列表时)模型选择屏幕的示例图。图33中的示例图示出通过按下模型选择按钮101，依照列表显示洗衣机wa、洗衣机wb以及洗衣机wc的情况。当操作接收单元15接收从列表中选择模型名称的操作时，利用描绘在捕捉图像上的ar标识30的位置处被结合的虚拟物体40的图像，生成单元16生成包含描绘与模型名称相关联的虚拟物体40的图像的合成图像。显示控制单元13然后在显示单元14上显示屏幕，在所述屏幕上已将后文中描述的ui部分(见图34中各种按钮等)添加到合成图像上。例如，如果选择洗衣机wa，在ar标识30的位置处显示由包含于显示设置信息中的初始显示的图像信息(见图29)中的“主体图像wa”代表的虚拟物体40。

图34是根据第三实施例(用于洗衣机wa)模型显示屏幕的示例图。根据第三实施例的模型显示屏幕具有模型选择按钮101、设置按钮102、帮助按钮103、照相机按钮104、模型名称显示部105、操作按钮106、布置限制区域规格按钮109、产品规格显示按钮110、推荐产品显示按钮111、产品购买按钮112、地图显示按钮113以及共享按钮114。

由于模型选择按钮101、设置按钮102、帮助按钮103，以及照相机按钮104与图13的描述相同，将省略描述。

模型名称显示部105在其中显示由模型选择按钮101选择的模型名称。在图34的示例中，洗衣机wa被显示在其中。

操作按钮106包含门操作按钮106h、洗涤操作开始按钮106i以及洗涤操作停止按钮106j。

门操作按钮106h为用于操作门51的打开和关闭。门操作按钮106h导致要显示的打开和关闭操作，打开和关闭操作由图30中包含在显示设置信息中的(用于门)可移动部分图像信息指定的图像文件代表。

当门操作按钮106h被按下，描绘打开门51的操作的图像(动画)被显示。具体地，如果虚拟物体40为洗衣机wa，由使用包含于显示设置信息中的可移动部件图像信息(见图30)中的“门_打开图像wa”显示描绘打开门51的操作的图像(动画)。当再次按下门操作按钮106h时，显示描绘关闭门51的操作的图像(动画)。具体地，如果虚拟物体40为洗衣机wa，由使用包含于显示设置信息中的可移动部件图像信息(见图30)中的“门_关闭图像wa”显示描绘关闭门51的操作的图像(动画)。

洗涤操作开始按钮106i为用于开始洗涤操作的按钮。洗涤操作开始按钮导致要显示的洗涤操作，所述洗涤操作由图31中的规格信息指定的图像文件代表，所述规格信息包含于显示设置信息中。具体地，如果虚拟物体40为洗衣机wa，通过使用包含于显示设置信息中的规格信息(见图31)中的“洗涤图像wa”，基于规格信息输出与操作声音(30db)相对应的声音并且显示描绘洗涤操作的图像(动画)。

洗涤操作停止按钮106j为用于停止洗涤操作的按钮。洗涤操作按钮导致要停止的洗涤操作的显示，所述洗涤操作由图31中的规格信息指定的图像文件代表，所述规格信息包含于显示设置信息中。具体地，如果虚拟物体40为洗衣机wa，通过使用包含于显示设置信息中的规格信息(见图31)中的“洗涤图像wa”，基于规格信息停止与操作声音(30db)相对应的声音的输出以及描绘洗涤操作的图像(动画)的显示。

布置限制区域规格按钮109为用于显示布置限制区域规格屏幕的按钮。布置限制区域规格屏幕为用于指定代表在区域上的限制的布置限制区域的屏幕，在所述区域中与虚拟物体40相对应的物体要被放置。根据第三实施例的布置限制区域规格屏幕与根据第一实施例的布置限制区域规格屏幕(见图19)类似，因此，将省略它的描述。

产品规格显示按钮110为导致要显示的产品规格屏幕的按钮，所述产品规格屏幕显示由在模型名称显示部105中显示的模型名称指定的具体的规格信息。根据第三实施例的产品规格屏幕与根据第一实施例的产品规格屏幕(见图20)类似，因此，将省略它的描述。

推荐产品显示按钮111为用于显示用于为用户推荐的模型的模型显示屏幕的按钮。为用户推荐的模型为，例如，具有类似于在模型名称显示部105中显示的模型的产品规格的模型。当操作接收单元15接收指示已按下推荐产品显示按钮111的操作时，利用在捕捉图像上的ar标识30的位置处结合的主体图像，生成单元16生成包含初始显示的图像信息的主体图像的合成图像，所述图像信息包含于为用户推荐的模型的显示设置信息中。显示控制单元13然后在显示单元14上显示与合成图像相对应的模型显示屏幕。

产品购买按钮112为用于显示网站的按钮，从所述网站中能够购买在模型名称显示部105中显示的模型。当操作接收单元15接收指示已按下产品购买按钮112的操作时，通信单元17从储存单元11中获得网站的地址，从所述网站中能够购买在模型名称显示部105中显示的模型。显示控制单元13然后在显示单元14上显示通过通信单元17访问该地址获得的网站。

地图显示按钮113为用于显示地图显示屏幕的按钮，所述屏幕显示商店的位置，从所述商店中能够购买在模型名称显示部105中显示的模型。根据第三实施例的地图显示屏幕与根据第一实施例的地图显示屏幕(见图21)类似，因此，将省略它的描述。

共享按钮114为用于弹出显示共享应用的列表，诸如facebook(注册商标)以及twitter(注册商标)。当操作接收单元15接收指示已选择共享应用的操作时，在显示单元14上显示的信息等能够通过使用共享应用被共享到另一用户。

根据第三实施例的信息处理方法与根据第一实施例的信息处理方法(见图22)类似，因此，将省略它的描述。此外，根据第三实施例的信息处理装置10的硬件配置与根据第一实施例的信息处理装置10的硬件配置(见图23)类似，因此，将省略它的描述。

如上文所述，在第三实施例的信息处理装置10中，利用在由包含于捕捉图像中的ar标识30识别的位置处结合的虚拟物体40，生成单元16生成合成图像，所述合成图像包含代表洗衣机的虚拟物体40。此外，操作接收单元15接收导致虚拟物体40操作的操作，所述虚拟物体40包含于在显示单元14上显示的合成图像中。当操作接收单元15接收导致虚拟物体40操作的操作时，显示控制单元13基于包含洗衣机规格定义的规格信息的显示设置信息，控制描绘虚拟物体40的操作的显示。因此，用户能够更清楚地掌握操作洗衣机的情况的图像。

在描述的第三实施例中，虽然已将当要放置的目标为洗衣机时，声音信息包含于规格信息中的情况作为示例描述，所述声音信息指示当操作要放置的目标具有的功能时的声音；要放置的目标可为任意设备，并不限于洗衣机。

上述的实施例是说明性的并且其不限于本发明。因此，依据以上教导，许多修改和变化是可能的。例如，在该公开以及所附的权利要求的范围内，不同的说明性和示例性的此处的实施例中的至少一个元件可与彼此结合或由彼此取代。此外，实施例中的组件的特征，诸如数字、位置，以及形状不限于实施例并因此可被更优选地设置。因此要被理解为在所附的权利要求的范围内，除此处具体描述外可以实践本发明的公开。

除非具体地作为操作顺序识别的或通过上下文清楚地识别的，此处描述的方法步骤、处理或操作不被解释为必须以所讨论的或所示出的特别的顺序要求它们的操作。其也被理解为可采用附加的或可选的布置。

此外，任何上述的设备、装置或单元能作为硬件设备而被实施，诸如专用电路或装置，或作为硬件/软件结合体，诸如运行软件程序的处理器。

此外，如上文所述，上述的以及本发明的其他方法中的任何一个可以以储存于任何种类的储存介质中的计算机程序的形状而被体现。储存介质的示例包含但不限于，软盘、硬盘、光盘、磁光盘、磁带、非易失性存储器、半导体存储器、只读存储器(rom)等。

可选地，上述的以及本发明的其他方法中的任何一个可以由特定应用集成电路(asic)、数字信号处理器(dsp)或现场可编程门阵列(fpga)而被实施，通过互联适当的常规组件电路的网络或通过它的结合体而被准备，所述结合体带一个或多个相应程序化的常规一般用途微处理器或信号处理器。

所描述的实施例的每个功能可由一个或多个处理电路或回路而被实施。如处理器包含回路，处理回路包含程序化的处理器。处理电路还包含诸如特定应用集成电路(asic)、数字信号处理器(dsp)、现场可编程门阵列(fpga)以及安排运行所陈述的功能的传统电路组件的装置。