用于提供增强现实服务的设备和方法
【专利摘要】提供了一种用于提供增强现实服务的设备和方法。所述设备包括：第一服务器，配置为提供对于第一区域的增强现实服务；第二服务器，配置为提供不同于第一区域的第二区域的增强现实服务；终端，配置为从第一服务器和第二服务器中的任何一个接收对于第二区域的信息，并且当在执行对于第一区域的增强现实服务模式的过程中从第一区域进入第二区域时，配置为输出对于第二区域的信息并且配置为切换到对于第二区域的增强现实服务执行模式。
【专利说明】用于提供增强现实服务的设备和方法
【技术领域】
[0001]本发明总体涉及一种增强现实技术。更具体地讲，本发明涉及一种用于提供增强现实服务的设备和方法。
【背景技术】
[0002]增强现实(AR)是将用户用他的/她的眼镜看到的真实世界与具有附加信息的虚拟世界进行组合以用单个图像显示它们的虚拟现实的形式。作为用虚拟世界来补足真实世界的概念的增强现实使用用计算机图形制作的虚拟环境，但是增强现实的主要部分是真实环境。计算机图形用于为真实环境提供附加必要信息。这种增强现实技术例如通过将三维虚拟图像重叠在由用户看到的真实图像上来使得真实环境和虚拟画面被显示为单个图像，从而真实环境的附加信息可被获得。
[0003]最近，提供了增强现实服务，该服务使用对于真实对象的增强现实技术来向用户提供各种信息项。更具体地讲，以这样的方式来提供增强现实服务:当移动终端将全球定位系统(GPS)信息和/或地磁信息提供给服务器时，服务器基于提供的信息来确定移动终端的位置和/或方向，并提供由终端中的相机拍摄的对象的向导信息(即，增强现实信息)。
[0004]例如，增强现实技术用于使用便携式电话、个人数字助理(PDA)、个人计算机、智能电话等以基于位置的技术为基础来确定相应终端的位置，并且提供与确定的位置相关的信息服务，诸如路线向导、兴趣点(POI)信息服务、购物信息服务或广告。
[0005]室外类型增强现实服务或室内类型增强现实服务用于以基于位置的服务为基础的这种增强现实服务，其中，室外类型增强现实服务使用基站信号和GPS卫星信号，室内类型增强现实服务使用利用建筑物内的无线局域网(WLAN)的局域通信模块或接入点(AP)来确定室内位置的方法。例如，室外类型增强现实服务通过使用室外信号(诸如GPS信号)确定用户的位置来提供服务，室内类型增强现实服务通过获取室内信号(诸如无线保真(WiFi)信号)来提供服务。
[0006]然而，现有技术的上述增强现实服务具有的问题在于:室外服务和室内服务被单独提供并且没有被无缝地提供，这使得用户不方便。
[0007]例如，在用户在室外类型增强现实服务中使用GPS信号在室外区域被提供增强现实服务的同时，用户进入室内区域时，变得难以接收GPS信号。因此，用户应切换到室内类型服务以便自此使用WiFi信号来接收增强现实服务。然而，存在的问题在于:由于室外类型增强现实服务和室内类型增强现实服务被单独地提供，因此当用户从室外区域进入室内区域时应通过手动操作来终止室外服务并且请求室内服务，这是复杂且不方便的。此外，在用户正在接收室外服务的同时接收到室内服务时，用户可能会感到增强现实服务被中断片亥IJ。因此，存在难以提供未受影响的服务的问题。
[0008]因此，存在对于这样的用于提供增强现实服务的设备和方法的需要:该设备和方法能够提供室外类型增强现实服务和室内增强现实服务，同时能够在室外类型增强现实服务和室内增强现实服务之间进行无缝切换。[0009]上述信息作为背景信息被呈现仅帮助对本公开的理解。还没有对上述任何信息是否可适用于本发明的现有技术做出确定和主张。
【发明内容】
[0010]本发明的方面在于解决至少上述问题和/或缺点并且提供至少以下描述的优点。因此，本发明的一方面在于提供一种提供增强现实服务的设备和方法，该设备和方法能够提供室外类型增强现实服务和室内增强现实服务，同时能够在室外类型增强现实服务和室内增强现实服务之间进行无缝切。
[0011]本发明的另一方面提供一种用于提供增强现实服务的设备和方法，当用户从室外区域进入室内区域或者从室内区域进入室外区域时，该设备和方法无需用户的手动操作自动地在室外类型增强现实服务和室内类型增强现实服务之间切换。
[0012]本发明的另一方面提供一种用于提供增强现实服务的设备和方法，在当室外类型增强现实服务和室内类型增强现实服务彼此切换时的切换期间，该设备和方法提供将被切换的室外信息或室内信息。
[0013]根据本发明的一方面，提供了一种用于提供增强现实服务的设备。所述设备包括:第一服务器，配置为提供对于第一区域的增强现实服务；第二服务器，配置为提供不同于第一区域的第二区域的增强现实服务；终端，配置为从第一服务器和第二服务器中的任何一个接收对于第二区域的信息，并且当在执行对于第一区域的增强现实服务模式的过程中从第一区域进入第二区域时，配置为输出对于第二区域的信息并且配置为切换到对于第二区域的增强现实服务执行模式。
[0014]根据本发明的另一方面，提供了一种用于提供增强现实服务的终端。所述终端包括:接收器，配置为从第一服务器和第二服务器中的一个接收对于第二区域的信息，第一服务器被配置为提供对于第一区域的增强现实服务，第二服务器被配置为提供不同于第一区域的第二区域的增强现实服务；显示单元，配置为在对于第一区域的增强现实服务模式正被执行的同时，在从第一区域进入第二区域时，输出对于第二区域的信息；控制器，配置为从对于第一区域的增强现实服务提供模式切换到对于第二区域的增强现实服务执行模式。
[0015]根据本发明的另一方面，提供了一种提供增强现实服务的方法。所述方法包括:在第一区域中执行对于第一区域的增强现实服务；在执行对于第一区域的增强现实服务模式的过程中接收对于第二区域的信息；确定是否从第一区域进入第二区域；当确定从第一区域进入第二区域时，输出对于第二区域的信息并且从对于第一区域的增强现实服务提供模式切换到对于第二区域的增强现实服务执行模式。
[0016]从下面结合附图公开本发明的示例性实施例的以下详细描述中，对于本领域的技术人员来说，本发明的其他方面、优点和突出特点将变得清楚。
【专利附图】
【附图说明】
[0017]通过下面结合附图进行的描述，本发明特定示例性实施例的上述和其他方面、特征和优点将会变得更加清楚，其中:
[0018]图1示出根据本发明的示例性实施例的室外类型增强现实服务和室内增强现实服务之间的服务切换；[0019]图2示出根据本发明的示例性实施例的增强现实服务提供设备；
[0020]图3是示出根据本发明的第一示例性实施例的当进行从室外类型到室内类型的服务切换时提供增强现实服务的方法的流程图；
[0021]图4是示出根据本发明的第二示例性实施例的当进行从室外类型到室内类型的服务切换时提供增强现实服务的方法的流程图；
[0022]图5A和5B是示出根据本发明的示例性实施例的室内信息的示图；
[0023]图6是示出根据本发明的示例性实施例的当进行从室内类型到室外类型的服务切换时提供增强现实服务的方法的流程图。
[0024]贯穿服务，应该注意相同的标号用于表示相同或类似的元件、特征和结构。
【具体实施方式】
[0025]提供以下参照附图进行的描述以帮助全面理解由权利要求及其等同物限定的本发明的示例性实施例。所述描述包括各种特定细节来帮助理解，但是这些细节将被认为仅仅是示例性的。因此，本领域的普通技术人员将认识到，在不脱离本发明的范围和精神的情况下，可对在此描述的实施例进行各种改变和修改。另外，为了清楚和简明，可省略对公知功能和构造的描述。
[0026]以下描述和权利要求中使用的术语和词语不限于书面含义，而是仅被发明人使用以使得能够清楚和一致地理解本发明。因此，本领域的技术人员应清楚，提供下面对本发明的示例性实施例的描述仅是为了说明目的，而不是为了限制由所附权利要求及其等同物限定的本发明的目的。
[0027]应该理解，除非上下文清楚地另有指示，否则单数形式包括复数指示物。因此，例如，提到“组件表面”包括提到一个或多个这样的表面。
[0028]对于术语“大体上”，它意味着叙述的特征、参数或值不需要精确达到，而是，包括例如公差、测量误差、测量精度限制和对本领域技术人员已知的其他因素的偏差或变化可以以不妨碍所述特征意图提供的效果的量而发生。
[0029]本发明的示例性实施例公开了这样一种用于提供增强现实服务的设备和方法:该设备和方法提供室外类型增强现实服务和室内类型增强现实服务，并且当用户从作为区别于第一区域的第二区域的室内区域进入作为第一区域的室外区域时或者当用户从室外区域进入室内区域时，在室外类型增强现实服务和室内类型增强现实服务之间自动地执行服务切换，并且提供在服务切换时将被切换的室内信息或室外信息。
[0030]图1示出根据本发明的示例性实施例的室外类型增强现实服务和室内增强现实服务之间的服务切换。
[0031]参照图1，室外类型增强现实服务使用全球定位系统(GPS)信号确定在建筑物等外面的室外区域10中的用户终端100的位置，并且提供信息服务，信息服务提供与确定的位置相关的信息，诸如路线向导、兴趣点(POI)信息、购物信息和广告。例如，室外类型增强现实服务可以是与涉及终端100的位置的各种信息项对应的室外虚拟图像信息可被显示为重叠在由用户终端100拍摄的室外真实环境图像(即，预览图像)上的服务。此外，室外类型增强现实服务还可以显示预先提供的与由用户终端100拍摄的室外真实环境图像(即预览图像)相关的街景和终端100的位置作为室外虚拟图像信息，而不显示预览图像。[0032]室内类型增强现实服务使用安装在室内区域20内的无线局域网(WLAN)的局域通信模块或接入点(AP)使用无线保真(WiFi)来确定建筑物等内的室内区域20中的用户终端100的位置，并提供与确定的位置对应的室内虚拟图像信息。例如，室内类型增强现实服务可以是与涉及终端100的位置的室内信息项对应的室内虚拟图像信息可被显示为重叠在由用户终端100拍摄的室内真实环境图像(即预览图像)上的服务。此外，室内类型增强现实服务可显示预先提供的与由用户终端100拍摄的室内真实环境图像(即预览图像)相关的室内景和终端100的位置作为室内虚拟图像信息，而不显示预览图像。
[0033]当在用户通过终端100在室外区域10接收室外类型增强服务的过程中进入室内区域20时(I)，增强现实服务提供设备自动地将室外类型增强现实服务切换到室内类型增强现实服务，并在服务切换时提供进入的室内区域的室内信息。此时，室内信息可包括进入的室内区域的室内入口位置信息、室内简要信息和室内交互信息。室内简要信息可以是指示入口信息(诸如对于与室内区域对应的建筑物的门)或者建筑物的平面图信息的简要信息。室内交互信息是可指示当用户进入室内区域时的室内入口的信息，例如由3维(3D)对象配置的动画。例如，室内交互信息可以是表示打开门的动画、表示进入室内区域的入口的动画等。
[0034]此外，当用户在通过终端100在室内区域20接收室内类型增强现实服务的过程中进入室外区域10时(0)，增强现实服务提供设备自动地将室内类型增强现实服务切换到室外类型增强现实服务，并在服务切换时提供进入的室外区域的室外信息。室外信息可以是当用户进入室外区域时看到的景色的景色信息等。例如，景色信息可以是当进入时的前侧景色信息、进入后的左侧景色信息和/或进入后的右侧景色信息。
[0035]现在，将针对增强现实服务提供设备的配置进行描述，该设备根据用户在室外区域和室内区域之间的进入切换自动地执行室外类型增强现实服务和室内类型增强现实服务之间的服务切换，并提供在服务切换时将切换的室内信息或室外信息。
[0036]图2示出根据本发明的示例性实施例的增强现实服务提供设备。
[0037]参照图2，增强现实服务提供设备包括终端100、室外服务器200和室内服务器300。
[0038]首先，提到终端100，从室外服务器200向终端100提供室外增强现实服务以输出室外增强现实服务，并且从室内服务器300向终端100提供室内增强现实服务以输出室内增强现实服务。终端100可包括传感器单元110、通信单元120、控制器130、相机单元140和显示单元150。
[0039]传感器单元110包括GPS传感器112、地磁传感器114和陀螺仪传感器116。GPS传感器112接收GPS信号。地磁传感器114检测地磁信号。陀螺仪传感器116测量陀螺仪值。
[0040]通信单元120包括移动通信模块122和WiFi模块124。移动通信模块122与室外服务器200和室内服务器300执行通信。WiFi模块124测量WiFi信号并执行WiFi通信。
[0041]控制器130执行终端100的整个控制操作，并且执行实施室外增强现实服务和室内增强现实服务所需的控制操作。此外，控制器130执行实施室外增强现实服务的室外模式与执行室内增强现实服务的室内模式之间的模式切换。
[0042]相机单元140拍摄用户期望拍摄的真实环境，并提供拍摄的图像。[0043]显示单元150可以是液晶显示器(IXD)，触摸屏等。在室外10模式下，显示单元150显示增强现实室外景色，在室内20模式下，显示单元150显示增强现实室内景色。此时，增强现实室外景色可以是室外虚拟图像信息重叠在由相机单元140拍摄的室外真实环境图像(即预览图像)上显示的景色，或者是与预定义景色(诸如街景)对应的室外虚拟图像信息而没有拍摄的室外真实环境图像(即预览图像)而显示的景色。如上配置的终端100在室外10模式下通过相机单元140拍摄室外真实环境(在室外真实环境中，用户期望接收增强现实服务)，并且分别地使用传感器单元110的GPS传感器112、地磁传感器114和陀螺仪传感器116来测量GPS信号、地磁强度和陀螺仪值。其后，终端100将拍摄的室外真实环境图像和测量的感测信息发送给室外服务器200。终端100随后从室外服务器200接收与拍摄的室外真实环境图像和测量的感测信息对应的室外虚拟图像信息，以在显示单元150上显示增强现实室外景色，在增强现实室外景色中，室外真实环境图像和室外虚拟图像彼此重叠。此时，终端100可仅显示预先提供的室外虚拟图像(诸如街景)而不显示室外真实环境图像。
[0044]此外，在室内10模式下，终端100通过相机单元140拍摄用户期望接收增强现实服务的室内真实环境，并且通过WiFi模块124测量室内区域20内的多个WiFi信号的强度。其后，终端100通过移动通信模块122将拍摄的室内真实环境图像和测量WiFi信号强度值发送给室内服务器300。终端100随后从室内服务器100接收与室内真实环境图像和测量的WiFi信号强度值对应的室内虚拟图像信息，并在显示单元150上显示增强现实室内景色，在增强现实室内景色中，室内真实环境图像和室内虚拟图像彼此重叠。此时，终端100可使用预先提供的室内景色来仅显示室内虚拟图像，而不显示室内真实环境图像。
[0045]在本示例性实施例中，基于使用WiFi模块124测量的多个WiFi信号强度来计算室内区域中的终端100的位置。然而，可使用其他局域无线通信手段或其他室内位置测量手段而非WiFi模块124来实现室内区域中的终端100的位置的计算。
[0046]此外，在室外10模式下，终端100在增强现实室外景色被显示的状态下确定是否进入室内区域20。此时，对于预定义的时间长度，当由相机单元140拍摄的对象和方向相同并且正被拍摄的对象的尺寸增加超过预定义尺寸时，终端100确定进入室内区域20。这是因为这意味着正在使用终端100进行拍摄的用户正在接近入口点。因此，根据另一示例性实施例，当对于室外服务的GPS信号强度减小到低于预定义值并且对于室内服务的WiFi信号强度增加超过预定义值时，终端100确定进入室内区域20。这是因为这意味着具有终端100的用户到达与室内区域20邻近的区域。在室内入口点信息被包括在室外虚拟图像信息中的情况下，当室内入口点和终端100的位置信息彼此一致时，终端100可确定进入室内区域20。
[0047]当确定进入室内区域20时，终端100从室内服务器300请求室内增强现实服务，当从室内服务器300接收到室内服务响应信号时，终端100从室内服务器300接收室内信息。其后，终端100在显示单元150上显示室内信息并且同时执行切换到室内20模式以执行与室内区域20中的WiFi模块的连接并且执行室内增强现实服务。
[0048]此外，在室内20模式下，终端100在显示增强现实室内景色的过程中确定是否进入室外区域10。此时，对于预定义时间长度，当由相机单元140拍摄的对象和方向相同并且正被拍摄的对象的尺寸增加超过预定义尺寸时，终端100确定进入室外区域10。这是因为这意味着正在使用终端100拍摄的用户正在接近室外入口门。根据另一示例性实施例，当对于室内服务的WiFi信号减小到低于预定义值并且对于室外服务的GPS信号增加超过预定义值时，终端100确定进入室外区域10。这是因为这意味着具有终端100的用户到达与室外区域10相邻的位置。根据另一示例性实施例，在室外入口点信息被包括室内虚拟图像信息的情况下，当室外入口点和位置信息彼此一致时，终端100可确定进入室外区域10。
[0049]当确定进入室外区域10时，终端100显示从室内服务器300提供的室外信息并且从室外服务器200请求室外增强现实服务，并且当从室外服务器200接收到室外服务响应信号时，终端100切换到室外10模式以执行室外增强现实服务。
[0050]室外服务器200提供室外增强现实服务。室外服务器200包括第一收发器210、数据收集单元220、第一地图信息数字广播(DB) 230和室外服务单元240。室外服务器200还可包括室内信息DB250。
[0051]第一收发器210与终端100执行数据发送/接收。数据收集单元220从终端100收集拍摄的室外真实环境图像和由传感器单元110的GPS传感器112、地磁传感器114和陀螺仪传感器116测量的感测信息。
[0052]第一地图信息DB230存储室外区域10的虚拟3D地图信息。此时，虚拟3D地图信息可不仅包括地理信息以及道路和建筑物信息，而且包括诸如路线向导信息、POI信息、购物信息和广告的信息，并且还可包括预先拍摄的鸟瞰图或街景信息。
[0053]当通过第一收发器210从终端100接收到拍摄的室外真实环境图像和感测信息时，室外服务单元240使用第一地图信息DB230的第一虚拟3D地图信息来执行地图匹配，并使用匹配的地图信息来产生与真实环境图像对应的室外虚拟图像信息。例如，室外虚拟图像可包括各种信息项，诸如将重叠在室外真实环境图像中的建筑物上的建筑物名称、将重叠在室外真实环境图像中的道路上的描述、以及将覆盖在室外真实环境图像中的商店上的产品列表。此外，室外虚拟图像信息可以是预先提供的与室外真实环境图像关联的街景?目息。此时，室外虚拟图像?目息可以是2D形式和3D形式的图像。
[0054]现在将描述室内服务器300。室内服务器300包括第二收发器310、第二地图信息DB330、室内服务单元340和室内信息DB350。
[0055]第二收发器310从终端100接收测量WiFi强度信息，并且执行实施室内服务所需的各种数据发送/接收。
[0056]第二地图信息DB330存储室内区域20的第二虚拟3D地图信息。此时，第二虚拟3D地图信息可包括信息(诸如，与室内区域对应的建筑物内位置信息、建筑物内位置的附加信息、建筑物内路线向导信息、建筑物内POI信息、购物信息和广告)，并且还包括预先拍摄的室内景色信息。
[0057]当通过第二收发器310从终端100接收到拍摄的室内真实环境图像和多个测量的WiFi信号强度时，室内服务单元340使用多个WiFi信号强度来测量室内区域20中的终端的位置，并且使用第二地图信息DB330的第二虚拟3D地图信息来产生与室内真实环境图像对应的室内虚拟图像信息。例如，室内虚拟图像信息可包括各种信息项，诸如，将重叠在室内真实环境图像中的对象上的对象名称、将重叠在室内真实环境图像中的走廊上的描述以及将重叠在室内真实环境图像中的产品上的产品列表。此外，室内虚拟图像信息可以是预先提供的与室内真实环境图像关联的室内景色信息。此时，室内虚拟图像信息可以是2D形式和3D形式的图像。
[0058]室内信息DB350存储包括室内入口位置信息、室内简要信息和室内交互信息的室内信息。此时，室内简要信息可以是指示室内区域的简要信息，例如，入口信息(诸如与室内区域对应的建筑物的门)以及建筑物的平面图信息。室内交互信息是可指示当用户进入室内时的室内入口的信息，并且可以是例如包括3D对象的动画。例如，室内交互信息可包括表示打开门的动画以及表示进入入口的动画。
[0059]尽管已经对于由单个服务器配置室内服务器300的情况进行了描述，但是室内服务器300可由包括用于管理室内服务器300的室内管理服务器(未示出)以及由室内管理服务器管理的各室内服务器的构造来替换。
[0060]同时，尽管根据示例性实施例已经描述了室内信息DB350被包括在室内服务器300中，但是室内信息DB350可被包括在室外服务器300 (如图2的室内信息DB250)或被包括在单独的内容服务器(未示出)中。
[0061]当室内信息DB350被包括在室外服务器200中时，室外服务单元240可以这样的方式来产生室外虚拟图像信息:室内入口启动点、室内简要信息和室内交互信息被包括在室外虚拟图像信息中。
[0062]当室内信息DB350被包括在单独的内容服务器(未示出)中时，可从内容服务器向室外服务器200或室内服务器300提供室内信息，并且室外服务器200或室内服务器300
使用该室内信息。
[0063]下文中，将对在上述增强现实服务提供设备中如何执行从室外类型到室内类型的服务切换进行描述。
[0064]首先，将对当用户从室外区域10进入室内区域20时如何执行从室外增强现实服务到室内增强现实服务的服务切换进行描述。
[0065]根据本发明的示例性实施例，当进行从室外增强现实服务到室内增强现实服务的服务切换时，室内信息被提供，其中，室内信息可从室外服务器200或室内服务器300提供。
[0066]在第一不例性实施例中，将首先对从室内服务器300提供室内信息的情况进行描述，在第二示例性实施例中，对从室外服务器200提供室内信息的情况进行描述。
[0067]首先，将对根据本发明的第一示例性实施例的从室内服务器300提供室内信息的情况进行描述。
[0068]图3是示出根据本发明的第一示例性实施例的当进行从室外类型到室内类型的服务切换时提供增强现实服务的方法的流程图。
[0069]参照图3，在步骤302，在室外10模式下，终端100将室外真实环境图像和感测信息发送给室外服务器200。此时，感测信息可包括GPS信息、地磁感测信息和陀螺仪感测信
肩、O
[0070]在步骤340，室外服务器200使用从终端100发送的室外真实环境图像和感测信息来确定终端100的位置信息，并且使用预先存储的第一虚拟3D地图信息来执行地图信息匹配。
[0071]此外，室外服务器200使用匹配的地图信息来产生与室外真实环境图像和终端100的位置信息对应的室外虚拟图像信息，并在步骤306将室外虚拟图像信息发送给终端100。此时，室外虚拟图像信息可以是包括如下信息的各种信息项:将重叠在室外真实环境图像中的建筑物上的建筑物名称、将重叠在室外真实环境图像中的道路上的描述、以及将重叠在室外真实环境图像中的商店上的产品列表。此时，室外虚拟图像信息可以是预先提供的与室外虚拟环境图像关联的街景信息。
[0072]当从室外服务器200接收到室外虚拟图像信息时，终端100产生增强现实室外景色(其中，室外虚拟图像信息重叠在室外真实环境图像上)，并在步骤308通过显示单元150显示增强现实室外景色。此时，终端100可显示街景作为增强现实室外景色，而不显示室外真实环境图像。
[0073]其后，在步骤310，终端100确定在显示室外景色的状态下是否进入室内。此时，当由相机单元140拍摄的对象和方向相同并且被拍摄的对象的尺寸增加超过预定义尺寸时，终端100确定进入室内区域20。这是因为这意味着正在使用终端100拍摄的用户正在接近入口门。根据另一示例性实施例，当对于室外服务的GPS信号强度减低到预定义值以下并且对于室内服务的WiFi信号强度增加超过预定值时，终端100确定进入室内区域20。这是因为这意味着具有终端100的用户到达与室内区域20邻近的位置。根据另一示例性实施例，在室内入口点信息被包括在室外虚拟图像信息中的情况下，当室内入口点和终端100的位置信息彼此一致时，终端100可确定进入室内区域20。
[0074]当确定进入室内时，在步骤312，终端100通过通信单元120从室内服务器300请求室内增强现实服务，并且在步骤314从室内服务器300接收增强现实服务接受信号。此时，可访问室内服务的统一资源定位符(URL)信息等可被包括在室内服务接受信号中。
[0075]当室内增强现实服务接受信号被接收到时，在步骤316，终端100使用可访问室内服务的URL信息来从室内服务器300请求对于进入的室内区域的室内信息。
[0076]作为结果，在步骤318，室内服务器300在室内信息DB350中搜索由终端100请求的室内信息，并且在步骤320将室内信息提供给终端100。此时，室内信息可以是指示简要信息(例如，入口信息(诸如与室内信息对应的建筑物的门)以及建筑物的平面图信息)的室内简要信息、室内交互信息(指示例如表示打开门的动画和表示进入室内区域的入口的动画)。
[0077]在步骤322，终端100接收室内信息并在显示单元150上显示室内信息。此时，室内信息可以是指示简要信息(例如，入口信息(诸如与室内信息对应的建筑物的门)以及建筑物的平面图信息)的室内简要信息、室内交互信息(指示例如表示打开门的动画和表示进入室内区域的入口的动画)。直到切换到室内模式并且提供了完整的室内增强现实服务，用户可通过看到室内信息来获取关于室内区域20的信息，并且当进行从室外模式切换到室内模式时，用户可感到无缝地进行了切换。
[0078]终端100显示室内信息，同时在步骤324切换到室内模式以便执行室内服务，并且访问室内区域中的多个WiFi通信模块(未示出)。其后，在步骤326，终端100通过与室内服务器300的通信来执行室内增强现实服务。
[0079]现在，将对根据本发明的第二示例性实施例的由室外服务器200提供室内信息的情况进行描述。
[0080]图4是示出根据本发明的第二示例性实施例的当进行从室外类型到室内类型的服务切换时提供增强现实服务的方法的流程图。
[0081]参照图4，在步骤402，终端100将在室外10 |旲式下拍摄的室外真实环境图像和感测信息发送给室外服务器200。此时，感测信息可包括GPS信号、地磁感测信息和陀螺仪感测信息。
[0082]在步骤404，室外服务器200使用从终端100发送的室外真实环境图像和感测信息来确定终端100的位置信息，并且使用预先存储的第一虚拟3D地图交换信息来执行地图信息匹配。
[0083]其后，在步骤406，室外服务器200使用终端100的位置信息和匹配的地图信息来确定与终端100所在的位置对应的室内信息是否存在。
[0084]当室内信息存在时，在步骤408，室外服务器200将与室外真实环境图像对应并且使用室内信息和匹配的地图信息产生的室外虚拟图像信息发送给终端100。此时，室外虚拟图像信息可以是各种信息项，诸如，将重叠在室外真实环境图像中的建筑物上的建筑物名称、将重叠在室外真实环境图像中的道路上的描述、以及将覆盖在室外真实环境图像中的商店上的产品列表。此外，室外虚拟图像信息可以是预先提供的与室外真实环境图像关联的街景息。
[0085]当从室外服务器200接收到室内信息和室外虚拟图像信息时，终端100产生增强现实室外景色(其中，室外虚拟图像信息重叠在室外真实环境图像上)，并在步骤410通过显示单元150显示增强现实室外景色。此时，终端100可显示街景作为增强现实室外景色，而不显示室外真实环境图像。
[0086]其后，在步骤412，终端100确定在室外景色被显示的状态下是否进入室内。此时，对于预定义时间长度，当由相机单元140拍摄的对象和方向相同并且正被拍摄的对象的尺寸增加超过预定义尺寸时，终端100确定进入室内区域20。这是因为这意味着正在使用终端100拍摄的用户正在接近入口点。根据另一示例性实施例，当对于室外服务的GPS信号强度降低到预定义值以下并且对于室内服务的WiFi信号强度增加超过预定义值时，终端100确定进入室内区域20。这是因为这意味着用户到达与室内区域20邻近的位置。根据另一示例性实施例，在室内入口点信息被包括在室外虚拟图像信息中的情况下，当室内入口点和终端100的位置信息彼此一致时，终端100可确定进入室内区域20。
[0087]当确定进入室内区域20时，终端100在步骤414通过通信单元120从室内服务器300请求室内增强现实服务，并且在步骤416从室内服务器300接收室内信息。此时，例如，可访问室内服务的URL信息可被包括在室内服务接受信号中。
[0088]当室内增强现实服务接受信号被接收到时，在步骤418，终端100在显示单元150上显示接收的室内信息。此时，室内信息可以是室内简要信息和室内交互信息，室内简要信息指示简要信息，例如入口信息(诸如对于与室内区域对应的建筑物的门)或者建筑物的平面图信息；室内交互信息指示例如表示开门的动画以及表示进入室内区域的动画。
[0089]图5A和5B是示出根据本发明的示例性实施例的室内信息的示图。
[0090]参照图5A和5B,室内简要信息可包括如由标号52表不的平面图信息。此外,如由标号54表不的表不打开对于室内入口的门的动画可被包括在室内交互信息中。
[0091]直到切换到室内模式并且提供了完整的室内增强现实服务，用户可通过看到室内信息来获取关于室内区域20的信息，并且当从室外模式切换到室内模式时，用户可感到无缝地进行了切换。
[0092]终端100显示室内信息，并且同时在步骤420切换到室内模式以执行室内服务，并且访问室内区域中的多个WiFi通信模块(未示出)。其后，终端100在步骤422通过与室内服务器300通信来执行室内增强现实服务。
[0093]在以上描述中，当用户从室外区域10进入室内区域20时，进行从室内增强现实服务到室外增强现实服务的服务切换的方法。然而，相反，当用户从室内区域20进入室外区域10时，进行从室外增强现实服务到室内增强现实服务的服务切换。
[0094]现在，将参照图6对从室内增强现实服务到室外增强现实服务的服务切换的方法进行描述。
[0095]图6是示出根据本发明的示例性实施例的当进行从室内类型到室外类型的服务切换时提供增强现实服务的方法的流程图。
[0096]参照图6，在室内模式下，终端100通过相机单元140拍摄用户期望接收增强现实服务的室内真实环境，并且通过WiFi模块124测量存在于室内区域20中的多个WiFi信号强度。其后，在步骤502，终端100将拍摄的室内真实环境图像和多个测量的WiFi信号强度值发送给室内服务器300。
[0097]当从终端100接收到拍摄的室内真实环境图像和多个测量的WiFi信号强度时，在步骤504，室内服务器300使用多个WiFi信号强度来确定室内区域20中的终端的位置，并且使用第二地图信息DB330的第二虚拟3D地图信息来产生将重叠在室内真实环境图像上的室内虚拟图像信息。例如，室内虚拟图像信息可包括各种信息项，诸如，将重叠在室内真实环境图像中的建筑物中的对象上的对象名称、将重叠在室内真实环境图像中的走廊上的描述以及将重叠在室内真实环境图像中的产品上的产品列表。此外，室内虚拟图像信息可以是预先提供的与室内真实环境图像的终端100的位置关联的室内景色信息。此时，室内虚拟图像?目息可以是2D形式和3D形式的图像。
[0098]此外，在本示例性实施例中，使用利用WiFi模块124测量的多个WiFi信号强度来确定室内区域中的终端100的 位置。然而，还能够使用无线局域通信装置而非WiFi模块124来确定终端100的位置。
[0099]其后，在步骤506，室内服务器300使用终端100的位置信息和匹配的地图信息来确定与终端100所在的位置对应的室外信息是否存在。
[0100]当室外信息存在时，在步骤508，室内服务器300把将被重叠在室外信息上的室外虚拟图像信息以及室外真实环境图像发送给终端100。
[0101]当从室内服务器200接收到室外信息和室内虚拟图像信息时，在步骤510，终端100产生增强现实室内景色(其中，室内虚拟图像信息重叠在室内真实环境图像上)，并通过显示单元150来显示增强现实室内景色。
[0102]其后，在步骤512，终端100在室内景色被显示的状态下确定是否进入室外。此时，对于预定义时间长度，当由相机单元140拍摄的对象和方向相同并且正在被拍摄的对象的尺寸增加超过预定义尺寸时，终端100确定进入室外区域10。这是因为这意味着正在使用终端100拍摄的用户正在接近室外入口门。根据另一示例性实施例，当对于室内服务的WiFi信号减小到在预定义值以下并且对于室外服务的GPS信号增加超过预定义值时，终端100确定进入室外区域10。这是因为具有终端100的用户到达与室外区域10相邻的位置。根据另一示例性实施例，在室外入口点信息被包括在室内虚拟图像信息的情况下，当室外入口点和位置信息彼此一致时，终端100可确定进入室外区域10。
[0103]当确定进入室外区域10时，在步骤514，终端100在显示单元150上显示先前接收的室外信息。此时，室外信息可以是室外简要信息和室外交互信息，室外简要信息指示简要信息，例如，出口信息(诸如进入室外区域的门)和建筑物的平面图信息，室外交互信息指示例如表示开门以进入室外区域等的动画。此外，室外信息可不仅包括与室外入口点对应的地理信息以及道路和建筑物信息，而且包括诸如路线向导信息、POI信息、购物信息和广告的信息，并且还可包括先前拍摄的鸟瞰图或街景信息。此时，每个景色信息可包括参照入口方向的前侧景色信息、参照入口方向的左侧景色信息和参照入口方向的右侧景色信息。
[0104]直到从室内模式切换到室外模式并且提供了完整的室外增强现实服务，用户可通过看见室外信息来预先获取关于室外区域10的信息，并且当从室内模式切换到室外模式时，用户可感到无缝地进行了切换。
[0105]终端100显示室外信息，并且同时在步骤516，切换到用于执行室外服务的室外模式，并且在步骤518从室外服务器200请求室外服务。
[0106]其后，当在步骤520从室外服务器200接受室外服务提供时，在步骤522终端100通过与室外服务器200的通信来执行室外增强现实服务。
[0107]如上所述，由于当服务以切换的方式被使用时服务可被无缝地提供，因此便于用户接收室外类型增强现实服务和室内类型增强现实服务。此外，由于当用户从室外区域进入室内区域或者从室内区域进入室外区域时，室外类型增强现实服务和室内类型增强现实服务适合被自动地彼此切换，因此更方便的增强现实服务可被提供。此外，由于在室外类型增强现实服务和室内类型增强现实服务之间的服务切换所需的时间段期间，将被切换的室外或室内信息被显示，因此当用户从室外区域进入室内区域或从室内区域进入室外区域时可享受更加不受影响的服务切换并且获取室内或室外信息。
[0108]本发明的特定方面还可被实现为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是可存储其后可由计算机系统读取的数据的任何数据存储装置。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储装置。计算机可读记录介质还可分布在联网的计算机系统上，从而计算机可读代码以分布式方式被存储和执行。另外，用于实现本发明的功能程序、代码和代码段可由本发明所属的编程人员容易解释。
[0109]这点应该注意，上述本公开的示例性实施例在一定程度上一般包括输入数据的处理以及输出数据的产生。此输入数据处理和输出数据产生可以以硬件或软件来实现或以软件与硬件的组合来实现。例如，特定电子组件可使用在用于实现与本发明的示例性实施例关联的功能的移动装置或类似物或者相关电路中。可选择地，根据存储的指令操作的一个或多个处理器可执行与上述本发明的示例性实施例关联的功能。如果情况是这样，则其在本公开的范围内，这种指令可存储在一个或多个处理器可读介质上。处理器可读介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储装置。处理器可读介质还可分布在联网的计算机系统上，从而指令以分布式方式被存储和执行。另外，用于实现本发明的计算机程序、指令和指令段可由本发明所属领域的编程人员容易解释。
[0110]尽管已经参照其示例性实施例显示和描述了本发明的示例性实施例，但是本领域的技术人员应该理解，在不脱离由权利要求限定的本发明的精神和范围的情况下，可以在其中进行形式和细节上的各种改变。
【权利要求】
1.一种用于提供增强现实服务的设备，所述设备包括: 第一服务器，配置为提供对于第一区域的增强现实服务； 第二服务器，配置为提供不同于第一区域的第二区域的增强现实服务； 终端，配置为从第一服务器和第二服务器中的任何一个接收对于第二区域的信息，并且当在执行对于第一区域的增强现实服务模式的过程中从第一区域进入第二区域时，配置为输出对于第二区域的信息并且配置为切换到对于第二区域的增强现实服务执行模式。
2.如权利要求1所述的设备，其中，第一区域和第二区域中的每个是室外区域和室内区域中的一个。
3.如权利要求1所述的设备，其中，对于第二区域的信息包括对于第二区域的简要信息以及交互信息。
4.如权利要求1所述的设备，其中，室内简要信息指示入口信息，入口信息包括与室内区域对应的建筑物的门的信息以及建筑物的平面图信息中的至少一个。
5.如权利要求1所述的设备，其中，室内交互信息包括指示当用户进入室内区域时的室内入口的信息，并且包括表示打开门的动画和表示进入室内区域的入口的动画中的至少一个。
6.如权利要求5所述的 设备，其中，由三维3D对象配置动画。
7.一种提供增强现实服务的终端，所述终端包括: 接收器，配置为从第一服务器和第二服务器中的一个接收对于第二区域的信息，第一服务器被配置为提供对于第一区域的增强现实服务，第二服务器被配置为提供不同于第一区域的第二区域的增强现实服务； 显示单元，配置为在对于第一区域的增强现实服务模式正被执行的同时，在从第一区域进入第二区域时，输出对于第二区域的信息； 控制器，配置为从对于第一区域的增强现实服务提供模式切换到对于第二区域的增强现实服务执行模式。
8.如权利要求7所述的终端，其中，第一区域和第二区域中的每个是室外区域和室内区域中的一个。
9.如权利要求7所述的终端，其中，对于第二区域的信息包括对于第二区域的简要信息以及交互信息。
10.如权利要求9所述的终端，其中，室内简要信息指示入口信息，入口信息包括与室内区域对应的建筑物的门的信息以及建筑物的平面图信息中的至少一个。
11.如权利要求9所述的终端，其中，室内交互信息包括指示当用户进入室内区域时的室内入口的信息，并且包括表示打开门的动画和表示进入室内区域的入口的动画中的至少一个。
12.如权利要求11所述的终端,其中，由三维3D对象配置动画。
13.一种提供增强现实服务的方法，所述方法包括: 在第一区域中执行对于第一区域的增强现实服务； 在执行对于第一区域的增强现实服务模式的过程中接收对于第二区域的信息； 确定是否从第一区域进入第二区域； 当确定从第一区域进入第二区域时，输出对于第二区域的信息并且从对于第一区域的增强现实服务提供模式切换到对于第二区域的增强现实服务执行模式。
14.如权利要求13所述的方法，其中，第一区域和第二区域中的每个是室外区域和室内区域中的一个。
15.如权利要求13所述的方法，其中，对于第二区域的信息包括对于第二区域的简要信息以及交互信息。
16.如权利要求15所述的方法，其中，室内简要信息指示入口信息，入口信息包括与室内区域对应的建筑物的门的信息以及建筑物的平面图信息中的至少一个。
17.如权利要求15所述的方法，其中，室内交互信息包括指示当用户进入室内区域时的室内入口的信息，并且包括表示打开门的动画和表示进入室内区域的入口的动画中的至少一个。
18.如权利要求17所述的 方法，其中，由三维3D对象配置动画。
【文档编号】H04W4/02GK103475689SQ201310222627
【公开日】2013年12月25日 申请日期:2013年6月6日 优先权日:2012年6月6日
【发明者】李骏镐, 白盛焕, 李公旭, 郑址洪, 曹圭星 申请人:三星电子株式会社