切换虚拟现实模式与扩增现实模式的管理方法以及系统与流程

本发明为一种虚拟现实与扩增现实的切换技术，特别是一种在特定显示模式下切换虚拟现实模式与扩增现实模式的管理方法以及系统。

背景技术：

消费者的购物行为可以略分为实体店面的购物行为，以及购物网站的消费行为。实体店面摆设实际的商品，如果是如家具或家饰的商品，店家可以透过店面空间的设计摆设商品，吸引消费者的眼光。

随着电子商务的成熟，也慢慢影响到消费者的消费习惯，许多商品也都上架在在线购物网站贩卖，消费者只要点入特定购物网站，就可以搜寻到商品的内容，并可以在线交易支付的手段完成购物。

然而，一般电子商务的线购物网站都是提供平面的商品信息，最多提供一个商品的多个角度影像，让消费者可以在这个平面信息中判断是否购买。当商品送到手上时，这时消费者才能感受到此商品是否适用，特别是家饰类的商品，这类商品往往需要配合摆设四周的样貌，如果不适合，又要通过麻烦的退货程序才能退货。

为了提升人们在浏览物品时的视觉效果，可采用现有的一种虚拟现实(Virtual Reality，VR)技术，虚拟现实技术是通过计算机软件仿真特定空间的三度空间影像，通过特定显示载具让用户可以如身历其境一般地浏览物品，包括可以从各种角度观看一个物品，或是如亲身处于特定场合浏览。

另有一种扩增现实(Augmented Reality，AR)技术，扩增现实技术的主要目的是在显示屏幕上把虚拟世界(商品)套在现实世界并进行互动。

技术实现要素：

本发明涉及一种切换虚拟现实模式与扩增现实模式的技术，其中提供有一伺服系统，通过网络提供一或多个电子显示设备切换进入一虚拟现实模式或一扩增现实模式的服务，其中载有一虚拟现实影像数据库，提供电子显示设备切换进入虚拟现实模式时所需的虚拟现实影像，也载有一扩增现实影像数据库，提供电子显示设备切换进入扩增现实模式时所需的扩增现实影像。伺服系统更包括一接收并执行终端的电子显示设备产生的指令的管理接口单元。

其中，当其中之一电子显示设备进入虚拟现实模式时，自伺服系统加载虚拟现实影像，以显示虚拟现实影像；当电子显示设备切换进入扩增现实模式，自伺服系统加载对象信息相关的扩增现实影像，以及以另一窗口于此电子显示设备显示对象信息，或是结合扩增现实影像与虚拟现实影像的影像。

根据方法实施例，在此方法中，经加载虚拟现实影像后，进入一虚拟现实模式，以一电子显示设备显示虚拟现实影像，影像中有一或多个对象的影像。在用户操作电子显示设备观看虚拟现实影像时，可以选择其中之一对象，产生选择信号，可以根据选择信号取得相关对象的对象信息，并加载对象信息相关的影像。

根据实施例之一，在切换进入扩增现实模式时，在一模式中，可以电子显示设备撷取一空间的现实影像，取得空间中的一指针对象的影像，之后根据指针对象的信息取得对象与空间的关联性，于是引入对象信息的影像，以结合于空间的现实影像中，并显示结合后的影像。

在一显示模式下，显示结合扩增现实影像与虚拟现实影像的影像时，可以一子母画面呈现，或以一分割画面呈现。

换句话说，本发明提供一种切换虚拟现实模式与扩增现实模式的管理方法，包括：经加载虚拟现实影像后，根据选择进入一虚拟现实模式或一扩增现实模式；以一电子显示设备根据选择显示一虚拟现实影像或一扩增现实影像，其中包括一或多个对象的影像；接收其中之一对象的选择信号，并根据该选择信号取得该对象的对象信息；加载该对象信息相关的文字、图形或影片；以及以该电子显示设备显示该 对象信息的影像，或是该对象信息结合于该扩增现实影像或该虚拟现实影像的影像。

在选择进入该扩增现实模式时，更包括：以该电子显示设备撷取一空间的现实影像；取得该空间中的一指针对象的影像；根据该指针对象的信息取得该对象与该空间的关联性；以及引入该对象信息的扩增现实影像，以结合于该空间的现实影像中，并显示结合后的影像。

该电子显示设备显示的画面为切换进入该扩增现实模式下的该扩增现实影像，以取代原显示的该虚拟现实影像。

在显示结合该扩增现实影像与该虚拟现实影像的影像时，以一子母画面呈现，该电子显示设备以一母画面显示该虚拟现实影像，以一子画面显示该扩增现实影像。

在选择进入该扩增现实模式时，结合该扩增现实影像与该虚拟现实影像的影像以一分割画面呈现，其中包括：以该电子显示设备显示一分割画面，包括一第一画面以及一第二画面；以该第一画面显示该虚拟现实影像，其中包括该对象的影像；以及以该第二画面显示该对象相关的扩增现实影像。

该对象信息以窗口中文字、图片或影片呈现。

所述的系统包括：一伺服系统，提供一或多个电子显示设备切换进入一虚拟现实模式或一扩增现实模式的数据服务，其中包括：一虚拟现实影像数据库，提供该一或多个电子显示设备切换进入该虚拟现实模式时所需的虚拟现实影像；一扩增现实影像数据库，提供该一或多个电子显示设备切换进入该扩增现实模式时所需的扩增现实影像；一接收并执行该一或多个电子显示设备产生的指令的管理接口单元；其中，当其中之一电子显示设备进入该虚拟现实模式时，从该伺服系统加载虚拟现实影像，以显示虚拟现实影像，其中包括一或多个对象的影像；该电子显示设备产生选择其中之一对象的选择信号，该伺服系统通过该管理接口单元根据该选择信号提供对象信息；当其中之一电子显示设备切换进入该扩增现实模式，并自该伺服系统加载扩增现实影像，其中包括一或多个对象的影像；以及以该电子显示设备显示该对象信息，或是结合该扩增现实影像与该虚拟现实影像的影像。

各电子显示设备包括一指令处理单元，用以执行一切换该虚拟现实模式或该扩增现实模式的指令。

该管理接口单元接收该一或多个电子显示设备产生的指令，其中包括选择该虚拟现实影像中的其中之一对象的选择信号，以及切换该虚拟现实模式与该扩增现实模式的指令，该伺服系统即根据该切换该虚拟现实模式或该扩增现实模式的指令提供该虚拟现实影像或该扩增现实影像。

该伺服系统更包括一用户数据库，其中记载该一或多个电子显示设备的用户设定值。

为了能更进一步了解本发明为达到既定目的所采取的技术、方法及功效，请参阅以下有关本发明的详细说明、附图，相信本发明的目的、特征与特点，当可由此得以深入且具体的了解，然而所附附图与附件仅提供参考与说明用，并非用来对本发明加以限制。

附图说明

图1为实现本发明切换虚拟现实模式与扩增现实模式的管理方法的系统架构图；

图2为实现本发明切换虚拟现实模式与扩增现实模式的管理方法的系统功能方块图；

图3为描述本发明扩增现实模式的显示方法的实施例流程图之一；

图4为本发明系统在扩增现实模式下的实施例示意图；

图5为描述本发明切换虚拟现实模式与扩增现实模式的管理方法的实施例流程图之二；

图6为本发明切换虚拟现实模式与扩增现实模式的实施例情境示意图；

图7为描述本发明切换虚拟现实模式与扩增现实模式的管理方法的实施例流程图之三；

图8为本发明切换虚拟现实模式与扩增现实模式的实施例情境示意图。

【附图标记说明】

网络 10 伺服系统 104

个人资料 141 校正参数 142

数据库 143 终端电子显示设备 101、102、103

网络 20 伺服系统 21

管理接口单元 211 用户数据库 212

虚拟现实影像数据库 213 扩增现实影像数据库 214

终端电子显示设备 22 通讯单元 221

数据处理单元 222 指令处理单元 223

显示单元 224 虚拟现实引擎 225

扩增现实引擎 226

空间 40 指针对象 401

对象影像 403 指示符号 405

虚拟现实空间 60 对象 601、603、605、607

对象信息 610 确认选项 611

取消选项 612 指示符号 620

虚拟现实画面 801 扩增现实画面 802

对象 803 对象信息 804

步骤S301～S317 虚拟与扩增现实切换管理流程

步骤S501～S515 虚拟与扩增现实切换管理流程

步骤S701～S715 虚拟与扩增现实切换管理流程

具体实施方式

本发明说明书所公开的技术关于切换虚拟现实模式与扩增现实模式的管理方法以及系统，实施例之一是提供使用者一个可以呈现虚拟现实与扩增现实的电子显示设备，由虚拟现实(Virtual Reality，VR)技术通过计算机软件仿真特定空间的三度空间影像，通过电子显示设备显示虚拟现实影像，例如本说明书所载的电子显示设备就可以为一种可以显示虚拟现实与扩增现实影像的显示设备，这比如是一种头戴式显示器，能提供使用者如同身历其境一般地环顾特定空间。而此电 子显示设备更可以运作于一扩增现实模式下，扩增现实(Augmented Reality，AR)技术可以在一真实环境影像中显示虚拟对象，可以根据用户操作产生的讯息而实时运算电子显示设备的位置及角度(方向)而实时改变虚拟对象的观看角度，扩增现实技术的主要目的是在显示屏幕上把虚拟世界(特定物品)套在现实世界并进行互动。系统另提供以一额外加上的画面(如浮动窗口)加入相应多媒体内容，包括图形、影片、声音与/或文字。

在本发明中，电子显示设备的用户设定在一虚拟现实模式时，可以环境浏览特定物品或是环境，并且可以切换到一扩增现实模式，根据实施例之一，扩增现实技术为在真实影像中显示虚拟对象信息的呈现技术，另可以额外窗口(如浮动窗口)显示虚拟现实模式下的用户接口的呈现技术，比如在电子显示设备上的虚拟现实影像中，可把图形、影片和文字加到用户所看到的虚拟现实画面上。

图1显示实现本发明切换虚拟现实模式与扩增现实模式的管理方法的系统架构图。

图中显示为一架构在网络10上的系统，一端设有提供虚拟现实模式(VR mode)与扩增现实模式(AR mode)下数据数据的伺服系统104，伺服系统104可服务多个使用者端需求，其中可载有个人资料141以及每个使用者在每个显示设备的校正参数142，以及载有各种环境与对象的虚拟现实与扩增现实影像的数据库143。

根据发明实施例，伺服系统104为通过网络10提供虚拟现实服务，包括提供利用虚拟现实与扩增现实浏览商品、房屋对象的服务，比如，可以借此让使用者操作特定虚拟现实显示设备浏览某对象处于一个虚拟环境中的样貌、或是在自己环境中以扩增现实技术呈现某种商品、或是提供成屋、预售屋导览等的服务。

一端有终端电子显示设备101、102、103，可以通过网络10自伺服系统104取得虚拟现实模式与扩增现实模式下的信息。伺服端所储存的个人资料141包括没有欲取得服务的用户的基本数据、登入服务的数据等，校正参数142比如是各使用者穿戴虚拟现实显示设备时依照身材脸型特征及自己喜好调整的穿戴装置设定参数。

终端电子显示设备101、102、103为支持显示虚拟现实与扩增现实影像的电子装置，比如一种头戴式显示器，使用者可以穿戴于头部而由其中显示器观看虚拟现实、扩增现实影像，以及结合两种现实的影像。另不排除可以智能眼镜、个人手持装置实现此电子显示设备。

本发明系统所提供的功能可以硬件电路或计算机系统执行软件程序实现，如图2接着显示的系统功能方块图。

根据图中所示本发明说明书描述的切换虚拟现实模式与扩增现实模式的管理系统的实施例，设有伺服系统21，通过一网络20连接设于用户端的终端电子显示设备22，伺服系统21的主要功能为提供用户端的终端电子显示设备22切换至虚拟现实模式(VR mode)与扩增现实模式(AR mode)下所需的数据服务。

伺服系统21包括有一虚拟现实影像数据库213，可以提供用户端的一或多个电子显示设备切换进入虚拟现实模式时所需的虚拟现实影像，特别是根据用户选定一个虚拟环境的场景提供相关的虚拟现实影像，相关数据通过网络20传递到终端电子显示设备22，由装置22本身的数据处理电力执行图像处理并显示。伺服系统21另设有一扩增现实影像数据库214，可以提供一或多个电子显示设备切换进入扩增现实模式时所需的扩增现实影像。

伺服系统21可以处理由终端电子显示设备22产生的指令，比如用户操作此装置22产生的指令、选择信号、切换显示模式等，其中设有一接收并执行一或多个电子显示设备产生的指令的管理接口单元211。伺服系统21可提供用户登入使用，或是上传设定值，其中可包括一用户数据库212，其中记载一或多个用户设定电子显示设备的用户设定值。

通过用户数据库212，用户可以通过伺服系统21随时取得所需的数据服务，并能储存自己的喜好设定，伺服系统21于是可以提供个人化的服务，能根据使用者的需求提供服务。举例来说，用户穿戴某种电子显示设备进入某个网站进行虚拟现实浏览时，系统可以根据用户喜好自动传送电子显示设备的设定值，切换显示模式等。

终端电子显示设备22如用户穿戴的穿戴式显示设备或是其他支 持虚拟现实显示功能的电子装置，可为一个可独立运行的虚拟现实显示设备，或者可为通过其他计算机系统联机网络20而取得数据数据。

在此实施例中，终端电子显示设备22设有连接网络20的通讯单元221，通讯方式不限以有线或无线的方式，或是通过其他装置而联机网络20。装置20设有处理装置内部数据的数据处理单元222，特别是能够处理其中虚拟现实影像与扩增现实影像信号，使之形成显示于显示单元224的影像。

终端电子显示设备22设有指令处理单元223，指令处理单元223用以处理用户操作终端电子显示设备22产生的指令，特别可以是用以执行一切换虚拟现实模式或扩增现实模式的指令。比如点选物品或商品的指令、浏览物品或商品信息的指令、启动虚拟现实或扩增现实模式的指令、手势指令等，如果指令涉及需要由伺服系统21取得数据，则传送到伺服系统21。

系统提供终端可以虚拟现实(VR)与扩增现实(AR)等技术浏览特定场合以及物品，终端电子显示设备22设有一虚拟现实引擎225，用以处理并产生虚拟现实影像，主要是事先已经记载特定场合、对象等相关的虚拟现实影像；另设有一扩增现实引擎226，用以处理并产生扩增现实影像，结合终端电子显示设备22所取得的真实环境影像，可以在真实影像中显示出虚拟对象的信息，主要也是有关物品信息的相关影像信息。于是，系统将根据终端电子显示设备22产生的操作指令输出对应的数据，包括于终端电子显示设备22设定于一虚拟现实模式下，经伺服系统21提供影像信号，经装置22的虚拟现实引擎225处理产生显示在装置上显示器的虚拟现实影像；再于装置22设定于一扩增现实模式时，经伺服系统21提供影像信号，经扩增现实引擎226处理产生可显示的扩增现实影像。

在一实施例中，终端电子显示设备22产生选择其中之一对象的选择信号，伺服系统21将通过管理接口单元211根据选择信号提供对象信息，而此对象信息特别可以一额外的画面(如浮动窗口)迭加于虚拟现实影像或是扩增现实影像上，画面中呈现的内容比如文字、图片、影片，甚至是语音。

呈现扩增现实影像的实施例可参考图3所示的流程。开始时，如步骤S301，由根据用户选择对象或是操作，电子显示设备进入扩增现实模式，在此模式下，电子显示设备将运用所载的摄影机先撷取一空间现实影像，如步骤S303。

在一实施例中，欲呈现扩增现实影像的空间中置放一或多个作为空间指标(marker)的指针对象，拍摄此空间时，同时取得指针对象影像，如步骤S305，根据此指针对象的数据(如长、宽、高)进而取得指针对象与空间的关联性，如步骤S307。

接着，如步骤S309，通过摄影机取得空间中的一对象影像，此时可以根据上述指针对象与空间的关联性得到此对象应该在此空间内的尺度，于是，如步骤S311，结合对象影像于空间现实影像中，并通过电子显示设备显示结合的影像，如步骤S313。

在一实施流程中，在此扩增现实模式下可引入对象信息，如经由伺服系统取得，步骤S315，再接着将对象信息以一额外画面、窗口等结合于扩增现实影像中，步骤S317，可以文字、图形或影片信息呈现，最后显示结合的影像，步骤S313。

图4接着显示本发明系统在扩增现实模式下的实施例示意图。此图显示有一空间40，当系统提供以扩增现实模式显示这个空间40内的特定虚拟物品，先通过指针对象401的相关尺度信息取得指针对象401与空间40的关联性，于是，在此空间现实影像中，用户可以通过电子显示设备操作一指示符号405，此例则借此控制一对象影像403，使之摆放在特定位置上。

在此实施例中，系统提供扩增现实模式让用户可以体验某对象在某个空间内的情境。而在其他实施例中，本发明提供扩增现实模式可以与虚拟现实模式同时存在，并搭配显示。

在另一实施例中，在此扩增现实模式下引入对象影像403，更可通过另一迭加画面在此扩增现实影像中显示对象相关的文字、图形或影片信息，比如在对象影像403的一侧以一浮动窗口显示对象信息。

实施例可参考图5所示的方法流程图。

一开始，如步骤S501，用户操作电子显示设备进入一虚拟现实模 式，同时自伺服系统下载虚拟现实影像，如步骤S503，但有实施例是可以在启动虚拟现实模式之前已经加载相关影像。启动后，于电子显示设备上显示虚拟现实影像，如步骤S505。虚拟现实影像中引入有一或多个对象的影像，如步骤S507，可依照使用者选择引入特定对象影像，每一个对象都可设有软件识别的信息(ID)，每个识别数据关联个别的对象信息。

进入虚拟现实时，用户可以通过相关软件工具引入对象影像外，更提供点选其中特定对象，也就是有兴趣要得到进一步信息的对象，对象影像将结合于虚拟现实影像中，如步骤S509，并接着显示结合后的影像，如步骤S511。伺服系统端于同一流程中接收此对象选择的信号，信号载有所选择对象的识别信息，伺服系统依据此识别信息提供对应的对象信息，电子显示设备即接着接收选择呈现的对象信息，如步骤S513。

对象信息，在一实施例中，随着对象影像通过一额外迭加的画面结合在虚拟现实影像上，包括结合了文字、图片或影片等对象信息，如步骤S515，并依照设定，结合于虚拟现实影像并以一显示位置呈现对象信息。

以上虚拟现实显示的实施例如图6所示的情境示意图。

此例显示有一呈现于电子显示设备上屏幕的虚拟现实空间60，空间60内示意包括有多个对象601、603、605、607，用户于操作电子显示设备时，可以指示软件实现的指示符号620移动到特定物品，如此例，使用者操作如手的形状的指示符号620点到对象605，也就是需要知道对象605的相关信息。根据发明实施例，此时系统切换到对象导览模式，以额外画面呈现出对象605相关的对象信息610，比如以浮动窗口呈现，其中即可以文字、图片、影片，甚至是语音的方式呈现对象信息610。如此图例，对象信息610可以一个方框显示在相关对象的附近，其中载有内容，并提供特定条件下的确认或取消讯息等的相关选项，如图标的确认选项611、取消选项612。

根据其他实施状态，选择空间60内某商品的方式并不限于图标的指示符号620的方式，而可以如触控、手势、装置的位置或方向传感 器而执行选择或是观看虚拟现实影像的手段。

值得一提的是，当终端用户操作电子显示设备上的软件接口(可为虚拟现实接口)产生指定特定对象的选择信号时，系统端，如图2所示的实施例，其中系统端的管理接口单元接收电子显示设备产生的指令，指令包括选择虚拟现实影像中的其中之一对象的选择信号，以及切换虚拟现实模式与扩增现实模式的指令等，伺服系统即根据切换该虚拟现实模式或扩增现实模式的指令提供虚拟现实影像或扩增现实影像。

当系统从某一现实模式切换到另一现实模式时，本发明所载切换虚拟现实模式与扩增现实模式的管理方法先从电子显示设备显示虚拟现实影像开始，以扩增现实影像取代原显示的画面。

根据以上实施例，以虚拟现实模式或是扩增现实模式显示特定场景时，除了可以已经存在装置内的影像数据呈现之外，更可立即自伺服系统加载对象信息相关的扩增现实影像，之后能在已经显示虚拟或扩增现实影像的显示器上，可以额外的画面显示其中对象信息，结合于虚拟现实影像或是扩增现实影像中。

在另一实施例，如图4与图6所示，于显示结合扩增现实影像与/或虚拟现实影像的影像时，更可以选择通过一子母画面同时在画面中呈现虚拟与扩增现实影像，电子显示设备以一母画面显示虚拟现实影像，以一子画面显示扩增现实影像。

另有实施例如图7流程所述，可以选择结合扩增现实影像与虚拟现实影像的影像可以一分割画面呈现。

开始如步骤S701，先由虚拟现实模式开始，选择场景，并在有需要时可登入伺服系统，以取得某场景相关的虚拟现实影像，如步骤S703，这时也可同时加载与此虚拟现实相关的扩增现实影像，如步骤S705。

这时，可以电子显示设备显示一分割画面，步骤S707，其中包括以不同显示区域定义第一画面以及第二画面，若配合图8显示的情境示意图，第一画面如虚拟现实画面801，其中显示多个对象，包括指出经选择的对象803，如图7步骤S709。选择时，电子显示设备产生相 关对象的选择信号，伺服系统或是终端的装置相关电路接收到此对象选择信号，步骤S711，电子显示设备即据此加载扩增现实影像，如步骤S713。

在此分割画面的显示模式下，如图7步骤S715，显示设备上显示第二画面，第二画面如图8的扩增现实画面802，则是用来以扩增现实影像呈现有关对象803的内容，如对象信息804。另有实施例可以额外窗口呈现对象信息804，更可以结合于第一画面或第二画面中。

列举一例，应用本说明书所载切换虚拟现实模式与扩增现实模式的管理方法以及系统，伺服系统端可提供多个终端的电子显示设备取得其中数据库所载的虚拟现实影像以及扩增现实影像信号，比如特定商品或对象的影像数据。

设于终端的电子显示设备可以为一头戴式显示器、智慧眼镜，或支持虚拟现实显示的手持装置，在显示特定场合虚拟现实的时候，可以提供使用者选择场景的选单，点选某场景(比如某卖场)后，同时加载此场景相关的各种对象或商品影像数据，系统于是进入虚拟现实模式。

当以虚拟现实模式进入某卖场后，可以虚拟现实技术浏览当中商品，其中浏览方式当配合各种控制指令，比如浏览方向、点选商品、指示购买与否，更可包括支付的流程。点选某商品时，电子显示设备产生选择信号，同时传送此商品的识别信息到伺服系统，伺服系统于是得到商品的识别数据，根据本发明实施方式，终端的显示设备切换为扩增现实模式，借此呈现商品相关信息，另可在以其他窗口提供的用户接口确认购买、支付等动作的互动画面。

商品介绍可以文字、图形、影片或语音方式在虚拟现实或扩增现实模式下呈现给用户，显示模式至少包括上述以一现实影像取代另一现实影像、子母画面以及分割画面等。借此可以达到本说明书所揭示的切换虚拟现实模式与扩增现实模式的管理方法以及系统的目的，特别是系统提供用户可以操作一电子显示设备进行虚拟现实浏览特定场合，并可切换至扩增现实模式而呈现其他内容。

但以上所述仅为本发明得较佳可行实施例，非因此即局限本发明 的保护范围，因此凡是运用本发明说明书及附图内容所做的等效结构变化，均同理包含在本发明的保护范围之内，特此说明。