虚拟现实设备与终端的交互方法和装置与流程

本申请涉及智能终端领域，具体涉及可穿戴设备技术领域，尤其涉及虚拟现实设备与终端的交互方法和装置。

背景技术：

虚拟现实设备是一种向用户提供视觉、听觉、触觉、力觉等感官体验的电子设备。虚拟现实设备已经应用于医疗、教育、健身、军事、信息娱乐等领域。目前，用户主要通过手柄与虚拟现实设备进行交互，虚拟现实设备接收用户通过手柄发送的指令信息。现有的虚拟现实设备也可以与手机相连，但在这种情况下，手机通常作为虚拟现实设备的一部分，主要提供屏幕显示、图像采集、语音接收等功能。

然而，现有的虚拟现实设备不能与智能终端进行交互，以接收或发送信息，生成具有特效的三维影像。

技术实现要素：

本申请的目的在于提出一种虚拟现实设备与终端的交互方法和装置。

第一方面，本申请提供了一种虚拟现实设备与终端的交互方法，所述方法包括：接收终端发送的信息；根据所述信息和第一特效信息生成具有特效的三维影像信息，其中，所述第一特效信息是预先设置的特效信息或根据所述信息从预置的特效信息列表中选取的特效信息。

在一些实施例中，所述交互方法还包括：接收所述终端发送的所述终端的运动轨迹信息；根据所述运动轨迹信息、预设的所述终端对应的虚拟物体的信息、预设的第二特效信息，生成具有特效的所述虚拟物体的三维动画信息。

在一些实施例中，所述交互方法还包括：通过安装在所述虚拟现实设备上的传感器采集穿戴所述虚拟现实设备的用户的影像信息和肢体运动轨迹信息；根据所述影像信息和所述肢体运动轨迹信息生成所述用户的动作特征信息；根据所述动作特征信息生成指令；发送所述指令至所述终端。

在一些实施例中，所述交互方法还包括：接收所述终端发送的指令；执行所述指令。

在一些实施例中，所述交互方法还包括：基于Wi-Fi Direct标准与所述终端预先建立连接。

第二方面，本申请提供了一种虚拟现实设备与终端的交互装置，所述装置包括：第一接收单元，配置用于接收终端发送的信息；第一生成单元，配置用于根据所述信息和第一特效信息生成具有特效的三维影像信息，其中，所述第一特效信息是预先设置的特效信息或根据所述信息从预置的特效信息列表中选取的特效信息。

在一些实施例中，所述装置还包括：第二接收单元，配置用于接收所述终端发送的所述终端的运动轨迹信息；第二生成单元，配置用于根据所述运动轨迹信息、预设的所述终端对应的虚拟物体的信息、预设的第二特效信息，生成具有特效的所述虚拟物体的三维动画信息。

在一些实施例中，所述装置还包括：采集单元，配置用于通过安装在所述虚拟现实设备上的传感器采集穿戴所述虚拟现实设备的用户的影像信息和肢体运动轨迹信息；动作特征生成单元，配置用于根据所述影像信息和所述肢体运动轨迹信息生成所述用户的动作特征信息；指令生成单元，配置用于根据所述动作特征信息生成指令；发送单元，配置用于发送所述指令至所述终端。

在一些实施例中，所述装置还包括：指令接收单元，配置用于接收所述终端发送的指令；指令执行单元，配置用于执行所述指令。

在一些实施例中，所述装置还包括：建立连接单元，配置用于基于Wi-Fi Direct标准与所述终端预先建立连接。

本申请提供的虚拟现实设备与终端的交互方法和装置，通过接收终端发送的信息，然后，根据接收的消息和第一特效信息生成具有特效的三维影像信息。其中，第一特效信息可以是预先设置的特效信息或根据上述信息从预置的特效信息列表中选取的特效信息。从而实现了为不同的信息生成不同特效的三维影像信息，提高用户体验。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1是本申请可以应用于其中的示例性系统架构图；

图2是根据本申请的虚拟现实设备与终端的交互方法的一个实施例的流程图；

图3是根据本申请的虚拟现实设备与终端的交互方法的一个应用场景的示意图；

图4是根据本申请的虚拟现实设备与终端的交互方法的又一个实施例的流程图；

图5是根据本申请的虚拟现实设备与终端的交互方法的又一个实施例的流程图；

图6是根据本申请的虚拟现实设备与终端的交互装置的一个实施例的结构示意图；

图7是根据本申请的虚拟现实设备与终端的交互装置的又一个实施例的结构示意图；

图8是根据本申请的虚拟现实设备与终端的交互装置的又一个实施例的结构示意图；

图9是适于用来实现本申请实施例的虚拟现实设备的计算机系统的结构示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

图1示出了可以应用本申请的虚拟现实设备与终端的交互方法或虚拟现实设备与终端的交互装置的实施例的示例性系统架构100。

如图1所示，系统架构100可以包括终端设备101、102、103，网络104和虚拟现实设备105。网络104用以在终端设备101、102、103和虚拟现实设备105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备101、102、103通过网络104与虚拟现实设备105交互，以接收或发送消息等。用户也可以使用虚拟现实设备105通过网络104与终端设备101、102、103交互，已接收或发送消息等。终端设备101、102、103上可以安装有各种类型的客户端应用，例如即时通信工具、社交平台软件、视频播放软件等。

终端设备101、102、103可以是具有采集运动轨迹、采集图像、执行接收的指令等功能的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

虚拟现实设备105可以是提供各种服务的虚拟现实设备，例如，根据终端设备101、102、103发送的信息，生成具有特效的影像信息的虚拟现实设备。虚拟现实设备可以对接收的信息进行处理，并生成具有特效的三维影像信息。其中，上述虚拟现实设备可以包括但不限于：头戴式可视设备(Head Mount Display，HDM)、智能眼镜等。

需要说明的是，本申请实施例所提供的虚拟现实设备与终端的交互方法一般由虚拟现实设备105执行，相应地，虚拟现实设备与终端的交互装置一般设置于虚拟现实设备105中。

应该理解，图1中的终端设备、网络和虚拟现实设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和虚拟现实设备。

继续参考图2，示出了根据本申请的虚拟现实设备与终端的交互方法的一个实施例的流程200。所述的虚拟现实设备与终端的交互方法，包括以下步骤：

步骤201，接收终端发送的信息。

在本实施例中，虚拟现实设备与终端交互方法运行于其上的虚拟现实设备(例如图1所示的虚拟现实设备105)可以通过有线连接方式或者无线连接方式接收终端设备(例如图1所示的终端设备101、102、103)发送的信息。上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultra wideband)连接、以及其他现在已知或将来开发的无线连接方式。上述信息可以是各种类型的信息，可以包括但不限于影视信息、指令信息、图像信息、音频信息、上述终端设备的运动轨迹信息。

步骤202，根据上述信息和第一特效信息生成具有特效的三维影像信息。

在本实施例中，上述虚拟现实设备根据步骤201中接收的信息和第一特效信息生成具有特殊效果的三维影像信息。其中，上述第一特效信息可以包括但不限于以下至少一项：声音信息、灯光信息、背景图片信息、动画信息。作为示例，首先，头戴式可视设备可以预先接收用户设置的第一特效信息，该第一特效信息是表征迷雾的特效信息。然后，上述头戴式可视设备接收智能手机发送的热带雨林的3D(Three Dimensions，三维)纪录片的帧。之后，上述头戴式可视设备可以采用粒子系统的不规则景物进行建模以模拟迷雾，生成表征迷雾的图像，最后，上述头戴式可视设备采用图像合成技术，将上述纪录片的帧和上述表征迷雾的图像合成在一起并显示。

在本实施例的一些可选的实现方式中，上述虚拟现实设备可以通过语音与用户交互，保存用户设置的第一特效信息。用户也可以在上述终端的第一特效信息设置页面设置第一特效信息，然后，将上述第一特效信息发送至虚拟现实设备，最后，上述虚拟现实设备接收并保存上述第一特效信息。

在本实施例的一些可选的实现方式中，虚拟现实设备也可以根据接收的信息确定该信息所属的虚拟场景；然后，从预置的特效信息列表中选取与上述虚拟场景匹配的特效信息作为第一特效信息。其中，上述特效信息列表可以包括但不限于：表征怀旧的特效信息、表征浪漫的特效信息、表征恐怖的特效信息。作为示例，虚拟现实设备接收音频信息和连续的帧，如果确定上述音频信息中声音是低频率的声音且连续3帧中表示黑色的像素值的数量超过预设数量，则生成表征恐怖的敲门声音。

在本实施例的一些可选的实现方式中，上述虚拟现实设备还可以接收上述终端发送的指令，并执行上述指令。其中，上述指令可以包括但不限于：指示播放暂停的指令、指示放大上述虚拟现实设备投放的虚拟物体的指令、指示旋转上述虚拟现实设备投放的虚拟物体的指令。作为示例，终端是用户的手机，当上述手机通过安装在该手机上的传感器，检测到该手机向右转动45度并前进20厘米，则上述手机向上述虚拟现实设备发送指示向左移动虚拟现实设备投放的虚拟物体的指令和放大上述虚拟物体的指令。然后，上述虚拟现实设备接收并执行上述指令，将投放的虚拟物体向左移动预设的距离并按照预设的比例放大上述虚拟物体。

在本实施例的一些可选的实现方式中，上述虚拟现实设备可以基于Wi-Fi Direct标准与上述终端预先建立连接，其中，Wi-Fi Direct标准是指无线网络中的设备无需通过无线路由器即可相互连接的通信标准。上述虚拟现实设备与上述终端可以采用RTSP(Real Time Streaming Protocol，实时流传输协议)交互消息以建立连接。上述建立连接的过程包括如下步骤：

第一，终端向虚拟现实设备发送获取该虚拟现实设备所支持的RTSP方法的请求。其中，上述RTSP方法是指实现实时流传输协议的各个方法。然后，上述虚拟现实设备接收上述请求，并检索本设备支持的RTSP方法。之后，上述虚拟现实设备将检索到的支持的RTSP方法发送至上述终端。最后，上述终端接收并保存上述虚拟现实设备发送的RTSP方法。

第二，上述虚拟现实设备向上述终端发送获取该终端所支持的RTSP方法的请求。然后，上述终端接收上述请求，并检索本终端支持的RTSP方法。之后，上述终端将检索到的支持的RTSP方法发送至上述虚拟现实设备。最后，上述虚拟现实设备接收并保存上述终端发送的RTSP方法。

第三，上述终端向上述虚拟现实设备发送本终端支持的RTSP方法的参数信息至上述虚拟现实设备，上述虚拟现实设备接收并保存上述参数信息。然后，上述虚拟现实设备发送本设备支持的RTSP方法的参数信息至上述终端，上述终端接收并保存上述虚拟现实设备发送的参数信息。

第四，上述终端根据本终端支持的RTSP方法及该方法的参数信息和保存的上述虚拟现实设备支持的RTSP方法及该RTSP方法支持的参数信息，确定通信过程中可以使用的RTSP方法及该方法的参数信息。然后，上述终端将上述确定的RTSP方法及该方法的参数信息发送至上述虚拟现实设备。

在本实施例的一些可选的实现方式中，上述虚拟现实设备被预置了开放应用程序编程接口。开发者可以调用上述开放应用编程接口控制上述虚拟现实设备上的各个传感器，以开发更多的功能。

继续参见图3，图3是根据本实施例的虚拟现实设备与终端的交互方法的应用场景的一个示意图。在图3的应用场景中，首先，用户301通过语音与智能手机302交互，设置第一特效信息，其中，上述第一特效信息是表征生日快乐的特效信息。然后，用户301手持智能手机302采集上述用户301前后、左右、上下的图像信息。之后，用户301通过手机302将上述采集的图像信息和设置的表征生日的特效信息经无线网络303发送至智能眼镜304。之后，智能眼镜304接收上述图像信息和上述表征生日快乐的特效信息，根据接收的上述图像信息生成用户301的虚拟的3D影像306，并根据接收的上述表征生日快的特效信息，生成3D虚拟蛋糕307、3D虚拟鲜花308并播放音乐309。最后，用户305通过智能眼镜304可以看到用户301的虚拟的影像信息306、虚拟蛋糕307、虚拟鲜花308且听到音乐309。

本申请的上述实施例提供的方法通过为接收的信息增加特效，实现了根据不同的虚拟场景生成具有不同特效的三维影像信息，增加了真实性和趣味性，提高了用户体验。

进一步参考图4，其示出了虚拟现实设备与终端的交互方法的又一个实施例的流程400。该交互方法的流程400，包括以下步骤：

步骤401，接收终端发送的信息。

在本实施中，虚拟现实设备与终端的交互方法运行其上的虚拟现实设备(例如图1所示的虚拟现实设备105)可以通过无线连接的方式或者有线连接的方式接收终端发送的信息。

步骤402，根据上述信息和第一特效信息生成具有特效的三维影像信息。

在本实施例中，上述虚拟现实设备根据上述信息、第一特效信息生成具有特效的三维影像信息的方法可以参照步骤203，在此不再赘述。

步骤403，接收上述终端发送的上述终端的运动轨迹信息。

在本实施中，上的虚拟现实设备可以通过无线连接的方式或者有线连接的方式接收上述终端发送的上述终端的运动轨迹信息。其中，上述运动轨迹信息是表征上述终端在立体空间中的运动轨迹。上述终端可以通过安装在上述终端的三轴加速度计、三轴陀螺仪等传感器实时采集上述终端的运动轨迹信息。

步骤404，根据上述运动轨迹信息、预设的上述终端对应的虚拟物体的信息、预设的第二特效信息，生成具有特效的上述虚拟物体的三维动画信息。

在本实施例中，用户可以从预设的虚拟物体列表中选择一个虚拟物体作为上述终端对应的虚拟物体。并获取该虚拟物体的信息。其中，上述信息可以包括虚拟物体的唯一标识、形状信息等。作为示例，上述虚拟物体列表可以包括以下至少一项：羽毛球拍、网球拍、刀、剑。用户还可以为上述终端对应的虚拟物体选择第二特效信息。上述第二特效信息可以包括但不限于以下至少一项：声音信息、图像信息、动画信息。上述虚拟现实设备根据上述运动轨迹信息、上述终端对应的虚拟物体的信息、第二特效信息，生成具有特效的上述虚拟物体的三维动画信息。作为示例，虚拟现实设备是头戴式可视设备，终端是用户的手机，上述头戴式可视设备接收上述手机发送的深林过关游戏的影像信息，当前生成的三维影像的画面是3只狼守护峡谷路口的画面，上述三维影像画面具有迷雾特效。然后，用户从虚拟物体列表中，选取剑作为上述手机对应的虚拟物体。之后，上述头戴式可视设备对接收的上述手机的运动轨迹信息进行分析，确定上述手机是按照从上往下运动的，则以弧线形式生成从上往下增长的该剑的运动轨迹，并在弧线左右两边加载白光，同时生成表征劈开物体的声音。最后，在预设的一段时间后，弧线、白光、声音消失。

从图4中可以看出，与图2对应的实施例相比，本实施例中的虚拟现实设备与终端的交互方法的流程400突出了根据终端的运动轨迹信息生成具有特效的虚拟物体的三维动画，从而实现了用户通过终端与虚拟现实中的虚拟环境进行互动，增强交互性和沉浸感。

进一步参考图5，其示出了虚拟现实设备与终端的交互方法的又一个实施例的流程500。该交互方法的流程500，包括以下步骤：

步骤501，接收终端发送的信息。

在本实施中，虚拟现实设备与终端的交互方法运行其上的虚拟现实设备(例如图1所示的虚拟现实设备105)可以通过无线连接的方式或者有线连接的方式接收终端发送的信息。

步骤502，根据上述信息和第一特效信息生成具有特效的三维影像信息。

在本实施例中，上述虚拟现实设备根据上述信息、第一特效信息生成具有特效的三维影像信息的方法可以参照步骤203，在此不再赘述。

步骤503，通过安装在虚拟现实设备上的传感器采集穿戴上述虚拟现实设备的用户的影像信息和肢体运动轨迹信息。

在本实施例中，上述虚拟现实设备可以通过安装在上述虚拟现实设备上的摄像机、红外热像仪等传感器实时采集穿戴上述虚拟现实设备的用户的影像信息。上述虚拟现实设备还可以通过安装在上述虚拟现实设备上的三轴加速度计、三轴陀螺仪等传感器实时采集上述用户的肢体运动轨迹信息，其中，上述肢体运动轨迹信息可以包括但不限于以下至少一项：头部运动轨迹信息、手臂运动轨迹信息。

步骤504，根据上述影像信息和上述肢体运动轨迹信息生成上述用户的动作特征信息。

在本实施例中，上述虚拟现实设备可以采用卷积神经网络(Convolutional Neural Network，CNN)算法从上述影像信息和上述肢体运动轨迹信息中识别上述用户的动作特征信息。其中，上述动作特征信息可以包括但不限于以下至少一项：表征头部转动某一角度的动作特征信息、表征身体重心前倾的动作特征信息、表征身体前进的动作特征信息、表征身体后退的动作特征信息。

在本实施例中，上述卷积神经网络可以包括输入层、卷积层、池化层、全连接层、输出层。其中，上述虚拟现实设备对每一层都预先进行了训练。上述卷积神经网络可以按照如下步骤识别并提取上述用户的动作特征信息：首先，输入层对上述影像信息、上述肢体运动轨迹信息进行去噪及归一化处理，得到归一化后的数值矩阵。然后，卷积层将上述归一化后的数值矩阵切分成8乘8的小矩阵，将每一个小矩阵与卷积核进行卷积计算，得到卷积矩阵。之后，池化层对上述卷积矩阵进行聚合统计计算，得到局部特征信息。之后，全连接层对上述局部特征信息进行处理，生成全局特征信息。最后，输出层对上述全局特征信息进行分类处理，确定上述用户的动作特征信息。

步骤505，根据上述动作特征信息生成指令。

在本实施例中，上述虚拟现实设备从预设的动作特征信息列表中检索是否存在与步骤504中得到的动作特征信息相匹配的动作特征信息。其中，上述动作特征信息列表可以包括但不限于：表征播放下一条信息的动作特征信息、表征播放上一条信息的动作特征信息、表征播放暂停的动作特征信息。响应于上述动作特征信息列表中存在与步骤504中得到的动作特征信息相匹配的动作特征信息，则根据该动作特征信息生成指令。作为示例，虚拟现实设备在步骤502中根据接收的电影的帧信息，播放上述电影。如果步骤504中生成的用户的动作特征信息是表征右手食指水平放置且右手的其余手指处于弯曲的状态，则与预设的动作特征信息列表中表征播放上一条信息的动作特征信息相匹配，则虚拟现实设备生成播放上一部电影的指令。

步骤505，发送上述指令至上述终端。

在本实施例中，上述虚拟现实设备将上述指令通过无线连接的方式或有线连接的方式发送至上述终端。上述终端接收上述指令，然后执行上述指令。

从图5中可以看出，与图2对应的实施例相比，本实施例中的虚拟现实设备与终端的交互方法的流程500突出了根据用户的影像信息和肢体运动轨迹信息，生成指令信息，并发送上述指令至终端，实现了用户通过肢体动作控制终端，控制操作更人性化。

进一步参考图6，作为对上述各图所示方法的实现，本申请提供了一种虚拟现实设备与终端的交互装置的一个实施例，该装置实施例与图2所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。

如图6所示，本实施例所述的虚拟现实设备与终端的交互装置600包括：第一接收单元601、第一生成单元602。其中，第一接收单元601配置用于接收终端发送的信息；第一生成单元602配置用于根据上述信息和第一特效信息生成具有特效的三维影像信息，其中，上述第一特效信息是预先设置的特效信息或根据上述信息从预置的特效信息列表中选取的特效信息。

在本实施例中，虚拟现实设备与终端的交互装置600的第一接收单元601可以通过有线连接方式或者无线连接方式接收终端设备发送的信息。上述终端可以包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机。上述信息可以是各种类型的信息，可以包括但不限于影视信息、指令信息、图像信息、音频信息、上述终端设备的运动轨迹信息。

在本实施例中，上述第一生成单元602根据上述第一接收单元601接收的信息、第一特效信息生成具有特殊效果的三维影像信息。其中，上述第一特效信息可以包括但不限于以下至少一项：声音信息、灯光信息、背景图片信息、动画信息。

在本实施例的一些可选的实现方式中，上述交互装置600可以通过语音与用户交互，保存用户设置的第一特效信息。用户也可以在上述终端的第一特效信息设置页面设置第一特效信息，然后，将上述第一特效信息发送至虚拟现实设备，最后，上述交互装置600接收并保存上述第一特效信息。

在本实施例的一些可选的实现方式中，上述交互装置600也可以根据接收的信息确定该信息所属的虚拟场景；然后，从预置的特效信息列表中选取与上述虚拟场景匹配的特效信息作为第一特效信息。其中，上述特效信息列表可以包括但不限于：表征怀旧的特效信息、表征浪漫的特效信息、表征恐怖的特效信息。

在本实施例的一些可选的实现方式中，上述交互装置600还可以包括：指令接收单元(图6未示出)配置用于接收上述终端发送的指令；指令执行单元(图6未示出)配置用于执行上述指令。上述指令接收单元可以监听上述终端的指令传输请求，响应于监听到该指令传输请求，则接收上述终端发送的指令。其中，上述指令可以是指示播放暂停的指令、指示放大上述虚拟现实设备投放的虚拟物体的指令、指示旋转上述虚拟现实设备投放的虚拟物体的指令。上述指令执行单元执行上述接收的指令。

在本实施例的一些可选的实现方式中，交互装置600还可以包括：建立连接单元(图6未示出)配置用于基于Wi-Fi Direct标准与上述终端预先建立连接。上述虚拟现实设备与上述终端可以采用RTSP交互消息以建立连接。

在本实施例中，上述第一生成单元602可以根据接收的不同信息生成具有不同特效的三维影像信息，增加了真实性和趣味性，提高了用户体验。

进一步参考图7，作为对上述各图所示方法的实现，本申请提供了一种虚拟现实设备与终端的交互装置的又一个实施例，该装置实施例与图4所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。

如图7所示，本实施例所述的虚拟现实设备与终端的交互装置700包括：第一接收单元701、第一生成单元702、第二接收单元703、第二生成单元704。其中，第一接收单元701配置用于接收终端发送的信息；第一生成单元702配置用于根据上述信息和第一特效信息生成具有特效的三维影像信息，第二接收单元701配置用于接收终端发送的上述终端的运动轨迹信息；第二生成单元702配置用于根据上述运动轨迹信息、预设的上述终端对应的虚拟物体的信息、预设的第二特效信息，生成具有特效的上述虚拟物体的三维动画信息。

在本实施例中，虚拟现实设备与终端的交互装置700的第一接收单元701与虚拟现实设备与终端的交互装置600的第一接收单元601功能一样，在此不再赘述。

在本实施例中，虚拟现实设备与终端的交互装置700的第一生成单元702与虚拟现实设备与终端的交互装置600的第一生成单元602功能一样，在此不再赘述。

在本实施例中，虚拟现实设备与终端的交互装置700的第二接收单元703可以通过无线连接的方式或者有线连接的方式接收上述终端发送的上述终端的运动轨迹信息。其中，上述运动轨迹信息是表征上述终端在立体空间中的运动轨迹。上述终端可以通过安装在上述终端的三轴加速度计、三轴陀螺仪等传感器实时采集上述终端的运动轨迹信息。

在本实施例中，第二生成单元704可以支持用户从预设的虚拟物体列表中选择一个虚拟物体作为上述终端对应的虚拟物体。并获取该虚拟物体的信息。其中，上述信息可以包括虚拟物体的唯一标识、形状信息等。第二生成单元704还可以支持用户为上述终端对应的虚拟物体选择第二特效信息。上述第二特效信息可以包括但不限于以下至少一项：声音信息、图像信息、背景信息、动画信息。上述虚拟现实设备根据上述运动轨迹信息、上述终端对应的虚拟物体的信息、第二特效信息，生成具有特效的上述虚拟物体的三维动画信息。

在本实施例中，上述第二生成单元704根据终端的运动轨迹信息生成具有特效的虚拟物体的三维动画，从而实现了用户通过终端与虚拟现实中的虚拟环境进行互动，增强交互性和沉浸感。

进一步参考图8，作为对上述各图所示方法的实现，本申请提供了一种虚拟现实设备与终端的交互装置的又一个实施例，该装置实施例与图5所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。

如图8所示，本实施例所述的虚拟现实设备与终端的交互装置800包括：第一接收单元801、第一生成单元802、采集单元803、动作特征生成单元804、指令生成单元805、发送单元806。其中，第一接收单元801配置用于接收终端发送的信息；第一生成单元802配置用于根据上述信息和第一特效信息生成具有特效的三维影像信息，采集单元803配置用于通过安装在上述虚拟现实设备上的传感器采集穿戴上述虚拟现实设备的用户的影像信息和肢体运动轨迹信息；动作特征生成单元804配置用于根据上述影像信息和上述肢体运动轨迹信息生成上述用户的动作特征信息；指令生成单元805配置用于根据上述动作特征信息生成指令；发送单元806配置用于发送上述指令至上述终端。

在本实施例中，虚拟现实设备与终端的交互装置800的第一接收单元801与虚拟现实设备与终端的交互装置600的第一接收单元601功能一样，在此不再赘述。

在本实施例中，虚拟现实设备与终端的交互装置800的第一生成单元802与虚拟现实设备与终端的交互装置600的第一生成单元602功能一样，在此不再赘述。

在本实施例中，虚拟现实设备与终端的交互装置800的采集单元803可以通过安装在上述虚拟现实设备上的摄像机、红外热像仪等传感器实时采集穿戴上述虚拟现实设备的用户的影像信息。上述采集单元803还可以通过安装在上述虚拟现实设备上的三轴加速度计、三轴陀螺仪等传感器实时采集上述用户的肢体运动轨迹信息，其中，上述肢体运动轨迹信息可以包括但不限于以下至少一项：头部运动轨迹信息、手臂运动轨迹信息。

在本实施例中，上述动作特征生成单元804可以采用卷积神经网络或深度置信网络(Deep Belief Network，DBN)从上述影像信息和上述肢体运动轨迹信息中识别上述用户的动作特征信息。作为示例，上述动作特征生成单元804可以采用深度置信网络识别用户的动作特征信息。其中，上述深度置信网络是经大量的含标签的样本训练过的网络。上述动作特征生成单元804可以根据用户的影像信息、用户的肢体运动轨迹信息与标签的联合分布，选取概率值最大的标签，其中，上述概率值最大的标签对应的动作特征信息是上述用户的动作特征信息。

在本实施例中，上述指令生成单元805可以从预设的动作特征信息列表中检索是否存在与上述动作特征生成单元804中生成的动作特征信息相匹配的动作特征信息。响应于上述动作特征信息列表中存在与动作特征生成单元804中得到的动作特征信息相匹配的动作特征信息，则根据该动作特征信息生成指令。

在本实施例中，基于上述指令生成单元805生成指令，上述发送单元804通过无线连接的方式或有线连接的发送上述指令至上述终端。上述终端接收上述指令，然后执行上述指令。

在本实施例中，上述动作特征生成单元804根据用户的影像信息和肢体运动轨迹信息生成上述用户的动作特征信息，然后，上述指令生成单元805根据上述用户的动作特征信息生成指令信息，并发送上述指令至终端，实现了用户通过肢体动作控制终端，控制操作更人性化。

下面参考图9，其示出了适于用来实现本申请实施例的终端设备的计算机系统900的结构示意图，该终端设备与图1所示的监控终端相对应，该终端设备可以是各种类型的可穿戴设备。

如图9所示，终端设备900包括中央处理单元(CPU)901、存储器902、输入单元903、输出单元904、通信单元905和总线906，其中，CPU 901、存储器902、输入单元903、输出单元904以及通信单元905通过总线906彼此相连。在此，根据本申请的方法可以被实现为计算机程序，并且存储在存储器902中。终端设备900中的CPU 901通过调用存储器902中存储的上述计算机程序，来具体实现本申请的方法中限定的视图显示功能。

在一些实现方式中，输入单元903可以是语音接收单元，输出单元904可以是显示屏、扬声器等设备，通信单元905可以是与其他设备进行通信的设备。由此，CPU 901可以调用上述计算机程序生成具有特效的三维影像信息，可以控制输出单元904输出上述具有特效的三维影像信息。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，所述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括第一接收单元、第一生成单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，第一接收单元还可以被描述为“接收终端发送的信息的单元”。

作为另一方面，本申请还提供了一种非易失性计算机存储介质，该非易失性计算机存储介质可以是上述实施例中所述装置中所包含的非易失性计算机存储介质；也可以是单独存在，未装配入终端中的非易失性计算机存储介质。上述非易失性计算机存储介质存储有一个或者多个程序，当所述一个或者多个程序被一个设备执行时，使得所述设备：接收终端发送的信息；根据所述信息和第一特效信息生成具有特效的三维影像信息，其中，所述第一特效信息是预先设置的特效信息或根据所述信息从预置的特效信息列表中选取的特效信息。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离所述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。