虚拟现实系统及适用于虚拟现实系统的物件侦测方法与流程

本发明有关于虚拟现实统，特别是有关于一种适用于虚拟现实系统的物件侦测方法。

背景技术：

1、一般而言，使用者需要戴着头戴显示装置，以体验虚拟现实中的场景。然而，在戴着头戴显示装置的时候，可能使用者已经在游戏的体验中，分不清楚自己在空间中的面向或实体位置。若使用者需要找特定的实体物件，例如手机、平板、球鞋等，则需要将头戴显示装置脱下，在进行寻找，此举十分不便。

2、因此，如何让使用者在配戴头戴显示装置的情况下，不须脱下头戴显示装置也能拿到实体物件，已成为本领域待解决的问题之一。

技术实现思路

1、本发明实施例提供一种虚拟现实系统，虚拟现实系统包括一头戴显示装置(head-mounted display，hmd)以及一移动定位器(tracker)。头戴显示装置包含多个第一摄像机、一储存装置以及一处理器。第一摄像机用以拍摄多张第一影像。处理器用以存取所述储存装置所储存的一物件侦测模型(object detector)，以执行所述物件侦测模模型，其中所述处理器执行：将该些第一影像与该些第一影像各自的一第一地图位置数据(map data)输入到所述物件侦测模型。移动定位器包含多个第二摄像机。第二摄像机用以拍摄多张第二影像。其中，所述移动定位器将该些第二影像各自的一第二地图位置数据传送到所述物件侦测模型，所述物件侦测模型依据该些第一影像、该些第一地图位置数据、该些第二影像及该些第二地图位置数据更新一环境覆盖影像，并搜寻该些第一影像及该些第二影像中的一物件位置。

2、本发明实施例提供一种物件侦测方法，适用于虚拟现实系统。物件侦测方法包括通过一头戴显示装置(head-mounted display，hmd)的多个第一摄像机，以拍摄多张第一影像。通过所述头戴显示装置的一处理器执行：将该些第一影像与该些第一影像各自的一第一地图位置数据(map data)输入到一物件侦测模型。通过一移动定位器(tracker)中的多个第二摄像机，以拍摄多张第二影像。其中，所述移动定位器将该些第二影像各自的一第二地图位置数据传送到所述物件侦测模型，所述物件侦测模型依据该些第一影像、该些第一地图位置数据、该些第二影像及该些第二地图位置数据更新一环境覆盖影像，并搜寻该些第一影像及该些第二影像中的一物件位置。

3、综上所述，本发明实施例提供一种虚拟现实系统及适用于虚拟现实系统的物件侦测方法，通过物件侦测模型，可以从头戴显示装置及移动定位器所拍摄的影像中找到物件位置，让使用者在配戴头戴显示装置的情况下，通过头戴显示装置指示出环境中实体物件的位置，由此达到让使用者不须脱下头戴显示装置，也能拿到实体物件，使得虚拟现实系统达到提供使用者更方便且更佳的体验的功效。

技术特征：

1.一种虚拟现实系统，包括：

2.如权利要求1所述的虚拟现实系统，其中，该些第一影像中包含一特定hmd影像，所述特定hmd影像覆盖一特定hmd视野范围，所述特定hmd视野范围中包含多个特征点。

3.如权利要求2所述的虚拟现实系统，其中所述物件侦测模型侦测在所述特定hmd视野范围中是否包含所述物件影像，响应于所述物件侦测模型侦测在所述特定hmd视野范围中包含所述物件影像，则所述物件侦测模型从所述特定hmd视野范围中，框选出所述物件影像的一物件视野范围；

4.如权利要求3所述的虚拟现实系统，其中所述物件视野范围与所述特定hmd视野范围各自为从同一个该些第一摄像机中的一特定hmd摄像机所投射出的一锥状三维空间影像。

5.如权利要求3所述的虚拟现实系统，其中所述物件侦测模型依据所述物件视野范围中的多个特定特征点，以设置一初始三维物件位置。

6.如权利要求5所述的虚拟现实系统，其中该些第二影像中包含一特定移动定位器影像，所述特定移动定位器影像覆盖一特定移动定位器视野范围：

7.如权利要求6所述的虚拟现实系统，其中所述物件侦测模型依据所述三维交集范围中的多个目标特征点，以设置所述物件位置。

8.一种物件侦测方法，适用于虚拟现实系统，包括：

9.如权利要求8所述的物件侦测方法，其中，该些第一影像中包含一特定hmd影像，所述特定hmd影像覆盖一特定hmd视野范围，所述特定hmd视野范围中包含多个特征点。

10.如权利要求9所述的物件侦测方法，更包含：

11.如权利要求10所述的物件侦测方法，其中所述物件视野范围与所述特定hmd视野范围各自为从同一个该些第一摄像机中的一特定hmd摄像机所投射出的一锥状三维空间影像。

12.如权利要求10所述的物件侦测方法，其中所述物件侦测模型依据所述物件视野范围中的多个特定特征点，以设置一初始三维物件位置。

13.如权利要求12所述的物件侦测方法，其中该些第二影像中包含一特定移动定位器影像，所述特定移动定位器影像覆盖一特定移动定位器视野范围：

14.如权利要求13所述的物件侦测方法，更包含：

技术总结
一种物件侦测方法，适用于虚拟现实系统，物件侦测方法包括通过一头戴显示装置(Head‑mounted display，HMD)的多个第一摄像机，以拍摄多张第一影像。通过一移动定位器(tracker)中的多个第二摄像机，以拍摄多张第二影像。其中，一物件侦测模型搜寻此些第一影像及此些第二影像中的一物件位置。

技术研发人员：林俊仲,黄群凯,谢恒立,张运容
受保护的技术使用者：宏达国际电子股份有限公司
技术研发日：
技术公布日：2024/2/1