数据处理方法、装置、电子设备、头戴设备及介质与流程

本申请属于混合现实，尤其涉及一种数据处理方法、装置、电子设备、头戴设备及介质。

背景技术：

1、虚拟现实技术vr囊括计算机、电子信息、仿真技术，其基本实现方式是计算机模拟虚拟环境从而给人以环境沉浸感；混合现实技术mr是虚拟现实技术的进一步发展，该技术通过在现实场景呈现虚拟场景信息，在现实世界、虚拟世界和用户之间搭起一交互反馈的信息回路，以增强用户体验的真实感。目前主流的mr头戴式一体机在低光环境下为用户提供的显示内容的质量较差；并且通过在mr头戴式一体机上设置多个黑白相机采集环境图像以实现透视功能，用户体验较差。

技术实现思路

1、本申请实施例提供一种与现有技术不同的实现方案，以解决相关技术中，混合现实技术的画面显示方法用户体验较差的技术问题。

2、第一方面，本申请提供一种数据处理方法，适用于头戴设备，包括：

3、通过多个第一相机获取第一黑白图像；

4、通过目标相机获取与所述第一黑白图像对应的彩色图像；

5、获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；

6、根据所述第一黑白图像、所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；

7、获取所述第一黑白图像对应的虚拟现实画面信息；

8、根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；

9、其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集。

10、第二方面，本申请提供一种头戴设备，包括：数据处理单元与壳体，所述壳体的外侧设置有多个第一相机与目标相机，所述壳体的外侧为用户佩戴所述头戴设备时朝向用户前方的一侧；

11、所述多个第一相机两两对称设置于所述壳体的中心轴两侧；

12、所述目标相机设置于所述中心轴上，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集；

13、所述数据处理单元，用于：通过多个第一相机获取第一黑白图像；通过目标相机获取与所述第一黑白图像对应的彩色图像；获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；根据所述第一黑白图像、所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；获取所述第一黑白图像对应的虚拟现实画面信息；根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容。

14、第三方面，本申请提供一种数据处理装置，其特征在于，适用于头戴设备，包括：

15、第一获取模块，用于通过多个第一相机获取第一黑白图像；

16、第二获取模块，用于通过目标相机获取与所述第一黑白图像对应的彩色图像；

17、第三获取模块，用于获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；

18、第一确定模块，用于根据所述第一黑白图像、所述彩色图像，以及所述多第一位置关系信息确定对应的第一现实环境图像；

19、第四获取模块，用于获取所述第一黑白图像对应的虚拟现实画面信息；

20、第二确定模块，用于根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；

21、其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集。

22、第四方面，本申请提供一种电子设备，包括：

23、处理器；以及

24、存储器，用于存储所述处理器的可执行指令；

25、其中，所述处理器配置为经由执行所述可执行指令来执行第一方面或第一方面各可能的实施方式中的任一方法。

26、第五方面，本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中的任一方法。

27、第六方面，本申请实施例提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中的任一方法。

28、本申请通过通过多个第一相机获取第一黑白图像；通过目标相机获取与所述第一黑白图像对应的彩色图像；获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；根据所述第一黑白图像、所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；获取所述第一黑白图像对应的虚拟现实画面信息；根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集的方案，可结合设置于头戴设备的彩色相机对黑白环境图像进行处理，进而将虚拟场景信息与彩色现实场景信息结合展示，提高了用户体验。

技术特征：

1.一种数据处理方法，其特征在于，适用于头戴设备，包括：

2.根据权利要求1所述的方法，其特征在于，根据所述第一黑白图像、所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像包括：

3.根据权利要求2所述的方法，其特征在于，基于所述第三点云信息确定所述第一现实环境图像包括：

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

5.根据权利要求4所述的方法，其特征在于，所述第二相机的个数为多个，所述方法还包括：

6.根据权利要求4所述的方法，其特征在于，所述方法还包括：

7.一种头戴设备，其特征在于，包括：数据处理单元与壳体，所述壳体的外侧设置有多个第一相机与目标相机，所述壳体的外侧为用户佩戴所述头戴设备时朝向用户前方的一侧；

8.根据权利要求7所述的头戴设备，其特征在于，所述壳体的外侧还设置有多个第二相机，所述多个第二相机两两对称设置于所述壳体的中心轴两侧；

9.根据权利要求8所述的头戴设备，其特征在于，所述壳体的外侧还设置有补光装置，所述补光装置设置于所述中心轴上；

10.根据权利要求7所述的头戴设备，其特征在于，所述壳体的内侧设置有多个第三相机，所述壳体的内侧为用户佩戴所述头戴设备时朝向用户后方的一侧；

11.一种数据处理装置，其特征在于，适用于头戴设备，包括：

12.一种电子设备，其特征在于，包括：

13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-6任一项所述的方法。

技术总结
本申请公开了一种数据处理方法、装置、电子设备、头戴设备及介质，方法适用于头戴设备，包括：通过多个第一相机获取第一黑白图像；通过目标相机获取与第一黑白图像对应的彩色图像；获取多个第一相机中的任一第一相机与目标相机之间的第一位置关系信息；根据第一黑白图像、彩色图像，以及第一位置关系信息确定对应的第一现实环境图像；获取第一黑白图像对应的虚拟现实画面信息；根据第一现实环境图像与虚拟现实画面信息确定头戴设备的显示内容；目标相机的视场范围不小于多个第一相机对应的多个视场范围的交集。本方案可结合设置于头戴设备的彩色相机对黑白环境图像进行处理，进而将虚拟场景信息与彩色现实场景信息结合展示，提高了用户体验。

技术研发人员：吴涛,周宏伟
受保护的技术使用者：北京字跳网络技术有限公司
技术研发日：
技术公布日：2024/1/15