使用稀疏体积数据的操作的制作方法

本公开总体上涉及计算机系统领域，并且更具体地，涉及计算机视觉和增强或混合现实系统。

背景技术：

1、随着诸如来自magicleaptm、microsofttm hololenstm、oculustm rifttm的那些增强现实(ar)、虚拟现实(vr)和混合现实(mr)产品以及诸如来自valvetm和htctm的系统等其他vr系统的出现，计算机视觉和图形的世界迅速融合。这种系统中的现有方法是使用并行运行的分开的图形处理单元(gpu)和计算机视觉子系统。这些并行系统可以由与在处理器阵列和/或可编程硬件加速器阵列上运行的软件中实施的计算机视觉流水线并行的预先存在的gpu来组装。

技术实现思路

技术特征：

1.一种装置，包括：

2.如权利要求1所述的装置，其中，针对所述多个体素的值进一步指示与对应的体素相关联的表面颜色。

3.如权利要求1所述的装置，其中，所述机器学习模型包括神经网络。

4.如权利要求1所述的装置，进一步包括训练数据生成器，所述训练数据生成器用于使用3d图像来生成用于另一机器学习模型的训练数据集的部分。

5.如权利要求1所述的装置，其中，3d图像用于被包括在增强现实呈现中。

6.如权利要求1所述的装置，其中，3d图像用于被包括在虚拟现实呈现中。

7.如权利要求6所述的装置，进一步包括可穿戴的头戴式装备，其中所述虚拟现实呈现用于被呈现在所述可穿戴的头戴式装备的显示器上。

8.如权利要求1所述的装置，其中，所述第一条目和所述数个第二条目包括所述稀疏体素数据结构内的连续条目。

9.如权利要求1所述的装置，其中，所述几何结构包括所述特定体积内的非空的空间。

10.至少一种非暂态机器可读存储介质，具有存储于其上的指令，所述指令能由机器执行以使所述机器用于：

11.如权利要求10所述的存储介质，其中，针对所述多个体素的值进一步指示对应的体素内的几何结构的物理特性。

12.如权利要求10所述的存储介质，其中，所述物理特性包括颜色。

13.如权利要求10所述的存储介质，其中，所述物理特性包括材料特性。

14.如权利要求10所述的存储介质，其中，所述输入包括表示针对所述多个体素的子集的所述多个细节层次的值。

15.一种系统，包括：

16.如权利要求15所述的系统，进一步包括神经网络加速器硬件，所述神经网络加速器硬件用于实现所述机器学习模型。

17.如权利要求15所述的系统，进一步包括一个或多个传感器，所述一个或多个传感器用于检测所述特定体积内的深度并生成所述稀疏体素数据结构的值。

18.如权利要求15所述的系统，进一步包括头戴式装备，所述头戴式装备用于显示虚拟现实内容，其中，所述虚拟现实内容包括所述3d对象。

19.如权利要求15所述的系统，进一步包括头戴式装备，所述头戴式装备用于显示增强现实内容，其中，所述增强现实内容包括所述3d对象。

20.如权利要求15所述的系统，其中，所述第一条目和所述数个第二条目在所述存储器中作为所述稀疏体素数据结构内的连续条目被存储。

21.如权利要求15所述的系统，其中，所述几何结构包括所述特定体积内的非空的空间。

22.一种方法，包括：

技术总结
本申请公开了使用稀疏体积数据的操作。体积数据结构对特定体积进行建模从而以多个细节层次表示该特定体积。体积数据结构中的第一条目包括以第一细节层次表示体素的第一组位，第一细节层次包括体积数据结构中的最低细节层次，第一组位的值指示体素中的相应的一个体素是否至少部分地由对应的几何结构占据，其中，体积数据结构进一步包括以高于所述第一细节层次的第二细节层次表示体素的多个第二条目，处于第二细节层次的体素表示由处于第一细节层次的体素表示的体积的子体积，并且第二条目的数量与第一组位中具有指示相应的体素体积被占据的值的位的数量相对应。

技术研发人员：D·M·莫洛尼,J·D·拜恩
受保护的技术使用者：莫维迪厄斯有限公司
技术研发日：
技术公布日：2024/3/27