具有柔性框架的眼戴设备的几何形状建模的制作方法

本公开涉及用于计算机视觉的增强现实。更具体地，本公开涉及增强现实中具有柔性框架的眼戴设备的几何形状建模。

背景技术：

0、发明背景

1、近年来，由于基于cv的应用的强烈市场需求，计算机视觉(“cv”)技术迅速发展。cv技术的重要应用是在增强现实(“ar”)领域，它为用户在真实世界环境中使用计算机生成的视觉信息提供交互式体验。ar组合了真实世界数据和计算机生成的信息以创建其中可实现真实和虚拟世界的无缝叠加的合并环境。用户可使用单独的设备，诸如包括头盔、头饰、眼戴器等的可穿戴设备，以体验由ar系统提供的增强环境。眼戴设备诸如ar眼镜可用于各种应用中，诸如玩游戏、医疗保健、虚拟购物、虚拟旅游等。眼戴设备可被配置为提供高准确度、轻量级、良好的舒适度和足够的计算能力。对于ar眼镜和其他眼戴设备，各种传感器可被并入和/或集成在其中以方便地收集真实世界信息，诸如各种传感器的定位和定向。所收集的信息可通过接口或经由有线和/或无线网络被传输到ar系统的其他部件和/或设备，诸如移动设备和服务器。各种方法和算法可用于基于由传感器收集的数据来计算和估计传感器定位和定向。对于在ar系统中向用户渲染高质量的图像表示，准确并实时地了解这些传感器之间的空间关系是必要的。

技术实现思路

技术特征：

1.一种用于增强现实的实时眼戴设备几何形状建模系统，包括：

2.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述建模模块、所述渲染模块和所述跟踪模块中的至少两者被组合在组合模块中。

3.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述空间关系由所述眼戴设备的弯曲曲线来确定。

4.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述预先确定的几何形状包括显示器几何形状。

5.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述跟踪算法是扩展卡尔曼滤波器(ekf)驱动模块、基于优化的模块、机器学习驱动模块以及所述模块的任何组合中的一者。

6.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述第一传感器和所述第二传感器是imu(惯性测量单元)和相机中的一者。

7.根据权利要求1所述的用于增强现实的实时眼戴设备几何形状建模系统，其中所述显示器包括波导和投影仪。

8.一种用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，包括存储在其中的指令，所述指令当在处理器上执行时执行以下步骤：

9.根据权利要求8所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述估计、所述建模和所述渲染中的至少两者被组合在端到端学习中。

10.根据权利要求8所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述空间关系由所述眼戴设备的弯曲曲线来确定。

11.根据权利要求8所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述预先确定的几何形状包括显示器几何形状。

12.根据权利要求11所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述跟踪使用扩展卡尔曼滤波器(ekf)驱动模块、基于优化的模块、机器学习驱动模块以及所述模块的任何组合中的一者。

13.根据权利要求8所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述第一传感器和所述第二传感器是imu(惯性测量单元)和相机中的一者。

14.根据权利要求8所述的用于增强现实中的实时眼戴设备几何形状建模的非暂态计算机可读介质，其中所述显示器包括波导和投影仪。

15.一种用于增强现实的眼戴设备，包括：

16.根据权利要求15所述的用于增强现实的眼戴设备，其中所述增强现实系统包括：

17.根据权利要求16所述的用于增强现实的眼戴设备，其中所述建模模块、所述渲染模块和所述跟踪模块中的至少两者被组合在组合模块中。

18.根据权利要求16所述的用于增强现实的眼戴设备，其中所述空间关系由所述眼戴设备的弯曲曲线来确定。

19.根据权利要求16所述的用于增强现实的眼戴设备，其中所述预先确定的几何形状包括显示器几何形状。

20.根据权利要求15所述的用于增强现实的眼戴设备，其中

技术总结
本发明公开了一种用于增强现实(AR)的具有柔性框架的眼戴设备。该柔性框架上安装了至少两个传感器和显示器。当使用时，该眼戴设备的实时几何形状可能从工厂校准的几何形状发生变化，从而导致低质量的AR渲染。因此提供了建模模块以使用该至少两个传感器的传感器信息即时对该眼戴设备的该实时几何形状进行建模。然后将该建模的实时几何形状提供给渲染模块以向该用户准确地显示AR。

技术研发人员：克莱门斯·伯克尔鲍尔,乔治·哈梅施拉格·福内克,杰伦·霍尔,马蒂亚斯·卡拉格鲁伯,丹尼尔·瓦格纳
受保护的技术使用者：美国斯耐普公司
技术研发日：
技术公布日：2024/1/13