技术特征：
1.一种可穿戴显示系统，所述可穿戴显示系统包括：头戴式装置，包括一个具有全局快门的第一相机和一个具有滚动快门的第二相机，所述第一相机和所述第二相机被定位为提供中心视场的重叠视图；以及处理器，其被可操作地耦合到所述第一相机和所述第二相机，并被配置为：执行补偿例程以针对滚动快门图像失真来调整使用所述第二相机获取的图像；以及部分地使用根据使用所述第一相机获取的图像和经调整的图像立体地确定的深度信息来创建世界模型。2.根据权利要求1所述的可穿戴显示系统，其中，所述第一相机和所述第二相机不对称地向内成角度。3.根据权利要求2所述的可穿戴显示系统，其中，所述第一相机的视场大于所述第二相机的视场。4.根据权利要求2所述的可穿戴显示系统，其中，所述第一相机向内成20度与40度之间的角度，并且所述第二相机向内成1度与20度之间的角度。5.根据权利要求1所述的可穿戴显示系统，其中，所述第一相机具有每像素1弧分到5弧分之间的角像素分辨率。6.根据权利要求1所述的可穿戴显示系统，其中，所述处理器还被配置为执行尺寸缩小例程以调整使用所述第二相机获取的图像。7.根据权利要求6所述的可穿戴显示系统，其中，所述尺寸缩小例程包括通过对由所述第二相机获取的图像中的像素进行分箱来生成尺寸缩小的图像。8.根据权利要求1所述的可穿戴显示系统，其中：所述补偿例程包括：将使用所述第一相机获取的第一图像与使用所述第二相机获取的第二图像进行比较以检测所述第二图像的至少一部分的偏斜；以及调整所述第二图像的所述至少一部分以补偿所检测到的偏斜。9.根据权利要求8所述的可穿戴显示系统，其中：将使用所述第一相机获取的第一图像与使用所述第二相机获取的第二图像进行比较包括：在由所述第一相机获取的第一图像与由所述第二相机获取的第二图像之间执行逐行比较。10.根据权利要求1所述的可穿戴显示系统，其中：所述处理器还被配置为：基于功率节约标准或世界模型完整性标准中的至少一者，禁用所述第二相机或调制所述第二相机的帧速率。11.根据权利要求1所述的可穿戴显示系统，其中：所述第一相机或所述第二相机中的至少一个包括全光相机；以及所述处理器还被配置为：部分地使用由所述第一相机或所述第二相机中的所述至少一个获取的光场信息来创建世界模型。12.根据权利要求1所述的可穿戴显示系统，其中：所述第一相机包括全光相机；以及
所述处理器还被配置为：使用使用所述全光相机获取的深度信息来执行世界模型更新例程。13.根据权利要求1所述的可穿戴显示系统，其中，所述处理器被机械地耦合到所述头戴式装置。14.根据权利要求1所述的可穿戴显示系统，其中，所述头戴式装置包括被机械地耦合到所述处理器的显示设备。15.根据权利要求1所述的可穿戴显示系统，其中，本地数据处理模块包括所述处理器，所述本地数据处理模块通过通信链路被可操作地耦合到显示设备，并且其中，所述头戴式装置包括所述显示设备。16.一种使用可穿戴显示系统来创建世界模型的方法，所述可穿戴显示系统包括：头戴式装置，包括一个具有全局快门的第一相机和一个具有滚动快门的第二相机，所述第一相机和所述第二相机被定位为提供中心视场的重叠视图；以及处理器，被可操作地耦合到所述第一相机和所述第二相机；其中，所述方法包括使用所述处理器以：执行补偿例程以针对滚动快门图像失真来调整使用所述第二相机获取的图像；以及部分地使用根据使用所述第一相机获取的图像和经调整的图像立体地确定的深度信息来创建所述世界模型。17.一种可穿戴显示系统，所述可穿戴显示系统包括：头戴式装置，具有被定位为提供中心视场的重叠视图的灰度相机和彩色相机；以及处理器，被可操作地耦合到所述灰度相机和所述彩色相机，并被配置为：使用根据由所述灰度相机和所述彩色相机获取的图像立体地确定的第一深度信息来创建世界模型；以及使用所述灰度相机和所述世界模型来跟踪头部姿势。18.一种使用可穿戴显示系统跟踪头部姿势的方法，所述可穿戴显示系统包括：头戴式装置，具有被定位为提供中心视场的重叠视图的灰度相机和彩色相机；以及处理器，被可操作地耦合到所述灰度相机和所述彩色相机；其中，所述方法包括使用所述处理器以：使用根据由所述灰度相机和所述彩色相机获取的图像立体地确定的第一深度信息来创建世界模型；以及使用所述灰度相机和所述世界模型来跟踪头部姿势。19.一种可穿戴显示系统，所述可穿戴显示系统包括：框架；被机械地耦合到所述框架的第一相机和被机械地耦合到所述框架的第二相机，其中，所述第一相机和所述第二相机被定位为提供与所述第一相机和所述第二相机两者相关联的中心视场，并且其中，所述第一相机和所述第二相机中的至少一个包括全光相机；以及处理器，被可操作地耦合到所述第一相机和所述第二相机，并被配置为：确定对象是否在所述中心视场内；在所述对象在所述中心视场内时，确定所述对象是否满足深度标准；在被跟踪的对象在所述中心视场内并且不满足所述深度标准时，使用根据由所述第一
相机和所述第二相机获取的图像立体地确定的深度信息来跟踪所述对象；以及在被跟踪的对象在所述中心视场内并且满足所述深度标准时，使用根据由所述第一相机或所述第二相机中的一个相机获取的光场信息所确定的深度信息来跟踪所述对象。20.一种使用可穿戴显示系统跟踪对象的方法，所述可穿戴显示系统包括：框架；被机械地耦合到所述框架的第一相机和被机械地耦合到所述框架的第二相机，其中，所述第一相机和所述第二相机被定位为提供与所述第一相机和所述第二相机两者相关联的中心视场，并且其中，所述第一相机和所述第二相机中的至少一个相机包括全光相机；以及处理器，被可操作地耦合到所述第一相机和所述第二相机；其中，所述方法包括使用所述处理器以：确定对象是否在所述中心视场内；在所述对象在所述中心视场内时，确定所述对象是否满足深度标准；在被跟踪的对象在所述中心视场内并且不满足所述深度标准时，使用根据由所述第一相机和所述第二相机获取的图像立体地确定的深度信息来跟踪所述对象；以及在被跟踪的对象在所述中心视场内并且满足所述深度标准时，使用根据由所述第一相机或所述第二相机中的一个相机获取的光场信息所确定的深度信息来跟踪所述对象。21.一种可穿戴显示系统，所述可穿戴显示系统包括：框架；被机械地耦合到所述框架的两个相机，其中，所述两个相机包括：具有全局快门的第一相机，其具有第一视场；以及具有滚动快门的第二相机，其具有第二视场；其中，所述第一相机和所述第二相机被定位为提供：其中所述第一视场与所述第二视场重叠的中心视场；以及所述中心视场外部的外围视场；以及处理器，被可操作地耦合到所述第一相机和所述第二相机。
技术总结
公开了一种包括多个相机和处理器的可穿戴显示系统。可以布置灰度相机和彩色相机以提供与两个相机相关联的中心视场和与两个相机中的一个相机相关联的外围视场。两个相机中的一个或多个可以是全光相机。可穿戴显示系统可以使用至少一个全光相机获取光场信息，并使用第一光场信息和从灰度相机和彩色相机获取的图像立体地确定的第一深度信息来创建世界模型。可穿戴显示系统可以使用至少一个全光相机和世界模型来跟踪头部姿势。当对象满足深度标准时，可穿戴显示系统可以使用一个或两个全光相机跟踪中心视场和外围视场中的对象。相机跟踪中心视场和外围视场中的对象。相机跟踪中心视场和外围视场中的对象。
技术研发人员：M
受保护的技术使用者：奇跃公司
技术研发日：2020.02.07
技术公布日：2021/11/26