用于内容项目的门户视图的制作方法

本公开一般涉及显示虚拟内容的电子设备，并且特别涉及在物理环境中提供虚拟内容的视图的系统、方法和设备。

背景技术：

1、扩展现实(xr)环境提供了以各种方式组合真实内容和虚拟内容的视图。例如，xr环境可以包括以下这样的视图，其包括与在真实物理环境内观看的二维(2d)照片相对应的虚拟内容项目。现有系统和技术可能无法以充分区分虚拟内容与周围物理环境的方式显示这样的虚拟内容。例如，可以显示2d照片，使得其边缘不易与周围物理环境区分开，或者使得虚拟内容的部分看起来延伸穿过物理环境的边界/墙壁。需要改进的技术，以用于为xr环境的视图提供物理环境内的虚拟2d照片。

技术实现思路

1、本文中公开的各种具体实施包括提供xr环境的视图的设备、系统和方法，该xr环境包括具有观看门户(viewing portal)的物理环境，用于观看被定位在观看门户后面一定距离处的添加的虚拟内容项目。例如，全景照片可以被纹理化到虚拟曲面上，该虚拟曲面在观看门户后面的经计算的距离(诸如10米)处。在一些具体实施中，将内容项目放置在观看门户后面可以提供期望的外观，例如，更好地将观看门户边缘处的内容项目与物理环境区分开。在一些具体实施中，可以同时呈现不同内容项目的多个观看门户，并且选择内容项目中的一个内容项目可以触发提供针对所选的内容项目的扩展的观看门户。另选地，多个观看门户可以显示相同的内容项目，例如，以使得能够比较应用于相同内容项目的不同成像效果。

2、一般而言，本说明书中描述的主题的一个创新方面可以体现在包括以下动作的方法中：在与环境相对应的3d坐标系内确定用于观看门户的第一位置；以及在3d坐标系内确定用于内容项目的第二位置，其中第二位置与观看门户的前表面相对。然后，在3d坐标系内确定电子设备的视点(viewpoint)。在一些具体实施中，标识出从视点通过观看门户可见的内容项目的一部分，其中基于第一位置、第二位置和视点来标识该部分。然后，提供环境中的内容项目的所标识的部分的视图。

技术特征：

1.一种方法，所述方法包括：

2.根据权利要求1所述的方法，其中，所述内容项目包括深度分割图像、二维(2d)照片或全景照片。

3.根据权利要求1至2中任一项所述的方法，其中，所述第二位置独立于所述第一位置，并且被选择以向所述内容项目提供深度的外观。

4.根据权利要求1至3中任一项所述的方法，所述方法还包括：在不修改所述内容项目的情况下，扩展、拉伸或动画化所述观看门户。

5.根据权利要求1至4中任一项所述的方法，其中，所述表面对象的所标识的部分随着所述电子设备的视点在所述环境中移动而改变。

6.根据权利要求1至5中任一项所述的方法，其中，所述观看门户的尺寸小于所述环境并且所述表面对象的所标识的部分不与所述环境的封闭表面相交。

7.根据权利要求1至6中任一项所述的方法，其中，所述第二位置是使用来自创建过所述内容项目的电子设备的传感器数据来确定的。

8.根据权利要求1至7中任一项所述的方法，其中，所述观看门户的尺寸或宽高比是基于当观看所述表面对象时正在执行的应用的参数或所述内容项目的特性来确定的。

9.根据权利要求1至8中任一项所述的方法，其中，所述第二位置是基于所述内容项目来确定的。

10.根据权利要求1至9中任一项所述的方法，所述方法还包括：将与所述表面对象上的所述内容项目相对应的图像的水平线与所述环境的水平线对准。

11.根据权利要求1至10中任一项所述的方法，其中，与所述表面对象上的所述内容项目相对应的所述图像的显示尺寸基于所述内容项目中的描绘的原始尺寸。

12.根据权利要求1至11中任一项所述的方法，所述方法还包括：

13.根据权利要求1至11中任一项所述的方法，所述方法还包括：

14.根据权利要求1至11中任一项所述的方法，其中，所述内容项目包括具有第一深度的第一部分和具有第二较大深度的第二部分，所述方法还包括：

15.根据权利要求1至11中任一项所述的方法，所述方法还包括：

16.根据权利要求1至15中任一项所述的方法，其中，所述观看门户使用所述观看门户的边缘将所述表面对象与所述环境区分开。

17.根据权利要求1至16中任一项所述的方法，其中，所述内容项目是全景照片，并且其中所述表面对象包括在所述观看门户后面的一定距离处的虚拟曲面。

18.根据权利要求1至17中任一项所述的方法，其中，所述环境是物理环境或3d虚拟环境。

19.根据权利要求1至18中任一项所述的方法，其中，所述电子设备是头戴式设备。

20.根据权利要求1至19中任一项所述的方法，其中，与所述内容项目相对应的图像包括与所述内容项目相对应的2d图像。

21.根据权利要求1至20中任一项所述的方法，其中，所述表面对象包括圆柱形壳体的一部分，并且其中所述圆柱形壳体的内表面用与所述内容项目相对应的图像来纹理化。

22.根据权利要求21所述的方法，其中，所述圆柱形壳体以所述第一位置为中心。

23.一种系统，所述系统包括：

24.根据权利要求23所述的系统，其中，所述内容项目包括深度分割图像、二维(2d)照片或全景照片。

25.根据权利要求23至24中任一项所述的系统，其中，所述第二位置独立于所述第一位置，并且被选择以向所述内容项目提供深度的外观。

26.根据权利要求23至25中任一项所述的系统，所述系统还包括：在不修改所述内容项目的情况下，扩展、拉伸或动画化所述观看门户。

27.根据权利要求23至26中任一项所述的系统，其中，所述表面对象的所标识的部分随着所述电子设备的视点在所述环境中移动而改变。

28.根据权利要求23至27中任一项所述的系统，其中，所述观看门户的尺寸小于所述环境，并且所述表面对象的所标识的部分不与所述环境的封闭表面相交。

29.根据权利要求23至28中任一项所述的系统，其中，所述第二位置是使用来自创建过所述内容项目的电子设备的传感器数据来确定的。

30.根据权利要求23至29中任一项所述的系统，其中，所述观看门户的尺寸或宽高比是基于当观看所述表面对象时正在执行的应用的参数或所述内容项目的特性来确定的。

31.根据权利要求23至30中任一项所述的系统，其中，所述第二位置是基于所述内容项目来确定的。

32.根据权利要求23至31中任一项所述的系统，所述系统还包括：将与所述表面对象上的内容项目相对应的图像的水平线与所述环境的水平线对准。

33.根据权利要求23至31中任一项所述的系统，其中，与所述表面对象上的内容项目相对应的图像的显示尺寸基于所述内容项目中的描绘的原始尺寸。

34.根据权利要求23至32中任一项所述的系统，所述系统还包括：

35.根据权利要求23至33中任一项所述的系统，所述系统还包括：

36.根据权利要求23至33中任一项所述的系统，其中，所述内容项目包括具有第一深度的第一部分和具有第二较大深度的第二部分，所述操作还包括：

37.根据权利要求23至33中任一项所述的系统，所述系统还包括：

38.根据权利要求23至37中任一项所述的系统，其中，所述观看门户使用所述观看门户的边缘将所述表面对象与所述环境区分开。

39.根据权利要求23至38中任一项所述的系统，其中，所述内容项目是全景照片，并且其中所述表面对象包括在所述观看门户后面的一定距离处的虚拟曲面。

40.根据权利要求23至39中任一项所述的系统，其中，所述环境是物理环境或3d虚拟环境。

41.根据权利要求23至40中任一项所述的系统，其中，所述电子设备是头戴式设备。

42.根据权利要求23至41中任一项所述的系统，其中，与所述内容项目相对应的图像包括与所述内容项目相对应的2d图像。

43.根据权利要求23至42中任一项所述的系统，其中，所述表面对象包括圆柱形壳体的一部分，并且其中所述圆柱形壳体的内表面用与所述内容项目相对应的图像来纹理化。

44.根据权利要求43所述的系统，其中，所述圆柱形壳体以所述第一位置为中心。

45.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储能经由一个或多个处理器运行以执行以下操作的程序指令，所述操作包括：

46.根据权利要求45所述的系统，其中，所述内容项目包括深度分割图像、二维(2d)照片或全景照片。

47.根据权利要求45至46中任一项所述的系统，其中，所述第二位置独立于所述第一位置，并且被选择以向所述内容项目提供深度的外观。

48.根据权利要求45至47中任一项所述的系统，所述系统还包括：在不修改所述内容项目的情况下，扩展、拉伸或动画化所述观看门户。

49.根据权利要求45至48中任一项所述的系统，其中，所述表面对象的所标识的部分随着所述电子设备的视点在所述环境中移动而改变。

50.根据权利要求45至49中任一项所述的系统，其中，所述观看门户的尺寸小于所述环境，并且所述表面对象的所标识的部分不与所述环境的封闭表面相交。

51.根据权利要求45至50中任一项所述的系统，其中，所述第二位置是使用来自创建过所述内容项目的电子设备的传感器数据来确定的。

52.根据权利要求45至51中任一项所述的系统，其中，所述观看门户的尺寸或宽高比是基于当观看所述表面对象时正在执行的应用的参数或所述内容项目的特性来确定的。

53.根据权利要求45至52中任一项所述的系统，其中，所述第二位置是基于所述内容项目来确定的。

54.根据权利要求45至53中任一项所述的系统，所述系统还包括：将与所述表面对象上的内容项目相对应的图像的水平线与所述环境的水平线对准。

55.根据权利要求45至54中任一项所述的系统，其中，与所述表面对象上的内容项目相对应的图像的显示尺寸基于所述内容项目中的描绘的原始尺寸。

56.根据权利要求45至55中任一项所述的系统，所述系统还包括：

57.根据权利要求45至55中任一项所述的系统，所述系统还包括：

58.根据权利要求45至55中任一项所述的系统，其中，所述内容项目包括具有第一深度的第一部分和具有第二较大深度的第二部分，所述操作还包括：

59.根据权利要求45至55中任一项所述的系统，所述系统还包括：

60.根据权利要求45至59中任一项所述的系统，其中，所述观看门户使用所述观看门户的边缘将所述表面对象与所述环境区分开。

61.根据权利要求45至60中任一项所述的系统，其中，所述内容项目是全景照片，并且其中所述表面对象包括在所述观看门户后面的一定距离处的虚拟曲面。

62.根据权利要求45至61中任一项所述的系统，其中，所述环境是物理环境或3d虚拟环境。

63.根据权利要求45至62中任一项所述的系统，其中，所述电子设备是头戴式设备。

64.根据权利要求45至63中任一项所述的系统，其中，与所述内容项目相对应的图像包括与所述内容项目相对应的2d图像。

65.根据权利要求45至64中任一项所述的系统，其中，所述表面对象包括圆柱形壳体的一部分，并且其中所述圆柱形壳体的内表面用与所述内容项目相对应的图像来纹理化。

66.根据权利要求65所述的系统，其中，所述圆柱形壳体以所述第一位置为中心。

技术总结
本文中公开的各种具体实施包括提供XR环境的设备、系统和方法，该XR环境描绘了具有观看门户的环境，该观看门户用于观看被定位在该观看门户后面的添加的内容项目。一些具体实施在与环境相对应的3D坐标系内确定用于观看门户的第一位置；在3D坐标系内确定用于内容项目的第二位置，其中第二位置与观看门户的前表面相对；以及在3D坐标系内确定电子设备的视点。在一些具体实施中，标识出从视点通过观看门户可见的内容项目的部分，其中基于第一位置、第二位置和视点来标识该部分。然后，在环境中提供内容项目的所标识的部分的视图。

技术研发人员：T·T·崇,A·达维格,T·R·皮斯
受保护的技术使用者：苹果公司
技术研发日：
技术公布日：2024/5/10