一种显示模组、成像控制方法及相关装置与流程

本技术实施例涉及光学，尤其涉及一种显示模组、成像控制方法及相关装置。

背景技术：

1、显示设备，比如虚拟现实(virtual reality，vr)设备，通过满足较大的视场角(angle of view，fov)和高分辨率来实现深度的沉浸感。目前采用的vr设备中观看的内容仅达到10-20角分辨率(points per degree，ppd)，无法满足人眼1’(60ppd)的分辨率极限，使得用户看到的图像存在纱窗效应。为了解决vr设备的纱窗效应，一方面，可以利用高分辨率的显示屏，但是为了达到vr设备对尺寸的需求，要采用硅基有机电激光显示(microorganic light-emitting diode，micro-oled)技术的显示屏，但是高分辨率的micro-oled成本较高。另一方面，可以通过分辨率增强技术间接提升显示屏的分辨率，但是目前没有一种可行的应用于显示设备的分辨率增强方案。

技术实现思路

1、本技术实施例提供一种显示模组、成像控制方法及相关装置，用以提供一种应用于vr设备的分辨率的增强方案。

2、第一方面，本技术实施例提供一种显示模组，包括显示组件、设置在显示组件的光路上的分辨率提升组件和显示光路组件，以及分别与显示组件和分辨率提升组件信号连接的控制组件。分辨率提升组件具体可以包括振镜和驱动组件，其中显示组件出射的图像可以经过振镜后入射至显示光路组件。显示组件，用于显示图像。显示光路组件，用于调整显示组件显示的每帧图像的显示位置。例如显示设备为可穿戴设备，显示光路组件可以调整显示组件显示的每帧图像成像到距离显示组件一定距离的虚像面上位置。控制组件，用于接收待显示图像，对待显示图像进行分解得到多帧图像，显示组件可以在控制组件的控制下分时显示多帧图像。振镜，用于在驱动组件的控制下发生旋转振动，使显示组件显示的多帧图像中的任一图像发生位移。

3、在一些实施例中，多帧图像可以是控制组件对待显示图像进行降采样得到的，多帧图像中每帧图像的分辨率小于待显示图像的分辨率。比如，控制组件将高分辨率的待显示图像拆分为多个低分辨率图像，低分辨率图像的分辨率一般与显示组件的物理分辨率相同，控制组件将多个低分辨率的图像分时发送给显示组件进行显示。

4、在一些实施例中，显示组件显示多帧图像中任一图像的时间可以与振镜使显示组件显示的多帧图像中任一图像发生位移的时间同步。

5、在本技术实施例提供的显示模组中，控制组件可以通过对高分辨率图像进行分解得到多帧低分辨率图像，然后可以分时通过显示组件显示低分辨率图像，并可以通过分时控制分辨率提升组件调整显示组件显示的每帧图像的位置，即分时显示多帧低分辨率图像，利用人眼的视觉暂留和视觉合成功能，多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像。

6、在一些实施例中，驱动组件具体可以为压电驱动组件或马达驱动组件等。马达驱动组件具体可以是超声马达或者伺服马达等等。控制组件可以控制驱动组件，进而驱动组件再可以通过分时控制振镜发生旋转振动，实现分时调整显示组件显示的每帧图像发生位移，利用人眼的视觉暂留和视觉合成功能，显示组件显示的多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像。为了达到显示组件显示多帧图像中任一图像的时间可以与振镜调整多帧图像中任一图像的时间同步，可以使振镜旋转振动的频率与显示组件显示每帧图像的切换频率相同。

7、在一些实施例中，显示组件可以是液晶显示器(liquid crystal display，lcd)、微型有机发光二极管显示器(micro organic light emitting diode，micro oled)、硅基oled、微型发光二极管(micro light emitting diode，micro led)或者其他显示设备，本技术对此不作具体限定。

8、在一些实施例中，控制组件可以是处理器、微处理器、控制器等控制组件，例如可以是通用中央处理器(central processing unit，cpu)，通用处理器、数字信号处理(digital signal processing，dsp)、专用集成电路(application specific integratedcircuits，asic)、现场可编程门阵列(field programmable gate array，pga)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。

9、在一些实施例中，振镜可以靠近显示组件设置，即振镜可以设置在显示光路组件和显示组件之间的光路上。这样，从显示组件分时出射的每帧图像经过旋转振动的振镜后，可以实现每帧图像在空间的位移，之后通过显示光路组件将每帧图像调整到设定位置进行显示，利用人眼的视觉暂留和视觉合成功能，多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像，以实现分辨率的提升。

10、或者，在一些实施例中，当显示光路组件包括至少两个透镜时，振镜也可以设置在至少两个透镜之间的光路上，即振镜也可以设置在显示光路组件内部。这样，从显示组件分时出射的每帧图像首先经过显示光路组件中部分透镜的折射后，入射至旋转振动的振镜，实现每帧图像在空间的位移，之后通过显示光路组件剩余透镜将图像调整到设定位置进行显示，利用人眼的视觉暂留和视觉合成功能，多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像，以实现分辨率的提升。

11、在一些实施例中，振镜可以通过在相邻两个时刻在不同位置输出多帧图像中的相邻两帧图像，实现分时调整显示组件显示的相邻两帧图像发生位移。其中，相邻两个时刻指的显示组件显示多帧图像中相邻两帧图像的时间，例如在时刻1显示组件显示多帧图像中的一帧图像，在时刻2显示组件显示多帧图像中的下一帧图像。在时刻1振镜处于位置1，控制振镜旋转振动后，在时刻2振镜处于位置2，振镜在位置2相对于位置1旋转设定角度。由于振镜存在一定的厚度和不同于空气的折射率，因此同一束入射光经过处于不同位置的振镜后，出射光位置会发生移动，即振镜出射的下一帧图像位置会发生位移量。依照人眼的视觉暂留效应会看到多帧图像的叠加效果，虽然多帧图像中每帧图像的分辨率小于待显示图像的分辨率，但是多帧图像中每帧图像均保留了待显示图像的大部分信息，那么人眼最终看到的图像会接近于原生的待显示图像，这样，就实现了采用低分辨率的显示组件呈现出高分辨率显示的效果。

12、在一些实施例中，为了保证依照人眼的视觉暂留效应可以看到多帧图像的叠加效果，通过控制振镜的旋转角度θ，可以调整相邻两帧图像之间位移量δy使其小于一个像素距离，像素为显示组件显示的图像中的像素。在一些实施例中，相邻两帧图像之间位移量的间隔距离可以为二分之一个像素距离，例如，像素大小为16.5um，则位移量可以为8.3um，位移方向可以是沿水平方向、竖直方向或对角线方向中的任意一个或多个方向。

13、在一些实施例中，振镜的旋转角度θ可以满足以下关系：

14、

15、其中，δy为振镜在旋转前后输出图像的位移量，θ为振镜的旋转角度，t为振镜的厚度，n为振镜的折射率。

16、在一些实施例中，振镜的材料可以为玻璃、聚碳酸酯(polycarbonate，pc)、聚甲基丙烯酸甲酯(polymethyl methacrylate，pmma)或聚苯乙烯(polystyrene，ps)等透光材料。且振镜选取材料的折射率范围一般在1.3-2取值，误差范围＜0.01，例如可以选择折射率为1.5的透光材料。在同等条件下，振镜的厚度越大，位移量越大，但是振镜的厚度越大，会增加显示模组整体的体积，振镜的厚度范围一般在0.5mm-6mm取值，误差范围＜0.1mm，例如可以选择振镜的厚度为2mm。

17、在一些实施例中，控制组件可以基于振镜的厚度数值、振镜的折射率数值和振镜在旋转前后输出图像的位移量，得到振镜的旋转角度。驱动组件在控制振镜旋转该振镜的旋转角度时，振镜的实际旋转角度相比该振镜的旋转角度可以允许存在±10％以内的误差。

18、在本技术实施例中，分辨率的提升倍数与待显示图像的分辨率以及显示组件的物理分辨率相关。示例性的，若待显示图像的分辨率是显示组件的物理分辨率的二倍时，例如待显示图像为4k，显示组件的物理分辨率为2k，显示组件的像素密度单位(pixels perinch，ppi)约为1200-1500，角分辨率(points per degree，ppd)约为20-30时，通过将待显示图像拆分成多帧图像，并通过旋转振动的振镜，可以使得最终在人眼呈现叠加的显示效果为接近4k图像，显示效果的ppi约为2400-3000，ppd约为40-60。

19、在一些实施例中，以待显示图像的分辨率为4k 60hz，显示组件的物理分辨率为2k为例，控制组件可以通过算法将待显示图像拆分成两帧2k 120hz的图像，即多帧图像包括2k120hz的第一图像和2k 120hz的第二图像。振镜可以在第一时刻在第一位置输出第一图像，振镜发生旋转振动后在第二时刻在第二位置输出第二图像；其中，第一时刻和第二时刻时间相邻。

20、具体地，利用振镜的旋转振动可以实现水平方向超分、竖直方向超分或者对角方向超分中的任意一项或多项。显示组件具有与振镜最邻近的第一表面，定义竖直轴垂直于水平面，定义水平轴垂直于竖直轴，定义对角线轴位于竖直轴和水平轴构成的平面内，且对角线轴平行于显示组件的第一表面中像素的对角线方向。并且，竖直轴、水平轴和对角线轴均可以穿过振镜的中心点，或者，竖直轴、水平轴和对角线轴也可以与振镜的中心点具有一定的距离，该距离例如可以在范围以内。其中，水平方向超分，可以理解是振镜输出的光束形成的两帧图像在水平方向上具有间隔距离，以间隔距离为px/2为例，px表示两帧图像中任意一帧图像的相邻像素在水平方向的间距，在采用水平方向超分时，振镜需要在第二时刻相对于第一时刻以竖直轴为旋转轴旋转第一设定角度或第二设定角度，实现第二位置相对第一位置的偏移矢量为(px/2，0)或(-px/2，0)，即第一位置与第二位置可以在水平方向间隔二分之一个像素距离，从而实现水平方向的分辨率翻倍。竖直方向超分，可以理解是振镜输出的两帧图像在竖直方向上具有间隔距离，以间隔距离为py/2为例，py表示两帧图像中任意一帧图像的相邻像素在竖直方向的间距，在采用竖直方向超分时，振镜需要在第二时刻相对于第一时刻以水平轴为旋转轴旋转第三设定角度或第四设定角度，实现第二位置相对第一位置的偏移矢量为(0，py/2)或(0，-py/2)，即第一位置与第二位置可以在竖直方向间隔二分之一个像素距离，从而实现竖直方向的分辨率翻倍。对角方向超分，可以理解是振镜输出的两帧图像在竖直方向上具有间隔距离，在水平方向具有间隔距离，以竖直方向的间隔距离为py/2、水平方向的间隔距离为px/2为例，在采用对角方向超分时，振镜需要在第二时刻相对于第一时刻以对角线轴为旋转轴旋转第五设定角度或第六设定角度，实现第二位置相对第一位置的偏移矢量为(px/2，py/2)、(-px/2，py/2)、(px/2，-py/2)或(-px/2，-py/2)中的任意一种，即第一位置与第二位置可以分别在水平方向和竖直方向间隔二分之一个像素距离，从而实现分辨率翻倍。

21、以4*4像素阵列为例，假设振镜可以实现偏移矢量为(px/2，-py/2)的偏移，那么通过时分复用的方式可以实现将等效的显示像素数翻倍的效果。当振镜的偏移矢量是(±px/2，0)时，可以实现水平方向的分辨率翻倍。当振镜的偏移矢量为(0，±py/2)时，可以实现竖直方向的分辨率倍增。

22、将待显示图像拆分成两帧图像，依照人眼的视觉暂留效应会看到两帧图像的叠加效果，在将待显示图像拆分时通过合理的算法处理可以确保这两帧图像都保留了原始的待显示图像的大部分信息，那么人眼最终看到的图像就是接近于原生的待显示图像，这就实现了显示模组的2k物理分辨率到显示效果为4k分辨率图像的提升。

23、在一些实施例中，以待显示图像的分辨率为4k 60hz，显示组件的物理分辨率为2k为例，控制组件可以通过算法将待显示图像拆分成四帧2k 240hz的图像，即多帧图像包括2k120hz的第一图像、2k 120hz的第二图像、2k 120hz的第三图像和2k 120hz的第四图像。振镜可以在第一时刻在第一位置输出第一图像，振镜发生第一旋转振动后可以在第二时刻在第二位置输出第二图像，振镜发生第二旋转振动后可以在第三时刻在第三位置输出第三图像，振镜发生第三旋转振动后可以在第四时刻在第四位置输出第四图像，振镜发生第四旋转振动后可以在第五时刻在第一位置输出下一帧待显示图像分解得到的多帧图像中的第一图像；其中，第一时刻、第二时刻、第三时刻、第四时刻和第五时刻时间相邻。依照人眼的视觉暂留效应会看到四帧图像的叠加效果，在将待显示图像拆分时通过合理的算法处理可以确保这四帧图像都保留了原始的待显示图像的大部分信息，那么人眼最终看到的图像就是接近于原生的待显示图像，这就实现了显示模组的2k物理分辨率到显示效果为4k分辨率图像的提升。

24、具体地，利用振镜沿不同方向的旋转振动可以实现在四个时刻图像在四个位置之间相互转换，示例性的，振镜输出的两帧图像可以在水平方向上间隔距离px/2，px表示两帧图像的相邻像素在水平方向的间距，此时实现水平方向的分辨率翻倍；振镜输出的两帧图像可以在竖直方向上间隔距离py/2，py表示两帧图像的相邻像素在竖直方向的间距，此时实现竖直方向的分辨率翻倍；振镜输出的两帧图像在竖直方向上间隔距离py/2，同时在水平方向上间隔距离px/2，此时实现分辨率翻倍。

25、例如，振镜可以在第一时刻在第一位置输出第一图像，第一位置与第二位置可以在竖直方向间隔二分之一个像素距离，当振镜在第二时刻相对于第一时刻以水平轴为旋转轴旋转第三设定角度，振镜可以实现偏移矢量(0，py/2)，使得在第二时刻可以在第二位置输出第二图像。当振镜在第三时刻相对于第二时刻以竖直轴为旋转轴旋转第一设定角度，振镜可以实现偏移矢量(px/2，0)，使得在第三时刻可以在第三位置输出第三图像，第二位置与第三位置可以在水平方向间隔二分之一个像素距离。当振镜在第四时刻相对于第三时刻以水平轴为旋转轴旋转第四设定角度，振镜可以实现偏移矢量(0，-py/2)，使得在第四时刻可以在第四位置输出第三图像，第三位置与第四位置可以在竖直方向间隔二分之一个像素距离。当振镜在第五时刻相对于第四时刻以竖直轴为旋转轴旋转第二设定角度，振镜可以实现偏移矢量(-px/2，0)，使得在第五时刻可以回到第一位置输出下一帧待显示图像分解得到的多帧图像中的第一图像，第四位置与第一位置可以在水平方向间隔二分之一个像素距离。

26、需要说明的是，本技术实施例对振镜输出第一图像、第二图像、第三图像或第四图像的顺序不作具体限制，示例性的，振镜还可以在第一时刻在第一位置输出第一图像，振镜发生旋转振动后可以在第二时刻在第四位置输出第四图像，振镜发生旋转振动后可以在第三时刻在第三位置输出第三图像，振镜发生旋转振动后可以在第四时刻在第二位置输出第二图像；振镜还可以在第一时刻在第一位置输出第一图像，振镜发生旋转振动后可以在第二时刻在第三位置输出第三图像，振镜发生旋转振动后可以在第三时刻在第四位置输出第四图像，振镜发生旋转振动后可以在第四时刻在第二位置输出第二图像等。其中，第一时刻、第二时刻、第三时刻和第四时刻时间相邻。

27、以上仅是举例说明振镜的旋转振动工作过程，并不局限于此。并且，待显示图像还可以拆分成其他数值的多帧图像，例如三帧图像、五帧图像、六帧图像等，在此不作详述。并且，为了保证显示效果，应尽量保证每帧图像在不同位置显示。

28、在一些实施例中，显示模组可以支持工作在两种模式下。超分模式以及正常模式。控制组件在确定超分模式使能时，执行超分处理；控制组件在确定正常模式使能时，保持分辨率不变，帧率也不降低。在正常模式下，振镜不会发生旋转振动。一些实施例中，控制组件可以对图像源重采样为显示组件的物理分辨率，直接输出到显示组件，此正常模式可以适用于一些高帧率的场景，比如游戏等。

29、第二方面，本技术实施例提供一种成像控制方法，方法应用于显示设备，显示设备包括显示组件和设置在显示组件的光路上的分辨率提升组件和显示光路组件，分辨率提升组件可以包括振镜和驱动组件，显示组件出射的图像经过振镜后可以入射至显示光路组件。成像控制方法可以具体包括：接收待显示图像，对待显示图像进行分解得到多帧图像；控制显示组件分时显示多帧图像；驱动组件控制振镜发生旋转振动，使显示组件显示的多帧图像中的任一图像发生位移。

30、在一些实施例中，多帧图像可以是对待显示图像进行降采样得到的，因此，多帧图像中每帧图像的分辨率小于待显示图像的分辨率。比如，可以将高分辨率的待显示图像拆分为多个低分辨率图像，低分辨率图像的分辨率一般与显示组件的物理分辨率相同，将多个低分辨率的图像分时发送给显示组件进行显示。

31、在一些实施例中，显示组件显示多帧图像中任一图像的时间可以与振镜使显示组件显示的多帧图像中任一图像发生位移的时间同步。

32、在本技术实施例提供的成像控制方法中，可以通过对高分辨率图像进行分解得到多帧低分辨率图像，然后可以分时通过显示组件显示低分辨率图像，并可以通过分时控制分辨率提升组件调整显示组件显示的每帧图像的位置，即分时显示多帧低分辨率图像，利用人眼的视觉暂留和视觉合成功能，多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像。

33、在一些实施例中，驱动组件控制振镜发生旋转振动，使显示组件显示的每帧图像发生位移，利用人眼的视觉暂留和视觉合成功能，显示组件显示的多帧低分辨率图像在人眼中进行了叠加，使得人眼看到的高分辨率的图像。为了达到显示组件显示多帧图像中任一图像的时间可以与分辨率提升组件调整多帧图像中任一图像的时间同步，振镜旋转振动的频率需要与显示组件显示每帧图像的切换频率相同。

34、在一些实施例中，驱动组件控制振镜发生旋转振动，使显示组件显示的每帧图像发生位移，可以具体包括：驱动组件控制振镜在相邻两个时刻在不同位置输出多帧图像中的相邻两帧图像，实现分时调整显示组件显示的相邻两帧图像发生位移。其中，相邻两个时刻指的显示组件显示多帧图像中相邻两帧图像的时间，例如在时刻1显示组件显示多帧图像中的一帧图像，在时刻2显示组件显示多帧图像中的下一帧图像。在时刻1振镜处于位置1，控制振镜旋转振动后，在时刻2振镜处于位置2，振镜在位置2相对于位置1旋转设定角度。由于振镜存在一定的厚度和不同于空气的折射率，因此同一束入射光经过处于不同位置的振镜后，出射光位置会发生移动，即振镜出射的下一帧图像位置会发生位移量。依照人眼的视觉暂留效应会看到多帧图像的叠加效果，虽然多帧图像中每帧图像的分辨率小于待显示图像的分辨率，但是多帧图像中每帧图像均保留了待显示图像的大部分信息，那么人眼最终看到的图像会接近于原生的待显示图像，这样，就实现了采用低分辨率的显示组件呈现出高分辨率显示的效果。

35、具体地，为了保证依照人眼的视觉暂留效应可以看到多帧图像的叠加效果，通过控制振镜的旋转角度，可以调整相邻两帧图像之间位移量使其小于一个像素距离，像素为显示组件显示的图像中的像素。在一些实施例中，相邻两帧图像之间位移量的间隔距离可以为二分之一个像素距离，例如，像素大小为16.5um，则位移量可以为8.3um，位移方向可以是沿水平方向、竖直方向或对角线方向中的任意一个或多个方向。

36、在一些实施例中，可以通过算法将待显示图像拆分成两帧图像，即多帧图像可以包括第一图像和第二图像；驱动组件控制振镜在相邻两个时刻在不同位置输出多帧图像中的相邻两帧图像，可以具体包括：在第一时刻控制振镜在第一位置输出第一图像，控制振镜发生旋转振动后在第二时刻在第二位置输出第二图像；第一时刻和第二时刻时间相邻。

37、在一些实施例中，第一位置与第二位置在对角线方向可以间隔二分之一个像素距离，即第一位置与第二位置在水平方向间隔二分之一个像素距离，同时在竖直方向间隔二分之一个像素距离，从而实现分辨率翻倍。

38、在一些实施例中，控制振镜发生旋转振动，可以具体包括：控制振镜在第二时刻相对于第一时刻以对角线轴为旋转轴旋转设定角度。

39、具体地，将待显示图像拆分成两帧图像，依照人眼的视觉暂留效应会看到两帧图像的叠加效果，在将待显示图像拆分时通过合理的算法处理可以确保这两帧图像都保留了原始的待显示图像的大部分信息，那么人眼最终看到的图像就是接近于原生的待显示图像，这就实现了显示模组的2k物理分辨率到显示效果为4k分辨率图像的提升。

40、在一些实施例中，可以通过算法将待显示图像拆分成四帧图像，多帧图像可以包括第一图像、第二图像、第三图像和第四图像；驱动组件控制振镜在相邻两个时刻在不同位置输出多帧图像中的相邻两帧图像，可以具体包括：在第一时刻控制振镜在第一位置输出第一图像，控制振镜发生第一旋转振动后可以在第二时刻在第二位置输出第二图像，控制振镜发生第二旋转振动后可以在第三时刻在第三位置输出第三图像，控制振镜发生第三旋转振动后可以在第四时刻在第四位置输出第四图像，控制振镜发生第四旋转振动后可以在第五时刻在第一位置输出下一帧待显示图像分解得到的多帧图像中的第一图像；其中，第一时刻、第二时刻、第三时刻、第四时刻和第五时刻依次时间相邻，像素为显示组件中的像素。依照人眼的视觉暂留效应会看到四帧图像的叠加效果，在将待显示图像拆分时通过合理的算法处理可以确保这四帧图像都保留了原始的待显示图像的大部分信息，那么人眼最终看到的图像就是接近于原生的待显示图像，这就实现了显示模组的2k物理分辨率到显示效果为4k分辨率图像的提升。

41、在一些实施例中，第一位置与第二位置在竖直方向可以间隔二分之一个像素距离，第二位置与第三位置在水平方向可以间隔二分之一个像素距离，第三位置与第四位置在竖直方向可以间隔二分之一个像素距离，第四位置与第一位置在水平方向可以间隔二分之一个像素距离。

42、在一些实施例中，控制振镜发生旋转振动，可以具体包括：控制振镜在第二时刻相对于第一时刻以水平轴为旋转轴旋转第三设定角度，控制振镜在第三时刻相对于第二时刻以竖直轴为旋转轴旋转第一设定角度，控制振镜在第四时刻相对于第三时刻以水平轴为旋转轴旋转第四设定角度，控制振镜在第五时刻相对于第四时刻以竖直轴为旋转轴旋转第二设定角度。

43、在一些实施例中，振镜的旋转角度可以满足以下关系：

44、

45、其中，δy为振镜在旋转前后输出图像的位移量，θ为振镜的旋转角度，t为振镜的厚度，n为振镜的折射率。

46、在一些实施例中，基于振镜厚度数值、折射率数值和振镜在旋转前后输出图像的位移量，可以得到振镜的旋转角度，驱动组件在控制振镜旋转该振镜的旋转角度时，振镜的实际旋转角度相比该振镜的旋转角度可以允许存在±10％以内的误差。

47、第三方面，本技术提供一种电子设备，包括至少一个处理器，所述至少一个处理器与至少一个存储器耦合，所述至少一个处理器用于读取所述至少一个存储器所存储的计算机程序，以执行上述第二方面中的任意一种成像控制方法。功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块。

48、第四方面，本技术提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序或指令，当计算机程序或指令被计算机执行时，使得该计算机执行上述第二方面的任意可能的实现方式中的方法。

49、第五方面，本技术提供一种计算机程序产品，该计算机程序产品包括计算机程序或指令，当该计算机程序或指令被计算机执行时，实现上述第二方面的任意可能的实现方式中的方法。