用于生成图像数据流的装置和方法与流程

文档序号:24502421发布日期:2021-03-30 21:32阅读:来源:国知局

技术特征:

1.一种用于生成表示三维场景的视图的图像数据流的装置,所述装置包括:

接收器(203),其用于接收指示观看者的头部姿态和相对眼睛姿态两者的注视指示,所述头部姿态包括头部位置,并且所述相对眼睛姿态指示相对于所述头部姿态的眼睛姿态;

确定器(205),其用于确定具有与所述注视指示相对应的所述三维场景中的三维位置的视觉关注区域;

生成器(209),其用于将所述图像数据流生成为包括针对所述场景的图像数据,其中,所述图像数据被生成为至少包括针对所述视觉关注区域的第一图像数据和针对所述场景中的在所述视觉关注区域之外的第二图像数据;其中,所述生成器(209)被配置为将所述图像数据生成为针对所述第一图像数据比针对所述第二图像数据具有更高的质量水平;并且其中,

所述确定器(205)被布置为响应于所述注视指示的注视距离指示来确定所述视觉关注区域。

2.根据权利要求1所述的装置,其中,所述确定器(205)被布置为将所述视觉关注区域确定为针对所述头部姿态在至少一个方向上具有不超过10度的延伸。

3.根据任一前述权利要求所述的装置,其中,所述视觉关注区域对应于场景对象。

4.根据权利要求3所述的装置,其中,所述确定器(205)被布置为跟踪所述场景中的所述场景对象的运动,并且所述确定器(205)被布置为响应于所跟踪的运动来确定所述视觉关注区域。

5.根据任一前述权利要求所述的装置,其中,所述确定器(205)被布置为响应于所存储的针对所述场景的用户观看行为来确定所述视觉关注区域。

6.根据权利要求5所述的装置,其中,所述确定器(205)被布置为将所述视觉关注区域朝向所述场景中如下的区域偏置:对于所述区域,所存储的用户观看行为指示较高的观看频率。

7.根据任一前述权利要求所述的装置,其中,所述确定器(205)被布置为响应于指示所述场景中的不同区域之间的先前观看行为关系的关系数据来确定预测的视觉关注区域;并且其中,所述生成器(209)被布置为在所述图像数据流中包括针对所述预测的视觉关注区域的第三图像数据;其中,所述生成器(209)被配置为将所述图像数据生成为针对所述第三图像数据比针对在所述预测的视觉关注区域之外的所述第二图像数据具有更高的质量水平。

8.根据权利要求7所述的装置,其中,所述关系数据指示至少一个观看者的先前注视移动;并且所述确定器(205)被布置为将所述预测的视觉关注区域确定为所述场景的第一区域,针对所述第一区域,所述关系数据指示注视从所述视觉关注区域视线移动到所述第一区域的频率超过阈值。

9.根据任一前述权利要求所述的装置,其中,所述确定器(205)被布置为响应于与所述视觉关注区域相对应的场景对象的运动数据来确定预测的视觉关注区域;并且其中,所述生成器(209)被布置为包括针对所述预测的视觉关注区域的所述第三图像数据;其中,所述生成器(209)被配置为将所述图像数据生成为针对所述第三图像数据比针对在所述预测的视觉关注区域之外的所述第二图像数据具有更高的质量水平。

10.根据任一前述权利要求所述的装置,其中,所述生成器(209)被布置为将所述图像数据流生成为视频数据流,所述视频数据流包括与针对所述头部姿态的视口相对应的图像。

11.根据任一前述权利要求所述的装置,其中,所述确定器(205)被布置为响应于所述场景中所述视觉关注区域的运动与所述注视指示的变化之间的相关性来确定针对所述视觉关注区域的置信度量度;并且其中,所述生成器(209)被布置为响应于所述置信度度量来确定针对所述第一图像数据的质量。

12.根据前述权利要求中的任一项所述的装置,还包括处理器,所述处理器被布置为针对所述场景执行应用,其中,所述应用被布置为生成所述注视指示并且根据所述图像注视指示为所述观看者绘制与视口相对应的图像。

13.根据前述权利要求中的任一项所述的装置,还被布置为从远程客户端(103)接收所述注视指示并且将所述图像数据流发送到所述远程客户端(103)。

14.根据权利要求1所述的装置,其中,所述生成器(209)被布置为响应于所述头部姿态而确定针对所述图像数据的视口并且响应于所述视口而确定所述第一数据。

15.一种生成表示三维场景的视图的图像数据流的方法,所述方法包括:

接收指示观看者的头部姿态和相对眼睛姿态两者的注视指示,所述头部姿态包括头部位置,并且所述相对眼睛姿态指示相对于所述头部姿态的眼睛姿态;

确定具有与所述注视指示相对应的所述三维场景中的三维位置的视觉关注区域;

将所述图像数据流生成为包括针对所述场景的图像数据,其中,所述图像数据被生成为至少包括针对所述视觉关注区域的第一图像数据和针对所述场景中的在所述视觉关注区域之外的第二图像数据;所述图像数据针对所述第一图像数据比针对所述第二图像数据具有更高的质量水平;并且其中,确定所述视觉关注区域包括响应于所述注视指示的注视距离指示来确定所述视觉关注区域。


技术总结
一种用于生成表示场景视图的图像数据流的装置,例如用于虚拟现实的应用。所述装置包括接收器(203),所述接收器接收注视指示,所述注视指示指示观看者的头部姿态和相对眼睛姿态两者。所述头部姿态包括头部位置,并且所述相对眼睛姿态指示相对于所述头部姿态的眼睛姿态。确定器(205)确定场景中与注视指示相对应的通常是小/窄的视觉关注区域。具体地,可以识别注视点周围的区域。生成器(209)生成图像数据流以包括针对场景的图像数据,所述图像数据具有针对视觉关注区域比视觉关注区域之外具有更高的质量水平/数据率。

技术研发人员:W·H·A·布鲁斯;B·克龙
受保护的技术使用者:皇家飞利浦有限公司
技术研发日:2019.06.17
技术公布日:2021.03.30
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1