基于自适应单应性映射的眼睛凝视跟踪的制作方法

文档序号:11890277阅读:来源:国知局

技术特征:

1.一种系统,包括:

至少四个光源,被配置为生成从对象的眼睛的角膜反射作为反光;

相机,被配置为捕获包含所述反光的当前图像;以及

眼睛凝视检测器,包含或者耦合到凝视头部定位偏差校正器,所述眼睛凝视检测器被配置为接收包含所述反光的所述当前图像并且估计所述对象的眼睛的眼睛凝视,所述凝视头部定位偏差校正器被配置为接收所述对象的眼睛的所述眼睛凝视的所述估计并且通过匹配与所述对象的所述反光和与瞳孔有关的数据对应的特征数据来校正所估计的眼睛凝视中的偏差,以输出指示所述对象的眼睛当前凝视何处的校正的凝视信息,所述凝视偏差校正器使用经由一个或多个变量学习的自适应单应性映射,所述一个或多个变量包括表示相对于校准定位的头部位置的一个或多个变量。

2.根据权利要求1所述的系统,其中表示相对于校准定位的头部位置和凝视定位的所述变量至少部分基于仿真的数据。

3.根据权利要求2所述的系统,其中所述仿真的数据被配置为收集用于通过校准来训练所述自适应单应性映射以获得在各种头部定位的预测器变量的真实数据。

4.根据权利要求1所述的系统,其中表示相对于校准定位的头部位置的所述变量对应于至少部分通过仿射变换、相似性变换和/或单应性变换来编码的在各种所述头部位置之中的相对头部移动。

5.一种方法,包括:

估计凝视,包括使用自适应单应性映射以用于偏差校正,其中所述自适应单应性映射被训练以补偿相对于校准定位的随空间变化的凝视误差或者依赖于头部姿势的误差或者二者,包括使用多个光源和相机在图像中捕获当前反光数据和与瞳孔有关的数据,提供从所述图像处理的所述当前反光数据和与瞳孔有关的数据作为特征以基于学习的所述自适应单应性映射来获得用来确定当前凝视信息的依赖于头部姿势的数据。

6.根据权利要求5所述的方法,其中使用定位数据和瞳孔定位数据的多个集合包括使用至少一些仿真的数据,包括预测在不同头部定位缩放和/或不同头部定位平移的偏差校正值。

7.根据权利要求5所述的方法,还包括:

输出所述当前凝视信息;以及

使用所述当前凝视信息以采取与改变用户接口的状态有关的动作。

8.根据权利要求5所述的方法,其中学习所述自适应单应性映射模型包括通过仿射变换、通过相似性变换或者单应性变换对相对头部移动进行编码。

9.根据权利要求5所述的方法,其中学习所述自适应单应性映射模型包括将表示凝视方向的与瞳孔有关的数据编码为一个或多个特征。

10.一个或多个具有可执行指令的机器可读存储介质或者硬件逻辑,所述可执行指令在被执行时实施包括以下的步骤:

捕获包括对象的眼睛的图像,反光数据和与瞳孔有关的数据是作为特征从所述图像提取的,所述反光数据和与瞳孔有关的数据基于由多个光源生成的从对象的眼睛的角膜反射;以及

与自适应单应性映射一起使用所述特征以基于与所述自适应单应性映射对应的头部定位偏差校正来确定凝视方向。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1