一种图像获取设备的控制方法及装置与流程

文档序号:16466647发布日期:2019-01-02 22:49阅读:173来源:国知局
一种图像获取设备的控制方法及装置与流程

本申请涉及眼球追踪技术领域,特别是涉及一种图像获取设备的控制方法及装置。



背景技术:

眼球追踪技术是指通过分析目标对象眼部运动得到目标对象注视点的技术。主流技术主要依靠基于红外频段的人眼图像,分析人眼特征信息,进而得出目标对象注视点。

目前,遥测眼球追踪技术中通常采用多个图像获取设备拍摄目标对象图像,将所述多个图像获取设备拍摄的图像传输给控制器,从而使得控制器基于拍摄的目标对象图像分析人眼特征信息,进而得出目标对象的注视点。

但是,将多个图像获取设备拍摄的图像均发送给控制器,可能需要比较大的传输带宽。而传输带宽会受限于具体的传输协议,从而导致实际带宽不能满足传输多个图像获取设备所拍摄的图像的带宽要求。



技术实现要素:

本申请提供一种图像获取设备的控制方法及装置,可以节省传输所述多个图像获取设备拍摄的图像的带宽。

第一方面,本申请实施例提供一种图像获取设备的控制方法,包括:

获取多个图像获取设备拍摄的图像;

根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备;

控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像;

获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;

其中,所述活跃图像获取设备发送所述活跃图像获取设备拍摄的图像所需的带宽,大于所述非活跃图像获取设备发送所述非活跃图像获取设备拍摄的图像所需的带宽。

可选的,所述根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,包括:

根据所述多个图像获取设备拍摄的图像获取目标对象的位置;

根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

可选的,所述根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,包括:

将拍摄的图像中不包括所述目标对象的图像获取设备,确定为所述非活跃图像获取设备;

从待选图像获取设备中确定活跃图像获取设备;其中,所述待选图像获取设备为所述多个图像获取设备中除了所述非活跃图像获取设备之外的图像获取设备。

可选的,所述控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像,包括:

控制所述活跃图像获取设备以第一频率拍摄图像,控制所述非活跃图像获取设备以第二频率拍摄图像,其中,所述第一频率大于所述第二频率;和/或,

控制所述活跃图像获取设备以第一图像位宽拍摄图像,控制所述非活跃图像获取设备以第二图像位宽拍摄图像,其中,所述第一位宽大于所述第二位宽;和/或,

控制所述活跃图像获取设备以第一分辨率拍摄图像,控制所述非活跃图像获取设备以第二分辨率拍摄图像;其中,所述第一分辨率大于所述第二分辨率。

可选的,所述获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像,包括:

获取以第一压缩比压缩后得到的所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及,获取以第二压缩比压缩后得到的所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述第一压缩比小于所述第二压缩比。

可选的,所述方法还包括:

根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述方法还包括:

根据所述活跃图像获取设备拍摄的图像的清晰度,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述方法还包括:

根据所述活跃图像获取设备连续拍摄的若干帧图像的特征,确定所述目标对象与所述活跃图像获取设备之间的距离的变化趋势;

根据所述距离变化趋势判断所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性;

若所述可能性大于或者等于预设阈值,则加快所述非活跃图像获取设备拍摄图像的频率。

可选的,所述多个图像获取设备包括第一图像获取设备和第二图像获取设备;

所述根据所述多个图像获取设备拍摄的图像获取目标对象的位置,包括:

获取所述第一图像获取设备拍摄的包含所述目标对象的第一图像,根据所述第一图像的特征确定所述目标对象与所述第一图像获取设备之间的距离;

和/或,

获取所述第二图像获取设备拍摄的包含所述目标对象的第二图像,根据所述第二图像的特征确定所述目标对象与所述第二图像获取设备之间的距离。

可选的,所述根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,包括:

若所述目标对象与所述第一图像获取设备之间的距离,处于第一距离区间,确定所述第一图像获取设备为活跃图像获取设备,确定所述第二图像获取设备为非活跃图像;其中,所述第一距离区间根据所述第一图像获取设备的对焦位置确定;和/或,

若所述目标对象与所述第一图像获取设备之间的距离,处于第二距离区间,确定所述第一图像获取设备为非活跃图像获取设备,确定所述第二图像获取设备为活跃图像获取设备;其中,第二距离区间根据所述第二图像获取设备的对焦位置确定;

可选的,所述多个图像获取设备中的任意两个图像获取设备之间的距离小于预设距离阈值;所述多个图像获取设备中至少存在两个对焦位置不同的图像获取设备。

第二方面,本申请实施例提供一种图像获取设备的控制装置,包括:

第一获取单元,用于获取多个图像获取设备拍摄的图像;

第一确定单元,用于根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备;

控制单元,用于控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像;

第二获取单元,用于获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;

其中,所述活跃图像获取设备发送所述活跃图像获取设备拍摄的图像所需的带宽,大于所述非活跃图像获取设备发送所述非活跃图像获取设备拍摄的图像所需的带宽。

可选的,所述第一确定单元,具体用于:

根据所述多个图像获取设备拍摄的图像获取目标对象的位置;

根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

可选的,所述第一确定单元,具体用于:

将拍摄的图像中不包括所述目标对象的图像获取设备,确定为所述非活跃图像获取设备;

从待选图像获取设备中确定活跃图像获取设备;其中,所述待选图像获取设备为所述多个图像获取设备中除了所述非活跃图像获取设备之外的图像获取设备。

可选的,所述控制单元,具体用于:

控制所述活跃图像获取设备以第一频率拍摄图像,控制所述非活跃图像获取设备以第二频率拍摄图像,其中,所述第一频率大于所述第二频率;和/或,

控制所述活跃图像获取设备以第一图像位宽拍摄图像,控制所述非活跃图像获取设备以第二图像位宽拍摄图像,其中,所述第一位宽大于所述第二位宽;和/或,

控制所述活跃图像获取设备以第一分辨率拍摄图像,控制所述非活跃图像获取设备以第二分辨率拍摄图像;其中,所述第一分辨率大于所述第二分辨率。

可选的,所述第二获取单元,具体用于:

获取以第一压缩比压缩后得到的所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及,获取以第二压缩比压缩后得到的所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述第一压缩比小于所述第二压缩比。

可选的,所述装置还包括:

第一调节单元,用于根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述装置还包括:

第二调节单元,用于根据所述活跃图像获取设备拍摄的图像的清晰度,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述装置还包括:

第二确定单元,用于根据所述活跃图像获取设备连续拍摄的若干帧图像的特征,确定所述目标对象与所述活跃图像获取设备之间的距离的变化趋势;

判断单元,用于根据所述距离变化趋势判断所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性;

频率加快单元,用于若所述可能性大于或者等于预设阈值,则加快所述非活跃图像获取设备拍摄图像的频率。

可选的,所述多个图像获取设备包括第一图像获取设备和第二图像获取设备;

所述根据所述多个图像获取设备拍摄的图像获取目标对象的位置,包括:

获取所述第一图像获取设备拍摄的包含所述目标对象的第一图像,根据所述第一图像的特征确定所述目标对象与所述第一图像获取设备之间的距离;

和/或,

获取所述第二图像获取设备拍摄的包含所述目标对象的第二图像,根据所述第二图像的特征确定所述目标对象与所述第二图像获取设备之间的距离。

可选的,所述根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,包括:

若所述目标对象与所述第一图像获取设备之间的距离,处于第一距离区间,确定所述第一图像获取设备为活跃图像获取设备,确定所述第二图像获取设备为非活跃图像;其中,所述第一距离区间根据所述第一图像获取设备的对焦位置确定;和/或,

若所述目标对象与所述第一图像获取设备之间的距离,处于第二距离区间,确定所述第一图像获取设备为非活跃图像获取设备,确定所述第二图像获取设备为活跃图像获取设备;其中,第二距离区间根据所述第二图像获取设备的对焦位置确定;

可选的,所述多个图像获取设备中的任意两个图像获取设备之间的距离小于预设距离阈值;所述多个图像获取设备中至少存在两个对焦位置不同的图像获取设备。

与现有技术相比,本申请实施例具有以下优点:

本申请实施例提供的图像获取设备的控制方法及装置,包括:获取多个图像获取设备拍摄的图像;根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备;控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像;获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述活跃图像获取设备发送所述活跃图像获取设备拍摄的图像所需的带宽,大于所述非活跃图像获取设备发送所述非活跃图像获取设备拍摄的图像所需的带宽。由此可见,利用本申请实施例提供的图像获取设备的控制方法及装置,可以确定出多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,并控制活跃图像获取设备以第一配置拍摄图像,非活跃图像获取设备以第二策略拍摄图像,使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,而不是所有图像获取设备将其拍摄的图像发送给控制器时所需的带宽均比较大(例如等于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽),从而节省了传输所述多个图像获取设备拍摄的图像的带宽。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种图像获取设备的控制方法的流程示意图;

图2为本申请实施例提供的一种调节所述图像获取设备拍摄图像的频率的方法的流程示意图;

图3为本申请实施例提供的一种图像获取设备的控制装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。

一方面,本申请的发明人经过研究发现,目前,遥测眼球追踪技术中通常采用多个图像获取设备以相同的拍摄频率拍摄目标对象图像,将所述多个图像获取设备拍摄的图像传输给控制器,从而使得控制器基于拍摄的目标对象图像分析人眼特征信息,进而得出目标对象的注视点。而为了能够准确的分析出目标对象的注视点,多个图像获得设备的拍摄频率一般设置的比较高。

但是,将多个图像获取设备拍摄的图像均发送给控制器,可能需要比较大的传输带宽。而传输带宽会受限于具体的传输协议,从而导致实际带宽不能满足传输多个图像获取设备所拍摄的图像的带宽要求。

另一方面,本申请的发明人经过研究发现,在一些场景中,使用所述多个图像获取设备中的某一个或某几个图像获取设备所拍摄的图像,就可以准确的分析出目标对象的注视点。也就是说,存在一个或者一些图像获取设备,其拍摄的图像对分析目标对象的注视点的贡献很小。对于这种情况,可以降低这些对分析目标对象的注视点的贡献很小的图像获取设备拍摄图像的频率,从而节省传输所述多个图像获取设备拍摄的图像的带宽。

鉴于此,本申请实施例提供一种图像获取设备的控制方法及装置,包括:获取多个图像获取设备拍摄的图像;根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备;控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像;获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述活跃图像获取设备发送所述活跃图像获取设备拍摄的图像所需的带宽,大于所述非活跃图像获取设备发送所述非活跃图像获取设备拍摄的图像所需的带宽。

由此可见,利用本申请实施例提供的图像获取设备的控制方法及装置,可以确定出多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,并控制活跃图像获取设备以第一配置拍摄图像,非活跃图像获取设备以第二策略拍摄图像,使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,而不是所有图像获取设备将其拍摄的图像发送给控制器时所需的带宽均比较大(例如等于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽),从而节省了传输所述多个图像获取设备拍摄的图像的带宽。

下面结合附图,详细说明本申请的各种非限制性实施方式。

示例性方法

参见图1,该图为本申请实施例提供的一种图像获取设备的控制方法的流程示意图。

在本申请实施例中,所述方法可以应用于遥测式眼球追踪系统。遥测式眼球追踪系统可以包括图像获取设备和控制器。图像获取设备可以获取包括目标对象的图像。控制器可以根据所述包括目标对象的图像分析目标对象眼部运动得到目标对象注视点。

具体地,遥测式眼球追踪系统可以包含多个图像获取设备,这多个图像获取设备可以以近似的视角拍摄相同的场景,这多个图像获取设备中至少存在两个对角位置不同的图像获取设备。

本申请实施例提供的图像获取设备的控制方法,例如可以通过以下步骤s101-s104实现。

s101:获取多个图像获取设备拍摄的图像。

需要说明的是,本申请实施例不具体限定所述图像获取设备,所述图像获取设备例如可以为摄像机。

需要说明的是,在本申请实施例中,控制器和图像获取设备之间可以通过网络建立连接,因此,在本申请实施例的一种可能的实现方式中,控制器可以通过网络获取所述多个图像获取设备拍摄的图像。

s102:根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

如前文所述,在一些场景中,使用所述多个图像获取设备中的某一个或某几个图像获取设备所拍摄的图像,就可以准确的分析出目标对象的注视点。

需要说明的是,所谓活跃图像获取设备,可以理解成对分析目标对象的注视点贡献大的图像获取设备。所谓非活跃图像获取设备,可以理解成对分析目标对象的注视点贡献小的图像获取设备。

需要说明的是,在本申请实施例中,步骤s102在具体实现时可以有多种实现方式,以下介绍两种可能的实现方式。

第一种实现方式:可以通过如下步骤a-b确定活跃图像获取设备和非活跃图像获取设备。

步骤a:根据所述多个图像获取设备拍摄的图像获取目标对象的位置。

需要说明的是,在本申请实施例中,所述图像获取系统中的图像获取设备可以用于拍摄包括目标对象的图像,所述图像获取设备可以为照相机、摄像机等。所述图像获取设备拍摄图像之后,可以将拍摄的图像发送给控制器,控制器可以根据所述图像分析目标对象眼部运动得到目标对象注视点。

可以理解的是,目标对象与图像获取设备的之间的距离不同,所述图像获取设备拍摄的图像中与目标对象相关的特征也可能不同。因此,可以根据所述多个图像获取设备拍摄的图像获取目标对象的位置。

需要说明的是,本申请实施例对所述多个图像获取设备不做限定,作为一种示例,所述多个图像获取设备中的任意两个图像获取设备之间的距离差小于预设距离阈值;所述多个图像获取设备中至少存在两个对焦位置不同的图像获取设备。

需要说明的是,所述多个图像获取设备中的任意两个图像获取设备之间的距离小于预设距离阈值,可以认为在拍摄包含目标对象的图像时,目标对象与任意两个图像获取设备之间的距离之间的差值比较小,即可以认为所述多个图像获取设备之间的距离很小。即可以粗略的认为所述多个图像获取设备所处的位置相同。例如,目标对象与第三图像获取设备之间的距离为第三距离,目标对象与第四图像获取设备之间的距离为第四距离,第三距离和第四距离之前的差值比较小,则可以粗略的认为第三图像获取设备和第四获取设备所处的位置相同。

本申请不具体限定所述预设距离阈值,作为一种示例,所述预设距离阈值可以为10厘米。

本申请实施例不具体限定所述多个图像获取设备的焦距或对焦位置的具体取值。

步骤b:根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

在本申请实施例中,获取多个图像获取设备与目标对象之间的相对位置之后,即可根据该相对位置确定多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

第二种实现方式:可以通过如下方式确定多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

将拍摄的图像中不包括所述目标对象的图像获取设备,确定为所述非活跃图像获取设备;从待选图像获取设备中确定活跃图像获取设备;其中,所述待选图像获取设备为所述多个图像获取设备中除了所述非活跃图像获取设备之外的图像获取设备。

可以理解的是,多个图像获取设备的视场角可能不同,因此,可能存在一些图像获取设备,并不能拍摄到包含目标对象的图像,而遥测眼球追踪技术要根据目标对象的人眼特征信息,进而得出目标对象的注视点,若图像中不包含目标对象,则无法通过该不包含目标对象的图像得出目标对象的注视点。因此,在本申请实施例中,可以将拍摄的图像中不包括所述目标对象的图像获取设备,确定为所述非活跃图像获取设备,然后,从除了非活跃图像获取设备之外的其它图像获取设备即待选图像获取设备中,确定出活跃图像获取设备。

需要说明的是,本申请实施例不具体限定从待选图像获取设备中确定活跃图像获取设备的具体方式,作为一种示例,可以采用以上步骤a-b所述的方法从待选图像获取设备中确定活跃图像获取设备。

s103:控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像。

s104:获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像。

关于步骤s103和步骤s104,需要说明的是,本申请实施例不具体限定第一配置和第二配置,第一配置和第二配置的具体设置可以根据实际情况确定。

如前文,利用所述活跃图像获取设备拍摄的图像可以分析出目标对象的注视点,为了使得分析的目标对象的注视点更加准确,可以进一步结合非活跃图像获取设备拍摄的图像分析目标对象的注视点。因此,可以控制活跃图像获取设备以第一配置拍摄图像,非活跃图像获取设备以第二策略拍摄图像,使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,而不是所有图像获取设备将其拍摄的图像发送给控制器时所需的带宽均比较大(例如等于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽),从而节省了传输所述多个图像获取设备拍摄的图像的带宽。

为了使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,在本申请实施例的一种可能的实现方式中,步骤s103在具体实现时,可以通过如下方式实现:

控制所述活跃图像获取设备以第一频率拍摄图像,控制所述非活跃图像获取设备以第二频率拍摄图像,其中,所述第一频率大于所述第二频率;

本申请实施例不具体限定所述第一频率和所述第二频率的具体取值,所述第一频率的具体取值和所述第二频率的具体取值可以根据实际情况确定。作为一种示例,所述第一频率可以为30hz,所述第二频率可以为6hz。

可以理解的是,非活跃图像获取设备拍摄图像的频率比较低,因此,非活跃图像发送其拍摄的图像所需的带宽比较小。

和/或,

控制所述活跃图像获取设备以第一图像位宽拍摄图像,控制所述非活跃图像获取设备以第二图像位宽拍摄图像,其中,所述第一位宽大于所述第二位宽;

需要说明的是,本申请实施例不具体限定所述第一图像位宽和第二图像位宽的具体取值,所述第一图像位宽和第二图像位宽的具体取值可以根据实际情况确定。作为一种示例,所述第一图像位宽可以为8比特,所述第二图像位宽可以为4比特。

以理解的是,非活跃图像获取设备拍摄图像的图像位宽比较低,因此,非活跃图像发送其拍摄的图像所需的带宽比较小。

和/或,

控制所述活跃图像获取设备以第一分辨率拍摄图像,控制所述非活跃图像获取设备以第二分辨率拍摄图像;其中,所述第一分辨率大于所述第二分辨率。

需要说明的是,本申请实施例不具体限定所述第一分辨率和第二分辨率的具体取值,所述第一分辨率和第二分辨率的具体取值可以根据实际情况确定。作为一种示例,所述第一分辨率可以为2000*1000,所述第二分辨率可以为500*250。

可以理解的是,非活跃图像获取设备拍摄图像的图像分辨率比较低,因此,非活跃图像发送其拍摄的图像所需的带宽比较小。

为了使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,在本申请实施例的一种可能的实现方式中,步骤s104在具体实现时,可以通过如下方式实现。

获取以第一压缩比压缩后得到的所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及,获取以第二压缩比压缩后得到的所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述第一压缩比小于所述第二压缩比。

需要说明的是,本申请实施例不具体限定第一压缩比和第二压缩比的具体取值,作为一种示例,所述第一压缩比可以为一个比较小的数值,例如为0,所述第二压缩比可以为一个大于第一压缩比的值,例如为2。即活跃图像获取设备将其拍摄的图像发送给控制器时,可以以较小的压缩比对图像进行压缩,或者不进行压缩,以提供较高的图像质量,以便于准确的分析出目标对象的注视点。而非活跃图像获取设备将其拍摄的图像发送给控制器时,可以以较高压缩比进行压缩,以减小图像尺寸,从而减少将该图像发送给控制器所需的带宽。

可以理解的是,所述图像获取设备拍摄图像的过程中,目标对象的位置可能会发生改变,例如,目标对象朝着远离活跃图像获取设备的方向移动。因此,基于所述活跃图像获取设备以第一频率拍摄图像,和所述非活跃图像获取设备以第二频率拍摄图像,可能并不能准确的分析出目标对象的注视点。

因此,在本申请实施例中,还可以对所述第一频率和所述第二频率进行调节。从而使得利用所述活跃图像获取设备拍摄的图像和所述非活跃图像获取设备拍摄的图像,可以准确的分析出目标对象的注视点。

需要说明的是,对所述第一频率和所述第二频率进行调节,可以有多种实现方式。以下将介绍三种可能的实现方式。

第一种可能的实现方式:可以根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率。

可以理解的是,所述活跃图像获取设备对应有拍摄效果比较好的第一拍摄区域,在该第一拍摄区域内拍摄的图像的清晰度比较高。因此,根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率,在具体实现时,可以判断所述目标对象是否在所述第一拍摄区域内,若所述目标对象在所述第一拍摄区域内,则减小所述第二频率的数值,若所述目标对象在所述第一拍摄区域外,则增大所述第二频率的数值。

可以理解的是,目标对象在所述第一拍摄区域内,则说明基于该活跃图像获取设备拍摄的图像可以准确的分析出目标对象的注视点,此时,可以减小所述第二频率的数值。若目标对象在所述第一拍摄区域外,则说明基于该活跃图像获取设备拍摄的图像可能不可以准确的分析出目标对象的注视点,此时,可以增大所述第二频率的数值,从而结合所述活跃图像获取设备拍摄的图像和所述非活跃图像获取设备拍摄的图像,提高分析目标对象的注视点的准确性。

可以理解的是,所述非活跃图像获取设备对应有拍摄效果比较好的第二拍摄区域,在该第二拍摄区域内拍摄的图像的清晰度比较高。因此,根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率,在具体实现时,可以判断所述目标对象是否在所述第二拍摄区域内,若所述目标对象在所述第二拍摄区域内,则增加所述第二频率的数值,减小所述第一频率的数值。

可以理解的是,若所述目标对象在所述第二拍摄区域内,则说明基于该非活跃图像获取设备拍摄的图像可以准确的分析出目标对象的注视点,此时,可以减小所述第一频率的数值,相应的,增大所述第二频率的数值。

第二种可能的实现方式:可以根据所述活跃图像获取设备拍摄的图像的清晰度,调节所述第一频率,和/或,调节所述第二频率。

具体地,若所述活跃图像获取设备拍摄的图像的清晰度大于或者等于清晰度阈值,则可以减小所述第二频率的数值,若所述活跃图像获取设备拍摄的图像的清晰度小于清晰度阈值,则可以增加所述第二频率的数值。

可以理解的是,若所述活跃图像获取设备拍摄的图像的清晰度大于或者等于清晰度阈值,则说明基于该活跃图像获取设备拍摄的图像可以准确的分析出目标对象的注视点,此时,可以减小所述第二频率的数值。若所述活跃图像获取设备拍摄的图像的清晰度小于清晰度阈值,则说明基于该活跃图像获取设备拍摄的图像可能不可以准确的分析出目标对象的注视点,此时,可以增大所述第二频率的数值,从而结合所述活跃图像获取设备拍摄的图像和所述非活跃图像获取设备拍摄的图像,提高分析目标对象的注视点的准确性。

本申请实施例不具体限定所述清晰度阈值,所述清晰度阈值的具体数值可以根据实际情况具体确定。

第三种可能的实现方式:可以通过以下步骤s201-s203实现。

s201:根据所述活跃图像获取设备连续拍摄的若干帧图像的特征,确定所述目标对象与所述活跃图像获取设备之间的距离的变化趋势。

可以理解的是,利用所述活跃图像获取设备拍摄的一帧图像的特征,可以确定出所述活跃图像获取设备拍摄该帧图像时,所述目标对象与所述活跃图像获取设备的距离。因此,根据所述活跃图像获取设备连续拍摄的若干帧图像的特征,可以确定出所述目标对象与所述活跃图像获取设备之间的距离的变化趋势。

例如,对于所述活跃图像获取设备连续拍摄的三帧图像的特征,确定出所述活跃图像获取设备拍摄第一帧图像时,所述目标对象与所述活跃图像获取设备之间的距离为45厘米,所述活跃图像获取设备拍摄第二帧图像时,所述目标对象与所述活跃图像获取设备之间的距离为50厘米,所述活跃图像获取设备拍摄第三帧图像时,所述目标对象与所述活跃图像获取设备之间的距离为55厘米,则可以确定出所述目标对象与所述活跃图像获取设备之间的距离的变化趋势为:逐渐变远。

s202:根据所述距离变化趋势判断所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性。

需要说明的是,本申请实施例中提及的所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性,可以是所述目标对象离开所述活跃图像获取设备可以清晰拍摄照片的范围的可能性。

可以理解的是,所述活跃图像获取设备的对焦位置可以是确定的,因此,所述活跃图像获取设备可以清晰拍摄照片的范围可以是确定的。因此,可以根据所述活跃图像获取设备可以清晰拍摄照片的范围,以及所述距离变化趋势,判断所述目标对象离开所述活跃图像获取设备可以清晰拍摄照片的范围的可能性。

例如,当所述目标对象与所述活跃图像获取设备之间的距离小于等于60厘米时,所述活跃图像获取设备可以清晰拍摄包括目标对象的图像,而所述目标对象与所述活跃图像获取设备之间的距离的变化趋势为:逐渐变远。此时,可以确定所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性比较大。

s203:若所述可能性大于或者等于预设阈值,则加快所述非活跃图像获取设备拍摄图像的频率。

可以理解的是,若所述可能性大于或者等于预设阈值,则说明基于所述活跃图像获取设备拍摄的图像可能不能准确的分析出目标对象的注视点。此时,可以加快所述非活跃图像获取设备拍摄图像的频率,从而基于所述活跃图像获取设备拍摄的图像和所述非活跃图像获取设备拍摄的图像,分析目标对象的注视点。

需要说明的是,本申请实施例不具体限定所述预设阈值,所述预设阈值的具体取值可以根据实际情况具体确定。

如前文所述,所述遥测式眼球追踪系统包括多个图像获取设备,在一种可能的实现方式中,所述多个图像获取设备包括第一图像获取设备和第二图像获取设备。对于这种情况,步骤a“所述根据所述多个图像获取设备拍摄的图像获取目标对象的位置”可以通过如下步骤c和/或步骤d实现。

步骤c:获取所述第一图像获取设备拍摄的包含所述目标对象的第一图像,根据所述第一图像的特征确定所述目标对象与所述第一图像获取设备之间的距离。

需要说明的是,所述目标对象与所述第一图像获取设备之间的距离,可以通过所述第一图像中目标对象的瞳孔间距、或者目标对象的眼睛中的光斑间距或者目标对象的虹膜半径来体现。因此,可以提取所述第一图像中与所述目标对象的瞳孔间距相关的特征、或者与目标对象的眼睛中的光斑间距相关的特征或者与目标对象的虹膜半径相关的特征,从而确定所述目标对象与所述第一图像获取设备之间的距离。

步骤d:获取所述第二图像获取设备拍摄的包含所述目标对象的第二图像,根据所述第二图像的特征确定所述目标对象与所述第二图像获取设备之间的距离。

步骤d的具体实现方式与步骤c类似,可以提取所述第二图像中与所述目标对象的瞳孔间距相关的特征、或者与目标对象的眼睛中的光斑间距相关的特征或者与目标对象的虹膜半径相关的特征,从而确定所述目标对象与所述第二图像获取设备之间的距离。相关描述部分可以参考以上步骤a的描述,在此不再赘述。

相应的,若采用步骤c和/或步骤d获取目标对象的位置,则步骤b“根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备”可以通过如下步骤e和/或步骤f实现。

步骤e:若所述目标对象与所述第一图像获取设备之间的距离,处于第一距离区间,确定所述第一图像获取设备为活跃图像获取设备,确定所述第二图像获取设备为非活跃图像;其中,所述第一距离区间根据所述第一图像获取设备的对焦位置确定。

需要说明的是,当所述目标对象与所述第一图像获取设备之间的距离,处于第一距离区间时,可以认为所述第一图像获取设备可以清晰的拍摄到包括目标对象的图像,此时,可以确定所述第一图像获取设备为活跃图像获取设备,确定所述第二图像获取设备为非活跃图像获取设备。可以理解的是,所述第一图像获取设备可以清晰拍摄的图像的范围,与所述第一图像获取设备的对焦位置相关,因此,在本申请实施例中,所述第一距离区间可以根据所述第一图像获取设备的对焦位置确定。

步骤f:若所述目标对象与所述第一图像获取设备之间的距离,处于第二距离区间,确定所述第一图像获取设备为非活跃图像获取设备,确定所述第二图像获取设备为活跃图像获取设备;其中,第二距离区间根据所述第二图像获取设备的对焦位置确定。

需要说明的是,当所述目标对象与所述第二图像获取设备之间的距离,处于第二距离区间时,可以认为所述第二图像获取设备可以清晰的拍摄到包括目标对象的图像,此时,可以确定所述第二图像获取设备为活跃图像获取设备,确定所述第一图像获取设备为非活跃图像。

可以理解的是,所述第二图像获取设备可以清晰拍摄的图像的范围,与所述第二图像获取设备的对焦位置相关,因此,在本申请实施例中,所述第二距离区间可以根据所述第二图像获取设备的对焦位置确定。

示例性设备

参见图3,该图为本申请实施例提供的一种图像获取设备的控制装置的结构示意图。

本申请实施例提供的图像获取设备300,例如可以包括第一获取单元310、第一确定单元320、控制单元330和第二获取单元340。

第一获取单元310,用于获取多个图像获取设备拍摄的图像;

第一确定单元320,用于根据所述多个图像获取设备拍摄的图像确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备;

控制单元330,用于控制所述活跃图像获取设备以第一配置拍摄图像,控制所述非活跃图像获取设备以第二配置拍摄图像;

第二获取单元340,用于获取所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及获取所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;

其中,所述活跃图像获取设备发送所述活跃图像获取设备拍摄的图像所需的带宽,大于所述非活跃图像获取设备发送所述非活跃图像获取设备拍摄的图像所需的带宽。

可选的,所述第一确定单元320,具体用于:

根据所述多个图像获取设备拍摄的图像获取目标对象的位置;

根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备。

可选的,所述第一确定单元320,具体用于:

将拍摄的图像中不包括所述目标对象的图像获取设备,确定为所述非活跃图像获取设备;

从待选图像获取设备中确定活跃图像获取设备;其中,所述待选图像获取设备为所述多个图像获取设备中除了所述非活跃图像获取设备之外的图像获取设备。

可选的,所述控制单元330,具体用于:

控制所述活跃图像获取设备以第一频率拍摄图像,控制所述非活跃图像获取设备以第二频率拍摄图像,其中,所述第一频率大于所述第二频率;和/或,

控制所述活跃图像获取设备以第一图像位宽拍摄图像,控制所述非活跃图像获取设备以第二图像位宽拍摄图像,其中,所述第一位宽大于所述第二位宽;和/或,

控制所述活跃图像获取设备以第一分辨率拍摄图像,控制所述非活跃图像获取设备以第二分辨率拍摄图像;其中,所述第一分辨率大于所述第二分辨率。

可选的,所述第二获取单元340,具体用于:

获取以第一压缩比压缩后得到的所述活跃图像获取设备发送的所述活跃图像获取设备拍摄的图像,以及,获取以第二压缩比压缩后得到的所述非活跃图像获取设备发送的所述非活跃图像获取设备拍摄的图像;其中,所述第一压缩比小于所述第二压缩比。

可选的,所述装置300还包括:

第一调节单元,用于根据所述多个图像获取设备与所述目标对象之间的相对位置,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述装置300还包括:

第二调节单元,用于根据所述活跃图像获取设备拍摄的图像的清晰度,调节所述第一频率,和/或,调节所述第二频率。

可选的,所述装置300还包括:

第二确定单元,用于根据所述活跃图像获取设备连续拍摄的若干帧图像的特征,确定所述目标对象与所述活跃图像获取设备之间的距离的变化趋势;

判断单元,用于根据所述距离变化趋势判断所述活跃图像获取设备切换为所述非活跃图像获取设备的可能性;

频率加快单元,用于若所述可能性大于或者等于预设阈值,则加快所述非活跃图像获取设备拍摄图像的频率。

可选的,所述多个图像获取设备包括第一图像获取设备和第二图像获取设备;

所述根据所述多个图像获取设备拍摄的图像获取目标对象的位置,包括:

获取所述第一图像获取设备拍摄的包含所述目标对象的第一图像,根据所述第一图像的特征确定所述目标对象与所述第一图像获取设备之间的距离;

和/或,

获取所述第二图像获取设备拍摄的包含所述目标对象的第二图像,根据所述第二图像的特征确定所述目标对象与所述第二图像获取设备之间的距离。

可选的,所述根据所述多个图像获取设备与所述目标对象之间的相对位置确定所述多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,包括:

若所述目标对象与所述第一图像获取设备之间的距离,处于第一距离区间,确定所述第一图像获取设备为活跃图像获取设备,确定所述第二图像获取设备为非活跃图像;其中,所述第一距离区间根据所述第一图像获取设备的对焦位置确定;和/或,

若所述目标对象与所述第一图像获取设备之间的距离,处于第二距离区间,确定所述第一图像获取设备为非活跃图像获取设备,确定所述第二图像获取设备为活跃图像获取设备;其中,第二距离区间根据所述第二图像获取设备的对焦位置确定;

可选的,所述多个图像获取设备中的任意两个图像获取设备之间的距离小于预设距离阈值;所述多个图像获取设备中至少存在两个对焦位置不同的图像获取设备。

由于所述装置300是与以上方法实施例提供的方法对应的装置,因此,关于所述装置300的具体描述,可以参考以上方法实施例的描述部分,此处不再赘述。

由此可见,利用本申请实施例提供的图像获取设备的控制装置,可以确定出多个图像获取设备中的活跃图像获取设备和非活跃图像获取设备,并控制活跃图像获取设备以第一配置拍摄图像,非活跃图像获取设备以第二策略拍摄图像,使得非活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽比较小,小于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽,而不是所有图像获取设备将其拍摄的图像发送给控制器时所需的带宽均比较大(例如等于活跃图像获取设备将其拍摄的图像发送给控制器时所需的带宽),从而节省了传输所述多个图像获取设备拍摄的图像的带宽。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。

应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制

以上所述仅为本申请的较佳实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1