眼球定位方法及其图像处理装置与图像处理系统与流程

本发明涉及一种眼球定位的技术。

背景技术：

1、在新冠肺炎疫情或是季节性流感期间，民众皆配戴口罩以降低感染风险。然而，人脸辨识将会因为人脸特征被遮蔽，而无法达到该有的辨识效果，以致于后续无法精确地执行眼球定位。

技术实现思路

1、本发明提供一种眼球定位方法及其图像处理装置与图像处理系统。

2、在本发明的一范例实施例中，上述的方法包括下列步骤。取得用户的人脸图像，其中人脸图像包括无遮蔽人脸区域以及遮蔽人脸区域，无遮蔽人脸区域包括眼部区域。自无遮蔽人脸区域，检测至少一无遮蔽人脸特征，并且自遮蔽人脸区域，预估至少一遮蔽人脸特征。之后，根据无遮蔽人脸特征以及遮蔽人脸特征定位出眼球位置。

3、在本发明的一范例实施例中，上述的图像处理装置包括存储器以及处理器，其中处理器连接于存储器。存储器用以存储数据。处理器用以：取得用户的人脸图像，其中人脸图像包括无遮蔽人脸区域以及遮蔽人脸区域，其中无遮蔽人脸区域包括眼部区域；自无遮蔽人脸区域，检测至少一无遮蔽人脸特征；自遮蔽人脸区域，预估至少一遮蔽人脸特征；根据无遮蔽人脸特征以及遮蔽人脸特征定位出眼球位置。

4、在本发明的一范例实施例中，上述的图像处理系统包括图像捕获设备以及图像处理装置，其中图像处理装置连接于图像捕获设备。图像捕获设备用以捕获用户的人脸图像，其中人脸图像包括无遮蔽人脸区域以及遮蔽人脸区域，其中无遮蔽人脸区域包括眼部区域。图像处理装置用以：自图像捕获设备，取得人脸图像；自无遮蔽人脸区域，检测至少一无遮蔽人脸特征；自遮蔽人脸区域，预估至少一遮蔽人脸特征；根据无遮蔽人脸特征以及遮蔽人脸特征定位出眼球位置。

5、为让本发明能更明显易懂，下文特举实施例，并配合所附图式作详细说明如下。

技术特征：

1.一种眼球定位方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，还包括：

3.根据权利要求2所述的方法，其特征在于，自该遮蔽人脸区域，预估所述遮蔽人脸特征的步骤包括：

4.根据权利要求3所述的方法，其特征在于，该用户于该人脸图像中的该头部朝向角度包括头部转动方向，其中该头部转动方向是基于该眼部区域的眼球与人脸边界之间的距离所判定。

5.根据权利要求3所述的方法，其特征在于，该用户于该人脸图像中的该头部朝向角度包括头部转动角度，其中该头部转动角度是基于该眼部区域的深宽比所判定。

6.根据权利要求5所述的方法，其特征在于，该头部转动角度是基于该人脸图像中的该眼部区域的深宽比、参考角度比例、正脸的深宽比以及幂次所判定，其中该参考角度比例是介于250度与300度之间，该正脸的深宽比是介于0.3与0.35之间，该幂次是介于0.8与1.2之间。

7.根据权利要求3所述的方法，其特征在于，该用户于该人脸图像中的该头部朝向角度包括头部转动角度，其中该头部转动角度是根据该遮蔽人脸区域上的遮蔽对象的轮廓所判定。

8.根据权利要求3所述的方法，其特征在于，该用户于该人脸图像中的该头部朝向角度包括头部转动角度，其中该头部转动角度是根据该遮蔽人脸区域上的遮蔽对象的阴影区域的分布所判定。

9.根据权利要求3所述的方法，其特征在于，该用户于该人脸图像中的该头部朝向角度包括头部转动角度，其中该头部转动角度是根据该遮蔽人脸区域上的遮蔽对象的外部明亮区的连通特性所判定。

10.根据权利要求3所述的方法，其特征在于，利用该第一仿真模型，针对该遮蔽人脸区域进行修复，以产生该修复图像的步骤包括：

11.根据权利要求10所述的方法，其特征在于，根据该无遮蔽人脸区域以及该仿真修复区域，产生该修复图像的步骤包括：

12.根据权利要求1所述的方法，其特征在于，根据所述无遮蔽人脸特征以及所述遮蔽人脸特征定位出该眼球位置的步骤包括：

13.根据权利要求12所述的方法，其特征在于，针对该眼部区域的所述像素进行分群之前，该方法还包括：

14.根据权利要求13所述的方法，其特征在于，针对该眼部区域的所述像素进行分群的步骤包括：

15.根据权利要求13所述的方法，其特征在于，定位该眼球位置的步骤包括：

16.根据权利要求1所述的方法，其特征在于，自该遮蔽人脸区域预估所述遮蔽人脸特征的步骤包括：

17.根据权利要求16所述的方法，其特征在于，根据所述无遮蔽人脸特征以及所述遮蔽人脸特征，自该眼部区域定位出该眼球位置的步骤包括：

18.根据权利要求16所述的方法，其特征在于，定位出该眼球位置的步骤包括：

19.一种图像处理装置，其特征在于，包括：

20.一种图像处理系统，其特征在于，包括：

技术总结
本发明提供一种眼球定位方法及其图像处理装置与图像处理系统，此方法包括下列步骤。取得用户的人脸图像，其中人脸图像包括无遮蔽人脸区域以及遮蔽人脸区域，无遮蔽人脸区域包括眼部区域。自无遮蔽人脸区域，检测至少一无遮蔽人脸特征，并且自遮蔽人脸区域，预估至少一遮蔽人脸特征。之后，根据无遮蔽人脸特征以及遮蔽人脸特征定位出眼球位置。

技术研发人员：陈健龙,赵玉如,郑莛薰,林郁欣
受保护的技术使用者：财团法人工业技术研究院
技术研发日：
技术公布日：2024/1/13