图像处理方法和设备与流程

文档序号:21083830发布日期:2020-06-12 16:45阅读:来源:国知局

技术特征:

1.一种图像处理方法,包括:

接收图像帧;

检测图像帧中的用户的脸部区域;

将多个预设特征点对准在包括在脸部区域中的多个特征部位;

基于与所述多个特征部位的组合对应的第一区域,对对准的结果执行第一检查;

基于与所述多个特征部位的单个特征部位对应的第二区域,对对准的结果执行第二检查;

基于确定第一检查和第二检查中的至少一个的失败,重新检测脸部区域;以及

基于确定第一检查和第二检查二者的成功,输出关于脸部区域的信息。

2.根据权利要求1所述的图像处理方法,其中,检测脸部区域的步骤包括:

当图像帧是初始图像帧时,检测包括在图像帧中的用户的脸部区域;以及

当图像帧不是初始图像帧时,接收基于图像帧的多个先前图像帧之一检测的脸部区域。

3.根据权利要求1所述的图像处理方法,其中,对准的步骤包括:

将所述多个预设特征点对准在包括在脸部区域和脸部区域的周围区域中的所述多个特征部位。

4.根据权利要求1所述的图像处理方法,其中,对准的步骤包括:

基于脸部区域的图像信息移动所述多个预设特征点。

5.根据权利要求1所述的图像处理方法,其中,当图像帧是初始图像帧时,在被对准之前的所述多个预设特征点对应于多个用户的特征部位的平均位置。

6.根据权利要求1所述的图像处理方法,其中,当图像帧不是初始图像帧时,在被对准之前的所述多个预设特征点对应于基于先前图像帧对准的点。

7.根据权利要求1所述的图像处理方法,其中,所述多个特征部位的组合包括用户的眼睛和鼻子,并且单个特征部位包括用户的眼睛。

8.根据权利要求1所述的图像处理方法,其中,执行第一检查的步骤包括:

基于第一区域的图像信息确定第一区域是否包括所述多个特征部位的组合。

9.根据权利要求1所述的图像处理方法,其中,执行第一检查的步骤包括:

基于第一区域的图像信息确定第一区域是否对应于与所述多个特征部位的组合对应的类别。

10.根据权利要求1所述的图像处理方法,其中,执行第二检查的步骤包括:

基于第二区域的图像信息确定第二区域是否对应于单个特征部位。

11.根据权利要求1所述的图像处理方法,其中,执行第二检查的步骤包括:

基于第二区域的图像信息确定第二区域是否对应于与单个特征部位对应的类别。

12.根据权利要求1所述的图像处理方法,其中,输出关于脸部区域的信息的步骤包括:

输出关于以下项中的至少一个的信息:包括在脸部区域中的瞳孔的位置、基于瞳孔的位置的视点和脸部区域中的面部表情。

13.根据权利要求1所述的图像处理方法,还包括:

对重新检测的脸部区域重复地执行对准、第一检查和第二检查。

14.根据权利要求1所述的图像处理方法,其中,图像帧包括彩色图像帧和红外图像帧中的至少一个。

15.一种存储指令的非暂时性计算机可读存储介质,所述指令能够由用于执行权利要求1所述的图像处理方法的处理器来执行。

16.一种图像处理设备,包括:

处理器,被配置为:

检测图像帧中的用户的脸部区域,

将多个预设特征点对准在包括在脸部区域中的多个特征部位,

基于与所述多个特征部位的组合对应的第一区域,对对准的结果执行第一检查,基于与所述多个特征部位的单个特征部位对应的第二区域,对对准的结果执行第二检查,并且基于确定第一检查和第二检查中的至少一个的失败重新检测脸部区域;以及

通信接口,被配置为:接收图像帧,并基于确定第一检查和第二检查二者的成功输出关于脸部区域的信息。

17.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

当图像帧是初始图像帧时,检测包括在图像帧中的用户的脸部区域;以及

当图像帧不是初始图像帧时,接收基于图像帧的多个先前图像帧之一检测的脸部区域。

18.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

将所述多个预设特征点对准在包括在脸部区域和脸部区域的周围区域中的所述多个特征部位。

19.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

基于脸部区域的图像信息移动所述多个预设特征点。

20.根据权利要求16所述的图像处理设备,其中,当图像帧是初始图像帧时,在被对准之前的所述多个预设特征点对应于多个用户的特征部位的平均位置。

21.根据权利要求16所述的图像处理设备,其中,当图像帧不是初始图像帧时,在被对准之前的所述多个预设特征点对应于基于先前图像帧对准的点。

22.根据权利要求16所述的图像处理设备,其中,所述多个特征部位的组合包括用户的眼睛和鼻子,并且单个特征部位包括用户的眼睛。

23.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

基于第一区域的图像信息确定第一区域是否包括所述多个特征部位的组合。

24.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

基于第一区域的图像信息确定第一区域是否对应于与所述多个特征部位的组合对应的类别。

25.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

基于第二区域的图像信息确定第二区域是否对应于单个特征部位。

26.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

基于第二区域的图像信息确定第二区域是否对应于与单个特征部位对应的类别。

27.根据权利要求16所述的图像处理设备,其中,通信接口还被配置为:

输出关于以下项中的至少一个的信息:包括在脸部区域中的瞳孔的位置、基于瞳孔的位置的视点和脸部区域中的面部表情。

28.根据权利要求16所述的图像处理设备,其中,处理器还被配置为:

对重新检测的脸部区域重复地执行对准、第一检查和第二检查。

29.根据权利要求16所述的图像处理设备,其中,图像帧包括彩色图像帧和红外图像帧中的至少一个。

30.一种图像处理设备,包括:

存储器,被配置为存储一个或多个指令;以及

处理器,被配置为执行所述一个或多个指令以:

检测图像帧中用户的脸部区域,

确定第一区域中的多个特征部位的组合是否满足第一标准,

确定所述多个特征部位中的一个或多个是否单独地满足第二标准,

基于确定第一区域中的所述多个特征部位的组合不满足第一标准或者所述多个特征部位中的一个或多个不单独地满足第二标准,重新检测脸部区域;以及

基于确定第一区域中的所述多个特征部位的组合满足第一标准并且所述多个特征部位中的一个或多个单独地满足第二标准,输出关于脸部区域的信息。

31.根据权利要求30所述的图像处理设备,其中,第一标准对应于脸部的特征。

32.根据权利要求30所述的图像处理设备,其中,第二标准对应于眼睛的特征。

33.一种图像处理方法,包括:

检测图像帧中用户的脸部区域;

确定第一区域中的多个特征部位的组合是否满足第一标准;

确定所述多个特征部位中的一个或多个是否单独地满足第二标准;

基于确定第一区域中的所述多个特征部位的组合不满足第一标准或者所述多个特征部位中的一个或多个不单独地满足第二标准,重新检测脸部区域;以及

基于确定第一区域中的所述多个特征部位的组合满足第一标准并且所述多个特征部位中的一个或多个单独地满足第二标准,输出关于脸部区域的信息。

34.根据权利要求33所述的图像处理方法,其中,第一标准对应于脸部的特征。

35.根据权利要求33所述的图像处理方法,其中,第二标准对应于眼睛的特征。


技术总结
公开一种图像处理方法和设备。图像处理方法包括:接收图像帧;检测图像帧中的用户的脸部区域;将多个预设特征点对准在包括在脸部区域中的多个特征部位;基于与所述多个特征部位的组合对应的第一区域,对对准的结果执行第一检查;基于与所述多个特征部位的单个特征部位对应的第二区域,对对准的结果执行第二检查;基于确定第一检查和第二检查中的至少一个的失败,重新检测脸部区域;以及基于确定第一检查和第二检查的成功,输出关于脸部区域的信息。

技术研发人员:姜东佑;许珍九;姜柄敏
受保护的技术使用者:三星电子株式会社
技术研发日:2019.07.22
技术公布日:2020.06.12
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1