基于互视角的遮挡评估方法及装置、设备、系统和介质与流程

文档序号:21733192发布日期:2020-08-05 01:28阅读:来源:国知局

技术特征:

1.一种基于互视角的遮挡评估方法,其特征在于,所述方法包括:

获取通过至少一个顶部深度相机对目标场景以俯视角度采集得到的第一成像数据、及通过光场相机阵列对目标场景以主视角度采集得到的第二成像数据,据以得到针对目标场景中多个区域中的人员头部的世界坐标系下的三维坐标集合;

依据所述三维坐标集合将各人员坐标模型化至目标人员脸部坐在的焦平面,以得到人员焦平面坐标集合;

依据所述光场相机阵列中至少一个彩色传感器,评估任意一或多个所述彩色传感器视角下目标人员被遮挡情况,并得到针对所述目标人员的遮挡程度评估集合,以供选出最优视角。

2.根据权利要求1所述的基于互视角的遮挡评估方法,其特征在于,所述获取通过至少一个顶部深度相机对目标场景以俯视角度采集得到的第一成像数据、及通过光场相机阵列对目标场景以主视角度采集得到的第二成像数据,据以得到针对目标场景中多个区域中的人员头部的世界坐标系下的三维坐标集合的方法包括:

从所述第一成像数据中截取符合行人头部高度的第三成像数据;

对所述第三成像数据进行头部区域检测以检测其中的各个行人头部;

定位所述第三成像数据中的至少一个行人头部上预定位置的参考点的图像坐标,并利用所述顶部深度相机的内、外参数映射为该参考点的世界坐标;

利用所述光场相机阵列的外参来映射该参考点的世界坐标为所述光场相机阵列的相机坐标系下的相机坐标,以得到所述参考点所在的对应该所述光场相机阵列的深度数据;

依据所述第二成像数据、及深度数据,以得到针对目标场景中多个区域中的人员头部的世界坐标系下的三维坐标集合。

3.根据权利要求2所述的基于互视角的遮挡评估方法,其特征在于,所述三维坐标集合包括:人员头部中心点的世界坐标系下的三维坐标集、及以人员头部中心点为中心预设半径为r所构成的人员头围的世界坐标系下的三维坐标集合。

4.根据权利要求3所述的基于互视角的遮挡评估方法,其特征在于,所述依据所述三维坐标集合将各人员坐标模型化至目标人员脸部坐在的焦平面,以得到人员焦平面坐标集合的方法包括:

依据所述人员头部中心点、及所述半径r,将各所述人员的脸部区域模型化为宽度:高度=2r:3r的脸部矩形;

依据所述脸部矩阵,将各所述人员的躯干区域模型化为宽度:高度=所述脸部矩阵宽度的3部:所述脸部矩阵高度的2部的躯干矩形;

依据所述焦平面、人员头部中心点、所述半径r、脸部与躯干的比例关系,计算出所述包含脸部矩形与躯干矩形的世界坐标系下的人员焦平面坐标集合。

5.根据权利要求1所述的基于互视角的遮挡评估方法,其特征在于,所述评估任意一或多个所述彩色传感器视角下目标人员被遮挡情况的方法包括:

依据所述彩色传感器所标定的内参数、旋转矩阵、及平移向量,以判定所述目标人员是否在所述彩色传感器的视野范围内;若否,则判定为全遮挡;

若判定所述目标人员在所述彩色传感器的视野范围内,则判定所述目标人员与遮挡人员的焦平面的前后关系;

若所述目标人员的焦平面在前,则判定为未被遮挡;若所述目标人员的焦平面在后,则评估所述目标人员被所述遮挡人员遮挡的比例;

依据所述目标人员于所述遮挡人员的焦平面上的投影与所述遮挡人员重叠程度,得到针对所述目标人员的遮挡程度评估。

6.根据权利要求5所述的基于互视角的遮挡评估方法,其特征在于,所述方法还包括:

预设一函数ratio=overlapping(robj,rocclu),以计算同一焦平面上所述目标人员与所述遮挡人员的重叠度。

7.一种基于互视角的遮挡评估装置,其特征在于,所述装置包括:

获取模块,用于获取通过至少一个顶部深度相机对目标场景以俯视角度采集得到的第一成像数据、及通过光场相机阵列对目标场景以主视角度采集得到的第二成像数据,据以得到针对目标场景中多个区域中的人员头部的世界坐标系下的三维坐标集合;

处理模块,用于依据所述三维坐标集合将各人员坐标模型化至目标人员脸部坐在的焦平面,以得到人员焦平面坐标集合;依据所述光场相机阵列中至少一个彩色传感器,评估任意一或多个所述彩色传感器视角下目标人员被遮挡情况,并得到针对所述目标人员的遮挡程度评估集合,以供选出最优视角。

8.一种基于互视角的遮挡评估设备,其特征在于,所述设备包括:存储器、处理器、及通信器;所述存储器用于存储计算机程序;所述处理器运行计算机程序实现权利要求1至6中任意一项所述的基于互视角的遮挡评估方法;所述通信器用于与外部设备通信连接。

9.一种基于互视角的遮挡评估系统,其特征在于,所述系统包括:

设于场景上方且采集方向为向下的至少一个深度相机;

设置成采集方向为面向该场景中行人的光场相机阵列;

如权利要求8所述的基于互视角的遮挡评估设备,通过其通信器通信连接各所述深度相机及光场相机阵列。

10.一种计算机存储介质,其特征在于,存储有计算机程序,所述计算机程序被运行时执行如权利要求1至6中任一项所述的基于互视角的遮挡评估方法。


技术总结
本申请的基于互视角的遮挡评估方法及装置、设备、系统和介质,通过获取通过至少一个顶部深度相机对目标场景以俯视角度采集得到的第一成像数据、及通过光场相机阵列对目标场景以主视角度采集得到的第二成像数据,据以得到针对目标场景中多个区域中的人员头部的世界坐标系下的三维坐标集合;依据所述三维坐标集合将各人员坐标模型化至目标人员脸部坐在的焦平面,以得到人员焦平面坐标集合;依据所述光场相机阵列中至少一个彩色传感器,评估任意一或多个所述彩色传感器视角下目标人员被遮挡情况,并得到针对所述目标人员的遮挡程度评估集合,以供选出最优视角。本申请可以选择出最优的视角对被遮挡位置进行光场渲染,获取到最佳的人脸信息。

技术研发人员:朱康
受保护的技术使用者:曜科智能科技(上海)有限公司
技术研发日:2019.01.25
技术公布日:2020.08.04
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1