行为感知方法、装置及设备

文档序号:25869552发布日期:2021-07-13 16:31阅读:来源:国知局

技术特征:

1.一种行为感知方法,其特征在于,所述方法包括:

获取由设置在安全帽上的图像传感设备所采集图像数据,以及由设置在安全帽上的惯性传感器所采集位移数据;

根据所采集的图像数据生成佩戴者的骨骼姿态,以及佩戴者周围的三维场景图像;

根据所述位移数据,确定所述佩戴者的轨迹数据;

根据所述骨骼姿态、三维场景图像和所述轨迹数据,感知所述佩戴者行为。

2.根据权利要求1所述的方法,其特征在于,所述图像传感设备包括第一摄像头和第二摄像头,获取由设置在安全帽上的图像传感设备所采集的图像数据,包括:

获取由设置在安全帽上的第一摄像头所采集的佩戴者的第一人称视觉图像;

获取由设置在安全帽上的第二摄像头所采集的佩戴者的第三人称视觉图像。

3.根据权利要求2所述的方法,其特征在于,根据所采集的图像数据生成佩戴者的骨骼姿态,包括:

根据所述第二摄像头所获取的佩戴者的第三人称视觉图像,对佩戴者的骨骼关键点进行识别;

根据所识别的佩戴者的骨骼关键点信息,确定所述佩戴者的骨骼姿态。

4.根据权利要求2所述的方法,根据所采集的图像数据生成佩戴者周围的三维场景图像,包括:

根据所述第一摄像头所获取的佩戴者的第一人称视觉图像,通过同步定位与建图方法,获取所述佩戴者周围的三维场景图像。

5.根据权利要求4所述的方法,其特征在于,根据所述位移数据,确定所述佩戴者的轨迹数据,包括:

根据所述惯性传感器采集的位移数据生成所述佩戴的轨迹数据;

根据所述第一摄像头所采集的第一人称视觉图像在所述三维全景图像中的位置,对所述轨迹数据进行修正。

6.根据权利要求1所述的方法,其特征在于,在根据所述骨骼姿态、三维场景图像和所述轨迹数据,感知所述佩戴者行为之后,所述方法还包括:

当检测到佩戴者行为出现异常时,将所感知的佩戴者行为输入预先设定的行为分析网络模型,获得所感知行为的分析结果。

7.一种行为感知装置,其特征在于,所述装置包括:

数据采集单元,用于获取由设置在安全帽上的图像传感设备所采集图像数据,以及由设置在安全帽上的惯性传感器所采集位移数据;

图像数据处理单元,用于根据所采集的图像数据生成佩戴者的骨骼姿态,以及佩戴者周围的三维场景图像;

轨迹数据生成单元,用于根据所述位移数据,确定所述佩戴者的轨迹数据;

行为感知单元,用于根据所述骨骼姿态、三维场景图像和所述轨迹数据,感知所述佩戴者行为。

8.一种行为感知安全帽,其特征在于,所述安全帽包括用于采集佩戴者第一人称视觉图像的第一摄像头、用于采集佩戴者第三人称视觉图像的第二摄像头,用于采集佩戴者的位移数据的惯性传感器,用于将所述第一摄像头、第二摄像头和惯性传感器所采集的数据发送至服务器,以使得服务器根据所采集的数据进行行为感知分析的通讯模块。

9.一种行为感知设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述方法的步骤。

10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述方法的步骤。


技术总结
本申请属于施工技术领域,提出了一种行为感知方法、装置及设备。该方法包括:获取由设置在安全帽上的图像传感设备所采集图像数据,以及由设置在安全帽上的惯性传感器所采集位移数据;根据所采集的图像数据生成佩戴者的骨骼姿态,以及佩戴者周围的三维场景图像;根据所述位移数据,确定所述佩戴者的轨迹数据;根据所述骨骼姿态、三维场景图像和所述轨迹数据,感知所述佩戴者行为,由于本申请可以根据所确定佩戴者骨骼姿态、佩戴者周围的三维场景图像和佩戴者的轨迹数据进行佩戴者的行为感知,从而可以更为准确有效的感知佩戴者行为,有利于得到更为精确的行为感知数据。

技术研发人员:陈海南;黄林冲;郑野风
受保护的技术使用者:中山大学
技术研发日:2021.04.08
技术公布日:2021.07.13
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1