一种基于毫米波雷达的跨模态监督行人步态识别方法

文档序号:37427689发布日期:2024-03-25 19:16阅读:来源:国知局

技术特征:

1.一种基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述逐帧对所述毫米波雷达信号进行预处理包括使用静态杂波滤波器去除环境中静止目标引起的静态杂波干扰。

3.根据权利要求2所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述行人点云序列,包括:

4.根据权利要求3所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述微多普勒特征,包括:

5.根据权利要求4所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述从中提取速度维度一维信号提取公式如下:

6.根据权利要求5所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述预设的步态识别网络模型包括毫米波雷达点云特征提取模块微多普勒特征提取模块特征融合模块步态识别模块人体关键点估计模块和基于视觉人体关键点估计模块其中:

7.根据权利要求6所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,在所述视频信号的视觉信息监督下,利用所述行人点云序列和微多普勒特征对预设的步态识别网络模型进行训练,得到训练好的步态识别网络模型,包括以下步骤:

8.根据权利要求7所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述在视觉信号监督下对预设的步态识别网络模型进行训练,包括以下步骤:

9.根据权利要求8所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述利用特征融合模块对点云时空特征和步态微动特征fmi进行融合,包括以下步骤:

10.根据权利要求9所述的基于毫米波雷达的跨模态监督行人步态识别方法,其特征在于,所述预测行人身份信息,包括以下步骤:


技术总结
本发明公开一种基于毫米波雷达的跨模态监督行人步态识别方法,包括以下步骤:采集行人的毫米波雷达信号与视频信号;逐帧对所述毫米波雷达信号进行预处理,得到行人点云序列和微多普勒特征;在所述视频信号的视觉信息监督下,利用所述行人点云序列和微多普勒特征对预设的步态识别网络模型进行训练,得到训练好的步态识别网络模型;根据所述训练好的步态识别网络模型对待识别的行人的毫米波雷达信号进行识别。本发明在基于毫米波雷达点云的行人步态识别方法的基础上,引入人体关键点检测任务,利用视觉信息对该任务进行监督,以限制步态特征空间,能够保证在行人点云较为稀疏且受噪声干扰时,步态识别网络仍能够提取有效行人步态相关特征。

技术研发人员:刘震宇,马崇润,涂思龙,刘泽丰,何徽鸿
受保护的技术使用者:广东工业大学
技术研发日:
技术公布日:2024/3/24
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1