一种遗留物体检测的方法、装置及系统与流程

文档序号:20754650发布日期:2020-05-15 17:19阅读:来源:国知局

技术特征:

1.一种遗留物体检测的方法,其特征在于,包括:

将第一视频序列的第一帧图像更新为背景帧图像,并对第一视频序列中的每一帧图像进行检测与判断,确定检测到的第一物体是否为指定类型物体;

若为指定类型物体,则对所述第一物体的第一物体遗留时间进行累加,并确定第一交并比iou是否等于或大于第一预设阈值,其中,所述第一iou为所述第一物体的目标检测框与检测到的人的目标检测框之间的iou;

若等于或大于,则确定所述第一物体的第一图像稳定时间以及第一背景差异时间,其中,任意相邻两帧图像中所述第一物体的目标检测框的位置以及所述目标检测框中的物体相比较,所述第一图像稳定时间为所述比较未发生变化的持续时间,每一帧图像中的所述第一物体的目标检测框与背景帧图像中的所述第一物体的目标检测框相比较,所述第一背景差异时间为所述比较有发生变化的持续时间;

若所述第一物体遗留时间、第一图像稳定时间以及第一背景差异时间均大于各自所对应的第二预设阈值,则确定所述第一物体为遗留物体;

若所述第一物体遗留时间、第一图像稳定时间均大于各自所对应的第二预设阈值且所述第一背景差异时间为零,则确定所述第一物体为非遗留物体。

2.如权利要求1所述的方法,其特征在于,对第一视频序列中的每一帧图像进行检测与判断,确定检测到的第一物体是否为指定类型物体,包括:

通过已训练的目标检测模型对第一视频序列中的每一帧图像进行检测,确定检测到的第一物体是否为指定类型物体;

若是,则通过已训练的目标跟踪模型对所述第一物体进行跟踪,记录所述第一物体持续在目标检测框中的跟踪时间,判断所述跟踪时间是否大于第三预设阈值;

若大于,则通过已训练的目标分类模型对所述第一物体进行分类,根据分类结果确定所述第一物体是否为指定类型物体。

3.如权利要求2所述的方法,其特征在于,通过已训练的目标跟踪模型对所述第一物体进行跟踪,记录所述第一物体持续在目标检测框中的跟踪时间,包括:

获取所述第一视频序列的任意相邻两帧图像中所述第一物体的目标检测框的第二iou,判断所述第二iou是否大于或者等于第四预设阈值;

若大于或者等于,则确定跟踪到所述第一物体,对所述第一物体的跟踪时间进行累加。

4.如权利要求1所述的方法,其特征在于,确定所述第一物体的第一图像稳定时间,包括:

获取所述第一视频序列的任意相邻两帧图像中所述第一物体的目标检测框的像素值的变化幅度,判断所述变化幅度的均值是否小于第五预设阈值;

若小于,则对所述第一物体的第一图像稳定时间进行累加。

5.如权利要求1所述的方法,其特征在于,确定所述第一物体的第一背景差异时间,包括:

获取所述第一视频序列的每一帧图像与所述背景帧图像中所述第一物体的目标检测框的像素值的变化幅度,判断所述变化幅度的标准差是否大于第六预设阈值;

若大于,则对所述第一物体的第一背景差异时间进行累加。

6.如权利要求1所述的方法,其特征在于,确定所述第一物体为遗留物体或者非遗留物体之后,还包括:

对第二视频序列中的每一帧图像进行检测与判断,确定所述第一物体的第二图像稳定时间以及第二背景差异时间,其中,所述第二视频序列的第一帧图像为确定所述第一图像稳定时间以及第一背景差异时间时的帧图像的下一帧图像;

判断所述第二图像稳定时间以及第二背景差异时间是否大于各自的所对应的第七预设阈值;

若是,则确定所述第一物体已发生搬移。

7.如权利要求6所述的方法,其特征在于,确定所述第一物体的第二图像稳定时间以及第二背景差异时间之后,还包括:

若所述第二背景差异时间为零且所述背景更新时间大于第八预设阈值,则将确定所述第二图像稳定时间以及第二背景差异时间时的帧图像更新为背景帧图像,其中,所述背景更新时间为上一次背景更新的时间节点与当前的时间节点之间的时间间隔。

8.一种遗留物体检测的装置,其特征在于,包括:

第一确定模块,用于将第一视频序列的第一帧图像更新为背景帧图像,并对第一视频序列中的每一帧图像进行检测与判断,确定检测到的第一物体是否为指定类型物体;

第二确定模块,用于若为指定类型物体,则对所述第一物体的第一物体遗留时间进行累加,并确定第一交并比iou是否等于或大于第一预设阈值,其中,所述第一iou为所述第一物体的目标检测框与检测到的人的目标检测框之间的iou;

第三确定模块,用于若等于或大于,则确定所述第一物体的第一图像稳定时间以及第一背景差异时间,其中,任意相邻两帧图像中所述第一物体的目标检测框的位置以及所述目标检测框中的物体相比较,所述第一图像稳定时间为所述比较未发生变化的持续时间,每一帧图像中的所述第一物体的目标检测框与背景帧图像中的所述第一物体的目标检测框相比较,所述第一背景差异时间为所述比较有发生变化的持续时间;

第四确定模块,用于若所述第一物体遗留时间、第一图像稳定时间以及第一背景差异时间均大于各自所对应的第二预设阈值,则确定所述第一物体为遗留物体;若所述第一物体遗留时间、第一图像稳定时间均大于各自所对应的第二预设阈值且所述第一背景差异时间为零,则确定所述第一物体为非遗留物体。

9.一种遗留物体检测的系统,其特征在于,包括:

存储器,用于存储程序指令;

处理器,用于调用所述存储器中存储的程序指令,按照获得的程序指令执行权利要求1-7任一项所述的方法包括的步骤。

10.一种存储介质,其特征在于,所述存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行权利要求1-7任一项所述的方法包括的步骤。


技术总结
本发明公开了一种遗留物体检测的方法、装置及系统,用于有效解决遗留物体的检测问题。所述方法包括:将第一视频序列的第一帧图像更新为背景帧图像,并对第一视频序列中的每一帧图像进行检测与判断,确定检测到的第一物体是否为指定类型物体;若为指定类型物体,则对第一物体的第一物体遗留时间进行累加,并确定第一交并比IOU是否等于或大于第一预设阈值,其中,第一IOU为第一物体的目标检测框与检测到的人的目标检测框之间的IOU;若等于或大于,则确定第一物体的第一图像稳定时间以及第一背景差异时间;根据第一物体遗留时间、第一图像稳定时间以及第一背景差异时间,确定第一物体是否为遗留物体。

技术研发人员:刘亚洁
受保护的技术使用者:浙江大华技术股份有限公司
技术研发日:2019.12.20
技术公布日:2020.05.15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1