一种基于着装识别行人的目标定位方法及装置与流程

本发明涉及智能监控技术，尤其涉及一种基于着装识别行人的目标定位方法及装置。

背景技术：

1、基于人员着装款式和颜色进行人员检索，是一种利用人体的着装外观特征来进行人员识别和检索的技术。它可以用于安防监控、零售客群分析、失踪人口寻找等场景。它的主要挑战是如何在不同的环境条件、摄像头角度、光照变化、人体遮挡等情况下，提取出鲁棒和可区分的着装特征。

2、基于人员着装款式和颜色进行人员检索，主要方法有两种：一种是基于人体检测与属性识别的方法，另一种是基于行人重识别的方法。前者通过检测图像中的所有人体，返回每个人体的位置坐标；识别人体的着装类别、着装颜色等属性信息，然后根据查询条件进行筛选和匹配。后者通过从人物图像中提取对服装变化鲁棒的特征，如人体的形状、轮廓、步态等，然后根据相似度进行排序和检索。基于人体检测与属性识别的方法可以较好的应对着装主色为单色的情况，无法实现基于着装颜色分布定量的进行人员检索；基于行人重识别的方法可以较好的解决已有待检索人员样本图片的情况，无法实现仅通过着装类型和手动选择着装颜色分布(语言描述)来进行人员的检索。

技术实现思路

1、(一)要解决的技术问题

2、鉴于现有技术的上述缺点、不足，本发明提供一种基于着装识别行人的目标定位方法及装置。

3、(二)技术方案

4、为了达到上述目的，本发明采用的主要技术方案包括：

5、第一方面，本发明实施例提供一种基于着装识别行人的目标定位方法，包括：

6、s10、针对待分析的图像，识别图像中目标的着装类型、着装颜色比例向量；

7、s20、根据着装类型，从预先构建的底库中第一次筛选出与着装类型匹配的第一图像集；

8、s30、计算着装颜色比例向量与第一图像集中的每一图像的颜色比例向量的距离/相似度；

9、s40、将所有的距离/相似度排序，选择大于指定阈值的距离/相似度所属的图像作为检索结果，或者，选择距离/相似度最高的n个图像作为检索结果，n为大于1的自然数。

10、可选地，所述s10包括：

11、采用人体检测器从待分析的图像中识别出人体图，并获得仅包含人体图的子图；

12、基于子图，采用预先训练的人体着装语义分割模型获取每一子图的着装类型和着装掩码信息；

13、根据所有子图的着装类型和着装掩码信息，统计上装和/或下装的hsv颜色向量；将上装的hsv颜色向量作为上装的着装颜色比例向量，将下装的hsv颜色向量作为下装的着装颜色比例向量，

14、所述hsv颜色向量为细粒度hsv柱状图。

15、可选地，所述s10包括：

16、采用人体检测器从待分析的图像中识别出人体图，并获得仅包含人体图的子图；

17、接收用户选择的着装类型；

18、接收用户触发的与着装类型对应的、且子图所属的调色板中颜色种类和颜色比例；

19、将颜色种类和颜色比例映射处理，获得hsv颜色向量/rgb颜色向量。

20、可选地，所述着装类型包括：

21、短袖，长袖、短袖外套、长袖外套、马甲、吊带、短裤、长裤、半身裙、短袖连衣裙、长袖连衣裙、长裤夏装、马甲裙和/或吊带裙。

22、可选地，所述s20包括：

23、若着装类型为短袖外套，则从预先构建的底库中第一次筛选出标签为短袖外套的第一图像集；

24、或者，若着装类型为下装，则从预先构建的底库中第一次筛选出标签为下装的第一图像集；

25、或者，若着装类型为指定类型的上装和指定类型的下装，则从预先构建的底库中第一次筛选出标签为指定类型的上装和指定类型的下装的第一图像集。

26、可选地，所述s30包括：

27、若着装类型为指定类型的上装和指定类型的下装，则获取指定类型上装的颜色比例向量与第一图像集中的每一图像中指定类型上装的颜色比例向量的距离/相似度，得到指定类型上装的第一距离/相似度值；获取指定类型下装的颜色比例向量与第一图像集中的每一图像中指定类型下装的颜色比例向量的距离/相似度，得到指定类型下装的第二距离/相似度值；

28、根据指定类型上装的第一距离/相似度值、指定类型下装的第二距离/相似度值，按照权重分配系数获取着装类型所属的距离/相似度值；

29、所述权重分配系数为按照指定类型上装和指定类型下装在人体外部呈现的长度确定的系数，或者为按照指定类型上装和指定类型下装在人体外部呈现的长度和颜色反差值确定的系数；

30、或者，

31、若着装类型为指定类型上装和指定类型下装，则将指定类型上装的颜色比例向量和指定类型下装的颜色比例向量进行拼接，获得拼接后的着装类型的颜色比例向量，

32、获取拼接后的着装类型的颜色比例向量与第一图像集中的每一图像的颜色比例向量的距离/相似度，得到着装类型所属的距离/相似度值；

33、所述权重分配系数为按照指定类型上装和指定类型下装在人体外部呈现的长度确定的系数，或者为按照指定类型上装和指定类型下装在人体外部呈现的长度和颜色反差值确定的系数。

34、可选地，所述方法还包括：

35、s00、基于给定的图像数据集，构建底库；

36、所述底库包括：着装类型、着装颜色所占比例、颜色反差值表、着装细粒度、hsv颜色柱状分布信息、着装颜色比例向量；

37、所述构建底库包括：

38、采用人体检测器的处理图像数据集中每一图像，获取第一子图；

39、采用着装语义分割模型处理每一第一子图，获得每一图像的着装类型标签和hsv颜色向量；

40、将每一图像的着装类型标签和hsv颜色向量和每一图像绑定并组成底库。

41、可选地，所述s30包括：

42、若上装在人体外部呈现的长度为l，下装在人体外部呈现长度为p，则

43、则上装的权重系数为l/(l+p)，下装的权重系数为p/(l+p)；

44、或者，上装的权重系数为[l/(l+p)]*l*0.03/δm；下装的权重系数为[p/(l+p)]*p*0.05/δm；δm为通过预先定义的颜色反差值表获取的颜色反差值，l和p为大于0的数。。

45、第二方面，本发明提供一种基于着装识别行人的目标定位方法，包括：

46、s00、获取监控视频内指定时间段内的图像，构建底库；所述底库包括：着装类型、着装颜色所占比例、颜色反差值表、着装细粒度、hsv颜色柱状分布信息、着装颜色比例向量；

47、s10、针对监控视频/与监控视频关联的监控设备内的待分析的图像，识别图像中目标的着装类型、着装颜色比例向量；

48、s20、根据着装类型，从预先构建的底库中第一次筛选出与着装类型匹配的第一图像集；

49、s30、计算着装颜色比例向量与第一图像集中的每一图像的颜色比例向量的距离/相似度；

50、s40、将所有的距离/相似度排序，选择大于指定阈值的距离/相似度所属的图像作为检索结果，或者，选择距离/相似度最高的n个图像作为检索结果，n为大于1的自然数。

51、第三方面，本发明提供一种计算装置或计算设备，包括存储器和处理器，所述存储器中存储计算机程序，所述处理器执行所述存储器中存储的计算机程序，用以执行上述第一方面任一所述的一种基于着装识别行人的目标定位方法的步骤。

52、(三)有益效果

53、本发明实施例的方法可识别图像中目标的着装类型、着装颜色比例向量；并根据着装类型，从预先构建的底库中第一次筛选出与着装类型匹配的第一图像集；同时，计算着装颜色比例向量与第一图像集中的每一图像的颜色比例向量的距离/相似度；进而筛选需要定位的目的，上述方法简单快捷，可以较好的在控制设备中实现，实现对行人的初级筛选和识别，便于实现最终的目标锁定和定位。