[0172]另外，在上述实施方式中，取得人物的动作路线，并基于该动作路线来取得统计信息(停留时间及停留度)，但是该统计信息取得处理不限定于基于动作路线。例如，可以取得关于人物框(人物存在的矩形的区域)的坐标信息作为人物的位置信息，并对各像素(检测要素)计数位于人物框内的次数，而取得各像素的计数值，通过对该各像素的计数值进行适当的统计处理例如平均化处理，以对象区域(参照图3A、图3B)或网格(参照图14A、图14B)为单位进行汇总，取得对象区域或各网格的统计信息。另外，还可以取得关于人物框的中心点的坐标信息，对人物框的中心点位于对象区域或网格内的次数进行计数，而取得对象区域或各网格的统计信息。
[0173]另外，在上述第一实施方式中，监控所需的处理由设于店铺的PC3进行，但是如图1所示，上述所需的处理也可以由设于总部的PC11、构成云计算系统的云计算机12进行。另夕卜，也可以通过多个信息处理装置来分担所需的处理，经由IP网络、LAN等通信介质，在多个信息处理装置之间交换信息。在该情况下，由执行所需处理的多个信息处理装置构成监控系统。
[0174]在这种结构中，使设于店铺的PC3等装置进行监控所需的处理中的至少运算量较大的处理，例如人物检测处理即可。若这样构成，则可以减少剩余处理所需的信息的数据量，因此剩余处理即便由设置在与店铺不同的场所的信息处理装置、例如设置于总部的PC11进行，也能够减轻通信负载，因此广域网络连接方式的系统的运用变得容易。
[0175]另外，可以使云计算机12进行监控所需的处理中的至少运算量较大的处理，例如人物检测处理。若这样构成，则可以减少剩余处理的运算量，因此在店铺等使用者侧不需要高速的信息处理装置，能够降低使用者所负担的成本。
[0176]另外，也可以使云计算机12进行所需的全部处理，或者至少由云计算机12进行所需处理中的影像输出处理，若这样构成，则除了设置店铺、总部的PC3、11之外，在智能手机
13、平板电脑终端14等便携型终端中也能够显示影像，由此除了店铺、总部之外，在外出的目的地等任意场所均能够确认店铺内的状况。
[0177]另外，在本实施方式中，对使设于店铺的PC3进行监控所需的处理，并使PC3的监视器7显示遮罩条件设定画面、监控画面，通过PC3进行所需的输入及输出的情况进行了说明，但是也可以通过与进行监控所需的处理的信息处理装置不同的信息处理装置，例如设于总部的PC11、平板电脑终端14等便携型终端进行所需的输入及输出。
[0178]另外，近年来，开发了作为监视器而追求高画质化的4K电视机等，通过采用与这种4K电视机对应的相机，能够提高人物的识别性能，即使在存在很多人物的环境下，使用者也能够根据遮罩重放影像而容易地掌握人物的行动。
[0179]本发明的监控装置、监控系统及监控方法具有使用者能够通过一个监控画面而同时掌握预定期间内的人物的活动状况和某瞬间的人物的活动状况的效果，作为生成并输出将表示监视区域的移动体的活动状况的前景图像重叠于背景图像上的监控影像的监控装置、监控系统及监控方法等是有用的。
【主权项】
1.一种监控装置，生成并输出将表示监视区域中的移动体的活动状况的前景图像重叠于背景图像上的监控影像，所述监控装置的特征在于，具有: 处理器；及 存储指令的存储器， 作为所述处理器的执行所述指令的结构，具备: 位置信息取得部，从所述监视区域的影像中检测出移动体，并取得各移动体的位置信息; 统计信息取得部，对由所述位置信息取得部取得的所述位置信息按照时间进行统计处理，并根据所述统计处理的对象期间的设定而取得与移动体的停留状况相关的统计信息；第一前景图像生成部，生成使由所述统计信息取得部取得的所述统计信息可视化的第一前景图像； 第二前景图像生成部，基于由所述位置信息取得部取得的所述位置信息，对应各预定时刻生成与移动体的图像区域对应的第二前景图像；及 影像输出控制部，对应各预定时刻生成并输出将由所述第一前景图像生成部及所述第二前景图像生成部生成的所述第一前景图像及所述第二前景图像重叠于所述背景图像上的所述监控影像。2.根据权利要求1所述的监控装置，其特征在于， 所述监控装置还具备与所述第一前景图像及所述第二前景图像中的至少一方的显示方式相关的显示方式调整部， 所述显示方式调整部对所述第一前景图像及所述第二前景图像混同的混同状态进行检测，并变更所述第一前景图像及所述第二前景图像中的至少一方的显示方式以消除所述混同状态。3.根据权利要求2所述的监控装置，其特征在于， 在变更所述第一前景图像及所述第二前景图像中的至少一方的显示方式时，所述显示方式调整部对决定显示方式的颜色、图案、轮廓线及透过率中的至少一个显示要素进行变更。4.根据权利要求1所述的监控装置，其特征在于， 所述监控装置还具备与所述第一前景图像及所述第二前景图像中的至少一方的显示方式相关的显示方式设定部， 所述显示方式设定部根据使用者的输入操作来设定所述第一前景图像及所述第二前景图像中的至少一方的显示方式。5.根据权利要求4所述的监控装置，其特征在于， 所述显示方式设定部以不会产生所述第一前景图像及所述第二前景图像混同的混同状态的方式对与所述显示方式相关的使用者的输入操作进行引导。6.根据权利要求5所述的监控装置，其特征在于， 所述显示方式设定部在设定所述第一前景图像及所述第二前景图像中的至少一方的显示方式时，以不会产生所述混同状态的方式对能够通过使用者的输入操作进行选择的显示方式的备选进行限制。7.根据权利要求4所述的监控装置，其特征在于， 在设定所述第一前景图像及所述第二前景图像中的至少一方的显示方式时，所述显示方式设定部根据使用者的输入操作对决定显示方式的颜色、图案、轮廓线及透过率中的至少一个显示要素进行设定。8.根据权利要求1所述的监控装置，其特征在于， 所述监控装置还具备根据所述监视区域的影像生成所述背景图像的背景图像生成部， 所述背景图像生成部根据所述对象期间的设定来生成所述背景图像， 所述影像输出控制部将所述第一前景图像重叠于所述对象期间与所述第一前景图像的对象期间一致的所述背景图像上。9.根据权利要求1所述的监控装置，其特征在于， 所述监控装置还具备与由所述统计信息取得部进行的处理相关的处理条件设定部，所述处理条件设定部根据使用者的任意指定所述对象期间的输入操作来设定所述对象期间， 所述影像输出控制部根据使用者的任意指定所述监控影像的显示时刻的输入操作来生成并输出所指定的显示时刻的所述监控影像。10.一种监控系统，生成并输出将表示监视区域中的移动体的活动状况的前景图像重叠于背景图像上的监控影像，所述监控系统的特征在于，具有: 拍摄监视区域的相机；及 多个信息处理装置， 所述多个信息处理装置中的任一信息处理装置具有:处理器及存储指令的存储器， 作为所述处理器的执行所述指令的结构，具备: 位置信息取得部，从所述监视区域的影像中检测出移动体，并取得各移动体的位置信息; 统计信息取得部，对由所述位置信息取得部取得的所述位置信息按照时间进行统计处理，并根据所述统计处理的对象期间的设定来取得与移动体的停留状况相关的统计信息；第一前景图像生成部，生成使由所述统计信息取得部取得的所述统计信息可视化的第一前景图像； 第二前景图像生成部，基于由所述位置信息取得部取得的所述位置信息，对应各预定时刻生成与移动体的图像区域对应的第二前景图像；及 影像输出控制部，对应各预定时刻生成并输出将由所述第一前景图像生成部及所述第二前景图像生成部生成的所述第一前景图像及所述第二前景图像重叠于所述背景图像上的所述监控影像。11.一种监控系统，生成并输出将表示监视区域中的移动体的活动状况的前景图像重叠于背景图像上的监控影像，所述监控系统的特征在于，具有: 拍摄监视区域的相机；及 信息处理装置， 所述相机及所述信息处理装置中的任一个具备: 位置信息取得部，从所述监视区域的影像中检测出移动体，并取得各移动体的位置信息; 统计信息取得部，对由所述位置信息取得部取得的所述位置信息按照时间进行统计处理，并根据所述统计处理的对象期间的设定来取得与移动体的停留状况相关的统计信息；第一前景图像生成部，生成使由所述统计信息取得部取得的所述统计信息可视化的第一前景图像； 第二前景图像生成部，基于由所述位置信息取得部取得的所述位置信息，对应各预定时刻生成与移动体的图像区域对应的第二前景图像；及 影像输出控制部，对应各预定时刻生成并输出将由所述第一前景图像生成部及所述第二前景图像生成部生成的所述第一前景图像及所述第二前景图像重叠于所述背景图像上的所述监控影像。12.—种监控方法，使信息处理装置进行如下处理:生成并输出将表示监视区域中的移动体的活动状况的前景图像重叠于背景图像上的监控影像的处理， 所述监控方法的特征在于， 由所述信息处理装置的处理器执行的存储于存储器的指令包括如下步骤: 从所述监视区域的影像中检测出移动体，并取得各移动体的位置信息； 对所述位置信息按照时间进行统计处理，并根据所述统计处理的对象期间的设定来取得与移动体的停留状况相关的统计信息； 生成使所述统计信息可视化的第一前景图像； 基于所述位置信息，对应各预定时刻生成与移动体的图像区域对应的第二前景图像；及 对应各预定时刻生成并输出将所述第一前景图像及所述第二前景图像重叠于所述背景图像上的所述监控影像。
【专利摘要】本发明涉及监控装置、监控系统及监控方法。从监视区域的影像中检测人物，并取得人物的位置信息。对该位置信息按照时间进行统计处理，并根据统计处理的对象期间的设定来取得与人物的停留状况相关的统计信息，并生成热图图像。另外，基于人物的位置信息，对应各预定时刻生成与人物的图像区域对应的遮罩图像。并且，对应各预定时刻生成并输出将热图图像及遮罩图像重叠在背景图像上的监控影像。
【IPC分类】H04N7/18
【公开号】CN105391973
【申请号】CN201510535913
【发明人】松本裕一, 吉田和麻
【申请人】松下知识产权经营株式会社
【公开日】2016年3月9日
【申请日】2015年8月27日
【公告号】EP2991344A2, EP2991344A3, US20160063712