监控装置、监控系统以及监控方法
【技术领域】
[0001]本发明涉及一种生成使与在监视影像上设定的对象区域有关的副图像叠加显示在监视影像上而得到的监控影像并使该监控影像显示于显示装置的监控装置、监控系统以及监控方法。
【背景技术】
[0002]在便利店等店铺中，以下的监控系统被广泛普及:设置对店铺内进行拍摄的照相机，使由该照相机拍摄得到的监视影像显示在监视器上，来监视店铺内的状况。在这种监控系统中，当指定监视影像内的关注的区域来将该区域的图像放大显示时，能够详细地观察关注的区域中的人物的状态，从而能够可靠且高效地实施监视业务。
[0003]在像这样将监视影像内的关注的区域的图像放大显示的情况下，可以采用将放大图像作为副图像叠加显示在监视影像上的、所谓的PinP(Picture in Picture:画中画)方式，但是若单纯将副图像叠加显示在所指定的区域的正上，则所指定的区域的原图像及其周边部会被副图像遮住，从而成为监视业务的障碍。因此，期望将副图像配置于监视影像上的与所指定的区域不同的位置。
[0004]在这种PinP方式中，作为将副图像配置于监视影像上的与所指定的区域不同的位置的技术，以往已知如下一种技术:将发生异常的区域的放大图像作为副图像配置在监视影像的角落(参照专利文献I)。另外，已知如下一种技术:将人物的最佳拍摄的脸部图像作为副图像配置在没有运动的区域(静态块)、即不存在人物的区域(参照专利文献2)。
[0005]专利文献I:日本特开平10-322684号公报
[0006]专利文献2:日本特开2006-217070号公报
【发明内容】
[0007]那么，在专利文献I所记载的技术中，发生异常的区域的放大图像作为副图像叠加显示在监视影像上，因此能够详细地观察发生异常的区域的状况，但是关于将副图像配置于监视影像的哪个位置，没有进行任何考虑，只是单纯配置于监视影像的角落，那就会存在在监视影像中与关注的区域、即发生异常的区域关联性高的区域被遮住的情况，当变为这种状态时，存在给监视业务造成障碍的担忧。
[0008]另外，在专利文献2所记载的技术中，人物的最佳拍摄的脸部图像作为副图像被配置于不存在人物的区域，因此能够避免副图像成为监视业务的障碍，但是当在监视区域混杂的状况下整个监视影像存在大量的人物时，存在无法顺利找到没有运动的区域(静态块)、从而无法适当地应对混杂的状况的问题，期望一种无论监视区域的状况如何都能够将副图像配置于监视影像上的适当位置的技术。
[0009]本发明是为了解除这种以往技术的问题而提出的，其主要目的在于提供一种构成为如下结构的监控装置、监控系统以及监控方法:将与在监视影像上指定的区域有关的副图像配置于监视影像上的适当位置，副图像不会成为监视业务的妨碍，能够完成高效的监视业务。
[0010]本发明的监控装置生成使与在监视影像上设定的对象区域有关的副图像叠加显示在监视影像上而得到的监控影像，并使该监控影像显示于显示装置，该监控装置具有:对象区域设定部，其根据用户的操作输入，在所述监视影像上设定所述对象区域;滞留信息获取部，其观测所述监视影像中出现的运动体的滞留状况，获取表示该运动体的滞留状况的滞留信息；副图像生成部，其生成所述副图像;副图像配置控制部，其基于由所述滞留信息获取部获取到的所述滞留信息，来控制所述副图像在所述监视影像上的配置位置；以及输出控制部，其基于由该副图像配置控制部决定的所述副图像的配置位置，来生成将所述副图像合成在所述监视影像上而得到的所述监控影像，并将所述监控影像输出到所述显示装置。
[0011]另外，本发明的监控系统生成使与在监视影像上设定的对象区域有关的副图像叠加显示在所述监视影像上而得到的监控影像，并使该监控影像显示于显示装置。该监控系统具有:照相机，其拍摄监视区域；多个信息处理装置；以及显示装置，其显示所述监控影像。并且，所述多个信息处理装置中的任一信息处理装置具备:对象区域设定部，其根据用户的操作输入，在所述监视影像上设定所述对象区域;滞留信息获取部，其观测所述监视影像中出现的运动体的滞留状况，获取表示该运动体的滞留状况的滞留信息；副图像生成部，其生成所述副图像;副图像配置控制部，其基于由所述滞留信息获取部获取到的所述滞留信息，来控制所述副图像在所述监视影像上的配置位置；以及输出控制部，其基于由该副图像配置控制部决定的所述副图像的配置位置，来生成将所述副图像合成在所述监视影像上而得到的所述监控影像，并将所述监控影像输出到所述显示装置。
[0012]另外，本发明的监控方法使信息处理装置进行以下处理:生成使与在监视影像上设定的对象区域有关的副图像叠加显示在所述监视影像上而得到的监控影像，并使该监控影像显示于显示装置。该监控方法具有以下步骤:根据用户的操作输入，在所述监视影像上设定所述对象区域;观测所述监视影像中出现的运动体的滞留状况，获取表示该运动体的滞留状况的滞留信息;生成所述副图像;基于所述滞留信息，来控制所述副图像在所述监视影像上的配置位置；以及基于通过该步骤决定的所述副图像的配置位置，来生成将所述副图像合成在所述监视影像上而得到的所述监控影像，并将所述监控影像输出到所述显示装置。
[0013]根据本发明，基于运动体的滞留状况来控制副图像在监视影像上的配置位置，因此能够将副图像配置于监视影像上的适当位置。因此，副图像不会成为监视业务的妨碍，能够尚效地完成监视业务。
【附图说明】
[0014]图1是第一实施方式所涉及的监控系统的整体结构图。
[0015]图2是表示店铺中的照相机I的设置状况的俯视图。
[0016]图3A是表示监视器7所显示的监控影像的说明图。
[0017]图3B是表示监视器7所显示的监控影像的说明图。
[0018]图4是说明在由PC3进行的处理中生成的滞留信息的说明图。
[0019]图5是说明由PC3进行的处理的概要的说明图。
[0020]图6是表示PC 3的概要结构的功能框图。
[0021 ]图7是表示监视器7所显示的对象区域输入画面的说明图。
[0022]图8A是表示监视器7所显示的副图像设定画面的说明图。
[0023]图SB是表示监视器7所显示的副图像设定画面的说明图。
[0024]图SC是表示监视器7所显示的副图像设定画面的说明图。
[0025]图9是表示由副图像配置控制部34进行的处理的过程的流程图。
[0026]图10是说明由候选区域评价部52进行的候选区域设定处理的说明图。
[0027]图11是表示第二实施方式中监视器7所显示的监控影像的说明图。
[0028]图12是说明第三实施方式中由PC3进行的处理的概要的说明图。
[0029]图13是表示第五实施方式所涉及的监控系统中的照相机I和PC3的概要结构的功能框图。
【具体实施方式】
[0030]第一发明生成使与在监视影像上设定的对象区域有关的副图像叠加显示在所述监视影像上而得到的监控影像，并使该监控影像显示于显示装置。该监控装置具有:对象区域设定部，其根据用户的操作输入，在所述监视影像上设定所述对象区域;滞留信息获取部，其观测所述监视影像中出现的运动体的滞留状况，获取表示该运动体的滞留状况的滞留信息；副图像生成部，其生成所述副图像;副图像配置控制部，其基于由所述滞留信息获取部获取到的所述滞留信息，来控制所述副图像在所述监视影像上的配置位置；以及输出控制部，其基于由该副图像配置控制部决定的所述副图像的配置位置，来生成将所述副图像合成在所述监视影像上而得到的所述监控影像，并将所述监控影像输出到所述显示装置。
[0031]据此，基于运动体的滞留状况来控制副图像在监视影像上的配置位置，因此能够将副图像配置于监视影像上的适当位置。因此，副图像不会成为监视业务的妨碍，能够高效地完成监视业务。
[0032]另外，第二发明为以下结构:所述滞留信息包括与滞留度和滞留时间有关的信息，所述滞留度是滞留于在所述监视影像上设定的观测区域的运动体的数量，所述滞留时间是运动体在所述观测区域内滞留的时间。
[0033]据此，基于滞留度和滞留时间来控制副图像的配置位置，因此能够将副图像配置于适当位置。
[0034]另外，第三发明为以下结构:所述副图像配置控制部基于所述滞留信息，以与所述对象区域之间的、与运动体的滞留状态有关的关联性低为条件，来决定所述副图像的配置位置。
[0035]据此，在与对象区域的关联性低的区域配置副图像，与对象区域的关联性高的区域不被副图像遮住，因此能够避免成为监视业务的妨碍。
[0036]另外，第四发明的所述副图像配置控制部基于所述滞留信息，来判定所述对象区域处于滞留状态和非滞留状态中的哪一种。而且，在判定为所述对象区域处于滞留状态的情况下，以所述滞留度和所述滞留时间的值均小为条件，来决定所述副图像的配置位置。在判定为所述对象区域处于非滞留状态的情况下，以所述滞留度的值小且所述滞留时间的值大为条件，来决定所述副图像的配置位置。
[0037]据此，在运动体的数量少的区域配置副图像，因此能够极力避免运动体被副图像遮住。而且，在用户关注运动体滞留的区域并将对象区域指定为该运动体滞留的区域的一部分的情况下，对象区域为滞留状态，在运动体流动的区域配置副图像，另外，在用户关注运动体流动的区域并将对象区域指定为该运动体流动的区域的一部分的情况下，对象区域为非滞留状态，在运动体滞留的区域配置副图像。因此，用户所关注的区域不会被副图像遮住，能够避免副图像成为监视业务的妨碍。
[0038]另外，第五发明为以下结构:所述副图像配置控制部基于所述滞留信息，针对作为所述副图像的配置位置的候选的多个候选区域，获取表示与所述对象区域之间的关联性的高