监控装置、监控系统以及监控方法与流程

文档序号:14960279发布日期:2018-07-18 00:23阅读:170来源:国知局

本公开涉及生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像的监控装置、监控系统以及监控方法。



背景技术:

在火车站、活动会场等设施中采用了如下一种监视系统:利用摄像机对设施内进行拍摄,利用该摄像机的图像来监视设施内的状况,当利用因特网向普通的使用者发布设施内设置的摄像机的图像时,使用者无需前往现场就能够确认设施内的拥挤状况等,因此能够提高使用者的便利性。

在此,在以用于防犯、防灾的监视为目的来利用摄像机的图像的情况下没有问题,但在向普通的使用者发布摄像机的图像的情况下,期望保护人物的隐私。

针对这种保护人物的隐私的要求,以往已知一种对在摄像机的图像内检测到人物的脸的区域或者摄像机的图像的整体进行马赛克处理、模糊处理等图像处理(隐私屏蔽处理)的技术(参照专利文献1)。

专利文献1:日本专利第5088161号公报



技术实现要素:

本公开的监控装置是一种生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像的监控装置,构成为具备:第一处理部,其对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理;第二处理部,其从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及图像输出控制部,其生成并输出在由第一处理部生成的识别性降低图像上叠加由第二处理部生成的屏蔽图像所得到的监控图像。

另外,本公开的监控系统是一种生成对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像并向用户终端装置发布该监控图像的监控系统,构成为具备:摄像机,其拍摄对象区域;服务器装置,其向用户终端装置发布监控图像;以及用户终端装置,其中,摄像机和服务器装置中的任一个具备:第一处理部,其对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理;第二处理部,其从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及图像输出控制部,其生成并输出在由第一处理部生成的识别性降低图像上叠加由第二处理部生成的屏蔽图像所得到的监控图像。

另外,本公开的监控方法使信息处理装置进行以下处理:生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像,该监控方法的特征在于,包括以下步骤:对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理,来生成识别性降低图像;从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及生成并输出在识别性降低图像上叠加屏蔽图像所得到的监控图像。

根据本公开,能够利用屏蔽图像明确地将人物等运动体与背景区分开来进行视觉识别,因此能够清楚地掌握运动体的状态。因此,能够直观地掌握设施内的拥挤状况等。另外,运动体探测失败的运动体出现在识别性降低图像上,但由于在该识别性降低图像中无法识别运动体,因此能够可靠地保护个人的隐私。

附图说明

图1是第一实施方式所涉及的监控系统的整体结构图。

图2是表示摄像机1的设置状况的一例的车站站内的俯视图。

图3a是说明在摄像机1中进行的图像处理的概要的说明图。

图3b是说明在摄像机1中进行的图像处理的概要的说明图。

图3c是说明在摄像机1中进行的图像处理的概要的说明图。

图4a是说明在摄像机1中进行的图像处理的概要的说明图。

图4b是说明在摄像机1中进行的图像处理的概要的说明图。

图4c是说明在摄像机1中进行的图像处理的概要的说明图。

图5a是说明在摄像机1中进行的图像处理的概要的说明图。

图5b是说明在摄像机1中进行的图像处理的概要的说明图。

图5c是说明在摄像机1中进行的图像处理的概要的说明图。

图6a是说明在摄像机1中进行的图像处理的概要的说明图。

图6b是说明在摄像机1中进行的图像处理的概要的说明图。

图6c是说明在摄像机1中进行的图像处理的概要的说明图。

图7是表示摄像机1和服务器装置3的硬件结构的框图。

图8是摄像机1的功能框图。

图9是表示用户终端装置4中显示的监控画面的说明图。

图10是表示在摄像机1中进行的图像处理的概要的说明图。

图11是第二实施方式所涉及的摄像机101和服务器装置102的功能框图。

图12是表示用户终端装置4中显示的屏蔽条件设定画面的说明图。

具体实施方式

在说明实施方式之前,简单地说明现有技术的问题点。那么,在如上述现有技术那样对检测到人物的脸的区域进行隐私屏蔽处理的情况下,如果脸检测失败,则该人物的图像区域在隐私屏蔽处理的对象外,输出人物按原样被拍到的图像。因此,存在以下实用上的问题:无法可靠地保护人物的隐私,无法公开摄像机的图像。另外,在如所述现有技术那样对摄像机的图像的整体进行隐私屏蔽处理的情况下,存在以下问题:虽然能够大致识别摄像区域的概况、即在何处存在何物,但无法容易地识别人物的状态,因此无法直观地掌握设施的拥挤状况等。

因此,本公开的主要目的在于提供一种能够显示可靠地保护个人的隐私并能够直观地掌握设施内的拥挤状况等的监控图像的监控装置、监控系统以及监控方法。

为了解决上述问题而完成的第一公开涉及一种生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像的监控装置,其构成为具备:第一处理部,其对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理;第二处理部,其从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及图像输出控制部,其生成并输出在由第一处理部生成的识别性降低图像上叠加由第二处理部生成的屏蔽图像所得到的监控图像。

由此,能够利用屏蔽图像明确地将人物等运动体与背景区分开来进行视觉识别,因此能够清楚地掌握运动体的状态。因此,能够直观地掌握设施内的拥挤状况等。另外,运动体探测失败的运动体出现在识别性降低图像上,但由于在该识别性降低图像中无法识别运动体,因此能够可靠地保护个人的隐私。

在该情况下,对摄像图像的整体实施识别性降低的图像处理即可,但也可以从识别性降低的图像处理的对象排除建筑物的顶棚等明显不会拍到人物等运动体的区域。

另外,在第二公开中,第一处理部设为执行马赛克处理、模糊处理、融合处理中的任意处理来作为降低物体的识别性的图像处理的结构。

由此,能够适当地降低摄像图像中拍到的物体的识别性。

另外,在第三公开中,第二处理部设为生成表示运动体的轮廓形状的透过性的屏蔽图像的结构。

由此,由于屏蔽图像具有透过性,因此成为在监控图像中能够透过屏蔽图像的部分看见背景的图像的状态,因此易于掌握运动体的状态。

另外,在第四公开中,第二处理部设为以下结构:按照根据用户的操作输入来设定的屏蔽条件,来生成屏蔽图像,在屏蔽条件下,能够变更屏蔽图像的颜色、透过率以及轮廓线的有无中的至少一个显示要素。

由此,由于能够变更屏蔽图像的显示要素,因此能够显示对用户而言易于观察的监控图像。

另外,在第五公开中,第二处理部设为以下结构:按照根据用户的操作输入来设定的屏蔽条件,来生成屏蔽图像,作为屏蔽条件,能够设定以用拥挤度指定的颜色或同一色相下的浓淡、透过率生成屏蔽图像的拥挤状态显示模式。

由此,屏蔽图像的颜色等随着拥挤状况动态地变化,能够掌握对象区域的真实的状况。另外,在并排地显示多个对象区域各自的监控图像时,能够对比各对象区域的拥挤度,能够瞬间掌握多个对象区域的状态。

另外,第六公开是一种生成对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像并向用户终端装置发布该监控图像的监控系统,其构成为具有拍摄对象区域的摄像机、向用户终端装置发布监控图像的服务器装置、以及用户终端装置,其中,摄像机和服务器装置中的任一个具备:第一处理部,其对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理;第二处理部,其从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及图像输出控制部,其生成并输出在由第一处理部生成的识别性降低图像上叠加由第二处理部生成的屏蔽图像所得到的监控图像。

由此,与第一公开同样地,能够显示可靠地保护个人的隐私并能够直观地掌握设施内的拥挤状况等的监控图像。

另外,第七公开是一种使信息处理装置进行以下处理的监控方法,该处理是指生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像,该监控方法构成为包括以下步骤:对摄像图像进行使该摄像图像中拍到的物体的识别性降低的图像处理,来生成识别性降低图像;从摄像图像探测运动体,来生成与该运动体的图像区域对应的屏蔽图像;以及生成并输出在识别性降低图像上叠加屏蔽图像所得到的监控图像。

由此,与第一公开同样地,能够显示可靠地保护个人的隐私并能够直观地掌握设施内的拥挤状况等的监控图像。

以下,参照附图来说明本公开的实施方式。

(第一实施方式)

图1是第一实施方式所涉及的监控系统的整体结构图。

该监控系统是一种用于监视员利用对火车站(设施)的站内的各区域进行拍摄得到的图像(动态图像)来监视站内的状况并向普通用户发布拍摄各区域得到的图像的系统,该监控系统具备摄像机(监控装置)1、监视终端装置2、服务器装置3以及用户终端装置(浏览装置)4。

摄像机1设置在车站站内的站台、检票口等各对象区域,来拍摄各对象区域。该摄像机1经由站内网络和路由器6连接于vlan(virtuallocalareanetwork:虚拟局域网)等封闭区域网络。另外,在摄像机1中实施用于保护人物的隐私的图像处理(隐私屏蔽处理),从摄像机1输出作为在该图像处理中得到的动态图像的监控图像(处理图像)和未处理图像。

监视终端装置2由pc构成,设置在车站站内的监视室。该监视终端装置2经由站内网络来连接于摄像机1。该监视终端装置2是用于监视员以用于防犯、防灾的监视为目的来浏览摄像机1的图像的装置,从各摄像机1向监视终端装置2发送未处理图像,该各摄像机1的未处理图像显示在监视终端装置2中,监视员能够通过浏览未处理图像来监视车站站内的状况。

服务器装置3经由封闭区域网络来连接于各车站的各摄像机1,接收从各车站的各摄像机1发送的监控图像。另外,服务器装置3经由因特网来连接于用户终端装置4,生成用户所浏览的画面并发布到用户终端装置4,另外,获取用户在画面上输入的信息。

用户终端装置4由智能手机、平板型终端、pc构成。在该用户终端装置4中显示从服务器装置3发布的监控图像。用户通过浏览该监控图像,能够掌握车站站内的拥挤状况、列车的运行状况等。

此外,服务器装置3能够进行将从摄像机1发送的当前的监控图像按原样发布的实况发布。另外,服务器装置3能够存储从摄像机1发送的监控图像,并发布用户终端装置4中指定的日期和时间的监控图像。

在这种监控系统中,摄像机1与服务器装置3经由封闭区域网络进行连接,因此能够确保从摄像机1输出的未处理图像的安全性。另外,服务器装置3与用户终端装置4经由因特网进行连接,因此能够在任意的场所从用户终端装置4访问服务器装置3。

接着,对车站站内的摄像机1的设置状况进行说明。图2是表示摄像机1的设置状况的一例的车站站内的俯视图。

在图2所示的例中,在车站站内的站台上设置有摄像机1。该摄像机1设置在站台的顶棚、灯柱上,来拍摄存在于站台、台阶的人物。特别是在图2所示的例子中,对于摄像机1,采用了具有规定的视角的摄像机即所谓的盒式摄像机,但也能够采用使用鱼眼透镜来具有360度的摄像范围的全方位摄像机。

此外,在图2中示出了站台的例子,但摄像机1被设置为对车站站内的检票口、自动升降机等被适当设定的对象区域进行拍摄。

接着,对在摄像机1中进行的图像处理的概要进行说明。图3a~图3c、图4a~图4c、图5a~图5c以及图6a~图6c是说明在摄像机1中进行的图像处理的概要的说明图。

摄像机1拍摄车站站内的各区域,来获得图3a所示的未处理的摄像图像。在该未处理的摄像图像中,人物按原样被拍到,能够识别个人,因此无法保护人物的隐私。因此,在本实施方式中实施保护人物的隐私的图像处理(隐私屏蔽处理)。

在此,首先,作为隐私屏蔽处理,考虑如图3b所示那样对摄像图像的整体实施降低物体的识别性的图像处理。另外,考虑对摄像图像进行运动体探测和人物探测,获取在该运动体探测和人物探测中探测到的人物的图像区域的位置信息,并如图3c所示那样对人物的图像区域(人物的轮廓内部)实施识别性降低的图像处理。在图3b、图3c所示的例子中,作为识别性降低的图像处理,实施了马赛克处理。

如果像这样实施识别性降低的图像处理,则无法识别个人,因此能够可靠地保护人物的隐私。但是,实施识别性降低的图像处理所得到的图像存在以下问题:能够大致识别摄像区域的概况、即在何处存在何物,但无法容易地识别出往来的人物的状态,由此无法直观地掌握拥挤状况、即是否有许多人物。

另一方面,作为隐私屏蔽处理,对摄像图像进行运动体探测和人物探测,对在该运动体探测和人物探测中探测到的人物进行屏蔽处理,即进行将人物的图像区域(人物的轮廓内部)变更(置换)为屏蔽图像的处理。

具体地说,如图4a所示,通过从多个摄像图像去除运动体的图像(前景图像)的运动体去除处理(背景图像生成处理)来生成背景图像。另外,如图4b所示,基于运动体探测和人物探测的探测结果来生成覆盖人物的图像区域的屏蔽图像。然后,通过将图4b所示的屏蔽图像叠加于图4a所示的背景图像来生成图4c所示的屏蔽处理图像。在该屏蔽处理图像中无法识别个人,因此能够保护人物的隐私。

但是,在通过运动体去除处理生成的背景图像中,有时如图5a所示那样成为活动少的人物按原样残留着的状态。在该情况下,活动少的人物在运动体探测中也不会被探测到,因此如图5b所示那样生成只有除该人物以外的人物的屏蔽图像。然后,当将图5b所示的屏蔽图像叠加于图5a所示的背景图像时,获得图5c所示的屏蔽处理图像。在该屏蔽处理图像中在运动体去除处理中无法去除的人物按原样被拍到,无法保护人物的隐私。

另外,如图3c所示,即使在对人物的图像区域实施识别性降低的图像处理的情况下,如果在运动体探测和人物探测中发生漏探测,则也成为在背景图像中残留探测失败的人物的状态,无法保护人物的隐私。

因此,在本实施方式中,如图6a所示,将实施识别性降低的图像处理所得到的图像(与图3b相同)设为背景图像,在该背景图像中叠加图6b所示的屏蔽图像(与图5b相同),来生成如图6c所示的屏蔽处理图像。

如果这样,则能够利用屏蔽图像明确地将人物等运动体与背景区分开来进行视觉识别,因此能够清楚地掌握运动体的状态。因此,能够直观地掌握设施内的拥挤状况等。另外,运动体探测、人物探测失败的人物出现在背景图像上,但在该背景图像中通过识别性降低的图像处理来使得无法识别个人,因此能够可靠地保护人物的隐私。

此外,也可以基于运动体探测和人物探测的探测结果来在屏蔽处理图像上显示表示人物的脸、上半身的区域的人物框。在多个人物被重叠地拍到的情况下,如果以覆盖该多个人物的图像区域的方式显示屏蔽图像,则难以区分各个人物,存在无法简单地掌握有几个人物的情况,当在这种情况下显示人物框时,能够容易地掌握人数。

另外,也可以与拥挤度相应地变更屏蔽图像的颜色。例如在拥挤度高的情况下用红色显示屏蔽图像,在拥挤度低的情况下用蓝色显示屏蔽图像。另外,也可以在同一色相下用浓淡、透过率表现拥挤度。如果这样,则屏蔽图像的颜色等随着拥挤状况动态地变化,能够掌握对象区域的真实的状况。另外,在并排地显示多个对象区域各自的监控图像时,能够对比各对象区域的拥挤度,能够瞬间掌握多个对象区域的状态。此外,基于人物探测的探测结果(相当于人物框数)获取拥挤度即可。

接着,对摄像机1和服务器装置3的概要结构进行说明。图7是表示摄像机1和服务器装置3的硬件结构的框图。图8是摄像机1的功能框图。

如图7所示,摄像机1具备摄像部21、处理器22、存储设备23以及通信部24。

摄像部21具备成像传感器,依次输出在时间上连续的摄像图像(帧)即所谓的动态图像。处理器22对摄像图像进行图像处理,生成并输出监控图像。存储设备23存储在处理器22中执行的程序、从摄像部21输出的摄像图像。通信部24将从处理器22输出的监控图像经由网络发送到服务器装置3。另外,通信部24将从摄像部21输出的未处理图像经由网络发送到监视终端装置2。

服务器装置3具备处理器31、存储设备32以及通信部33。

通信部33接收从各摄像机1发送的监控图像。另外,通信部33向用户终端装置4发布包括用户所浏览的监控图像的画面。在存储设备32中存储由通信部33接收到的每个摄像机1的监控图像、由处理器31执行的程序。在处理器31中生成要向用户终端装置4发布的画面。

另外,如图8所示,摄像机1具备图像获取部41、第一处理部42、第二处理部43以及图像输出控制部44。通过使处理器22执行存储设备23中存储的监控用的程序(指令)来实现该图像获取部41、第一处理部42、第二处理部43以及图像输出控制部44。

图像获取部41从摄像部21和存储设备(图像存储部)23获取由摄像部21拍摄到的摄像图像。

第一处理部42具备第一背景图像生成部51。在该第一背景图像生成部51中对摄像图像的整体实施使摄像图像中拍到的物体的识别性降低的图像处理来生成第一背景图像(识别性降低图像)。在本实施方式中,作为降低物体的识别性的图像处理,能够实施马赛克处理、模糊处理、融合处理中的任意的图像处理。另外,也可以不进行这种特别的图像处理,而通过使图像的分辨率降低至丧失物体的识别性的程度来生成第一背景图像(识别性降低图像)。在该情况下,不需要搭载特别的图像处理功能,因此能够廉价地构成第一背景图像生成部51,还能够使图像数据量减少,因此能够减轻网络上的通信负担。

马赛克处理是以下处理:将摄像图像分割为多个块,将该块内的所有像素的像素值置换为块内的一个像素的像素值或者块内的各像素的像素值的平均值等单一像素值。

模糊处理是各种滤波处理,例如基于模糊滤波(blurfilter)、高斯滤波、中值滤波以及双边滤波等的滤波处理。并且,还能够利用负片/正片反转、色相校正(明亮度变化、rgb色彩平衡变化、对比度变化、伽玛校正以及饱和度调整等)、二值化以及边缘滤波等各种图像处理。

融合处理是将两个图像以半透过状态进行合成(融合)的处理,基于表示合成的程度的α值来将规定的合成用的图像与摄像图像进行合成。

第二处理部43具备第二背景图像生成部53、位置信息获取部54以及屏蔽图像生成部55。

在第二背景图像生成部53中进行生成从摄像图像去除人物的图像(前景图像)所得到的第二背景图像的处理。在该处理中,根据最近的规定的学习期间内的多个摄像图像(帧)生成第二背景图像,与获取新的摄像图像相应地逐次更新第二背景图像。在由该第二背景图像生成部53进行的处理中利用公知的技术即可。

在位置信息获取部54中进行从摄像图像探测人物来获取摄像图像内存在的人物的图像区域的位置信息的处理。基于由第二背景图像生成部53生成的第二背景图像进行该处理,根据所关注的时刻(在实时处理中为当前时刻)的摄像图像与在此之前的学习期间内获取到的第二背景图像之差来确定运动体的图像区域(运动体探测)。而且,当在运动体的图像区域中检测到由人物的脸或头部以及肩部构成的ω形状时,将该运动体判断为人物(人物探测)。此外,在由该位置信息获取部54进行的处理中也利用公知的技术即可。

此外,在本实施方式的第二背景图像中包含所谓的“背景模型”,在第二背景图像生成部53中,根据学习期间内的多个摄像图像构建背景模型,在位置信息获取部54中,通过所关注的时刻的摄像图像与背景模型的比较来将运动体的图像区域(前景区域)和背景区域进行分割,并获取运动体的图像区域的位置信息。

另外,第二背景图像优选如上所述那样被逐次更新,但也可以将不存在人物时的摄像图像、例如开始工作前的摄像图像设为第二背景图像并预先时摄像机保持该第二背景图像。

在屏蔽图像生成部55中进行以下处理:基于由位置信息获取部54获取到的人物的图像区域的位置信息来生成具有与人物的图像区域对应的轮廓的屏蔽图像。在该处理中,根据人物的图像区域的位置信息生成与人物的图像区域的轮廓有关的信息,基于与该轮廓有关的信息生成表示人物的轮廓形状的屏蔽图像。该屏蔽图像是用规定的颜色(例如蓝色)填充人物的轮廓的内部所得到的图像,具有透过性。

在图像输出控制部44中进行以下处理:在由第一背景图像生成部51生成的第一背景图像上叠加由屏蔽图像生成部55生成的屏蔽图像,来生成监控图像(屏蔽处理图像)。在本实施方式中,屏蔽图像是具有透过性的图像,监控图像成为能够透过屏蔽图像的部分来看到背景的图像的状态。

接着,对用户终端装置4中显示的监控画面进行说明。图9是表示用户终端装置4中显示的监控画面的说明图。在该图9中,表示作为用户终端装置4的智能手机的例子。此外,用户终端装置4中显示的监控画面也可以编辑为数字标牌用的内容来显示于在车站、商业设施等中设置的标牌终端(大型显示器),来通知当前的拥挤状况。

当在用户终端装置4中启动规定的应用程序来访问服务器装置3时,显示图9所示的监控画面。用户通过浏览该监控画面,能够掌握车站站内的拥挤状况等。

在该监控画面中设置有主菜单显示按钮61、车站选择按钮62、日期和时间输入部63、再现操作部64以及图像一览显示部65。

当操作主菜单显示按钮61时显示主菜单。能够通过该主菜单来选择车站站内监控、用户设定等。当选择车站站内监控时,显示图9所示的监控画面。

在图像一览显示部65中并排地显示车站站内的站台、检票口等对象区域各自的监控图像。

能够用车站选择按钮62选择作为使图像一览显示部65显示的监控图像的对象的车站。该车站选择按钮62中显示当前设定的车站。当操作该车站选择按钮62时,能够显示车站选择菜单来变更车站。

日期和时间输入部63用于输入使图像一览显示部65显示的监控图像的显示日期和时间。在该日期和时间输入部63中设置有now(当前)按钮71、日期变更按钮72以及时刻变更按钮73。

能够用now按钮71将显示日期和时间变更为当前的时刻。能够用日期变更按钮72变更显示日。在该日期变更按钮72中显示当前设定的显示日。当操作该日期变更按钮72时,显示日历画面(未图示),能够在该日历画面中选择日期。能够用时刻变更按钮73变更显示时刻。在该时刻变更按钮73中显示当前设定的显示时刻。当操作该时刻变更按钮73时,显示时刻选择菜单,能够在该时刻选择菜单中变更显示时刻。此外,在初始状态下显示当前的时刻的监控图像。

再现操作部64用于进行与图像一览显示部65中显示的监控图像的再现有关的操作,通常设置有再现、快进再现、快退再现以及停止的各操作按钮,通过操作这些操作按钮,能够高效地浏览监控图像。

另外,该监控画面能够以拉大(pinch-out)操作(使触摸到画面的两根手指张开的操作)的方式进行放大显示。而且,以放大显示的状态进行滑动操作(使触摸到画面的手指偏移的操作)来使画面移动,由此也能够以放大显示的方式浏览其它区域的监控图像。此外,也可以是,当对监控图像进行单击操作(用一根手指短时间触摸的操作)时,显示对监控图像进行放大显示的画面。

此外,在本实施方式中,将由用户选择的车站的各区域的监控图像并排地显示在图像一览显示部65中,但也可以设置区域选择按钮,并显示用该区域选择按钮选择出的区域的监控图像。

接着,对在摄像机1中进行的图像处理的概要进行说明。图10是表示在摄像机1中进行的图像处理的概要的说明图。

在本实施方式中,在第二背景图像生成部53中,根据以显示时刻(在实时显示时为当前时刻)为基准的规定的学习期间内的多个摄像图像(帧)来生成第二背景图像。每当从摄像部21输出新的摄像图像时重复进行该处理,每次更新第二背景图像。

接着,在位置信息获取部54中根据显示时刻的摄像图像和第二背景图像来获取每个人物的位置信息。然后,在屏蔽图像生成部55中根据每个人物的位置信息来生成屏蔽图像。

另外,在第一背景图像生成部51中对显示时刻的摄像图像实施识别性降低的图像处理来生成第一背景图像。然后,在图像输出控制部44中生成将屏蔽图像叠加于第一背景图像上所得到的监控图像。

通过这样,与显示时刻的推进相应地获取与摄像图像的输出定时对应的各时刻的第二背景图像、位置信息、屏蔽图像以及第一背景图像,从摄像机1依次输出各时刻的监控图像。

此外,根据各时刻的摄像图像生成第一背景图像即可,但也可以每隔规定的间隔剔除摄像图像地选择作为第一背景图像的基础的摄像图像,来生成第一背景图像。

另外,在本实施方式中,将对摄像图像实施识别性降低的图像处理所得到的图像设为第一背景图像,但也能够对为了运动体探测而生成的第二背景图像实施识别性降低的图像处理来生成第一背景图像。

如上所述,在本实施方式中,生成并输出在实施识别性降低的图像处理所得到的第一背景图像(识别性降低图像)上叠加屏蔽图像所得到的监控图像。在该监控图像中,能够利用屏蔽图像明确地将人物等运动体与背景区分开来进行视觉识别,因此能够清楚地掌握运动体的状态。因此,能够直观地掌握车站站内的拥挤状况等。另外,运动体探测失败的人物出现在第一背景图像上,但在该第一背景图像中无法识别个人,因此能够可靠地保护人物的隐私。

(第二实施方式)

接着,对第二实施方式进行说明。此外,在此没有特别提及的方面与上述实施方式相同。

图11是表示第二实施方式所涉及的摄像机101和服务器装置102的概要结构的功能框图。

在第一实施方式中,在摄像机1中生成第一背景图像和屏蔽图像,生成并输出在第一背景图像上叠加屏蔽图像所得到的监控图像,但在该第二实施方式中,为了能够按用户变更屏蔽图像的显示要素,而从摄像机101向服务器装置102发送第一背景图像和人物的图像区域的位置信息,在服务器装置102中生成遵照由用户指定的显示要素的指定内容的屏蔽图像,从而生成在第一背景图像上叠加该屏蔽图像所得到的监控图像。

与上述实施方式同样地,摄像机101具备图像获取部41、第一处理部42以及第二处理部104,但在第二处理部104中,省略了在第一实施方式(参照图8)中设置于第二处理部43的屏蔽图像生成部55。另外,也省略了在第一实施方式中设置的图像输出控制部44。

服务器装置102具备屏蔽条件设定部106、屏蔽图像生成部107以及图像输出控制部108。通过使处理器31执行存储设备32中存储的监控用的程序(指令)来实现该屏蔽条件设定部106、屏蔽图像生成部107以及图像输出控制部108。

在屏蔽条件设定部106中,与用户在用户终端装置4中进行的输入操作相应地设定与屏蔽图像有关的各种条件。在屏蔽图像生成部107中进行以下处理:基于在屏蔽条件设定部106中设定的每个用户的屏蔽条件和从摄像机1获取到的位置信息来生成屏蔽图像。在本实施方式中,在屏蔽条件设定部106中按用户设定与屏蔽图像的显示要素有关的屏蔽条件,在屏蔽图像生成部107中生成遵照由用户指定的显示要素的指定内容的屏蔽图像。

在图像输出控制部108中进行以下处理:在从摄像机1获取到的第一背景图像上叠加由屏蔽图像生成部107生成的屏蔽图像来生成监控图像(屏蔽处理图像)。由此,出现了遵照由用户指定的显示要素的指定内容的屏蔽图像的监控图像显示在用户终端装置4中。

此外,在本实施方式中,在服务器装置102中生成屏蔽图像,但也可以在摄像机101中暂时生成屏蔽图像之后,在服务器装置102中通过图像编辑来按照由用户指定的显示要素的指定内容来调整屏蔽图像。

接着,对屏蔽条件的设定进行说明。图12是表示用户终端装置4中显示的屏蔽条件设定画面的说明图。

当利用在图9示出的监控画面的主菜单显示按钮61上显示的主菜单来选择用户设定时,显示用户设定菜单,当在该用户设定菜单中选择屏蔽条件设定时,显示图12所示的屏蔽条件设定画面。用户能够利用该屏蔽条件设定画面来变更屏蔽图像的显示要素。

在该屏蔽条件设定画面中设置有填充选择部111、透过率选择部112、轮廓线绘制选择部113以及设定按钮114。

在填充选择部111中,用户从平铺菜单选择屏蔽图像中的轮廓的内部的填充方式(颜色、图案等)。在透过率选择部112中,用户从下拉菜单选择屏蔽图像的透过率。能够在0%~100%的范围内选择透过率。即,在透过率为0%的情况下,成为完全看不到第一背景图像的状态,在透过率为100%的情况下,第一背景图像按原样呈现。在轮廓线绘制选择部113中,用户从下拉菜单选择是否在屏蔽图像中绘制轮廓线。在此,在透过率为100%且选择了无轮廓线的情况下,在人物被删除的状态下显示监控图像。

当利用该填充选择部111、透过率选择部112以及轮廓线绘制选择部113来选择屏蔽图像的填充方式、透过率以及是否绘制轮廓线并操作设定按钮114时,进行以下处理:将输入内容发送到服务器装置102,在屏蔽条件设定部106中设定用户的屏蔽条件。

另外,如上所述,在将屏蔽图像的颜色变更为根据拥挤度(相当于人物框数)指定的颜色的情况下(拥挤度高的情况下用红色显示屏蔽图像,在拥挤度低的情况下用蓝色显示屏蔽图像的方式、或者在同一色相下用浓淡、透过率表现拥挤度的方式),也可以取代在填充选择部111中选择屏蔽图像,而是在屏蔽条件设定画面中设置拥挤状态显示模式,使用户选择模式的开启/关闭。

如上所述,在本实施方式中,用户能够变更屏蔽图像的颜色、透过率以及有无轮廓线中的至少任一个显示要素,因此能够显示对于用户而言易于观察的监控图像。

此外,在本实施方式中,为了能够按用户变更屏蔽图像的显示要素,在服务器装置102中设置有屏蔽条件设定部106,但也可以在第一实施方式的摄像机1(参照图8)中设置屏蔽条件设定部,在该屏蔽条件设定部中与用户的操作输入相应地设定屏蔽条件,在屏蔽图像生成部55中基于屏蔽条件来生成屏蔽图像。通过这样,例如管理者等用户能够按每个摄像机1自由地变更屏蔽图像的显示要素。

如上所述,作为在本申请中公开的技术的例示,说明了实施方式。然而,本公开的技术并不限定于此,还能够应用于进行了变更、替换、附加、省略等的实施方式。另外,也能够将在上述实施方式中说明的各结构要素进行组合来设为新的实施方式。

作为上述的实施方式的变形例,也可以取代人物的轮廓形状的屏蔽图像,而是基于运动体探测和人物探测的探测结果来使用相当于人物框的矩形的屏蔽图像。在该情况下,只是改变与人物的图像区域对应的屏蔽图像的形状,能够进行在上述实施方式中说明的屏蔽条件等用户所希望的设定。

另外,在上述实施方式中,对火车站的例子进行了说明,但并不限定于这种火车站,能够广泛地应用于主题公园、活动会场等各种设施。另外,设置有摄像机(监控装置)1的公交站、人行道、道路等也包含于设施对象,在这些设施对象中也能够应用本公开的技术。

另外,在上述实施方式中,对将作为屏蔽处理的对象的运动体设为人物的例子进行了说明,但也可以将人物以外的运动体、例如汽车、自行车等车辆设为对象。即使是人物以外的运动体,在能够确定其所有者、使用者的情况下也需要考虑不侵害个人的隐私。

另外,在上述实施方式中,对摄像图像的整体实施了识别性降低的图像处理,但也可以从识别性降低的图像处理的对象排除建筑物的顶棚等明显不会拍到人物的区域。如果这样,则易于掌握对象区域的状况。

在该情况下,管理者等也可以手动地设定作为识别性降低的图像处理的对象外的区域,但也可以基于运动体探测的探测结果来设定作为识别性降低的图像处理的对象外的区域。即,将在运动体探测中在固定时间以上没有探测到运动体的区域作为识别性降低的图像处理的对象外的区域即可。另外,还可以与没有探测到运动体的时间的继续相应地逐渐降低识别性降低的图像处理的效果。

另外,在上述实施方式中,在摄像机中进行了生成降低了物体的识别性的第一背景图像的第一处理、生成屏蔽图像的第二处理以及在背景图像上叠加屏蔽图像的图像输出控制,但也可以在pc中进行这些必要的处理的全部或者一部分。另外,也可以在用于存储从摄像机输出的图像的记录器(图像存储装置)、用于控制来自摄像机的图像输出的适配器(图像输出控制装置)中进行所述的必要的处理的全部或者一部分。

产业上的可利用性

本公开所涉及的监控装置、监控系统以及监控方法具有以下效果:能够显示可靠地保护人物的隐私并能够直观地掌握设施内的拥挤状况等的监控图像,作为生成并输出对拍摄对象区域得到的摄像图像进行隐私屏蔽处理所得到的监控图像的监控装置、监控系统以及监控方法等是有用的。

附图标记说明

1:摄像机(监控装置);3:服务器装置;4:用户终端装置;21:摄像部;22:处理器;23:存储设备;24:通信部;41:图像获取部;42:第一处理部;43:第二处理部;44:图像输出控制部;51:第一背景图像生成部;53:第二背景图像生成部;54:位置信息获取部;55:屏蔽图像生成部;101:摄像机;102:服务器装置;104:第二处理部;106:屏蔽条件设定部;107:屏蔽图像生成部;108:图像输出控制部;111:填充选择部;112:透过率选择部;113:轮廓线绘制选择部。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1