一种监控方法及装置、存储介质、拍摄终端与流程

文档序号:16088825发布日期:2018-11-27 22:46阅读:164来源:国知局

本发明涉及物联网技术领域,具体涉及一种监控方法及装置、存储介质、拍摄终端。



背景技术:

在目前社会中,老人和儿童一直以来都是值得关注的弱势群体,社会中的危险因素和意外状况向来是老人和儿童的首要威胁。对于儿童来说,校园霸凌现象层出不穷,父母把儿童送入幼儿园后,并不能及时知道孩子的学习、生活状态。若孩子在学校收到欺凌,或受到老师的不公正待遇,将会激发孩子厌学、逃学的情绪,甚至会给孩子的身心健康留下不可磨灭的影响。

对于年迈的老人来说,随着中国老龄化和家庭空巢化趋势越来越严重。老人们随着年龄的增大,生理机能逐渐减弱,自理能力也越来越差,子女由于工作繁忙,不能时时照料家中老人。若老人自己在家中跌倒,则会因为延误就医而造成瘫痪或死亡,给子女留下终身遗憾。即便老人在家中或养老院中有护工照料,也很难保证护工不会虐待老人或做出其他不合适的行为,给老人的健康和生命造成威胁。因此,能够实时对特定儿童或老人的状态进行追踪和检测成为了社会中的必要需求。

然而,现有的监控装置大都依靠智能手环或其他可穿戴设备,通过判断儿童或老人的心率或行走步态能来判断被监护人是否处在异常状态中。但这类可穿戴设备往往会受到儿童或老人的自身行动状态的影响,造成误判或误报警,给监护人造成不便。若儿童或老人忘记携带可穿戴设备,则会失去监测效果,造成监控的空白,无法满足监护人及时照顾儿童和老人的需求。

因此,如何找寻一种能够实时可靠地检测特定被关注人物,以及将异常情况快速传递给监护人,成为了一个亟待解决的问题。



技术实现要素:

本发明解决的技术问题是如何快速可靠的对异常行为进行检测和预警。

为解决上述技术问题,本发明实施例提供了一种监控方法,包括如下步骤:接收用户上传的待关注人物目标的特征,形成参考样本,并利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标;至少根据所述拍摄画面对所述待关注人物目标的行为进行检测,以分析判断所述待关注人物目标的行为是否存在异常;如果存在异常,则生成警报信息。

可选的,利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标包括如下步骤:采集所述拍摄画面中的各个待定目标的特征,以得到各个待定目标的目标样本;比较所述参考样本与各个待定目标的目标样本,如果一致,则将所述待定目标认定为所述待关注人物目标。

可选的,所述至少根据所述拍摄画面对所述待关注人物目标的行为进行检测包括:采集与所述拍摄画面同步的音频信息,并根据所述拍摄画面以及音频信息对所述待关注人物目标的行为进行检测。

可选的,所述监控方法还包括:将所述警报信息发送至预先绑定的用户终端。

可选的,所述监控方法还包括:对所述拍摄画面中所述待关注人物目标的行为进行统计和/或分析,形成报告。

可选的,将所述报告发送至预先绑定的用户终端。

可选的,所述待关注人物目标的特征包括:在含有所述待关注人物目标的视频中指定的人脸图像,或扫描上传的所述待关注人物目标的人脸图像,或在智能摄像设备中截取的所述待关注人物目标的人脸图像。

为解决上述技术问题,本发明实施例还公开了一种监控装置,包括:识别认证模块,用于接收用户上传的待关注人物目标的特征,形成参考样本;利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标;检测分析模块,用于至少根据所述拍摄画面对所述待关注人物目标的行为进行检测,以分析判断所述待关注人物目标的行为是否存在异常;警报信息生成模块,用于生成警报信息。

可选的,所述监控系统还包括:信息传输模块,用于将所述警报信息发送至预先绑定的用户终端。

可选的,所述监控装置还包括音频信息采集模块,所述音频信息采集模块用于采集与所述拍摄画面同步的音频信息,所述检测分析模块根据所述拍摄画面以及音频信息对所述待关注人物目标的行为进行检测。

为解决上述技术问题,本发明实施例还提供一种存储介质,其上存储有计算机指令,所述计算机指令运行时执行上述监控方法的步骤。

为解决上述技术问题,本发明实施例还提供一种拍摄终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机指令,所述处理器运行所述计算机指令时执行上述监控方法的步骤。

与现有技术相比,本发明实施例的技术方案具有以下有益效果:

在本发明实施例中,该监控系统和方法允许用户设定自己所关心的一个或多个待关注人物目标,系统可根据用户设定,利用智能摄像机等监控设备对目标进行视频检测,准确及时的发现潜在的风险并给用户发布风险提示。

进一步地,在本发明实施例中,由于该系统还设置有统计分析模块,因此可对被关注目标在某一设定时间段内(例如一天)的行为进行统计和/或分析,并生成报告,为用户提供时间序列上的较为全面的信息把控。

进一步地,由于本发明实施例中的信息传输模块不仅可以将警报信息传送到用户的PC端,还可以传送给用户的移动接收端,因此,用户可以随时利用携带的移动设备,查看被监护人在某一时段的状况,方便快捷。

附图说明

图1是本发明实施例的一种监控方法的流程图;

图2是图1中步骤S11的一个具体实施方式的流程图;

图3是本发明实施例的一种监控装置的结构示意图。

具体实施方式

本领域技术人员理解,如背景技术所言,现有的监控装置大都依靠智能手环或其他可穿戴设备,但这类穿戴设备容易造成误判或误报警,给监护人造成不便。若儿童或老人忘记携带可穿戴设备,则会失去监控效果,造成监控的空白,无法满足监护人及时照顾老人和儿童的需求。

本发明实施例提供了一种用于关注特定人物目标的监控方法及装置、存储介质、终端,能够快速可靠的对异常行为进行检测、预警并提供被关注对象的实时动态。

为使本发明的上述目的、特征和有益效果能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明的保护范围。

图1为本发明实施例的一种监控方法的流程图,其中,本发明实施例所述监控方法既可用于监控单用户的场景,也可用于监控多用户的场景。

具体的,参考图1,本发明实施例的监控方法包括如下步骤:

步骤S11:接收用户上传的待关注人物目标的特征,形成参考样本,并利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标;

步骤S12:至少根据所述拍摄画面对所述待关注人物目标的行为进行检测,以分析判断所述待关注人物目标的行为是否存在异常;

步骤S13:如果存在异常,则生成警报信息。

进一步而言,在步骤S11中,用户需要上传待关注人物目标的特征,形成参考样本。所述待关注人物目标的特征为:在含有所述待关注人物目标的视频中指定的人脸图像,或扫描上传的所述待关注人物目标的人脸图像,或在智能摄像设备中截取的所述待关注人物目标的人脸图像。

在具体应用中,可以利用设置在预设区域(例如房间内、教室内等)的摄像头采集拍摄画面。例如,可以在待关注人物目标的活动区域中设置360°全景相机或其他可以拍照的智能设备,这些设备采集所述活动区域中待定人物的拍摄画面,所述拍摄画面反映了人物的肢体动作、面部表情等行为信息。利用参考样本在预设区域的拍摄画面中追踪所述待关注人物目标,在追踪所述待关注人物目标的过程中,需要对采集的拍摄画面进行分析,从中提取所需的人脸特征和/或行为特征,得到各个待定目标的目标样本。

之后,将待定人物目标的目标样本与用户设定的参考样本进行比较认证,如果两者不一致,则需要重新进行认证操作,即,在智能拍照设备所拍摄的多个人物图像中重新选择另一个目标,将此人物目标与参考样本重新进行比较认证,直到完成一致性认证,最终追踪到待关注人物目标。其中,重新认证优选MTCNN(Multi-task Convolutional Neural Network)算法或FaceNet算法,这两类算法都有较高的识别准确度和识别速度。

在步骤S12中,进行检测时可以优选使用Retina network算法,该算法检测准确度高,响应快速。

此外,作为一个优选的实施例,还可以采集与所述拍摄画面同步的音频信息,并根据所述拍摄画面以及音频信息对所述待关注人物目标的行为进行检测。如此,可以结合拍摄画面和音频信息来更加准确的判断待关注人物目标此时所处的状态,避免误判或漏判。此处的与拍摄画面同步的音频信息可以是待关注人物目标的音频,也可以是拍摄画面中整体的环境音频,还可以是与待关注人物目标有过交流的对方人物的音频等。

进一步地,对采集的音频信息进行处理时,可以选用的方式为:对音频信息进行离散、量化、分帧处理后得到多个音频数字信号;再分别对应每个音频数字信号帧进行快速傅里叶变换,得到各个音频数字信号帧的频谱;进而求得音频信号的幅度谱;选用合适的滤波器对音频数字信号帧对应的幅度谱进行滤波处理,进而再进行对数运算和离散变换,得到当前时间段内的音频特征数据。

进一步地,对采集的拍摄画面中的视频信息进行处理时,可以选用的方式为:对视频信息进行轮廓识别,采用合适的算法对识别的轮廓信息进行详细的图形拟合;以拟合之后的图形特征作为运动物体图像的特征参数。

当然,音频、视频处理的方式并不限于此,本领域普通技术人员可以根据具体需要而择优选择更为合适的算法。

处理音频信息和视频信息的算法可以被有选择性的部署在设备端或者后台的云服务器上,当算法被部署在设备端时,设备一边获取周围环境的音频和视频,算法与此同时一边处理这些音频、视频信息;当算法被部署在云服务器时,设备端获取的音频和视频信息通过网络上传到服务器,算法在服务器端对这些音频、视频信息进行处理。进一步地,所述监控方法还可以包括如下步骤:将所述警报信息发送至预先绑定的用户终端。所述的用户终端可选为移动终端或PC端或其他类型的信号接收装置。更进一步而言,所述移动终端包括但不限于如手机、ipad等设备。其中,警报信息可以通过有线或无线方式传送。

进一步地,所述监控方法还可以包括如下步骤:

对所述拍摄画面中所述待关注人物目标的行为进行统计和/或分析,形成报告。系统还可以根据用户的设定而将所述报告发送至预先绑定的用户终端。所述报告中至少描述了待关注人物目标的行为以及对该行为是否正常所作的结论。进一步地,所述报告可以通过有线或无线的方式传送给用户终端,为用户提供时间序列上的较为全面的信息把控。

图2是图1中步骤S11的一个具体实施方式的流程图。

参考图2,利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标可以包括如下步骤:

步骤S21:采集所述拍摄画面中的各个待定目标的特征,以得到各个待定目标的目标样本。

步骤S22:比较所述参考样本与各个待定目标的目标样本,如果一致,则将所述待定目标认定为所述待关注人物目标。

仍然参考图1,步骤S12中,所述检测算法的一种非限制性的机器训练方式为:

在公共场所收集多个人物的音频信息和视频信息,经过处理后转化为有价值数据进行人工标注,此处的有价值数据是指表示某一行为的数据清楚、完整。

例如:可以选择以“关节点”以及关节点在时间序列上的相互位置关系作为判断一个动作发生的依据(其他方法与此类似)。首先从视频当中截取正在走路的人物的片段,然后在每一帧画面中标出正在走路的人的各个预定义关节点,记录下整个动作过程中各个关节点的运动轨迹,整合作为一条样本。根据前述的获取样本的过程采集多条数据并分类形成数据集。然后,选择合适的机器学习模型利用上述数据集进行深度的机器训练学习。优选的机器学习模型为LSTM(Long Short-Term Memory)模型、GRU(Gated Recurrent Unit)模型或3D-CNN(3D-Convolutional Neural Network)模型等。

经过多次深度机器训练学习,当所述检测算法的检测正确率以及漏检率等在测试数据集上的表现令人满意时,就可以认为是一个合格的检测算法,并可调用于本发明实施例的监控方法中。通常情况下,合格检测算法的准确率能达到85%以上。

由上,采用本实施例中的方案,通过智能摄像机等监控设备对目标进行视频、音频检测,准确及时的发现潜在的风险并给用户发布风险提示。另外,还可以对被关注目标在某一设定时间段内的行为进行统计和/或分析,并生成报告,为用户提供时间序列上的较为全面的信息把控。用户可以随时利用携带的移动设备,查看被监护人的在某一时刻的状况,方便快捷。

图3是本发明实施例的一种监控装置的结构示意图。本领域技术人员理解,本发明实施例中的所述监控装置实施上述图1至图2中所述的方法技术方案。

具体的,在本发明实施例中,所述监控装置包括:识别认证模块30,用于接收用户上传的待关注人物目标的特征,形成参考样本,并利用所述参考样本在预设区域的拍摄画面中追踪所述待关注人物目标;检测分析模块35,用于至少根据所述拍摄画面对所述待关注人物目标的行为进行检测,以分析判断所述待关注人物目标的行为是否存在异常;警报信息生成模块36,用于生成警报信息。

进一步地,所述识别认证模块30包括参考样本采集模块31、拍摄画面采集模块33以及对比模块32。所述参考样本采集模块31用于接收用户上传的待关注人物目标的特征,形成参考样本。所述拍摄画面采集模块33用于采集所述拍摄画面中的各个待定目标的特征,以得到各个待定目标的目标样本。所述对比模块32用于比较所述参考样本与各个待定目标的目标样本,如果一致,则将所述待定目标认定为所述待关注人物目标。

进一步地,所述监控装置还包括音频信息采集模块34,所述音频信息采集模块34用于采集与所述拍摄画面同步的音频信息,所述检测分析模块35根据所述拍摄画面以及音频信息对所述待关注人物目标的行为进行检测。

进一步地,所述监控系统还包括信息传输模块37,所述信息传输模块37用于将所述警报信息传送给用户终端38。

进一步地,所述监控系统还可以包括统计分析模块39,所述统计分析模块39截取所述检测分析模块35在特定时间段内的分析情况,并智能生成统计和/或分析报告,通过所述信息传输模块37将所述报告发送给用户终端38,用户终端38优选为移动终端或PC端或其他类型的接收装置。

进一步而言,检测分析模块35中优选使用Retina network算法,该算法检测准确度高,响应快速。

关于图3所示的监控装置的工作原理、工作方式的更多信息,可以参照图1和图2及其相关描述,这里不再赘述。

进一步地,本发明实施例还公开了一种存储介质,其上存储有计算机指令,所述计算机指令运行时执行上述图1至图2所示实施例中所述的方法技术方案。优选地,所述存储介质可以包括诸如非挥发性(non-volatile)存储器或者非瞬态(non-transitory)存储器等计算机可读存储介质。所述存储介质可以包括ROM、RAM、磁盘或光盘等。

进一步地,本发明实施例还公开了一种拍摄终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机指令,所述处理器运行所述计算机指令时执行上述图1至图2所示实施例中所述的方法技术方案。优选地,所述终端可以是智能相机终端。

虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的最宽的范围为准。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1