r>[0034]这些剪辑中的大多数作为缩略图图像被显示，以便用户能够挑选所意图的剪辑。缩略图典型地是剪辑的第一帧。
[0035]常规系统的情况下的困难是用户不知道关于每个10分钟剪辑中的活动，除非所述剪辑被播放或者用户已进一步向下钻取以示出视频的另外的缩略图。每当视频剪辑被调查者或CCTV工作者导出作为证明/证据时，视频数据通常将不是自解释的。为了修正该情形，用户可以在视频上注解语音消息，其解释视频的意义。
[0036]相反，图1的系统创建来自记录器的所选视频内容的虚拟全景缩略图。例如，用户、警卫或其他操作者可以选择观看视频选项来从视频记录器中观看和选择视频以用于剪辑导出。系统的处理器可以实时地在后台中操作来创建针对每个剪辑的虚拟全景缩略图图像，或者系统可以响应于由操作者对特定帧的选择而创建图像。
[0037]图2示出了由操作者选择的常规视频剪辑。在这种情况下，视频的仅仅一帧(第一帧)将被用作缩略图图像。回顾者将不知道关于该剪辑中所示出的活动，除非他/她向下钻取以便观察更多的细节。
[0038]图2的情况下，系统将标识视场(FOV)中的大型对象或人。对象将会是从走廊(中心右方)进入的人。系统将开始在预定的时间段(例如，一分钟，五分钟等)内追踪对象。系统基于视场中对象的移动以及总尺寸而从所述一分钟的剪辑中标识一组帧。
[0039]如可以观察到的，图2示出了一个人从右边的走廊进入并在通过右边的走廊出去之前接近门总共三次。在这种情况下，系统将标识顶行上的三张图像(用圈出的时间指示符)作为概述图像，所述概述图像用来表征剪辑。这是因为图2中的第二和第三行图像仅仅是重复的运动。
[0040]系统可以仅仅利用I帧(并且不是B或者P帧)来标识对剪辑进行表征的图像。该组帧被用来生成一个虚拟全景缩略图图像，如图3中所示。对象和移动的方向可以由系统在图3的顶部示出的所生成的虚拟全景缩略图中图形地加以注解。在这种情况下，系统用在图像之间连接对象的线来连接移动的对象，如图3和4的顶部所示。然后系统选择五个或者六个最好的帧来创建缩略图图像。
[0041]在F0V中的多个移动对象的情况下，多个缩略图图像可以被生成以用于相同的视频剪辑。可替换地，仅仅一个大的移动对象可以被系统选择。
[0042]如上所指出的，系统可以针对所有保存的所记录剪辑而在后台中创建缩略图图像，并且能够创建经图形索引的缩略图(即，虚拟全景缩略图)。这样做来减少检索时间。
[0043]图5示出了已经被压缩成缩略图图像的所标识的帧的示例(在左上侧)。如所示，被检测到的移动对象可以通过在移动对象或者人上叠加的圆圈来标识。
[0044]通常，虚拟全景缩略图图像可以被共享作为视频剪辑的内容的证据。缩略图图像的选择可以用来按需播放视频。
[0045]虚拟全景缩略图图像可以针对任何大小的视频剪辑而被创建。它们可以针对一分钟剪辑，十分钟剪辑，以及一个小时或者更长的剪辑而被创建。
[0046]使用虚拟全景缩略图图像不限于仅仅是所选的视频时间帧，而是能够基于F0V中的移动而由系统扩展成包括另外的时间帧，或者被扩展直到对象/人离开视场为止。这可以由系统来执行，其中系统在显示器窗口上呈现消息，所述消息通知用户:所追踪的对象已经在所选时间帧之外被追踪到。
[0047]可选地，基于面部检测例程的面部识别和人标识可以用于标记被追踪的人。一旦被标识，被追踪的人的姓名能够被叠加在视频上以用于取证目的。
[0048]隐私区和姅网(trip wire)也可以与所标识的视频剪辑结合使用。在这种情况下，如果人已经进入到隐私区或者跨过姅网，则那些帧能够在全景视图中被强调。
[0049]虚拟全景缩略图图像对于入侵检测可以是有用的。例如，当用户从他/她的办公室或者从长假中返回到家时，他/她能够检索由运动传感器所捕获的所有主要警报/事件的全景视图。全景视图能够在便携式无线接口或者UI上显示。
[0050]通常，系统包括:体现在存储器中的视频序列；处理器，其检测视频序列的视场内的移动的对象或人；处理器，其追踪移动的对象或人，并标识多个帧，所述多个帧概述在视频序列的时间间隔内移动的对象或人的移动；以及处理器，其将所标识的多个帧组合成缩略图图像。
[0051]可替换地，系统包括:安全系统，其保护受防护的区域；体现在存储器中的、来自受防护的区域的图像的视频序列；处理器，其检测视频序列的视场内的移动的对象或人；处理器，其标识视频序列的多个帧，所述多个帧概述在视频序列的时间间隔内移动的对象或人的移动；以及处理器，其将所标识的多个帧组合成缩略图图像。
[0052]可替换地，系统包括:安全系统，其保护受防护的区域；安全系统的摄像机，其从受防护的区域收集图像序列；处理器，其检测图像序列内的移动的对象或人；处理器，其标识序列的多个帧，所述多个帧概述视频序列的时间间隔内移动的对象或人的移动；以及处理器，其将所标识的多个帧、依时间顺序组合成缩略图图像。
[0053]根据前述内容，将观察到，可以实现众多变型和修改而不背离其精神和范围。要理解的是，没有任何关于本文所说明的特定装置的限制是所意图的或应当被推断出。当然，意图的是由随附权利要求覆盖如落入权利要求的范围内的所有这样的修改。此外，图中描绘的逻辑流不要求所示的特定次序或者顺序的次序来实现合期望的结果。可以提供其它步骤，或者可以从所描述的流中除去步骤，并且可以向所描述的实施例添加其它组件或者从所描述的实施例中移除组件。
【主权项】
1.一种装置，包括: 视频序列，其体现在存储器中； 处理器，其检测视频序列的视场内的移动的对象或人； 处理器，其追踪移动的对象或人，并且标识多个帧，所述多个帧概述视频序列的时间间隔内移动的对象或者人的移动；以及 处理器，其将所标识的多个帧组合成缩略图图像。2.如权利要求1中所述的装置，其中缩略图图像此外包括按时间顺序布置的所标识的多个帧。3.如权利要求2中所述的装置，此外包括跨多个图像而联接移动的人或者对象的线。4.如权利要求1中所述的装置，其中检测移动的对象或者人的处理器此外包括以下处理器:所述处理器将移动的对象或人的尺寸与阈值进行比较。5.如权利要求1中所述的装置，其中检测移动的对象或人的处理器此外包括以下处理器:所述处理器将移动的对象或人的速度与阈值进行比较。6.如权利要求1中所述的装置，此外包括文件，所述文件存储缩略图图像和视频剪辑。7.如权利要求1中所述的装置，此外包括安全系统，所述安全系统收集视频序列。8.如权利要求7中所述的装置，其中安全系统此外包括摄像机以及传感器，所述传感器触发摄像机以记录视频序列。9.一种装置，包括: 安全系统，其保护受防护的区域； 图像的视频序列，其来自受防护的区域，体现在存储器中； 处理器，其检测视频序列的视场内的移动的对象或人； 处理器，其标识视频序列的多个帧，所述多个帧概述视频序列的时间间隔内移动的对象或人的移动；以及 处理器，其将所标识的多个帧组合成缩略图图像。10.如权利要求9中所述的装置，此外包括:处理器，其将缩略图图像的所标识的多个图像进行压缩以适合于在单个帧内。
【专利摘要】本发明涉及虚拟全景缩略图以概述和可视化视频监视和所连家庭事务中的视频内容。一种系统，包括：体现在存储器中的视频序列；处理器，其检测视频序列的视场内的移动的对象或者人；处理器，其追踪移动的对象或者人，并标识多个帧，所述多个帧概述视频序列的时间间隔内移动的对象或人的移动；以及处理器，其将所标识的多个帧组合成缩略图图像。
【IPC分类】H04N7/18, H04N5/225
【公开号】CN105450983
【申请号】CN201510715620
【发明人】D·S·梅加纳桑, S·普拉萨德赫姆
【申请人】霍尼韦尔国际公司
【公开日】2016年3月30日
【申请日】2015年9月17日
【公告号】CA2903927A1, EP2999216A1, US20160086462