基于压缩视频的缩时概要输出系统与方法
【技术领域】
[0001]本发明涉及一种输出视频缩时概要的方法及系统，特别是涉及针对固定式监控压缩视频数据输出视频缩时概要的方法及系统。
【背景技术】
[0002]—般进行监控视频检视时，大都以人工快速拨放方式，快速检视相关监控视频，而以此方式进行监控视频检视，将是一项十分耗费人力、时间的工作，而如何有效地快速检视所欲检视的视频数据，以使用户减少人力、时间耗费，有效的快速取得所需的影像片段数据，将是监控视频播放设备急需的功能。
[0003]在现有技术中，视频摘要(video abstract)、视频汇总(video summary)以及视频索引(video indexing)等方法提供了快速搜寻出监控影片中各重要影像信息的手段，例如监控影像中有人、物存在的影像数据，通过这样的方式，将一冗长的监控影片压缩成多张影像，再由监控影片检视者挑选出感兴趣的影像，再针对取出该影像部分的视频数据进行检视，以确认取得视频数据所需搜寻的视频数据。
[0004]在专利公开文献US20130027551A1中提出的视频索引与视频合成的方法与系统(Method and system for video indexing and video synopsis)以及在专利公开文南犬US8514248B2中提出的产生视频合成的方法与系统(Method and system for producing avideo synopsis)等视频合成(video synopsis)方法，则是通过影像分析方法，先将视频数据分析撷取出背景影像序列与前景物件影像序列，再将依据前景物件影像出现于背景影像中的位置关系，决定各前景物件呈现的时间点。最终，通过影像迭加方式，将背景影像序列与所有经过特定时间排序的对象事件影像序列进行迭加合成。然而，通过这类方式产生概要影像序列必须耗费大量的运算时间，以取得背景影像以及前景物件影像序列。另外，受限于现在的影像分析能力瓶颈，所取得的前景物件影像序列并无法保证取出完整的对象影像，甚至遗漏部分前景信息，导致可能无法呈现所有存在于视频中的完整对象信息。
[0005]为了克服上述问题，本发明提出一种固定式监控压缩视频缩时概要输出的方法与系统。
【发明内容】
[0006]由于观看视频非常消耗时间，所以如何快速挑选重要视频片段，从而使用户能够快速选择所需仔细观看的片段，这类的方法有其需求与必要性。在一般视频播放系统中，为了让用户能够快速浏览影片，并且快速选定所需观看的片段，系统往往提供一系列的影像，而这些影像往往是通过固定时段取样方式，使使用者能够快速选择其所想观看的视频片段。更进一步，通过重要影像(key frame)撷取器，挑选一系列有意义的重要影像，提供给用户选定观看的影像片段。然而，仅仅通过单张影像不足以提供足够的信息，并使观看者了解影像中的对象所发生的事件行为，依旧必须观看该段视频才足以确认该视频所欲呈现的事件，而如何在视频播放下，滤除无意义的没有前景物件的监控视频，同时将有意义的前景物件重新整理，实现仅需短时间即可浏览完整的冗长监控视频，为此，概要视频成为不可或缺的选择。
[0007]若干概要视频系统产生较短版本的视频以支持略读。通过视频分析方式，将影像区分为背景影像序列以及前景物件影像序列，其中背景影像序列为单纯无对象的场景影像内容，而前景物件影像序列则针对场景中出现的对象，将影像序列中的所有对象撷取出来，成为一前景物件影像序列。之后，再依据用户需求，将背景影像序列以及多个前景物件影像序列迭加合成，输出一时间远小于原始影像序列长度的概要视频。用户通过观看此合成概要视频即可以了解原始视频中所有对象事件。通过此类整合视频分析方式与视频合成播放技术输出的概要视频，虽然能够呈现特定时段内的对象事件信息，但需要耗费相当长的分析时间与相当大的内存空间，甚至无法快速实时的输出所需观看的概要影片。此外，受限于目前视频分析能力的影响，视频分析虽然能够解析出对象事件影像序列，但却无法保证所撷取出的影像序列完整包含了所有的对象，一般这类方式所输出的对象边缘大都为破碎对象，甚至视频分析端无法撷取部分对象，导致输出的概要视频遗失部分对象的内容。
[0008]本发明的一个目的在于提供一种针对固定式监控压缩视频数据进行具有低运算量的影像序列的重要性分析及该影像序列的快速缩时概要视频合成的方法及系统，以快速挑选重要视频片段，从而使用户能够快速选择所需仔细观看的片段。
[0009]本发明提出了一种基于压缩视频的缩时概要输出的方法及系统，其中，该压缩视频依据一图像压缩区块大小将原视频中的每一张影像分割为多个区块(macroblock)压缩而成。通过解析监控视频压缩后的视频数据流(video bit-stream)，即可挑选出影像序列中所有含有重要信息的区块(macroblock)，在此称为重要区块(impact macroblock,Impact MB)，接着，依据重要区块的分布，将目前解析的视频中所有影像分为重要影像与非重要影像，也就是具有意义的影像以及可忽略影像两类。通过分析影像重要性的分布特性，即可取得具有意义的影像区块的视频片段，从而大幅缩短所需观看的时间长度，接着，使用空间限定迭加的影像合成技术，依据所有重要视频片段中重要区块分布状况，决定各个重要视频片段相互迭加关系，进一步将多个视频片段迭加合成为一个缩时概要视频。
[0010]本发明公开了一种基于压缩视频的缩时概要输出系统，包含:一译码单元，用以解析一压缩视频以取出解压缩的多张影像，其中，该压缩视频依据一图像压缩区块大小将原视频中的每一张影像分割为多个区块压缩而成；一重要区块分析撷取单元，用以解析该压缩视频中的编码信息，以决定该视频中的每一张影像中的每一区块是否为一重要区块；以及一缩时概要视频合成单元，依据每一张影像中的重要区块分布，将该解压缩的多张影像中的重要区块进行合成以输出缩时概要视频。
[0011]在一实施例中，所述视频压缩译码单元用以解析视频数据流，进而取得影像内容，并可取得视频压缩特殊信息以提供给重要区块分析撷取单元，用以决定每一张影像中的每一区块是否为一重要区块，其中视频压缩特殊信息可为影像区块所耗费的编码数量(encoded bit number)、移动向量(mot1n vector)、编码型态(MB type)、编码冗余量(DCTcoefficients)等视频压缩特殊信息，亦可为上述信息的任意组合。
[0012]在一实施例中，所述基于压缩视频的缩时概要输出系统还可以包含一影像数据储存单元，用以储存视频压缩译码单元所输出的影像以及视频压缩编码信息，以供在非实时合成缩时概要视频应用时存储系统所需使用的解压缩视频信息。
[0013]在本发明的一实施例中，该重要区块分析撷取单元判定区块重要性的方式为依据区块编码信息内容，其中，区块编码信息内容为视频编码位数量、移动向量、编码型态、和编码冗余量中的一种或多种的组合。
[0014]在本发明的一实施例中，该重要区块分析撷取单元还根据分析所得影像内重要性分布判定单张影像的重要性，并将具有重要影像区块的影像定义为重要影像。
[0015]在本发明的一实施例中，该缩时概要视频合成单元能够合成出时间长度在限定的时间区段内的缩时概要视频，其中包含了所有重要区块内容。
[0016]在本发明的一实施例中，基于压缩视频的缩时概要输出系统还包含一用户操作平台单元，该用户操作平台单元能够观看缩时概要合成结果，在呈现合成结果的方法上，以主画面呈现合成结果影像，在多个子画面呈现提供合成信息的原始影像，并在具有重迭区块部分提示合成来源。
[0017]本发明公开了一种基于压缩视频的缩时概要输出方法，包含以下步骤:解析一压缩视频以取出解压缩的多张影像，其中该压缩视频依据一图像压缩区块大小将原视频中的每一张影像分割为多个区块压缩而成；解析该压缩视频中的编码信息，以决定该视频中的每一张影像中的每一区块是否为一重要区块；以及依据每一张影像中的重要区块分布，将译码后的多张影像中的重要区块进行合成以输出缩时概要视频。
[0018]在一实施例中，所述缩时概要输出方法中，决定每一张影像中的该多个区块中的每一区块是否为一重要区块的依据为区块编码信息内