一种通过镜头回放特征提取精彩镜头的方法与流程

本发明涉及视频处理技术，具体涉及一种通过镜头回放特征提取精彩镜头的方法及系统。

背景技术：

就目前而言，融合媒体时代，广电媒体和互联网媒体齐头并进，相辅相成。广电媒体拥有丰富的资源，比如，有大量的专业体育赛事信号可以为互联网媒体提供内容支撑，而体育赛事也是人们生活中常常津津乐道的话题，拥有大量的受众；互联网媒体具有传播速度快、散播面广、信息碎片化等特点，能够持续保持热度，一方面，能够推动广电媒体的生产，另一方面，也对广电媒体现有制作系统提出了内容和效率的要求。

现有的制作系统中，主要存在以下两个问题：

内容问题，一场比赛一般有一两个小时，内容的时间长度不利于在互联网、社交媒体传播，互联网和融合媒体的发展，使得越来越多的人适应和需求“碎片化”的信息。因此，就内容来说，一般采取提取比赛精彩镜头再针对互联网发布的方式。

效率问题，现有的提取比赛精彩镜头的方法基本上是在视频收录完成之后进行手动打点、人工剪切，显然这样的方法不仅消耗大量的人力和时间，而且效率很低，也不能满足时效性的需求。

技术实现要素：

本发明的目的在于克服现有技术的不足，提供一种通过镜头回放特征提取精彩镜头的方法及系统。该方法充分利用了视频中精彩镜头常用慢镜头回放的方式表现的特性，采用获取慢镜头开始帧和结束帧的方法自动提取精彩镜头发布到互联网媒体上，为互联网媒体提供了更加丰富的内容，提高了内容制作的效率。

本发明的目的是通过以下技术方案来实现的：

一种通过镜头回放特征提取精彩镜头的方法，包括以下步骤：

s1：视频采集，录入视频信号并进行分析；

s2：确定回放镜头，对视频由首帧开始进行帧对比确定回放镜头并确定回放镜头的开始和结束；

s3：视频剪辑，剪辑回放镜头的开始和结束之间的视频作为精彩视频

s4：视频发布，将剪辑的精彩视频片段发布到互联网媒体。

进一步的，所述的步骤s1视频采集中的视频信号包括ip流即时信号或成品节目信号。

进一步的，所述的步骤s2确定回放镜头包括以下子步骤：

s21：解码，将录入的视频信号解码，形成一帧一帧的视频画面；

s22：帧对比，从首帧开始依次与后一帧的画面通过帧差进行相似度对比

s23：提取转场镜头，帧对比过程中，相似度低于设定的阈值1时，判定此处有转场镜头，提取此处前后一定数量的连续的帧形成序列帧；

s24：统计转场镜头，依次对比提取的转场镜头序列帧的相似度，相似度超过设定的阈值2时，判定这两个转场镜头为同一镜头，分别统计转场镜头的数目；

s25：确定回放镜头，当某个转场镜头数目达到设定的阈值3时，确定该转场镜头为精彩回放镜头的开始或结束的序列帧。

进一步的，所述步骤s25还包括以回放镜头转场特征帧为基准，选取其前后多帧为特征帧序列，提取每帧的特征值，作为标准特征参考；当发现转场镜头时，与标准特征序列进行相似度计算，相似度超过阈值2时，该镜头为回放镜头。

进一步的，所述的步骤s3视频剪辑包括以下子步骤：

s31：标记回放镜头，依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，相似度不高于阈值2时，该镜头为普通转场镜头，继续对比下一个；相似度高于阈值2时，该镜头为回放镜头，标记该回放镜头；

s32：确定精彩回放开始镜头位置，第奇数个标记的回放镜头为精彩回放开始镜头位置；

s33：确定精彩回放结束镜头位置，第偶数个标记的回放镜头为精彩回放结束镜头位置；

s34：剪切视频，剪切相邻两个回放开始镜头和回放结束镜头之间的内容即精彩画面。

进一步的，首次提取精彩镜头时先通过判断统计出回放镜头特征序列，确定特征序列之后转场镜头与特征序列对比确定回放镜头同时剪切该回放镜头，当识别到第奇数个回放镜头之后识别不到下一个回放镜头时，则丢弃该回放镜头。

更进一步的，对于同一个节目，只有首次识别时需要统计判断回放镜头，之后的节目不进行统计，直接使用首次的特征序列

一种通过镜头回放特征提取精彩镜头的系统，包括以下模块：

视频采集模块：录入视频信号，对ip流即时信号和成品节目信号均可进行分析；

回放镜头判断模块：将录入的视频信号解码，形成一帧一帧的视频画面，从首帧开始依次与后一帧的画面通过帧差进行相似度对比，帧对比过程中，相似度低于设定的阈值1时，判定此处有转场镜头，提取此处前后一定数量的连续的帧形成序列帧；依次对比提取的转场镜头序列帧的相似度，相似度超过设定的阈值2时，判定这两个转场镜头为同一镜头，分别统计转场镜头的数目，当某个转场镜头数目达到设定的阈值3时，设定该转场镜头为精彩回放镜头的开始和结束的序列帧；以回放镜头转场特征帧为基准，选取其前后多帧为特征帧序列，提取每帧的特征值，作为标准特征参考。当发现转场镜头时，与标准特征序列进行相似度计算，相似度超过阈值2时，该镜头为回放镜头；

视频剪辑模块：依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，相似度不高于阈值2时，该镜头为普通转场镜头，继续对比下一个；相似度高于阈值2时，该镜头为回放镜头，标记该回放镜头；第奇数个标记的回放镜头为精彩回放开始镜头位置；第偶数个标记的回放镜头为精彩回放结束镜头位置；剪切相邻两个标记点间的内容，该内容为视频回放画面，即比精彩画面；

视频发布模块：将剪出的视频片段发布到互联网媒体。

本发明的有益效果是：本发明中通过相邻帧差的对比找到转场镜头并记录，依次对比和统计转场镜头，当某个转场镜头数目达到一个阈值则判定这个镜头为回放镜头，提取回放镜头的特征序列与之后的转场镜头帧序列进行相似度对比，相似度高于一个值时为回放镜头，通过制定学习机制，利用数据的学习获取回放镜头的标志，对于后续的同一个节目的视频便能快速便捷地找出比赛的精彩镜头，具备智能学习的特性快速响应到互联网媒体，满足观众即时、方便的需求。

附图说明

图1是本发明的流程图；

图2是本发明中确定回放镜头的流程图。

具体实施方式

下面结合附图1、2进一步详细描述本发明的技术方案，但本发明的保护范围不局限于以下所述。

体育比赛节目中在精彩镜头出现后总会进行慢动作回放，例如：足球比赛中某队进球、篮球比赛中某球员篮板扣球等，进入慢动作回放和回放结束时都有一个固定的特征画面提示慢动作回放的开始和结束。

前后两帧相似度低于一个阈值时（前后两帧画面相差很大），我们称后面这帧的画面为转场镜头，在体育比赛中，我们研究发现，回放特征画面也具有转场特征。所以，我们记录每一个转场镜头前后一定距离的帧画面，当发现转场镜头时，与记录的进行帧相似度对比，当相似的转场镜头达到一定值时（可根据实际情况设置），我们认为该镜头为回放特征镜头，然后提取关键帧序列，作为标准参考特征。

同一个体育比赛节目制作时用到的回放镜头的特征画面是一样的，可以通过对一个比赛节目的数据多次训练学习确定回放镜头的特征画面并存储到特征库，之后这个节目的视频便不用再统计转场镜头的数目，而是直接和特征库的特征画面做相似度计算以确定是否是回放镜头的开始和结束。

【实施例一】

一种通过镜头回放特征提取精彩镜头的方法及系统，该系统包括视频采集模块、回放镜头判断模块、视频剪辑模块和视频发布模块。

视频采集模块：录入ip流即时视频并进行分析，其中该视频为体育比赛视频；

回放镜头判断模块：将录入的ip流即时信号视频信号解码，形成一帧一帧的视频画面，从首帧开始依次与后一帧的画面通过帧差进行相似度对比，并根据预设阈值进行比较找出回放镜头；

视频剪辑模块：依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，找出回放镜头的开始与结束点并标记；剪切相邻两个标记点间的内容，该内容为视频回放画面，即比精彩画面；

视频发布模块：将剪出的视频片段发布到互联网媒体。

该方法具体包括：

s1：视频采集，对录入的ip流即时视频进行分析；

s2：确定回放镜头，对视频由首帧开始进行帧对比确定回放镜头并确定回放镜头的开始和结束；具体包括，

s21：解码，将录入的视频信号解码，形成一帧一帧的视频画面；

s22：帧对比，从首帧开始依次与后一帧的画面通过帧差进行相似度对比

s23：提取转场镜头，帧对比过程中，相似度低于设定的阈值1时，判定此处有转场镜头，提取此处前后一定数量的连续的帧形成序列帧；

s24：统计转场镜头，依次对比提取的转场镜头序列帧的相似度，相似度超过设定的阈值2时，判定这两个转场镜头为同一镜头，分别统计转场镜头的数目；

s25：确定回放镜头，当某个转场镜头数目达到设定的阈值3时，确定该转场镜头为精彩回放镜头的开始或结束的序列帧。

s3：视频剪辑，剪辑回放镜头的开始和结束之间的视频作为精彩视频，具体包括：

s31：标记回放镜头，依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，相似度不高于阈值2时，该镜头为普通转场镜头，继续对比下一个；相似度高于阈值2时，该镜头为回放镜头，标记该回放镜头；

s32：确定精彩回放开始镜头位置，第奇数个标记的回放镜头为精彩回放开始镜头位置；

s33：确定精彩回放结束镜头位置，第偶数个标记的回放镜头为精彩回放结束镜头位置，在本实施例中共标记到8个回放镜头。

s34：剪切视频，剪切相邻两个回放开始镜头和回放结束镜头之间的内容即精彩画面，及回放镜头1-2之间的内容以及回放镜头3-4、回放镜头5-6、回放镜头7-8之间的内容单独为一段精彩画面

s4：视频发布，将剪辑的精彩视频片段发布到互联网媒体。

【实施例二】

一种通过镜头回放特征提取精彩镜头的方法及系统，该系统包括视频采集模块、回放镜头判断模块、视频剪辑模块和视频发布模块。

视频采集模块：录入成品节目视频并进行分析；

回放镜头判断模块：将录入的成品节目视频解码，形成一帧一帧的视频画面，从首帧开始依次与后一帧的画面通过帧差进行相似度对比，并根据预设阈值进行比较找出回放镜头；

视频剪辑模块：依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，找出回放镜头的开始与结束点并标记；剪切相邻两个标记点间的内容，该内容为视频回放画面，即比精彩画面；

视频发布模块：将剪出的视频片段发布到互联网媒体。

该方法具体包括：

s1：视频采集，对录入的ip流即时信号视频信号进行分析；

s2：确定回放镜头，对视频由首帧开始进行帧对比确定回放镜头并确定回放镜头的开始和结束；具体包括，

s21：解码，将录入的视频信号解码，形成一帧一帧的视频画面；

s22：帧对比，从首帧开始依次与后一帧的画面通过帧差进行相似度对比

s23：提取转场镜头，帧对比过程中，相似度低于设定的阈值1时，判定此处有转场镜头，提取此处前后一定数量的连续的帧形成序列帧；

s24：统计转场镜头，依次对比提取的转场镜头序列帧的相似度，相似度超过设定的阈值2时，判定这两个转场镜头为同一镜头，分别统计转场镜头的数目；

s25：确定回放镜头，当某个转场镜头数目达到设定的阈值3时，确定该转场镜头为精彩回放镜头的开始或结束的序列帧。

s3：视频剪辑，剪辑回放镜头的开始和结束之间的视频作为精彩视频，具体包括：

s31：标记回放镜头，依次提取转场镜头序列帧的特征值，与标准特征序列进行相似度计算，相似度不高于阈值2时，该镜头为普通转场镜头，继续对比下一个；相似度高于阈值2时，该镜头为回放镜头，标记该回放镜头；

s32：确定精彩回放开始镜头位置，第奇数个标记的回放镜头为精彩回放开始镜头位置；

s33：确定精彩回放结束镜头位置，第偶数个标记的回放镜头为精彩回放结束镜头位置，在本实施例中共标记到7个回放镜头。

s34：剪切视频，剪切相邻两个回放开始镜头和回放结束镜头之间的内容即精彩画面，及回放镜头1-2之间的内容以及回放镜头3-4、回放镜头5-6之间的内容单独为一段精彩画面，回放镜头7则丢弃。

s4：视频发布，将剪辑的精彩视频片段发布到互联网媒体。

值得说的是，以上实施例以体育比赛视频作为分析对象，但不局限于本发明的应用领域仅局限于体育鄙视视频，对于任何类型的视频本方法均适用。

以上所述仅是本发明的优选实施方式，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。