一种视频的缩略图生成方法及系统的制作方法_3

文档序号:9567515阅读:来源:国知局
键剧情,所述关键剧情 即为所述视频上郝个重叠时间内的片段。
[0037] 请参阅图4,图4为本发明提供的视频的缩略图生成方法中步骤S300的方法流程 图。进一步地,所述步骤S300具体包括;S310、根据所述人脸关键顿的时间找到对应的字幕 的起止时间段;S320、根据所述字幕的起止时间段与所述重点剧情的重叠区域作为关键剧 情。
[0038] 在步骤S400中,分析所述关键剧情的每一顿,根据每一顿中所有关键人物的人脸 分布比率和对应的人脸面积找出对应的最佳效果顿,将所述最佳效果顿作为所述视频的缩 略图。
[0039] 具体来说,对所述关键剧情内的每一顿逐一分析,按照在每一顿中所有关键人物 的人脸分布比率乘W各个关键人物的人脸大小再求和,结果最大的一顿就是最佳效果顿, 将所述最佳效果顿作为所述视频的缩略图。
[0040] 请参阅图5,图5为本发明提供的视频的缩略图生成方法中步骤S400的方法流 程图。进一步地,所述步骤S400具体包括;S410、对所述关键剧情的每一顿进行逐一分析; S420、计算每一顿中各个关键人物的人脸分布比率与对应的人脸面积大小之积再求和,得 到每一顿对应的系数,将系数最大的一顿作为最佳效果顿;S430、根据所述最佳效果顿生成 所述视频的缩略图。
[0041] W下W-具体的应用实施例来对本发明进行举例说明。W某一段视频为例进行 说明如下,首先找到所述视频的所有关键顿,然后在每一个关键顿中找到了所有人物的人 脸,用相似算法合并相似人脸,最后统计出所有在关键顿中出现的人物和人物人脸的面积 大小,找到出现最多的若干人物认为是主角,找到包含所有主角的关键顿,譬如第3、5、6、7、 8、11、12、15顿,则重点片段为5-8顿,11-12顿,送两个区域哪个最长郝个就是重点剧情,假 设5-8顿长(送里是指fTS关键顿对应的视频播放时间),时间是50-150S,送时我们再在里 面找到第一主角人脸面积最大时(占有的像素最多)的人脸关键顿认为是主角说话时,把送 人脸关键顿的字幕时间找出,假设是46-62S,则认为关键剧情就是50-62S,送时再找出送 关键剧情内的所有顿,则对关键剧情内的每一顿进行分析,由于视频中Is-般有24顿,篇 幅所限其中部分顿的情况如下表1所示:
表1 由表1可知,人物1、人物2和人物3为关键人物,且各自对应的人脸分布比率为50%、 70%和60%。在视频顿的52顿^56顿中,人脸面积大小如表1所示,可知第52顿的系数 =0. 5*20+0. 7*10+0. 6*18=27. 8,其它顿的系数算法一样,可W看出第54顿就是要找的最佳 效果顿,因此,采用此顿作为该段视频的缩略图。
[0042] 综上所述,本发明首先找出所有关键顿中的人脸,再使用相似度算法对人脸进行 合并,统计出人物的出现概率,找出概率最高和与之分布相近的人物作为该视频的关键人 物;然后再根据关键人物找关键剧情,根据统计出来的关键人物,查找所有同时包含所有关 键人物的关键顿,然后找出符合条件的所有连续关键顿,W关键顿作为起止时间段,找出重 点片段,然后在送些区域中找到一个起止时间段最长的作为重点剧情。
[0043] 由于送一段剧情可能很长,或者有几分钟送会使得分析数据量太大,进一步地,本 发明添加了字幕的分析,认为出现概率最高的主人公所说的话时候就是本发明想找的关键 剧情,一般谁说话,视频镜头会对着说话的人,所W该人物的人脸所占的大小也就最大,所 W把刚找出的重点剧情时间段内的关键顿的出现概率最高的人脸的大小拿出来统计,找到 人脸最大的关键顿作为人脸关键顿,再根据该人脸关键顿的时间找到该人脸关键顿所在的 字幕,送一字幕的起止时间段与重点剧情的交叠区域就是关键剧情。
[0044] 关键剧情中会有场景或位置的变化,所W很可能送段内时间内关键人物并不是正 面照,或是有正面有侧面,会看不清人物,影响对关键信息的理解,再把关键剧情内的顿逐 一分析,按照所有关键人物的人脸分布比率乘W在每一顿中各个关键人物的人脸大小再求 和,找出结果最大的一顿就是本发明需要的最佳效果顿,在提取出该顿作为该视频的缩略 图。
[0045] 由上可知,本发明提取的缩略图可W包含关键人物间互动的重要剧情,并且能找 到W第一主人公为主的正面效果对白的剧情顿,将关键信息呈现给用户,可W很好的直观 反映关键信息,使用户充分的了解文字所无法表达的特殊信息,给用户带来了大大的方便。
[0046] 基于上述视频的缩略图生成方法,本发明实施例还提供了一种视频的缩略图生成 系统,如图6所示,所述系统包括: 关键人物查找模块100,用于提取视频的所有关键顿,识别所有关键顿中各个人物的人 脸,并找出所述各个人物中的人脸分布比率最高的人物,及与最高人脸分布比率之差不超 过预定比率的人脸分布比率对应的人物作为关键人物;具体如步骤SlOO所述; 关键顿查找模块200,用于找出同时存在所有关键人物的起止时间最长的连续关键顿 片段,并在所述起止时间最长的连续关键顿片段中找出人脸分布比率最高的人物的人脸面 积最大时的关键顿作为人脸关键顿;具体如步骤S200所述; 关键剧情查找模块300,用于找出所述人脸关键顿对应的字幕的起止时间段与所述起 止时间最长的连续关键顿片段的重叠区域作为关键剧情;具体如步骤S300所述; 缩略图生成模块400,用于分析所述关键剧情的每一顿,根据每一顿中所有关键人物的 人脸分布比率和对应的人脸面积找出对应的最佳效果顿,将所述最佳效果顿作为所述视频 的缩略图;具体如步骤S400所述。
[0047] 请参阅图7,图7为本发明提供的视频的缩略图生成系统中关键人物查找模块的 结构框图。进一步地,所述关键人物查找模块100包括: I顿提取单元110,用于提取视频中所有的I顿; 人脸识别单元120,用于识别所有I顿中各个人物的人脸和人脸所占面积大小; 相似归并单元130,用于对识别出来的人脸进行相似归并; 关键人物计算单元140,用于计算各个人物的人脸在所有I顿中的分布比率,找出人脸 分布比率最高对应的人物,及与最高人脸分布比率之差不超过预定比率的人脸分布比率对 应的人物作为关键人物。
[0048] 请参阅图8,图8为本发明提供的视频的缩略图生成系统中关键顿查找模块的结 构框图。进一步地,所述关键顿查找模块200包括: 重点剧情查找单元210,用于在所有关键顿中找出同时存在所有关键人物的连续关键 顿片段作为重点片段,并在所述重点片段中找出起止时间最长的连续关键顿片段作为重点 剧情; 人脸关键顿查找单元220,用于找出人脸分布比率最高的人物在所述重点剧情中人脸 面积最大时所在的关键顿作为人脸关键顿。
[0049] 请参阅图9,图9为本发明提供的视频的缩略图生成系统中关键剧情查找模块的 结构框图。进一步地,所述关键剧情查找模块300包括: 字幕时间查找单元310,用于根据所述人脸关键顿的时间找到对应的字幕的起止时间 段; 关键剧情计算单元320,用于根据所述字幕的起止时间段与所述重点剧情的重叠区域 作为关键剧情。
[0050] 请参阅图10,图10为本发明提供的视频的缩略图生成系统中缩略图生成模块的 结构框图。进一步地,所述缩略图生成模块400包括: 顿分析单元410,用于对所述关键剧情的每一顿进行逐一分析; 最佳效果顿计算单元420,用于计算每一顿中各个关键人物的人脸分布比率与对应的 人脸面积大小之
当前第3页1 2 3 4 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1