专利名称：面向视频的基于时间点和关键词的增值信息系统的制作方法
技术领域：
本发明涉及一种面向视频的基于时间点和关键词的增值信息系统。
背景技术：
在当今数字化与网络化时代，多媒体技术已成为互联网信息高速公路上所传送数据的主要部分。音频、图像和视频等多媒体内容目前在互联网中占据20%，且该数字还在飞速增长。各行业对音视频的使用越来越广泛。音视频已成为网络用户最频繁观看的资源之一，所以如何从海量的音视频信息中获取有用的广告信息，即音视频信息资源的管理显得日益重要。目前现有的视频播放器在播放视频文件时，终端用户针对视频文件内容所想选择的广告内容均集中显示在视频播放器左右的特定区域中，面向视频的广告系统比较简陋，一般表现为片头和片尾广告，且广告内容同视频内容几乎没有关联，广告效果较差。也就是说广告属于固定式的，不需要通过技术手段而实现的一种方告形式。目前在用户观看影片时，与影片关联的物品激起了用户的购买欲(比如服饰、设备、化妆品等)，但由于传统的广告形式是基于视频两端的和影片内容完全不相关的内容，所以无法通过影片中出现的物品而实现购买。
发明内容
本发明针对以上问题的提出，而研制一种面向视频的基于时间点和关键词的增值信息系统。本发明采用的技术手段如下一种面向视频的基于时间点和关键词的增值信息匹配系统，其特征在于包括如下步骤步骤1预处理服务器将预处理视频转化为标准的待识别图片即预处理服务器先将视频分割成独立的镜头，然后通过选取每个镜头的关键帧来表示该镜头，从输入的视频中利用关键帧提取视频文件中的多组图片，并保持分离出来的图片与原来的关键帧时间点一致，然后对图片数据进行数字降噪处理，并将非标准像素点转化为标准像素点后，输出标准的待识别图片，以此获取图片样本库；样本库里面包含该图片的多种增值信息。步骤2图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，将增值信息匹配的视频文件通过视频转码系统转成一个以单帧正序排列的图片序列，再将图片序列按照与之播放时间点相对应的时间切片排列分组，然后解码一个视频帧，并且得到它的RGB值，运用循环视频序列的每一帧，当整个视频都被解码完毕时，循环中止；在每个视频帧得到解码后，将当前帧的RGB值同上一帧的RGB值做差分比较，即利用 MDC解码器在解码的过程中提取视频帧的RGB值的差分，来衡量视频帧的相似度，并最终获取与增值信息匹配的图片的特征值；步骤3通过对步骤1中预处理视频中的某一段视频使用MDC解码器进行解码，在解码的过程中，提取视频帧之间的RGB特征值的差分，来衡量视频帧的相似度，将提取出来的RGB特征值的差分与步骤2中获取出来的特征值进行相似度的比较，如果比较的结果满足相似度80%以上，将满足于相似度80%的RGB特征值与图片样本库中的多张图片进行相似度的比较，选取图片增值信息相似度最高的部分利用设置好的增值信息方式生成一组 XML增值信息数据返回给播放器，播放器将获取到的XML增值信息数据以设定好的方式输出增值信息；如果比较结果低于相似度80%，则重新提取视频帧之间的RGB特征值的差分， 继续与步骤2中提取出来的特征值进行相似度的比较。步骤2所述得与增值信息匹配的图片的特征值获取视频为预处理视频中的一部分。步骤2所述图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，基于相邻帧差的方法进行训练将每帧图像用黄金分块原则不均勻分割为子块后，分别统计每个子块的HSV直方图，计算对应区间的直方图差异，并对不同的区间设置不同的加权系数，以加权后的平均距离作为两帧图像之间的差值，这样计算的帧间差值，更好的体现了不同镜头的帧与图像间的差别。由于摄像条件的变化等，使得镜头内的帧差与镜头边界的帧差并不必然分开，有可能是重叠的，因此基于相邻帧差的方法的总体检测性能有待提高，镜头是在同一个场景中拍摄的，同一个镜头中的各帧图像有相当的重复信息，关键帧可以简洁有效地表示镜头内容，用关键帧摘要镜头，可以达到数据压缩的效果。与视频广告技术相比，增值信息系统具备以下以个显著的优势特点范围更广视频广告只是在视频播放前后出现，而增值信息系统却能很好的结合影片内容，它将图片、文字和声音有机的结合在一起传递多感官的信息，让顾客如身临其境般感受商品或服务。主动提供信息视频广告通常是需要用户寻找、点击，而增值信息系统能够使用户在打开视频文件的时候，自动通过一系列的流程运行，主动向用户传送相关信息。传播速度快增值信息系统属于多维软广告，突破时空限制，通过互联网视频文件可以把影片中的任何一件商品传送到全国各地。只要观看影片，都可以轻松接收，这是传统媒体所无法达到的。“杀伤力”强；涉及对象最为广泛；经常反复可以增加公众印象；有声有色，具有动态性；相对渗透力强；商业味道淡，可信程度高，时效性强；广告投入成本低。与增值信息系统相关的传统广告技术完善统计传统的广告形式只能通过并不精确的收视率、发行量等来统计投放的数量，而增值系统可通过及时和精确的统计机制，使广告主能够直接的对发布的广告进行在线监控。更具针对性增值信息系统还可以提供有针对性的内容环境，不同影片所提供的内容是不一样的，并且进行了更好的分类，这就为迎合广告目标受众的兴趣提供了可能。实时、灵活、新颖传统广告一旦制作完成就很难在修改，即使能改也要付出很大的代价，而增值信息系统能按照需要即时变动，更新，根据影片中不断出现的物品，广告内容也不断变化。使用户能够轻松接收，同时让用户也获得个性产品与服务信息，大大增强了广告的实效。增值信息系统的有益效果，主要包括以下几个方面1、提供广告、服务等附加价值，促进经济的发展中国互联网是与每天的生活紧密相关的。互联网的发展与中国的经济发展相辅相成，在这期间很多的消费习惯、社会习惯正在中国发展起来。作为一个发展中的市场，中国的市场空间依然巨大，软广告就是用较少的投入吸引潜在消费者的眼球，增强产品的销售力，提高产品的美誉度，在软广告的潜移默化下，达到产品的策略性战术目的，引导消费群购买的广告，从而促进了网上消费的欲望，间接发展了中国的经济。2、丰富网络资源，促进营销模式的创新互联网是社会发展中非常核心的一个部分，由此可见网络广告走向一个蓬勃发展的黄金时期。在中国这个多样化、文化分割的市场，区域化、大众化的广告平台，将更加能够适应广告市场的变化需要。因此，创建新的营销理论以及提升广告传播方法和规范媒介市场的机会，使中国广告市场会更加成熟，同时也丰富了网络资源。3、提高用户在浏览互联网信息时的主动性，带动网络音视频周边产业发展随着国内互联网的尤其是电子商务的迅速发展，互联网广告在企业营销中的地位和价值越显重要，网络广告的载体基本上是多媒体、超文本格式文件，受众可以对某感兴趣的产品了解更为详细的信息，使消费者能亲身体验产品、服务与品牌，这种以图、文、 声、像的形式，传送多感官的信息让顾客如身临其境般感受商品或服务，并能在网上预订、 交易与结算，将更大地增强网络广告的实效，不仅提高了用户在浏览互联网信息时的主动性，还带动了网络音视频周边产业的发展。
图1为本发明所述系统工作流程图；图2为本发明所述系统的结结构框图。
具体实施例方式本发明所述系统是将与视频文件中相同的物品单张图片输入计算机内，在视频播放器播放该视频文件时，需要以当前播放时间点为基点向前或向后顺序调取服务器中存储的视频文件的各视频图像和所述视频图像在视频文件中的播放时间点的映射关系。该视频文件是以标签系统通过图像匹配算法以及人工审核生成；该文件会记录视频文件的一些关键时间点和不同广告之间的映射关系，当视频播放器拿到这个映射关系后，会在视频播放到有广告的关键时间点去动态广告投放后台将该时间点对应的广告数据传输过来进行广告的展示，达到广告与视频内容高度相关的效果。信息内容是基于时间点或视频一些关键帧中的关键词，通过关键词和时间点实现在播放过程当中增值信息的投递。如图1所示面向视频的基于时间点和关键词的增值信息匹配系统，包括如下步骤步骤1预处理服务器将预处理视频转化为标准的待识别图片即预处理服务器先将视频分割成独立的镜头，然后通过选取每个镜头的关键帧来表示该镜头，从输入的视频中利用关键帧提取视频文件中的多组图片，并保持分离出来的图片与原来的关键帧时间点一致，然后对图片数据进行数字降噪处理，并将非标准像素点转化为标准像素点后，输出标准的待识别图片，以此获取图片样本库；该样本库里面包含了单张图片的多种增值信息。此部分内容利用将视频文件中代表帧的原理切割转化成图片，在将图片经过处理得到单张的图像，保存在图片样本库，经过一系列的处理及匹配然后作为增值信息图片以待后台随时调用
步骤2图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，将增值信息匹配的视频文件通过视频转码系统转成一个以单帧正序排列的图片序列，再将图片序列按照与之播放时间点相对应的时间切片排列分组，然后解码一个视频帧，并且得到它的RGB值，运用循环视频序列的每一帧，当整个视频都被解码完毕时，循环中止；在每个视频帧得到解码后，将当前帧的RGB值同上一帧的RGB值做差分比较，即利用 MDC解码器在解码的过程中提取视频帧的RGB值的差分，来衡量视频帧的相似度，并最终获取与增值信息匹配的图片的特征值；所述得与增值信息匹配的图片的特征值获取视频为预处理视频中的一部分。另外，图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，基于相邻帧差的方法进行训练将每帧图像用黄金分块原则不均勻分割为子块后，分别统计每个子块的HSV直方图，计算对应区间的直方图差异，并对不同的区间设置不同的加权系数，以加权后的平均距离作为两帧图像之间的差值，这样计算的帧间差值，更好的体现了不同镜头的帧与图像间的差别。由于摄像条件的变化等，使得镜头内的帧差与镜头边界的帧差并不必然分开，有可能是重叠的，因此基于相邻帧差的方法的总体检测性能有待提高，镜头是在同一个场景中拍摄的，同一个镜头中的各帧图像有相当的重复信息，关键帧可以简洁有效地表示镜头内容，用关键帧摘要镜头，可以达到数据压缩的效果。
步骤3通过对步骤1中预处理视频中的某一段视频使用MDC解码器进行解码，在解码的过程中，提取视频帧之间的RGB特征值的差分，来衡量视频帧的相似度，将提取出来的RGB特征值的差分与步骤2中获取出来的特征值进行相似度的比较，如果比较的结果满足相似度80%以上，将满足于相似度80%的特征值与图片样本库中的多张图片进行相似度的比较，选取图片增值信息(这里指提取出来的图片某部分信息与图片样本库中的图片比较从而得到相似的部分。)相似度最高的部分利用设置好的增值信息方式生成一组XML 增值信息数据返回给播放器，播放器将获取到的XML增值信息数据以设定好的方式输出增值信息；如果比较结果低于相似度80%，则重新提取视频帧之间的RGB特征值的差分，继续下一视频帧的RGB特征值的差分与步骤2中提取出来的特征值进行相似度的比较。此部分内容由服务器实现，至于增值信息表现的形式，及与视频文件的链接建立的过程可有具体应用人员去完成，由于此部分不是本发明要求保护的地方，因此这里不做过多描述。为支持上述技术的实现，下面介绍本发明所涉及的各功能单元(如图2所示)输入模块该模块主要用于分析视频图像的格式，如(JPEG、TIFF、bmp)等，从文件中取得音视频编码参数，视频时间长度等信息，然后要从其中取出音频编码数据和视频编码以及图片格式的数据送到解码部分。解码模块初始化时，利用输入端从源数据中取得的信息调用不同的解码库初始化，然后接收输入端传送来的音视频编码数据，然后进行视频解码，解码所得的数据接下来送到识别部分。识别模块视频中若干帧预测利用相邻像素块的相关性，先将图像分成若干块，每个块中的像素值由前面已编码、解码的数据预测得到。然后将得到的数据进行编码识别的过程。输出模块该模块将识别过的模块和视频文件中的图像经过对比之后用于相对的时间点的输出，以实现基于视频播放时间跳出的软广告画面与视频文件的物品相等同，系统可以实现在视频播放过程中，以不影响用户观看体验为前提下，插入和当前播放内容相关的增值信息，为用户提供视频画面外的更多有价值的信息内容。 以上所述， 仅为本发明较佳的具体实施方式
，但本发明的保护范围并不局限于此， 任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
权利要求
1.一种面向视频的基于时间点和关键词的增值信息匹配系统，其特征在于包括如下步骤步骤1预处理服务器将预处理视频转化为标准的待识别图片即预处理服务器先将视频分割成独立的镜头，然后通过选取每个镜头的关键帧来表示该镜头，从输入的视频中利用关键帧提取视频文件中的多组图片，并保持分离出来的图片与原来的关键帧时间点一致，然后对图片数据进行数字降噪处理，并将非标准像素点转化为标准像素点后，输出标准的待识别图片，以此获取图片样本库；该样本库里面包含了单张图片的多种增值信息。步骤2图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识另IJ，将增值信息匹配的视频文件通过视频转码系统转成一个以单帧正序排列的图片序列， 再将图片序列按照与之播放时间点相对应的时间切片排列分组，然后解码一个视频帧，并且得到它的RGB值，运用循环视频序列的每一帧，当整个视频都被解码完毕时，循环中止； 在每个视频帧得到解码后，将当前帧的RGB值同上一帧的RGB值做差分比较，即利用MDC解码器在解码的过程中提取视频帧的RGB值的差分，来衡量视频帧的相似度，并最终获取与增值信息匹配的图片的特征值；步骤3通过对步骤1中预处理视频中的某一段视频使用MDC解码器进行解码，在解码的过程中，提取视频帧之间的RGB特征值的差分，来衡量视频帧的相似度，将提取出来的 RGB特征值的差分与步骤2中获取出来的特征值进行相似度的比较，如果比较的结果满足相似度80%以上，将满足于相似度80%的RGB特征值与图片样本库中的多张图片进行相似度的比较，选取图片增值信息相似度最高的部分利用设置好的增值信息方式生成一组XML 增值信息数据返回给播放器，播放器将获取到的XML增值信息数据以设定好的方式输出增值信息；如果比较结果低于相似度80%，则重新提取视频帧之间的RGB特征值的差分，继续与步骤2中提取出来的特征值进行相似度的比较。
2.根据权利要求1所述的一种面向视频的基于时间点和关键词的增值信息匹配系统， 其特征在于步骤2所述得与增值信息匹配的图片的特征值获取视频为预处理视频中的一部分。
3.根据权利要求1所述的一种面向视频的基于时间点和关键词的增值信息匹配系统， 其特征在于步骤2所述图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，基于相邻帧差的方法进行训练将每帧图像用黄金分块原则不均勻分割为子块后，分别统计每个子块的HSV直方图，计算对应区间的直方图差异，并对不同的区间设置不同的加权系数，以加权后的平均距离作为两帧图像之间的差值，这样计算的帧间差值，更好的体现了不同镜头的帧与图像间的差别。
全文摘要
本发明公开了一种面向视频的基于时间点和关键词的增值信息匹配系统，包括如下步骤步骤1预处理服务器将预处理视频转化为标准的待识别图片；步骤2图片识别服务器将与增值信息匹配的视频文件以帧的形式训练成图片模式识别，获取与增值信息匹配的图片的特征值；步骤3通过对步骤1中预处理视频进行解码，提取视频帧之间的RGB特征值的差分，与步骤2中获取出来的特征值进行相似度的比较，如果比较的结果满足相似度条件输出增值信息；如果比较结果不满足相似度条件则重新提取视频帧之间的RGB特征值的差分，继续与步骤2中提取出来的特征值进行相似度的比较。该系统不仅提高了用户在浏览互联网信息时的主动性，还可带动了网络音视频周边产业的发展。
文档编号G06F17/30GK102184182SQ201110072989
公开日2011年9月14日 申请日期2011年3月24日 优先权日2011年3月24日
发明者李亚欧 申请人:中国华录集团有限公司, 华录文化产业有限公司