专利名称：网络媒体智能编目系统的制作方法
技术领域：
本发明涉及网络媒体编目领域，更特别的，涉及一种快速、高效 生成视频编目的智能编目的方法，以及实现该方法的系统。
背景技术：
电视台、通讯社、报社、网站等媒体单位，每天都要产生大量的 视音频、视频等业务数据，伴随这些数据产生的，还有大量的编目标 引、相关数据、内容简介、权限等附属信息。所有这些数据信息，都 是媒体的重要无形资产，可以用于再次发布、作为素材制作新节目或 者直接出售，具有极高的价值，经过多年的积累，这些视音频、文字 和图片等内容成为宝贵的媒体资产，完好地保存和有效地管理这些媒 体资产，并体现它们的巨大价值，是目前的数字媒体亟待解决的问题， 建设可靠、高效的媒体资产管理系统势在必行。媒体资产管理系统包括以下组成部分媒体资料釆集上载、媒体 资料编目标引、媒体数据多级存储和媒体资料查询，其中存在两个非 常重要的模块，即编目及检索模块。编目就是编制目录，它是建立在 信息标引的基础上的。信息标引是指对信息资源的形式及内容特征进 行分析、选择和记录，并赋予某种检索标识的过程，而将这些描述信息按照一定的规则有序化的组织起来的这个过程就是编目。编目是检 索的基础，媒体资料编目系统是否完善直接关系到编导在查询节目时 的准确性和方便性，而传统的编目系统往往采取的是人工编目，通过 人工为媒体资料添加包括关键字描述、时长、资料来源等基本信息， 由于视频信息的多维特性，使得视频信息标引的难度加大，加之随着 视频等媒体资料数量的急剧增长以及用户在使用视频等媒体资料搜 索时对搜索结果与自己希望得到的结果之间的相似度增加要求的普 遍，传统的人工编目方式往往存在如下不足(1)人工编目所能够提供的如视频名称关键字、时长、分类等信 息在描述视频内容方面全面性不足，进而在为用户搜索视频时提供的 搜索结果无法满足用户的高级搜索需要；(2)另外，视频数量的急剧 增加也使人工编目在效率、人工耗费等方面处于劣势，存在效率低下、人工耗费高等缺点；(3)同时人工编目所提供的视频描述信息决定了 用户在使用搜索功能时所使用的是依靠文字信息的搜索方式，过于单 一的搜索方式不利于提高用户体验。发明内容为了解决由传统人工编目技术存在的对视频内容特征描述单一、 效率低下、人工耗费高以及用户搜索方式单一、搜索结果准确性低等 不足，本发明提供一种网络媒体智能编目技术，同时提供支持该技术 的网络媒体智能编目系统。本发明提出的网络媒体智能编目系统，通过以下四个步骤实现了对媒体文件进行快速、高效的编目功能1. 通过视频剪辑工作站对釆集的原始媒体素材进行快速的编辑。 通过安装视频剪辑工作站客户端程序，用户使用视频剪辑工作站，将需要剪辑处理的媒体素材拖入素材窗口，素材窗口将会产生并 显示出媒体的关键帧图片，将一个或多个图片图标拖入播放器窗口， 可以进行对媒体素材的预览，接着将一个或多个图片图标拖入时间线 编辑窗口，时间线窗口会显示媒体的图片和媒体的长度，同时在时间 线控件的下方的情节预览窗显示相应的图片。之后用户可以通过调整 时间线进行相应得拆分合并操作，产生出新的视频文件。2. 通过一次编目工作站对快速编辑生成的新的媒体文件进行节 目层的一次编目，同时将该文件存入编目系统，并经过工作流引擎 的产生新任务。通过安装WEB浏览器程序，用户可以进入一次编目工作站对处理 好的视频文件进行描述，然后进行将视频上传到编目系统，同时通过 工作流引擎产生新的编目任务供工作流调度服务器调度。3. 通过工作流调度服务器将任务调度给自动编目集群的代理，代 理将任务送给自动编目集群进行自动编目。通过安装工作流调度服务器程序，在进行相应的参数配置并启动 调度服务器后，调度服务器根据系统内服务器的情况以及相应的策略 进行任务调度。具体表现为调度服务器将任务分别调度给人脸，字幕， 台标，结构化，声音等分析服务器进行分析处理，各分析服务器分别 进行自动的编目，产生片段、场景、镜头、人脸、字幕、台标、声音等相应的编目信息结果。4.通过人工精编工作站对小部分自动编目产生的结果进行微调。 完成自动编目的任务被工作流调度服务器调度给人工精编工作站，通过安装人工精编工作站客户端程序，人工精编工作站取得自动编目产生的编目信息进行进一步的分析和调整，最后将结构存入编目系统。至此经过以上四步流程，网络媒体智能编目系统对一个媒体文件 的快速编目。为实现上述系统和功能，本发明所提供的网络媒体智能编目系 统，由采集整理系统、 一次编目系统、自动编目系统、精编系统、工 作流调度系统、编目信息发布系统组成，系统结构如图l所示1.采集整理系统采集整理系统是网络媒体智能编目系统的入口子系统，实现对原 始媒体文件的分割、合并等预处理操作，具体包括以下功能(1) 原始媒体文件导入功能通过拖入将待处理的媒体文件导 入系统的媒体文件库。(2) 媒体文件合并功能对媒体文件库中的多个媒体文件进行 合并操作。(3) 媒体文件分割功能对媒体文件库中的一个媒体文件进行 分割操作，去除多余片段。(4) 媒体文件预览功能对正在处理的媒体文件提供预览功能。(5)媒体文件生成功能对处理完毕的媒体片段保存为完整的媒体文件。2. —次编目系统一次编目系统对采集整理系统形成的媒体文件进行处理，添加导 演、演员、片长等必要的节目层信息。然后，将媒体文件迁移媒体存 储服务器，将编目信息传入媒体编目数据库，同时，产生媒体编目任本子系统包括以下主要功能模块(1) 节目层信息编目模块人工为媒体文件添加导演、演员、 片长等节目层信息。(2) 媒体文件迁移模块将媒体文件迁移到指定的位置。(3) 编目信息录入模块将媒体文件的编目信息导入媒体编目 数据库。(4) 编目任务产生模块对经过一次编目的媒体文件产生新编 目任务。3. 自动编目系统自动编目系统对媒体文件进行视频结构化分析、人脸分析、字幕 分析、台标分析、声音分析，形成相应的编目信息，并将编目信息导 入媒体编目数据库。本子系统主要包含以下功能模块 (1)任务获取模块从工作流调度系统获取新的媒体自动编目任务(2) 媒体文件获取模块从指定的位置获取编目任务相对应的 媒体文件。(3) 视频结构化分析模块对媒体文件进行视频解码、视频结 构化分析，形成片段层、场景层、镜头层编目信息，并产生视频关键 帧信息。(4) 人脸分析模块对媒体文件进行视频解码、人脸分析，产 生相应的人脸编目信息。(5) 字幕分析模块对媒体文件进行视频解码、字幕分析，产 生相应的字幕编目信息。(6) 台标分析模块对媒体文件进行视频解码、台标分析，产 生相应的台标编目信息。(7) 声音分析模块对媒体文件进行音频解码、声音分析，产 生相应的声音编目信息。(8) 编目信息导入模块将之前产生的各部分媒体编目信息， 导入媒体编目数据库。4.精编系统精编系统在自动编目系统的基础上，对形成的编目信息进行进一 步的细化与完善，并将最终的媒体编目信息导入到媒体编目数据库。 本系统主要包括以下功能模块(1) 编目任务获取模块从工作流调度系统获取新的媒体精编任务。(2) 媒体文件获取模块从指定的位置获取编目任务相对应的媒体文件。
(3) 编目信息的编辑修改模块对自动编目系统生成的编目信 息分别提供添加、修改、删除等操作。
(4) 关键帧预览模块对自动编目系统生成的片段层、场景层、 镜头层的关键帧信息进行预览。
(5) 编目信息导入模块将媒体文件的最终编目信息导入媒体 编目数据库。
5. 工作流调度系统
工作流调度系统统筹调度整个网络媒体智能编目系统的工作流 程。本子系统包括以下主要功能模块
(1) 服务器状态信息采集模块采集各个分析服务器实时的状
态信息，包括CPU、内存、任务数、任务进度等。
(2) 服务请求代理模块使服务器功能模块化，代理模块协助 服务器完成与工作流有关的各个请求。
(3) 工作流引擎模块使工作流程易于修改，同时实现任务的
调度管理。
(4) 策略产生模块根据服务器状态以及工作流引擎，制定相 应的任务分发策略。
(5) 信息统计显示模块实时统计显示各个服务器的状态信息， 包括CPU、内存、任务数、任务进度等。
6. 编目信息发布系统
为不同的业务应用提供了获取编目信息的统一接口。以选取两段媒体素材进行剪辑，编目，发布的流程为例，说明本 发明的一个代表性步骤，如图2所示
图201表示用户将待处理的两段媒体素材拖入视频剪辑工作站； 图202表示用户在视频剪辑工作站对两段媒体素材进行相应得
处理，可能包括拆分、合并等一系列操作，得到了图203所示的完整 的媒体文件；
图204表示对203所示的媒体文件进行一次编目，得到了图205 所示的一次编目信息；
图206表示，系统取得新的媒体编目任务，经过自动分析，得到 了图207表示的自动编目信息；
图208表示在图207所示的编目信息的基础上进行进一步的完善 与细化，得到了图209所表示的精编信息；
用户通过图210所表示的发布接口，进行各种业务应用。
纵观整个流程，实现了对媒体文件的快速、智能的编目过程，为 各种业务应用提供了完整丰富的编目信息。
权利要求
1.网络媒体智能编目系统，包括一个采集整理系统，用来导入原始媒体文件，实现对原始媒体文件的预处理操作；一个一次编目系统，用来对采集整理系统形成的媒体文件进行处理，储存媒体文件编目信息并产生编目任务；一个自动编目系统，用来对媒体文件进行自动的编目，产生并储存编目信息；一个精编系统，在自动编目系统产生的编目信息基础上进行细化和完善，将最终的编目信息导入媒体编目数据库；一个工作流调度系统，用于统筹调度整个媒体编目系统的工作 流程；一个编目信息发布系统，用于为不同的业务应用提供获取编目信息的统一接口。
2. 如权利要求1所要求的采集整理系统，其特征在于可实现对原 始媒体文件的预处理功能，包括(1) 原始文件的导入功能；(2) 媒体文件的合并功能；(3) 媒体文件的分割功能；(4) 媒体文件的预览功能；(5)媒体文件的生成功能。
3. 如权利要求2所要求的原始媒体文件的导入功能，其特征在于通过拖入待处理的媒体文件导入系统的媒体文件库。
4. 如权利要求2所要求的媒体文件的预览功能，其特征在于可对 正在处理的媒体文件提供预览功能。
5. 如权利要求1所要求的一次编目系统，其特征在于该系统主要由四个功能模块构成，包括(1) 节目层信息编目模块；(2) 媒体文件迁移模块；(3) 编目信息录入模块；(4) 编目任务产生模块。
6. 如权利要求5所要求的节目层信息编目模块，其特征在于通过人工为媒体文件添加包括导演、演员、片长节目层信息。
7. 如权利要求5所要求的编目任务产生模块，其特征在于将经过 一次编目的媒体文件产生新的编目任务。
8. 如权利要求1所要求的自动编目系统，其特征在于对媒体文件 进行视频结构化分析、人脸分析、字幕分析、台标分析、声音 分析，形成相应的编目信息。
9. 如权利要求8所要求的对媒体文件进行视频结构化分析，其特 征在于对媒体文件迸行视频解码、视频结构化分析，形成片断 层、场景层、镜头层编目信息并产生视频关键帧信息。
10. 如权利要求8所要求的对媒体文件进行人脸分析，其特征在于对媒体文件进行视频解码、人脸分析，产生相应的人脸编目信 息。
11. 如权利要求8所要求的对媒体文件进行字幕分析，其特征在于对媒体文件进行视频解码、字幕分析，产生相应的字幕编目信息。
12. 如权利要求8所要求的对媒体文件进行台标分析，其特征在于 对媒体文件进行视频解码、台标分析，产生相应的台标编目信 息
13. 如权利要求8所要求的媒体文件进行声音分析，其特征在于对 媒体文件进行视频解码、声音分析，产生相应的声音编目信息。
14. 如权利要求1所要求的精编系统，其特征在于通过以下功能模块实现对自动编目系统形成的编目信息进行人工的完善(1) 编目任务获取模块；(2) 媒体文件获取模块；(3) 编目信息的编辑修改模块；(4) 关键桢信息预览模块；(5) 编目信息导入模块。
15. 如权利要求14所要求的编目信息的编辑修改模块，其特征在于 对自动编目系统产生的编目信息提供添加、修改、删除操作。
16. 如权利要求14所要求的关键桢信息预览模块，其特征在于对自 动编目系统生成的片段层、场景层、镜头层的关键帧信息进行 预览。
17. 如权利要求1所要求的工作流调度系统，其特征在于通过以下 功能模块完成对整个媒体编目系统的工作流程进行调度(1) 服务器状态信息采集模块；(2) 服务请求代理模块；(3) 工作流引擎模块；(4) 策略产生模块；(5) 信息统计显示模块。
18. 如权利要求17所要求的服务器状态信息采集模块，其特征在于 采集各个分析服务器时时的状态信息，包括CPU、内存、任务数、任务进度。
19. 如权利要求17所要求的服务请求代理模块，其特征在于用于协 助服务器完成与工作流有关的各个请求。
20. 如权利要求17所要求的工作流引擎模块，其特征在于该模块的 使用使得工作流易于修改，同时实现任务的调度管理。
21. 如权利要求17所要求的策略产生模块，其特征在于根据服务器 的状态以及工作流引擎，制定相应的任务发布策略。
全文摘要
本发明提供一种为网络媒体文件进行智能、快速编目的方法，以及实现该方法的系统。该系统包含一个采集整理系统，用来导入原始媒体文件，实现对原始媒体文件的预处理操作；一个一次编目系统，用来对采集整理系统形成的媒体文件进行处理，储存媒体文件编目信息并产生编目任务；一个自动编目系统，用来对媒体文件进行自动的编目，产生并储存编目信息；一个精编系统，在自动编目系统产生的编目信息基础上进行细化和完善，将最终的编目信息导入媒体编目数据库；一个工作流调度系统，用于统筹调度整个媒体编目系统的工作流程；一个编目信息发布系统，用于为不同的业务应用提供获取编目信息的统一接口。
文档编号G06F17/30GK101515267SQ20081000721
公开日2009年8月26日 申请日期2008年2月19日 优先权日2008年2月19日
发明者磊 苏, 马学军, 鲍东山 申请人:北京新岸线网络技术有限公司