会议标签生成及应用方法、装置、系统的制作方法
【专利摘要】本发明实施例公开了一种会议标签生成及应用方法、装置、系统，用于快速检索和定位到已录制好的会议视音频的对应位置，可实现快速准确地点播指定会议内容。本发明实施例方法包括：MCU根据识别会议事件的变化信息，生成对应的会议事件标签生成请求并发送给录播系统，该会议事件标签生成请求中包含所述会议事件的变化信息，该录播系统接收该会议事件标签生成请求，根据该会议事件的变化信息中的会议事件变化时间生成会议标签，将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系。
【专利说明】会议标签生成及应用方法、装置、系统
【技术领域】
[0001]本发明涉及通信【技术领域】，尤其涉及一种会议标签生成及应用方法、装置、系统。【背景技术】
[0002]会议录播系统将流媒体存储和播放技术用于视频会议，实现了对视频会议内容的存储和回放功能。典型的会议录播系统部署在视频会议系统(vcs, Video conferenceSystem)的网络侧，与负责媒体交换的网元(如多点会议单元MCU)进行交互。可实时录制存储会议视音频码流，供客户端进行在线点播回放。部分录播系统也会对会议码流进行实时转发，提供在线直播功能。
[0003]现有技术中，会议录播系统录制的信息仅包括了会议的视音频信息，会议事件信息不会被记录。视音频的记录文件中也没有对应的存放模式。整个会议的视音频信息被当作一套独立的视音频整体存放。回放时进行点播的客户端一般从会议初始位置开始播放。如果该客户端想快速找到所关心的内容，能够采用的方式:1.快速播放点播的内容，快速播放可以是以2倍速、4倍速、8倍速等速度播放，或拖动播放进度条，观察图像变换，找到想要的位置后开始播放；2.录制或点播的过程中记录下感兴趣的时间点，在重放时快速定位到指定的位置。
[0004]但在以上现有技术中，视音频播放中的拖动播放进度条的点播方式依赖于点播者对点播内容的熟悉，并且在拖动过程中对播放时间的定位不准确，只能找到兴趣点附近的时间信息。而提前记录感兴趣的时间点的做法需要专人实现记录会议中每个相关事件的时间值，再提供给点播者使用，对于会议频繁的系统来说，往往只能做到对部分会议的单独记录。从而使得进行点播的客户端难以快速准确地找到已录制好视音频内容的特定位置。
【发明内容】
[0005]本发明实施例提供了 一种会议标签生成及应用方法、装置、系统，用以对会议录制内容进行自动标注对应标签，在会议点播过程中，使得用户可通过已标注的标签，快速检索和定位到已录制好的会议视音频的对应位置，可实现快速准确地点播指定会议内容。
[0006]本发明第一方面提供一种会议标签生成方法,可包括:
[0007]多点会议单元根据识别会议事件的变化信息，生成对应的会议事件标签生成请求并发送给录播系统，所述会议事件标签生成请求中包含所述会议事件的变化信息；
[0008]所述录播系统接收所述会议事件标签生成请求；
[0009]根据所述会议事件的变化信息中的会议事件变化时间生成会议标签；
[0010]将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系O
[0011]在第一种可能的实现方式中，所述根据所述会议事件信息中的会议事件变化时间生成会议标签包括:获取并记录所述会议事件信息中的会议事件变化时间；记录所述会议事件信息中的会议事件来源信息；根据所述会议事件变化时间和所述会议事件来源信息生成会议标签。
[0012]结合第一方面或第一方面的第一种可能的实现方式，在第二种可能的实现方式中，所述方法还包括:接收来自所述多点会议单元之外的添加标签信息请求；生成与所述添加标签信息请求对应的会议标签；将生成的与所述添加标签信息请求对应的会议标签与所述多点会议单元发送的媒体流形成时间上的对应关系，并存储形成的对应关系。
[0013]本发明第二方面提供一种会议标签应用方法，可包括:
[0014]点播客户端接收播放会议媒体流的请求，所述播放会议媒体流的请求中包含所请求的会议媒体流的识别信息；
[0015]将所述播放会议媒体流的请求发送给录播系统；
[0016]接收所述录播系统发送的所述会议媒体流以及所述会议媒体流对应的所有标签信息，并显示所述会议媒体流标签；
[0017]根据接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求；
[0018]接收并播放所述选择会议媒体流标签对应的会议媒体流。
[0019]在第一种可能的实现方式中，所述根据接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求包括:根据接收的用户选择会议媒体流标签的指令，确定所选择的会议媒体流标签对应的会议媒体流的时间点；将所述对应的会议媒体流的时间点，转换为符合所述录播系统播放格式的播放定位指令并发送给所述录播系统，使得所述录播系统根据所述播放定位指令播放所述播放定位指令指示的播放时间点对应的会议媒体流。
[0020]本发明第三方面提供一种会议标签生成系统，可包括:
[0021]多点会议单元，录播系统；
[0022]所述多点会议单元，用于根据识别会议事件的变化信息，生成对应的会议事件标签生成请求并发送给录播系统，所述会议事件标签生成请求中包含所述会议事件的变化信息；
[0023]所述录播系统，用于接收所述会议事件标签生成请求；
[0024]所述录播系统，用于根据所述会议事件的变化信息中的会议事件变化时间生成会议标签；
[0025]所述录播系统，还用于将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系。
[0026]在第一种可能的实现方式中，所述录播系统，还用于获取并记录所述会议事件信息中的会议事件变化时间；所述录播系统，还用于记录所述会议事件信息中的会议事件来源信息；所述录播系统，还用于根据所述会议事件变化时间和所述会议事件来源信息生成会议标签。
[0027]结合第一方面或第一方面的第一种可能的实现方式，在第二种可能的实现方式中，
[0028]所述录播系统，还用于接收来自所述多点会议单元之外的添加标签信息请求；
[0029]所述录播系统，还用于生成与所述添加标签信息请求对应的会议标签；
[0030]所述录播系统，还用于将生成的与所述添加标签信息请求对应的会议标签与所述多点会议单元发送的媒体流形成时间上的对应关系，并存储形成的对应关系。
[0031]本发明第四方面提供一种会议标签应用装置，可包括:
[0032]接收单元，用于接收播放会议媒体流的请求，所述播放会议媒体流的请求中包含所请求的会议媒体流的识别信息；
[0033]发送单元，用于将所述接收单元接收的所述播放会议媒体流的请求发送给录播系统；
[0034]所述接收单元，还用于接收所述录播系统发送的所述会议媒体流以及所述会议媒体流对应的所有标签信息；
[0035]显示单元,用于显示所述接收单元接收的会议媒体流标签；
[0036]所述发送单元，还用于根据所述接收单元接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求；
[0037]所述接收单元，还用于接收所述选择会议媒体流标签对应的会议媒体流；
[0038]播放单元，用于播放所述接收单元接收的所述选择会议媒体流标签对应的会议媒体流。
[0039]在第一种可能的实现方式中，所述发送单元还包括:
[0040]确定单元，用于根据所述接收单元接收的用户选择会议媒体流标签的指令，确定所选择的会议媒体流标签对应的会议媒体流的时间点；
[0041]转换单元，用于将所述确定单元确定的所述对应的会议媒体流的时间点，转换为符合所述录播系统播放格式的播放定位指令并发送给所述录播系统，使得所述录播系统根据所述播放定位指令播放所述播放定位指令指示的播放时间点。
[0042]从以上技术方案可以看出，本发明实施例具有以下优点:本发明实施例中，MCU识别会议事件的变化信息，生成与该变化信息对应的会议事件标签生成请求，其中包含所述会议事件的变化信息，并发送给录播系统，录播系统接收所述会议事件标签生成请求，根据其中所述会议事件的变化信息中的会议事件变化时间生成会议标签，将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系。这样，当用户回放会议媒体流时，可以根据该会议媒体流的各会议标签自由检索会议内容，并且，可以准确定位在会议中发生变换的时间点对应的会议媒体流，提高定位特定会议内容的效率。
【专利附图】
【附图说明】
[0043]图1为本发明实施例中会议标签生成及应用系统的结构示意图；
[0044]图2为本发明实施例中会议标签生成方法的一个实施例示意图；
[0045]图3为本发明实施例中会议标签生成方法的另一个实施例示意图；
[0046]图4为本发明实施例中会议标签应用方法的一个实施例示意图；
[0047]图5为本发明实施例中会议标签应用方法的另一个实施例示意图；
[0048]图6为本发明实施例中会议标签生成系统的一个实施例示意图；
[0049]图7为本发明实施例中会议标签应用装置的一个实施例示意图；
[0050]图8为本发明实施例中会议标签应用装置的另一个实施例示意图；
[0051]图9为本发明实施例中会议标签应用装置的又一个实施例示意图。【具体实施方式】
[0052]本发明实施例提供了 一种会议标签生成及应用方法、装置、系统，用于对会议录制内容进行自动标注对应标签，使得用户可以快速准确的播放感兴趣的会议内容。
[0053]本发明提供的实施例在现有的系统组网模式下，构造出一种能够自动识别会议事件，生成、存储并使用会议标签的装置。并采用该装置实现对会议录制内容进行自动标注对应标签的方法，在会议点播过程中，用户可通过已标注的标签，快速检索和定位到已录制好的对应位置，让用户快速准确开始播放感兴趣的会议内容。
[0054]具体会议标签生成及应用系统包括:会议终端101,多点会议单元(英文:Multipoint Conferencing Unit,缩写:MCU)系统 102,录播系统 103,点播客户端 104。
[0055]其中，会议终端101通常为多个，与所述MCU系统102相连接，会议终端内置会议客户端软件，用户参与会议时需登录客户端；
[0056]所述MCU系统102包括:会控信令处理单元1021和媒体处理单元1022 ;所述录播系统103包括:标签生成模块1031、系统外来标签模块1032、媒体流存储模块1033、媒体流存储库1034、媒体流发送模块1035、媒体流定位模块1036和标签识别模块1037 ;所述点播客户端104包括:媒体流播放模块1041、播放控制模块1042、媒体流接收模块1043、标签转换模块1044和标签选取模块1045。
[0057]所述会控信令处理单元1021是MCU系统102的一部分，用于识别并执行会议中各会场的操作指令和会议信令变化过程。会控信令处理单元1021在会控信息进行处理的同时，将信令变化和会场操作等相关信息进行提取，生成信令对应的标签生成请求信息，发送给标签生成模块1031。其中，会控信令变化如会场加入会议、离开会议、大会主席提出的各种申请及某会场被大会广播，会场操作如启动辅流视频、停止辅流视频及会场有与会人提出发言。
[0058]媒体处理单元1022也是MCU系统102的一部分，用于处理会议中各会场的媒体信息。该媒体信息包括但不限于:主流视频流媒体、主流音频流媒体、辅流视频流媒体和数据会议信息，数据会议信息如电子白板信息、短消息、字幕信息等。该媒体处理单元1022识别媒体流的内容变化，然后将识别结果生成媒体变化对应的标签生成请求信息，发送给标签生成模块1031。需要说明的是，根据处理媒体流的类型不同，媒体处理单元1022可以包括视频媒体处理单元、辅流媒体处理单元及音频媒体处理单元。
[0059]进一步地，标签生成模块1031，用于接收来自会控信令处理单元1021、媒体处理单元1022和系统外来标签模块1032发送的标签生成请求信息，同时获取会议时间，生成时间点，复合并加工组成标签信息。把这些标签信息汇总后发送给媒体存储模块1033 ；
[0060]系统外来标签模块1032，用于在会议录制过程中接收本装置之外发送过来的添加标签信息请求，如网络管理软件发送的标签、直播客户端发送的标签、用户手动添加备注信息的标签等，该系统外来标签模块1032接收外来标签信息后，生成对应的标签生成请求信息，发送给标签生成模块1031 ；。
[0061]媒体流存储模块1033，用于接收媒体处理单元1022发送的媒体流，该媒体流包括并不限于主流视频流媒体数据、主流音频流媒体数据、辅流视频流媒体数据、数据会议信息，并将这些流媒体的数据进行加工整理,存储到媒体流存储库1034中。同时也接收标签生成模块1031发送来的标签信息，与流媒体一起保存到媒体流存储库1034中；[0062]媒体流存储库1034，通常以数据库、磁盘阵列、或文件形式存在，用于保存和存储会议的媒体流数据。除了存储通用的视音频流媒体数据的信息外，还存储视音频流媒体数据对应的标签信息，媒体流存储模块1033及媒体流存储库1034均为录播系统103中的单元;
[0063]媒体流发送模块1035，用于将在媒体流存储库1034中查询到的媒体流发送给点播客户端104 ；
[0064]媒体流定位模块1036，用于接收到所述点播客户端104中所述标签转换模块1144发送的播放定位命令，驱动媒体流发送模块1035从媒体流存储库1034中选取对应的媒体流信息发送给点播客户端104中的媒体流接收模块1143 ；
[0065]标签识别模块1037，用于读取与会议媒体流对应的标签信息，识别并解析该标签
信息；
[0066]媒体流播放模块1041，用于播放该录播系统103中的该媒体流发送模块1035发送的会议流媒体；
[0067]播放控制模块1042，用于用户对会议流媒体或标签进行选择；
[0068]媒体流接收模块1043，用于接收该录播系统103中的该媒体流发送模块1035发送的会议流媒体；
[0069]标签转换模块1044，用于将用户选择的会议标签，确定该会议标签对应的会议媒体流时间点，将该时间点转换为符合该录播系统103播放格式的播放定位指令，并发送给录播系统103 ；
[0070]标签选取模块1045，用于整合各会议媒体流的标签，使得各会议流媒体的标签可以进行排序、搜索、增加、删除等操作。如查找指定会场的所有标签、对标签按时间排序等。
[0071]请参阅图2，本发明实施例中的会议标签的生成方法的一个实施例包括:
[0072]201、MCU根据识别会议事件的变化信息，生成对应的标签生成请求并发送给录播系统；
[0073]在各会场，与会人员通过登录会议终端加入视频会议。
[0074]视频会议系统中的MCU包含会控信令处理单元和媒体处理单元，该会控信令处理单元可以处理会议中各会场的会控信息，该会控信息包括会场操作指令和会议信令，其中，会场操作指令可包括启动辅流视频、停止辅流视频、会场进行发言等，会议信令可包括会议中有会场加入会议、会场离开会议、申请主席、会场被广播等。该媒体处理单元可处理主流视频流媒体、主流音频流媒体、辅流视频流媒体。因此，该媒体处理单元至少可包括:视频媒体处理单元、音频媒体处理单元、辅流媒体处理单元。
[0075]具体地，该会控信令处理单元通过识别各会场的会控指令和当前会议模式，该当前会议模式指当前会议的不同形式，如:会议的形式是点对点会议或多点会议，会议当中是否有广播，是否在发送辅流、是否有主席等，生成能够表示会议进程状态的会议事件的信息，如会场加入会议、离开会议、会场被广播、会场被闭音、会场请求发言等。该媒体处理单元对与会的会议终端发送的媒体信息进行实时检测，识别出会议相关的事件的信息，如辅流胶片翻页，会场人员增加、减少、走动，会场发言等。
[0076]进一步地，该会控信令处理单元和该媒体处理单元能够识别的会议事件，请参见下表:
【权利要求】
1.一种会议标签生成方法，其特征在于，包括: 多点会议单元根据识别会议事件的变化信息，生成对应的会议事件标签生成请求并发送给录播系统，所述会议事件标签生成请求中包含所述会议事件的变化信息； 所述录播系统接收所述会议事件标签生成请求； 根据所述会议事件的变化信息中的会议事件变化时间生成会议标签； 将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系。
2.根据权利要求1所述的方法，其特征在于，所述根据所述会议事件信息中的会议事件变化时间生成会议标签包括: 获取并记录所述会议事件信息中的会议事件变化时间； 记录所述会议事件信息中的会议事件来源信息； 根据所述会议事件变化时间和所述会议事件来源信息生成会议标签。
3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括: 接收来自所述多点会议单元之外的添加标签信息请求； 生成与所述添加标签信息请求 对应的会议标签； 将生成的与所述添加标签信息请求对应的会议标签与所述多点会议单元发送的媒体流形成时间上的对应关系，并存储形成的对应关系。
4.一种会议标签应用方法，其特征在于，包括: 点播客户端接收播放会议媒体流的请求，所述播放会议媒体流的请求中包含所请求的会议媒体流的识别信息； 将所述播放会议媒体流的请求发送给录播系统； 接收所述录播系统发送的所述会议媒体流以及所述会议媒体流对应的所有标签信息，并显示所述会议媒体流标签； 根据接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求； 接收并播放所述选择会议媒体流标签对应的会议媒体流。
5.根据权利要求4所述的方法，其特征在于，所述根据接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求包括: 根据接收的用户选择会议媒体流标签的指令，确定所选择的会议媒体流标签对应的会议媒体流的时间点； 将所述对应的会议媒体流的时间点，转换为符合所述录播系统播放格式的播放定位指令并发送给所述录播系统，使得所述录播系统根据所述播放定位指令播放所述播放定位指令指示的播放时间点对应的会议媒体流。
6.一种会议标签生成系统，其特征在于，包括: 多点会议单元，录播系统； 所述多点会议单元，用于根据识别会议事件的变化信息，生成对应的会议事件标签生成请求并发送给录播系统，所述会议事件标签生成请求中包含所述会议事件的变化信息；所述录播系统，用于接收所述会议事件标签生成请求； 所述录播系统，用于根据所述会议事件的变化信息中的会议事件变化时间生成会议标签；所述录播系统，还用于将生成的会议标签与会议媒体流形成时间上的对应关系，并存储形成的对应关系。
7.根据权利要求6所述的会议标签生成系统，其特征在于， 所述录播系统，还用于获取并记录所述会议事件信息中的会议事件变化时间； 所述录播系统，还用于记录所述会议事件信息中的会议事件来源信息； 所述录播系统，还用于根据所述会议事件变化时间和所述会议事件来源信息生成会议标签。
8.根据权利要求6或7所述的会议标签生成系统，其特征在于， 所述录播系统，还用于接收来自所述多点会议单元之外的添加标签信息请求； 所述录播系统，还用于生成与所述添加标签信息请求对应的会议标签； 所述录播系统，还用于将生成的与所述添加标签信息请求对应的会议标签与所述多点会议单元发送的媒体流形成时间上的对应关系，并存储形成的对应关系。
9.一种会议标签应用装置，其特征在于，包括: 接收单元，用于接收播放会议媒体流的请求，所述播放会议媒体流的请求中包含所请求的会议媒体流的识别信息； 发送单元，用于将所述接收单元接收的所述播放会议媒体流的请求发送给录播系统；所述接收单元，还用于接收所述录播系统发送的所述会议媒体流以及所述会议媒体流对应的所有标签信息； 显示单元，用于显示所述接收单元接收的会议媒体流标签； 所述发送单元，还用于根据所述接收单元接收的选择会议媒体流标签的指令，向所述录播系统发送获取所述选择会议媒体流标签对应的会议媒体流的请求； 所述接收单元，还用于接收所述选择会议媒体流标签对应的会议媒体流； 播放单元，用于播放所述接收单元接收的所述选择会议媒体流标签对应的会议媒体流。
10.根据权利要求9所述的装置，其特征在于， 所述发送单元还包括: 确定单元，用于根据所述接收单元接收的用户选择会议媒体流标签的指令，确定所选择的会议媒体流标签对应的会议媒体流的时间点； 转换单元，用于将所述确定单元确定的所述对应的会议媒体流的时间点，转换为符合所述录播系统播放格式的播放定位指令并发送给所述录播系统，使得所述录播系统根据所述播放定位指令播放所述播放定位指令指示的播放时间点。
【文档编号】H04N7/15GK103561229SQ201310496741
【公开日】2014年2月5日 申请日期:2013年10月21日 优先权日:2013年10月21日
【发明者】阮冠春 申请人:华为技术有限公司