多媒体会议的录播方法、装置及系统、回播方法及装置的制作方法

文档序号:7717681阅读:128来源:国知局
专利名称:多媒体会议的录播方法、装置及系统、回播方法及装置的制作方法
技术领域
本发明涉及通信技术领域,尤其涉及一种多媒体会议的录制方法、回播方法、录播 装置及录播系统。
背景技术
目前,多媒体会议的录播方式,通常为以下形式一种终端实现录播的方式为在传统的电视终端中集成录播系统,在召开多媒体 会议期间,启用电视终端的录制功能,录制并存储电视终端的本地音频、视频等媒体流的数 据,或者录制并存储电视终端接收到的其他电视终端的远端音频、视频等媒体流的数据,多 媒体会议结束后,通过电视终端对所录制的媒体流的数据内容进行回播查看。另一种应用探测式录播服务器的录播方式为将探测式录播服务器与多媒体会议 中的终端、多点控制单元MCU(Multipoint Control Unit,多点控制单元)等接入在同一个 网络中,在召开多媒体会议期间,探测式录播服务器抓取网络上的通信数据包,然后根据设 置的滤取信息提取出需要录制的媒体流的数据,如音频、视频数据,之后进行存储记录,多 媒体会议结束后,再回播查看所存储的媒体流的数据。在实现本发明过程中,发明人发现现有技术中至少存在如下问题第一种录播方式,由于只是由电视终端对其本身或接收到的单路媒体流的数据进 行单独录制及单独存储,不能够对多路音频、视频等媒体流的数据进行一些组合录制处理, 如,多画面、画中画等图像形式。第二种录播方式,由于探测式录播服务器抓取网络上的通信数据包,然后提取出 音频、视频数据单独录制存储,也同样无法对多路音频、视频等媒体流的数据进行一些组合 录制处理。

发明内容
本发明的实施例提供了一种多媒体会议的录制方法、回播方法、录制装置、回播装 置、录播装置及录播系统,实现对多媒体会议中多路会议媒体流的组合录制。本发明实施例提供一种多媒体会议的录制方法,包括获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议媒体流至 少为视频媒体流或音频媒体流;根据媒体录制策略对所述多路会议媒体流进行组合录制处理。对应的,本发明实施例提供用于实现上述方法的一种多媒体会议的录制装置,包 括接收模块,用于接收根据会议级录制策略确定的将要录制的多路会议媒体流,所 述会议媒体流至少为视频媒体流或音频媒体流;录制处理模块,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。7
对应的,本发明实施例还提供一种多媒体会议的回播方法,包括接收携带有媒体标识的回播请求,所述媒体标识用于标识媒体文件;根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体文件为根据录制 策略对多媒体会议中多路会议媒体流进行组合录制处理所获得。对应的,本发明实施例还提供用于实现上述方法的一种多媒体的会议回播装置, 包括回播请求接收模块,用于接收携带有媒体标识的回播请求,所述媒体标识用于标 识媒体文件;回播模块,用于根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体文 件根据录制策略对多媒体会议中多路会议媒体流进行组合录制处理获得,所述录制策略包 括会议级录制策略和媒体级录制策略。本发明实施例还提供一种多媒体会议的录播装置,包括上述的录制装置或者上述 的回播装置基于与上述本发明实施例提供的多媒体会议的录播方法、装置,本发明实施例提 供一种多媒体会议的录制方法,包括获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议媒体流至 少为视频媒体流或音频媒体流;根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联标识,所 述关联标识用于关联各会场的会议媒体流。对应的,本发明实施例提供用于实现上述方法的一种多媒体会议的录制装置,包 括接收模块,用于获得多媒体会议中各会场的多路会议媒体流,所述会议媒体流至 少为视频媒体流或音频媒体流;关联标识分配模块,用于根据所述会议媒体流所属的会场,存储所述多路会议媒 体流并分配关联标识,所述关联标识用于关联各会场的会议媒体流。本发明实施例还提供一种多媒体会议的回播方法,包括接收携带有关联标识的回播请求,得到所述关联标识对应的多路会议媒体流,所 述关联标识用于关联各会场的会议媒体流,所述会议媒体流至少为视频媒体流或音频媒体 流;根据媒体录制策略对所述多路会议媒体流进行组合录制处理。对应的,本发明实施例还提供用于实现上述方法的一种多媒体会议的回播装置, 包括回播请求接收模块,用于接收携带有关联标识的回播请求,得到所述关联标识对 应的多路会议媒体流,所述关联标识用于关联各会场的会议媒体流,所述会议媒体流至少 为视频媒体流或音频媒体流;回播处理模块,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。本发明实施例还提供一种多媒体会议的录播装置,包括上述的录制装置或者上述 的回播装置。
由上述本发明的实施例提供的技术方案可以看出,由于可以根据录制策略对多媒 体会议中多路会议媒体流进行组合录制处理,所以能够较佳的反应多媒体会议的综合情 况,而且,录制策略地设置灵活。


为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用 的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本 领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他 的附图。图1为本发明实施例多媒体会议的录制方法的流程示意图;图2为本发明实施例多媒体会议的录制装置的结构示意图一;图3为本发明实施例多媒体会议的录制装置的结构示意图二 ;图4为本发明实施例多媒体会议的回播方法的流程示意图;图5为本发明实施例多媒体会议的回播装置的结构示意图一;图6为本发明实施例多媒体会议的回播装置的结构示意图二 ;图7为本发明实施例多媒体会议的录制方法的流程示意图;图8为本发明实施例多媒体会议的录制装置的结构示意图一;图9为本发明实施例多媒体会议的录制装置的结构示意图二 ;图10为本发明实施例多媒体会议的回播方法的流程示意图;图11为本发明实施例多媒体会议的回播装置的结构示意图一;图12为本发明实施例多媒体会议的回播装置的结构示意图二 ;图13为本发明实施例多媒体会议的录播方法的结构示意图一;图14为本发明实施例多媒体会议的录播方法的结构示意图二 ;图15为本发明实施例网真系统示意图;图16为本发明实施例多媒体会议的录播方法的具体应用流程示意图;图17为本发明实施例多媒体会议的录播方法的具体应用流程示意图;图18为本发明实施例多媒体会议的录播系统的结构示意图三;图19为本发明实施例多媒体会议的录播方法的具体应用流程示意图;图20为本发明实施例多媒体会议的录播系统的结构示意图四;图21为本发明实施例多媒体会议的录播方法的具体应用流程示意图。
具体实施例方式下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完 整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于 本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他 实施例,都属于本发明保护的范围。基于现有技术无法对多媒体会议中多路会议媒体流(媒体流如音频媒体流、视频 媒体流、图片媒体流等)进行组合录制的缺陷,本发明实施例提供了一种多媒体会议的录 制、回播方法、装置,录播装置及录播系统,可以根据录制策略对多媒体会议中多路会议媒体流进行组合录制处理,以及可以对组合录制处理的多路会议媒体流进行回播。这里,多媒体会议中多路会议媒体流,可以是一个会议会场的多路本地媒体流,或 多路远端媒体流,还可以是多个会议会场的多路本地媒体流或多路远端媒体流,多路可以 理解为至少为2路,在此不作赘述。还可以知道,一个会议会场可以包括一个以上的会议终 端。如,图12所示的网真系统中,一个会议会场包括3个会议终端,单个网真系统会议会场 就存在3路本地视频媒体流、3路本地音频媒体流和3路远端视频媒体流、3路远端音频媒 体流,即共有6路视频媒体流和6路音频媒体流。本发明实施例提供的一种多媒体会议的录制、回播的方法、装置,录播装置及录播 系统,对多媒体会议中多路会议媒体流进行组合录制处理,主要如将多路视频媒体流合成 为一路或多路多画面、一路或多路画中画,或一路或多路宽屏图像等图像样式,等等;如将 多路音频媒体流合成为单路音频、多路音频或多声道音频等录制模式,等等。这样,组合录 制的媒体流的数据能更好地反应多媒体会议的综合情况,还可以通过便捷地对媒体流的数 据进行回播,获得多媒体会议的综合情况。实施例一如图1所示,本发明实施例提供一种多媒体会议的录制方法,包括步骤11 获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议 媒体流至少为视频媒体流或音频媒体流;步骤12 根据媒体录制策略对所述多路会议媒体流进行组合录制处理。可选的,多媒体会议的录制方法的执行主体可以为录播服务器,参见图13所示, 录播服务器与多点控制单元(多点控制单元MCU)连接,多点控制单元MCU与至少一个会议 终端连接时,获得根据会议级录制策略确定的将要录制的多路会议媒体流的步骤11,具体 可以包括将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略包括声控切 换会场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录制模式;接收所述多点控制单元MCU根据所述会议级录制策略,确定的至少一个会场中将 要录制的多路会议媒体流,所述会场包括至少一个会议终端。具体而言,声控切换会场录制模式,指根据会议中各个会场声音的大小,录制会议 中声音最大会场的会议终端的媒体流的数据;广播会场录制模式,指录制会议中被广播会 场的会议终端的媒体流的数据;主席会场录制模式,指录制会议中主席会场的会议终端的 媒体流的数据;特定会场录制模式,指录制选定的单个或多个会场的会议终端的媒体流的 数据。会议级录制策略主要用于确定哪些会场的那些媒体流需要被录制。会议级录制策 略包括但不限于上述示例策略。或者,可选的,参见图14所示,录播服务器与至少一个会议终端连接,与录播服务 器连接的会议终端再与多点控制单元MCU连接,多点控制单元MCU还连接有其他未与录播 服务器连接的至少一个会议终端时,获得根据会议级录制策略确定的将要录制的多路会议 媒体流的步骤11,具体可以包括将会议级录制策略发送给会议终端,所述会场包括至少一个会议终端,所述会议 级录制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或特定会场远端媒体流录制模式;接收所述会议终端根据所述会议级录制策略确定的将要录制的多路会议媒体流。由于录播服务器连接的是会议终端而不是多点控制单元MCU,录播服务器只可以 获得与其连接的会议终端上的媒体流数据,所以,某些会议级录制策略将无法使用,如声 控切换会场录制模式、广播会场录制模式。具体而言,特定会场录制模式,指录制选定的单个或多个会场的会议终端的媒体 流的数据;特定会场本地媒体流录制模式,指录制选定的单个或多个会场的会议终端的本 地媒体流的数据;特定会场远端媒体流录制模式,指录制选定的单个或多个会场的会议终 端接收到的远端媒体流的数据。可选的,根据媒体录制策略对所述多路会议媒体流进行组合录制处理的步骤12, 具体可以包括根据媒体录制策略的视频媒体录制模式,将所述多路视频媒体流合成为一路或多 路视频多画面,或一路或多路视频画中画,或一路或多路宽屏视频,所述视频媒体录制模式 包括视频录制路数设置模式,或视频多画面录制模式,或视频画中画录制模式,或宽屏视 频媒体录制模式;根据媒体录制策略的音频媒体录制模式,将所述多路音频媒体流合成为音频单声 道,或音频多声道,所述音频媒体录制模式包括音频录制路数设置模式,或音频单声道录 制模式,或音频多声道录制模式。媒体级录制策略主要用于确定将多路会议媒体流合成录制处理的方式。媒体级录 制策略包括但不限于上述示例策略。具体而言,视频录制路数设置,指可录制输出多路视频;视频多画面录制模式,指 可将多路视频媒体组合成单路或多路多画面进行录制;视频画中画录制模式,指可将多路 视频媒体组合成单路或多路画中画进行录制;宽屏视频媒体录制模式,指将多路视频媒体 组合成单路或多路宽屏视频图像进行录制。视频媒体录制模式包括但不限于上述示例录制 模式。而且,上述视频媒体录制模式可组合使用,组合录制多媒体会议中由会议级录制策略 确定的多路视频媒体流,可更好的反应多媒体会议的综合情况。音频录制路数设置,指可录制输出多路音频;音频单声道录制模式,指可将会议中 的多路音频媒体(会场声音、背景音乐等)混音成单声道音频进行录制,混音路数可以设 置;音频多声道录制模式,指可将会议中的多路音频媒体混音成多路音频,然后按照多声道 音频媒体进行录制。音频媒体录制模式包括但不限于上述示例录制模式。而且,上述音频 媒体录制模式也可组合使用,组合录制多媒体会议中由会议级录制策略确定的多路音频媒 体,可更好的反应多媒体会议的综合情况。可选的,本发明实施例的多媒体会议的录制方法,可以同时设置多种不同的录制 策略,实现对会议中的媒体流的数据进行录制。如,设置2种不同的会议级录制策略,分别 确定2组由多路视频媒体流及音频媒体流构成的媒体流,对其中一组多路视频媒体流及音 频媒体流构成的媒体流,采用一种视频媒体录制模式以及音频媒体录制模式进行组合录 制,对另一组多路视频媒体流及音频媒体流构成的媒体流,采用另一种视频媒体录制模式 以及音频媒体录制模式进行组合录制,可以更全面的反应多媒体会议的综合情况。可选的,本发明实施例的多媒体会议的录制方法中,若设置有录制参数,如录制时11长、录制容量、录制格式、录制码率、压缩协议中的一种或多种,步骤12,具体还可以是,根据 媒体录制策略以及录制参数对所述多路会议媒体流进行组合录制处理。如根据媒体级录制 策略的视频媒体录制模式对视频媒体流进行录制时,录制参数包括录制码率、录制格式、帧 率,数据合成后可以采用的压缩协议等。又如根据媒体级录制策略的音频媒体录制模式对 音频媒体流进行录制时,录制参数包括录制码率、录制频宽,数据合成后可以采用的压缩协 议等。如对视频媒体流采用的压缩协议可以是H. 263,H. ^4、MPEG2、MPEG4等,对音频媒体 流的压缩协议可以是G. 711、G. 722、G. 729、ACC等,在此不作赘述。可选的,本发明实施例的多媒体会议的录制方法中,一个场景中录播服务器与多 点控制单元MCU连接,多点控制单元MCU与至少一个会议终端连接,多点控制单元MCU可以 向录播服务器发送会议媒体流的视频媒体流与音频媒体流的时间同步信息,媒体指示信息 以及会议指示信息。具体而言,获得根据会议级录制策略确定的将要录制的多路会议媒体流的步骤 11,还可以包括获得所述多路会议媒体流中视频媒体流与音频媒体流的时间同步信息。此 时,根据媒体录制策略对所述多路会议媒体流进行组合录制处理的步骤12,还可以包括 根据所述视频媒体流与音频媒体流的时间同步信息,将合成后的所述视频媒体流的数据与 音频媒体流的数据复用编码为媒体文件;存储所述媒体文件,并为所述媒体文件设置媒体 标识,所述媒体标识用于标识所述媒体文件。媒体文件可以采用MPEG媒体文件格式等较为通用的格式,有利于媒体文件的存 储,以及避免回播时容易出现视音频不同步的问题,提高了回播质量。而且,通过为存储的 媒体文件设置对应的媒体标识,这样可以通过媒体标识方便快速地找到需要回播的媒体数 据。媒体指示信息至少可以包括媒体数据类型、媒体数据是否被压缩、媒体压缩协 议、数据码率、媒体带宽中的一种或多种,等等。通过媒体指示信息,可以判断是否对接收到 的多路会议媒体流解码。如,将不同的类型的媒体数据分发给不同的媒体解码器,媒体解码 器如视频解码器、音频解码器、图片解码器,等等。会议指示信息至少包括会议开始、会议结束、会场离会、会场入会中的一种或多 种,等等。根据会议指示信息,可以对组合录制进行不同的处理。如,接收到会议结束指示信 息时,说明当前会议已经结束,那么对当前会议的录播处理可以结束;再如,接收到会议中 的会场离会时,可以有很多处理策略,最简单的策略就是停止对离会会场媒体数据的录制, 当然也可以使用一个其他的会场来顶替离会会场,当然当录制形式为多画面时可以动态更 改多画面样式(如从四画面变更为三画面),等等。可选的,本发明实施例的多媒体会议的录制方法中,另一个场景中录播服务器与 至少一个会议终端连接,与录播服务器连接的会议终端再与多点控制单元MCU连接,多点 控制单元MCU还连接有其他未与录播服务器连接的至少一个会议终端。与多点控制单元 MCU连接的会议终端可以向录播服务器发送会议媒体流的视频媒体流与音频媒体流的时间 同步信息,媒体指示信息以及会议指示信息,同理,时间同步信息,媒体指示信息以及会议 指示信息的具体应用,可以参照上述场景来理解,在此不作赘述。可选的,本发明实施例的多媒体会议的录制方法,还可以包括将合成后的媒体流 的数据进行相应的压缩编码,该过程并不是必须的,压缩编码主要是为了减少媒体流的数12据量。可选的,获得根据会议级录制策略确定的将要录制的多路会议媒体流的步骤11 中,还可以将会议级录制策略以及媒体级录制策略都发送给多点控制单元MCU或所述会议 终端,不受限制。对于“网真”系统,如图15所示,每个会场设置一个以上的会议终端,如3台会议 终端、3台高清摄像机和3台高清显示器,使用中,3台高清显示器中,能够显示真人大小的 远端图像,并且在水平方向上图像是连续的,使各方与会人员有如身临现场一起开会、进行 面对面交流的体验。上述多媒体会议的录制、回播方法,还可以包括,将同一会场的会议终端组成终端 组(如图13、14中的虚线框所示),并可以设置媒体级录制策略,如将终端组中各个终端的 本地视频组合本地视频多画面或者本地宽屏图像,将终端组中各个终端的远端视频组合成 远端视频多画面或者远端宽屏图像。由上述本发明实施例提供的技术方案可以理解,上述多媒体会议的录制方法,可 以灵活的设置录制策略,使得组合录制的媒体流的数据更好的反应多媒体会议的综合情 况。实施例二参见上述实施例一提供的多媒体会议的录制方法,如图2所示,本发明实施例提 供一种可以实现上述录制方法的多媒体会议的录制装置,包括接收模块21,用于接收根据会议级录制策略确定的将要录制的多路会议媒体流, 所述会议媒体流至少为视频媒体流或音频媒体流。录制处理模块22,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。如图3所示,可选的,接收模块21,可以包括策略发送模块211,用于将会议级录制策略发送给多点控制单元MCU,所述会议级 录制策略包括声控切换会场录制模式,或广播会场录制模式,或主席会场录制模式,或特 定会场录制模式。媒体流接收模块212,用于接收所述多点控制单元MCU根据所述会议级录制策略, 确定的至少一个会场中将要录制的多路会议媒体流,所述会场包括至少一个会议终端。还可以是,可选的,接收模块21,可以包括策略发送模块211,用于将会议级录制策略发送给会议终端,所述会场包括至少一 个会议终端,所述会议级录制策略包括特定会场录制模式,或特定会场本地媒体流录制模 式,或特定会场远端媒体流录制模式。媒体流接收模块212,用于接收所述会议终端根据所述会议级录制策略确定的将 要录制的多路会议媒体流。可选的,录制处理模块22,包括视频录制处理模块221,用于根据所述媒体录制策略的视频媒体录制模式,将所述 多路视频媒体流合成为一路或多路视频多画面,或一路或多路视频画中画,或一路或多路 宽屏视频,所述视频媒体录制模式包括视频录制路数设置模式,或视频多画面录制模式, 或视频画中画录制模式,或宽屏视频媒体录制模式。13
音频录制处理模块222,用于根据所述媒体录制策略的音频媒体录制模式,将所述 多路音频媒体流合成为音频单声道,或音频多声道,所述音频媒体录制模式包括音频录制 路数设置模式,或音频单声道录制模式,或音频多声道录制模式。可选的,接收模块21,还可以包括时间同步信息接收模块213,用于接收所述多路会议媒体流中视频媒体流与音频 媒体流的时间同步信息。此时,录制处理模块22,还可以包括媒体文件生成模块223,用于根据所述视频媒体流与音频媒体流的时间同步信息, 将合成后的所述视频媒体流的数据与音频媒体流的数据复用编码为媒体文件。存储模块224,用于存储所述媒体文件,并为所述媒体文件设置媒体标识,所述媒 体标识用于标识所述媒体文件。本发明实施例提供的多媒体会议的录制装置以及具体构成模块,可以参照上述实 施例一提供的多媒体会议录制方法来理解,在此不作赘述。由上述本发明实施例提供的技术方案可以看出,上述多媒体会议的录制装置,可 以灵活的设置录制策略,使得组合录制的媒体流的数据更好的反应多媒体会议的综合情 况。实施例三对应于本发明实施例一提供的多媒体会议的录制方法,如图4所示,本发明实施 例提供一种多媒体会议的回播方法,包括步骤41 接收携带有媒体标识的回播请求,所述媒体标识用于标识媒体文件。步骤42 根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体文件为 根据录制策略对多媒体会议中多路会议媒体流进行组合录制处理所获得。本发明实施例多媒体会议的回播方法的执行主体可以为录播服务器。本发明实施例多媒体会议的回播方法,还可以包括录播服务器接收携带有媒体 标识的回播请求之前,将媒体标识发送给多点控制单元MCU或会议终端。这样,步骤41中, 录播服务器可以接收来自多点控制单元MCU或会议终端的携带有媒体标识的回播请求,步 骤42中,录播服务器根据所述媒体标识获得对应的媒体文件,多点控制单元MCU或会议终 端从录播服务器处获得媒体文件进行回播。对媒体文件的回播,如对媒体文件解复用,若媒体文件被压缩过,回播时要进行解 压缩,录播服务器可以对录制的宽屏图像进行适配处理(如降分辨率、降帧率等),在此不 作赘述。参见图13所示,本发明实施例的一个场景中,录播服务器与多点控制单元MCU连 接,多点控制单元MCU与至少一个会议终端连接。录播服务器根据媒体录制策略对多路会 议媒体流进行组合录制处理后,为媒体文件设置媒体标识,所述媒体标识用于标识所述媒 体文件。录播服务器将与媒体文件对应的媒体标识发送给多点控制单元MCU。当需要回播 时,多点控制单元MCU发送携带有媒体标识的回播请求给录播服务器,录播服务器从其录 制的媒体文件中获得媒体标识对应的媒体文件,如果录播服务器自身带有视音频媒体的输 出设备,则录播服务器可以自身完成对媒体文件的回播。或者,录播服务器可以将媒体文件 发送给多点控制单元MCU,由多点控制单元MCU进行回播。
或者,与多点控制单元MCU连接的会议终端可以通过多点控制单元MCU转发携带 有媒体标识的回播请求给录播服务器,录播服务器从其录制的媒体文件中获得媒体标识对 应的媒体文件,录播服务器可以将媒体文件通过多点控制单元MCU发送给会议终端,由会 议终端进行回播。参见图14所示,本发明实施例的另一个场景中,录播服务器与至少一个会议终端 连接,与录播服务器连接的会议终端再与多点控制单元MCU连接,多点控制单元MCU还连接 有其他未与录播服务器连接的至少一个会议终端。具体实现回播的过程,可以参照上一场 景,实现对媒体文件的回播,不做赘述。可选的,本发明实施例的再一个场景中,对于如图15所示的“网真”系统,对宽屏 图像的视频媒体流进行回播时如果用相应个数的终端进行回播的话,则录播服务器可以对宽屏图像媒体流进行 解压缩恢复出宽屏图像,然后再分割出各个终端对应的图像,对这些图像进行编码以生成 各个终端图像的码流,将这些码流发送给网真终端组中对应的各个终端进行回播,以完全 再现录制时的状态。如果用单个终端进行回播时,单个终端的解码能力有可能达不到解码宽屏图像的 能力,那么在回播时,则录播服务器可以对录制的宽屏图像进行适配处理(如降分辨率、降 帧率等),以将宽屏图像转换成单个终端能够支持的媒体格式。由上可见,上述实现多媒体会议的回播方法,可以通过媒体标识获得对应的媒体 文件以实现回播,而媒体文件为根据录制策略对多媒体会议中多路媒体流的数据进行组合 录制所获得,回播的媒体文件可以更好的反应多媒体会议的综合情况。实施例四如图5所示,对应于实施例三提供的多媒体会议的回播方法,本发明实施例提供 了一种多媒体会议的回播装置,包括回播请求接收模块51,用于接收携带有媒体标识的回播请求,所述媒体标识用于 标识媒体文件。回播模块52,用于根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体 文件根据录制策略对多媒体会议中多路会议媒体流进行组合录制处理获得,所述录制策略 包括会议级录制策略和媒体级录制策略。如图6所示,可选的,多媒体会议的回播装置,还可以包括媒体标识发送模块53,用于发送媒体标识给多点控制单元MCU或会议终端。本发明实施例提供的多媒体会议的回播装置以及具体构成模块,可以参照上述实 施例三提供的多媒体会议回播方法来理解,在此不作赘述。实施例五对应于上述实施例一至四提供的多媒体会议的录制方法、装置,回播方法、装置, 本发明实施例提供了一种多媒体会议的录播装置,包括多媒体会议的录制装置和/或多 媒体会议的回播装置。多媒体会议的录播装置可以为录播服务器。进一步,本发明实施例多媒体会议的录播装置,还可以包括输入/输出设备,用于输入录制策略及录制参数,以及输出回播的媒体流的数据。 录制策略包括会议级录制策略和媒体级录制策略。
由上可见,本发明实施例多媒体会议的录播装置,可以灵活的设置录制策略,以及 根据录制策略组合录制的媒体流的数据,更好的反应多媒体会议的综合情况。实施例六如图7所示,本发明实施例提供了一种多媒体会议的录制方法,包括步骤71、获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议 媒体流至少为视频媒体流或音频媒体流。步骤72、根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联 标识,所述关联标识用于关联各会场的会议媒体流。可选的,多媒体会议的录制方法的执行主体可以为录播服务器,参见图13所示, 录播服务器与多点控制单元MCU连接,多点控制单元MCU与至少一个会议终端连接。所述 获得根据会议级录制策略确定的将要录制的多路会议媒体流,具体包括将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略包括声控切 换会场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录制模式;接收所述MCU根据所述会议级录制策略,确定的至少一个会场中将要录制的多路 会议媒体流,所述会场包括至少一个会议终端。或者,参见图14所示,录播服务器与至少一个会议终端连接,与录播服务器连接 的会议终端再与多点控制单元MCU连接,多点控制单元MCU还连接有其他未与录播服务器 连接的至少一个会议终端。所述获得根据会议级录制策略确定的将要录制的多路会议媒体 流,具体包括将会议级录制策略发送给会议终端,所述会场包括至少一个会议终端,所述会议 级录制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或特定会场远端媒 体流录制模式;接收所述会议终端根据所述会议级录制策略确定的将要录制的多路会议媒体流。可选的,根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联 标识的步骤72,具体也就是说,可以根据所述多路会议媒体流的类型,为每个会场的每种媒 体创建一个文件,也可以根据所述多路会议媒体流所属的会场,为每个会场创建一个文件, 也可以整个会议创建一个文件。无论那种存储记录方式,都为记录的会场记录关联一个关 联标识。可选的,本发明实施例的多媒体会议的录制方法,还可以包括获得所述多路会议 媒体流中视频媒体流与音频媒体流的时间同步信息。这样,根据所述视频媒体流与音频媒体流的时间同步信息,可以实现将所述视频 媒体流的数据与音频媒体流的数据复用编码为媒体文件,有利于避免回播时容易出现视音 频不同步的问题,提高回播质量。可选的,本发明实施例的多媒体会议的录制方法,还可以包括获得并存储多媒体 会议中各会场的控制命令。这样,将回播时,可以回播会场在会议过程中所看到的图像和听到的声音,同时回 播该会场在会议中的控制命令,做到对该会场的完整重现。由上述本发明实施例提供的技术方案可以看出,上述多媒体会议的录制方法,可 以灵活的设置录制策略,使得组合录制的媒体流的数据更好的反应多媒体会议的综合情
实施例八参见上述实施例七提供的多媒体会议的录制方法,如图8所示,本发明实施例提 供一种可以实现上述录制方法的多媒体会议的录制装置,包括接收模块81,用于获得根据会议级录制策略确定的将要录制的多路会议媒体流, 所述会议媒体流至少为视频媒体流或音频媒体流。关联标识分配模块82,用于根据所述会议媒体流所属的会场,存储所述多路会议 媒体流并分配关联标识,所述关联标识用于关联各会场的会议媒体流。如图9所示,可选的,若多媒体会议的录制方法的执行主体可以为录播服务器,录 播服务器与多点控制单元MCU连接,多点控制单元MCU与至少一个会议终端连接,或者,录 播服务器与至少一个会议终端连接,与录播服务器连接的会议终端再与多点控制单元MCU 连接,多点控制单元MCU还连接有其他未与录播服务器连接的至少一个会议终端。本发明实施例的录制装置,还可以包括同步信息获取模块83,用于获得所述多 路会议媒体流中视频媒体流与音频媒体流的时间同步信息。本发明实施例的录制装置,还可以包括控制命令获取模块84,用于获得并存储 多媒体会议中各会场的控制命令。本发明实施例提供的多媒体会议的录制装置以及具体构成模块,可以参照上述实 施例七提供的多媒体会议录制方法来理解,在此不作赘述。由上述本发明实施例提供的技术方案可以理解,上述多媒体会议的录制装置,可 以灵活的设置录制策略,使得组合录制的媒体流的数据更好的反应多媒体会议的综合情 况。实施例九对应于本发明实施例七提供的多媒体会议的录制方法,如图10所示,本发明实施 例提供一种多媒体会议的回播方法,包括步骤101、接收携带有关联标识的回播请求,得到所述关联标识对应的多路会议媒 体流,所述关联标识用于关联各会场的会议媒体流,所述会议媒体流至少为视频媒体流或 音频媒体流。步骤102、根据媒体录制策略对所述多路会议媒体流进行组合录制处理。媒体级录制策略包括视频媒体录制模式和音频媒体录制模式,所述视频媒体录制 模式包括视频录制路数设置模式,或视频多画面录制模式,或视频画中画录制模式,或宽 屏视频媒体录制模式,所述音频媒体录制模式包括音频录制路数设置模式,或音频单声道 录制模式,或音频多声道录制模式。可选的,根据媒体录制策略对所述多路会议媒体流进行组合录制处理的步骤102, 可以包括根据所述媒体录制策略的视频媒体录制模式,将所述多路视频媒体流合成为一路 或多路视频多画面,或一路或多路视频画中画,或一路或多路宽屏视频;根据所述媒体录制策略的音频媒体录制模式,将所述多路音频媒体流合成为音频 单声道,或音频多声道。本发明实施例的多媒体会议的回播方法,还可以包括
获得所述多路会议媒体流中视频媒体流与音频媒体流的时间同步信息;根据所述视频媒体流与音频媒体流的时间同步信息,将合成后的所述视频媒体流 的数据与音频媒体流的数据复用编码为媒体文件。媒体文件可以采用MPEG媒体文件格式等较为通用的格式,避免回播时容易出现 视音频不同步的问题,提高回播质量。本发明实施例回播方法的执行主体可以为录播服务器。本发明实施例一个场景下,参见图13所示,如录播服务器与多点控制单元MCU连 接,多点控制单元MCU与至少一个会议终端连接。多点控制单元MCU可以发送携带有关联标识的回播请求给录播服务器,录播服务 器根据关联标识获得对应的多路会议媒体流,录播服务器将所述多路会议媒体流发送给多 点控制单元MCU,多点控制单元MCU根据媒体级录制策略对所述多路会议媒体流进行组合 录制处理,并进行回播。或者,会议终端发送携带有关联标识的回播请求给多点控制单元MCU,录播服务器 通过多点控制单元MCU接收到回播请求,录播服务器根据关联标识获得对应的多路会议媒 体流,录播服务器将所述多路会议媒体流发送给多点控制单元MCU,多点控制单元MCU根据 媒体级录制策略对所述多路会议媒体流进行组合录制处理,多点控制单元MCU将组合录制 处理后的媒体流发送给会议终端,由会议终端进行回播。若录播服务器还直接连接有播放器或会议终端时,播放器或会议终端可以发送携 带有关联标识的回播请求给录播服务器,录播服务器根据关联标识获得对应的多路会议媒 体流,录播服务器将所述多路会议媒体流发送给多点控制单元MCU,多点控制单元MCU根 据媒体级录制策略对所述多路会议媒体流进行组合录制处理,多点控制单元MCU通过录播 服务器将组合录制处理后的媒体流发送给播放器或会议终端,由播放器或会议终端进行回 播。本发明实施例另一个场景下,参见图13所示,录播服务器与至少一个会议终端连 接,与录播服务器连接的会议终端再与多点控制单元MCU连接,多点控制单元MCU还连接有 其他未与录播服务器连接的至少一个会议终端。与录播服务器连接的会议终端发送携带有关联标识的回播请求给录播服务器,录 播服务器根据关联标识获得对应的多路会议媒体流,录播服务器根据媒体级录制策略对所 述多路会议媒体流进行组合录制处理,并进行回播。或者,与录播服务器连接的会议终端发送携带有关联标识的回播请求给录播服务 器,录播服务器根据关联标识获得对应的多路会议媒体流,录播服务器发送多路会议媒体 流给与录播服务器连接的会议终端,与录播服务器连接的会议终端根据媒体级录制策略对 所述多路会议媒体流进行组合录制处理,并进行回播。若录播服务器还直接连接有播放器或会议终端时,播放器或会议终端可以实现如 上述与录播服务器连接的会议终端的功能,如根据媒体级录制策略对所述多路会议媒体流 进行组合录制处理,并进行回播。本发明实施例的多媒体会议的回播方法,回播过程中,如可以通过录播服务器提 供的界面,或者扩展插件,发送暂停、更改播放时间、停止的请求。录播服务器可以对请求进 行处理,重新确定会议中各会场播放码流的时间点(确定码流时间点可以根据播放时间18计算码流内的时间戳),将请求和确认好时间点的码流发给多点控制单元MCU。多点控制单 元MCU等待收到录播服务器重新确认好时间点的码流后才继续处理。本发明实施例的多媒体会议的回播方法,还可以包括回播会场在会议过程中所看到的图像和听到的声音,同时回播该会场和会议的控 制命令,做到对该会场的完整重现。本发明实施例的多媒体会议的回播方法,还可以包括在回播过程中,可以通过录播服务器提供的界面,或者扩展插件,实现指定会场虚 拟入会、设置多画面、多画面轮询、切换点播会场、静闭音、远程呈现屏幕切换等会控操作。对指定会场虚拟入会操作,将回放该指定会场在会议过程中所看到的图像和听到 的声音,同时回放该会场的控制命令,做到对该会场的完整重现。对设置多画面操作,将指定的会场组合成指定的画面分屏模式,发送给点播者。对多画面轮询操作,将指定的会场定时轮流组合成指定的画面分屏模式,发送给 点播者。对切换点播会场操作,将指定的点播会场图像和声音发送给点播者。对静闭音操作,将指定会场的声音剔除,使点播者听不到该会场声音,屏蔽掉声音 嘈杂的会场。对切换远程呈现会场屏幕操作,将指定屏幕的图像发送给点播者。由上可见,上述实现多媒体会议的回播方法,可以通过关联标识获得对应多路媒 体流,对多路媒体流组合录制并回播,更好的反应多媒体会议的综合情况。实施例十如图11所示,对应于实施例七提供的多媒体会议的回播方法,本发明实施例提供 了一种多媒体会议的回播装置,包括回播请求接收模块111,用于接收携带有关联标识的回播请求,得到所述关联标识 对应的多路会议媒体流,所述关联标识用于关联各会场的会议媒体流,所述会议媒体流至 少为视频媒体流或音频媒体流。回播处理模块112,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。如图12所示,可选的,回播处理模块112,可以包括视频录制处理模块1121,用于根据所述媒体录制策略的视频媒体录制模式,将所 述多路视频媒体流合成为一路或多路视频多画面,或一路或多路视频画中画,或一路或多 路宽屏视频,所述媒体级录制策略包括视频媒体录制模式和音频媒体录制模式,所述视频 媒体录制模式包括视频录制路数设置模式,或视频多画面录制模式,或视频画中画录制模 式,或宽屏视频媒体录制模式。音频录制处理模块1122,用于根据所述媒体录制策略的音频媒体录制模式,将所 述多路音频媒体流合成为音频单声道,或音频多声道。所述音频媒体录制模式包括音频录 制路数设置模式,或音频单声道录制模式,或音频多声道录制模式。本发明实施例的回播装置,还可以包括同步信息获取模块113,用于获得所述多路会议媒体流中视频媒体流与音频媒体 流的时间同步信息。19
媒体文件生成模块114,用于根据所述视频媒体流与音频媒体流的时间同步信息, 将合成后的所述视频媒体流的数据与音频媒体流的数据复用编码为媒体文件。本发明实施例的回播装置,还可以包括控制命令回播模块115,用于回播根据会议级录制策略确定的控制命令。本发明实施例提供的多媒体会议的回播装置以及具体构成模块,可以参照上述实 施例九提供的多媒体会议回播方法来理解,在此不作赘述。由上述本发明实施例提供的技术方案可以理解,上述多媒体会议的回播装置,可 以通过关联标识获得对应多路媒体流,对多路媒体流组合录制并回播,更好的反应多媒体 会议的综合情况。实施例i^一对应于上述实施例七至十提供的多媒体会议的录制方法、装置,回播方法、装置, 本发明实施例提供了一种多媒体会议的录播装置,包括多媒体会议的录制装置和/或多 媒体会议的回播装置。多媒体会议的录播装置可以为录播服务器。进一步,本发明实施例的录播装置,还可以包括输入/输出设备,用于输入录制策略、录制参数,以及提供点播界面。录制策略包括媒体级录制策略。点播界面提供发送暂停、更改播放时间、停止的请 求,提供指定会场虚拟入会、设置多画面、多画面轮询、切换点播会场、静闭音、远程呈现屏 幕切换等会控操作。由上可见,上述本发明实施例的录播装置,可以灵活的设置录制策略,以及根据录 制策略组合录制的媒体流的数据,更好的反应多媒体会议的综合情况。实施例十二对应于上述实施例一至四提供的多媒体会议的录制方法、装置,回播方法、装置, 本发明实施例提供了一种多媒体会议的录播系统,包括多媒体会议的录播装置,多点控制 单元MCU以及会议终端。如图13所示,录播服务器与多点控制单元MCU连接,多点控制单 元MCU与至少一个会议终端连接。录播装置100、与录播装置100连接的多点控制单元(多 点控制单元MCU) 200,以及与多点控制单元MCU200连接的至少一个会议终端300。多媒体 会议的录播装置可以为录播服务器。可选的,多个会议终端300与多点控制单元200通过第一通信网络相连,多点控制 单元200完成多个会议终端300间媒体流的数据的交互。同时,录播装置100通过第二通 信网络与多点控制单元200相连,并建立起连接,此连接用于在录播装置100与多点控制单 元200间进行媒体流的数据和信息(如会议指示信息、媒体指示信息等等)的交互,录播装 置100可对多点控制单元200上的多路媒体流的数据进行合成录制。注意第二通信网络与第一通信网络可以为同一种通信网络,如都为以太网,第二 通信网络与第一通信网络也可以是不同的通信网络。多个会议终端300、多点控制单元200 以及录播装置100也可以设置在一个通信网络,如以太网。当录播装置100作为独立的设备时,可以拥有自己的输入设备,用于信息的输入, 如键盘、触摸屏、鼠标、遥控器等;也可拥有自己的输出设备,用于信息的输出显示,如液 晶屏、显示器等。当然,当录播装置作为独立的设备时,也可以没有自己独立的输入/输出 设备,此时,其可以共享多点控制单元200管理台的输入/输出设备,通过多点控制单元200管理台对录播装置进行间接的控制。用户可以通过录播装置100的输入设备设置录制策略以及录制参数。多点控制单 元200接收录播装置100发送的会议级录制策略,多点控制单元200根据会议级录制策略 确定将要录制的多路会议媒体流,多点控制单元200发送将要录制的多路会议媒体流给录 播装置100,录播装置100根据媒体级录制策略对多路会议媒体流的数据进行合成,得到媒 体文件。录播装置100存储媒体文件并设置对应的媒体标识。多点控制单元200发送携带有媒体标识的回播请求给录播装置100,录播装置100 根据媒体标识得到对应的媒体文件,录播装置100实现回播,或者,录播装置100将媒体文 件发送给多点控制单元200,多点控制单元200实现回播。录播装置100可以与多点控制单元200集成为一体或独立设置。本发明实施例的再一个场景中,会议终构成“网真”系统时,每个会场有一个以上 的会议终端,如图15所示,3台会议终端、3台高清摄像机和3台高清显示器,同一会场的会 议终端组成终端组(如图15中所示虚线框所示)。本场景与上述两个场景的区别在于,终 端组取代了会议终端,录播装置100可以独立设置,也可以与终端组中的会议终端成为一 体。本场景的录播过程可以参照场景来理解,在此不作赘述。实施例十三对应于上述实施例一至四提供的多媒体会议的录制方法、装置,回播方法、装置, 本发明实施例提供了一种多媒体会议的录播系统,包括多媒体会议的录播装置,多点控制 单元MCU以及会议终端。如图14所示,多媒体会议的录播系统,包括录播装置100、与录播 装置100连接的至少一个会议终端300、与录播装置100连接的至少一个会议终端300连接 的多点控制单元(多点控制单元MCU) 200、多点控制单元200还连接有至少一个会议终端 300 可选的,多个会议终端300与多点控制单元200通过第一通信网络进行相连,多点 控制单元200完成多个会议终端300间媒体流的数据的交互。同时,录播装置100通过第二 通信网络与至少一个会议终端300相连,录播装置100可对与之相连的至少一个会议终端 300上的多路媒体流的数据进行组合录制。注意第二通信网络与第一通信网络可以为同 一种通信网络,如都为以太网;第二通信网络与第一通信网络也可以是不同的通信网络。多 个会议终端300、多点控制单元200以及录播装置100也可以设置在一个通信网络,如以太 网。当录播装置100作为独立的设备时,可以拥有自己的输入设备,用于信息的输入,如键 盘、触摸屏、鼠标、遥控器等;也可拥有自己的输出设备,用于信息的输出显示,如液晶屏、 显示器等。当然,当录播装置作为独立的设备时,也可以没有自己独立的输入/输出设备, 此时,其可以共享多点控制单元200管理台的输入/输出设备,通过多点控制单元200管理 台对录播装置进行间接的控制。用户可以通过录播装置100的输入设备设置录制策略以及录制参数。由于录播装置100只与部分会议终端300连接,而且录播装置只是对会议过程的 纪录,所以录播装置100只可以录制与其连接的会议终端300在会议过程中的多路会议媒 体流。这样,录播装置100发送给与其连接的会议终端300的,可以适用的会议级录制策略 包括特定会场录制模式,或特定会场本地媒体流录制模式,或特定会场远端媒体流录制模 式。
与录播装置100连接的会议终端300接收到录播装置100发送的会议级录制策 略,会议终端300根据会议级录制策略确定将要录制的多路会议媒体流,会议终端300发送 将要录制的多路会议媒体流给录播装置100,录播装置100根据媒体级录制策略对多路会 议媒体流的数据进行合成,得到媒体文件。录播装置100存储媒体文件并设置对应的媒体 标识。会议终端300发送携带有媒体标识的回播请求给录播装置100,录播装置100根据 媒体标识得到对应的媒体文件,录播装置100实现回播,或者,录播装置100将媒体文件发 送给会议终端300,会议终端300实现回播。录播装置100可以与会议终端300集成为一体或独立设置。本发明实施例的再一个场景中,会议终构成“网真”系统时,每个会场有一个以上 的会议终端,如图15所示,3台会议终端、3台高清摄像机和3台高清显示器,同一会场的会 议终端组成终端组(如图15中所示虚线框所示)。本场景与上述两个场景的区别在于,终 端组取代了会议终端,录播装置100可以独立设置,也可以与终端组中的会议终端成为一 体。本场景的录播过程可以参照上述场景来理解,在此不作赘述。
具体实施方式
1以图13所示多媒体会议的录播系统来说明多媒体会议的录制、回播方法如图16 所示,首先是多媒体会议的录制过程1601、录播装置将会议级录制策略发送给多点控制单元。录播装置将会议级录制策略“声控切换会场录制模式”发送给多点控制单元MCU。 “声控切换会场录制模式”表示需要录制的媒体流为音量最大会场的媒体流。也可以是,若多点控制单元MCU预先设置有会议级录制策略,则录播装置不需要 发送会议级录制策略给多点控制单元MCU。1602、多点控制单元MCU根据会议级录制策略确定将要录制的多路会议媒体流。多点控制单元MCU接收到录播装置发送的为“声控切换会场录制模式”的会议级 录制策略,多点控制单元MCU会定时检测会议中各个会场音量的大小,确定将音量最大会 场的媒体流的数据发送给录播装置以进行录制。1603、多点控制单元MCU发送将要录制的多路会议媒体流给录播装置。多点控制单元MCU向录播装置传送的会议媒体流的数据,可以使用单个数据连接 通道来传送所有类型的会议媒体流的数据,也可以使用多个数据连接通道来传送不同类型 的会议媒体流的数据,不同类型的会议媒体流的数据如视频、音频数据。而且,多点控制单元MCU可以同时向录播装置发送会议媒体流的视频媒体流与音 频媒体流的时间同步信息,媒体指示信息以及会议指示信息。1604、录播装置根据媒体级录制策略对接收的多路会议媒体流的数据进行合成。录播装置的媒体级录制策略,如视频录制策略“多画面”、音频录制策略“多声道模 式”。录播装置根据“多画面”、“多声道模式”,将根据“声控切换会场录制模式”获得的会议 中声音最大会场的多路媒体流的数据合成。如,将本地视频媒体流与远端视频媒体流录制 为多画面,将本地音频媒体流与远端音频录制媒体流录制为多声道音频,如本地语音左声 道、远端语音右声道等等。若录播装置还包括录制参数(如录制时长等),则根据录制参数配合完成对多路22会议媒体流的合成。若多点控制单元MCU向录播装置发送有会议媒体流的视频媒体流与音频媒体流 的时间同步信息,媒体指示信息以及会议指示信息时,具体可以是录播装置接收从多点控制单元发送的媒体指示信息,判断是否对多路媒体流的数 据进行解码。录播装置是否对接收到的多路媒体流的数据进行解码,取决于接收到的媒体 流的数据是否被压缩,当接收到的媒体流的数据没有被压缩时,可直接进行合成。录播装置将合成后的媒体流的数据进行相应的压缩编码。录播装置将合成后的媒 体流的数据进行相应的压缩编码,并不是必须的,压缩编码主要是为了减少媒体流的数据 量。录播装置根据时间同步信息,将合成后的媒体流的数据复用编码成一路或多路媒 体文件,媒体文件格式可以采用MPEG媒体文件格式,方便存储以及回播。将压缩后的媒体 流的数据复用编码成媒体文件,不是必须的,也可以直接将压缩后的媒体流的数据同其时 间同步信息各自独立存储到存储设备中。录播装置如果接收到多点控制单元发送的会议指示信息,如,接收到会议结束指 示信息时,说明当前会议已经结束,那么对当前会议的录制可以结束。1605、录播装置将媒体文件存储起来,并配置对应的媒体标识。录播装置可以将复用编码得到的媒体文件存储在硬盘、U盘、SD卡、磁带等带存储 功能的器件或设备中,并可以配置对应的媒体标识,便于回播时,根据媒体标识找到对应的 媒体文件。接着是多媒体会议的回播过程1606、录播装置将媒体标识发送给多点控制单元MCU。录播装置将媒体标识发送给多点控制单元MCU。可以知道,多点控制单元MCU也可以将媒体标识发送给各会议终端,不做赘述。1607、多点控制单元向录播装置发送回播请求。多点控制单元MCU向录播装置发送回播请求,所述回播请求中携带有媒体标识。注意,各会议终端也可以发送回播请求,通过多点控制单元将回播请求转发给录播装置。1608、录播装置根据回播请求,获得对应的媒体文件。录播装置接收到回播请求,根据回播请求携带的媒体标识,读取存储的对应的媒 体文件。如果录播装置自身带有视音频媒体的输出设备,可以由录播装置自身完成对媒体 文件的解复用、解码,然后进行回播。录播装置也可以将解复用后的媒体流的数据进行媒体 的适配处理,发送给多点控制单元MCU。进行媒体的适配处理,主要用来将媒体压缩类型转 换为多点控制单元MCU能够支持的媒体压缩类型。1609、录播装置将媒体流的数据发送给多点控制单元MCU。录播装置将媒体流的数据发送给多点控制单元MCU,媒体流的数据为适配处理的 数据。1610、多点控制单元MCU进行回播。多点控制单元MCU接收到录播装置发送的媒体流的数据,解码后进行回播。或者,多点控制单元MCU也可以将媒体流的数据发送给会议终端,由会议终端解码后进行回播。另外,还可以通过录播装置提供的数据接口(如USB接口),将媒体文件拷贝或发 送到其他的设备(如PC机)上进行播放。由上可见,在多媒体会议中,多媒体会议可能涉及一个以上的会场,每个会场通常 设置一个会议终端,这样,上述多媒体会议的录制、回播方法,可以对多媒体会议中多路媒 体流的数据进行组合录制处理,满足不同的录制策略要求。而对于“网真”系统,如图15所示,每个会场设置一个以上的会议终端,如3台会 议终端、3台高清摄像机和3台高清显示器,使用中,3台高清显示器中,能够显示真人大小 的远端图像,并且在水平方向上图像是连续的,使各方与会人员有如身临现场一起开会、进 行面对面交流的体验。上述多媒体会议的录制、回播方法,还可以包括,将同一会场的会议终端组成终端 组(如图15中的虚线框所示),并可以设置媒体级录制策略,如将终端组中各个终端的本地 视频组合本地视频多画面或者本地宽屏图像,将终端组中各个终端的远端视频组合成远端 视频多画面或者远端宽屏图像。这样一来,本地视频图像与远端视频图像没有交错在一起, 便于回播时对本地视频图像与远端视频图像的识别,清楚的显示会场的综合情况。当然,也 可以将终端组中各个终端的本地媒体和远端媒体进行任意组合的录制,不做赘述。
具体实施方式
2以图14所示多媒体会议的录播系统来说明多媒体会议的录制、回播方法,如图17 所示,首先是多媒体会议的录制过程1701、录播装置将会议级录制策略发送给会议终端。录播装置将会议级录制策略“特定会场录制模式”发送给与之相连的会议终端。同理,若与录播装置相连的会议终端预先设置有会议级录制策略,则录播装置不 需要发送会议级录制策略给与之相连的会议终端。1702、会议终端根据会议级录制策略确定将要录制的多路会议媒体流。与录播装置相连的会议终端接收到录播装置发送的录制策略“特定会场录制模 式”,确定自身是否为录制策略中的特定会场。如果与录播装置相连的会议终端确定自身为 录制策略中的特定会场,则确认其上的媒体流即为将要录制的多路会议媒体流,与录播装 置相连的会议终端将其上的媒体流发送给录播装置。1703、会议终端将发送将要录制的多路会议媒体流给录播装置。与录播装置相连的会议终端向录播装置传送的多路会议媒体流的数据,可以使用 单个数据连接通道来传送所有类型的会议媒体流的数据,也可以使用多个数据连接通道来 传送不同类型的会议媒体流的数据,不同类型的会议媒体流的数据如视频、音频数据。而且,与录播装置相连的会议终端可以同时向录播装置发送时间同步信息、媒体 指示信息以及会议指示信息。1704、录播装置根据媒体级录制策略对接收到的多路会议媒体流的数据进行合 成。录播装置的媒体级录制策略,如视频录制策略“画中画”、音频录制策略“多声道模 式”。录播装置根据“画中画”、“多声道模式”,多路媒体流的数据合成。如,将本地视频媒体 流与远端视频媒体流录制为画中画,将本地音频媒体流与远端音频录制媒体流录制为多声道音频,如本地语音左声道、远端语音右声道等等。若录播装置还包括录制参数(如录制时长等),则根据录制参数配合完成对多路 会议媒体流的合成。若与录播装置相连的会议终端向录播装置发送有会议媒体流的视频媒体流与音 频媒体流的时间同步信息,媒体指示信息以及会议指示信息时,具体可以是录播装置接收会议终端发送的媒体指示信息,判断是否对多路媒体流的数据进行 解码。录播装置是否对接收到的多路媒体流的数据进行解码,取决于接收到的媒体流的数 据是否被压缩,当接收到的媒体流的数据没有被压缩时,可直接进行合成。录播装置将合成后的媒体流的数据进行相应的压缩编码。录播装置将合成后的媒 体流的数据进行相应的压缩编码,并不是必须的,压缩编码主要是为了减少媒体流的数据 量。录播装置根据时间同步信息,将合成后的媒体流数据复用编码成一路或多路媒体 文件。将压缩后的媒体流的数据复用编码成媒体文件,也不是必须的,也可以直接将压缩后 的媒体流的数据同其时间同步信息各自独立存储到存储设备中。录播装置如果接收到会议终端发送的会议指示信息,如,接收到会议结束指示信 息时,说明当前会议已经结束,那么对当前会议的录制可以结束。1705、录播装置将媒体文件存储起来,并配置对应的媒体标识。录播装置可以将复用编码得到的媒体文件存储起来,并可以配置对应的媒体标 识,便于回播时,根据媒体标识找到对应的媒体文件。接着是多媒体会议的回播过程1706、录播装置将媒体标识发送给会议终端。录播装置将媒体标识发送给与之相连的至少一个会议终端。可以知道,与录播装置相连的会议终端也可以通过多点控制单元MCU将媒体标识 发送给其他会议终端,不做赘述。1707、会议终端向录播装置发送回播请求。与录播装置相连的至少一个会议终端向录播装置发送回播请求,所述回播请求中 携带媒体标识。可以知道,多点控制单元MCU以及其他未与录播装置相连的会议终端也可以发送 回播请求,不做赘述。1708、录播装置根据回播请求,获得对应的媒体文件。录播装置接收到回播请求,根据回播请求携带的媒体标识,读取存储的与媒体标 识对应的媒体文件。注意,如果录播装置自身带有视音频媒体的输出设备,可以由录播装置自身完成 对媒体文件的解复用、解码,然后进行回播。如果录播装置无视音频媒体的输出设备,录播装置可以将解复用后的媒体流的数 据进行媒体的适配处理,发送给与录播装置相连的至少一个会议终端。注意,进行媒体的适配处理,主要用来将媒体压缩类型转换为会议终端能够支持 的媒体压缩类型。1709、录播装置将媒体流的数据发送给会议终端。
录播装置将媒体流的数据发送给与录播装置相连的至少一个会议终端,媒体流的 数据为适配处理的数据。1710、会议终端进行回播。与录播装置相连的至少一个会议终端接收到适配的媒体文件,对媒体文件解码, 然后进行回播。与录播装置相连的至少一个会议终端也可以将媒体流的数据发送给多点控制单 元MCU,多点控制单元MCU将媒体流的数据发送给其他未与录播装置相连的会议终端,由多 点控制单元MCU或其他未与录播装置相连的会议终端解码后进行回播。另外,也可以通过录播装置提供的数据接口(如USB接口),将媒体文件拷贝或发 送到其他的设备(如PC机)上进行播放。在多媒体会议中,多媒体会议可能涉及一个以上的会场,每个会场通常设置一个 会议终端,这样,上述多媒体会议的录制、回播方法,可以对多路媒体流的数据进行组合录 制处理,满足不同的录制策略要求。同样对于“网真”系统,如图15所示,每个会场设置一个以上的会议终端,如3台 会议终端、3台高清摄像机和3台高清显示器,使用中,3台高清显示器中,能够显示真人大 小的远端图像,并且在水平方向上图像是连续的,使各方与会人员有如身临现场一起开会、 进行面对面交流的体验。上述多媒体会议的录制、回播方法,还可以包括,将同一会场的会议终端组成终端 组(如图15中的虚线框所示),并可以设置媒体级录制策略,如将终端组中各个终端的本地 视频组合本地视频多画面或者本地宽屏图像,将终端组中各个终端的远端视频组合成远端 视频多画面或者远端宽屏图像。这样一来,本地图像与远端图像没有交错在一起,便于回播 时对本地图像与远端图像的识别,清楚的显示会场的综合情况。当然,也可以将终端组中各 个终端的本地媒体和远端媒体进行任意组合的录制存储,不做赘述。
具体实施方式
3参见图18所示录播系统来说明多媒体会议的录制、回播方法,如录播系统中,录 播装置与多点控制单元MCU连接,多点控制单元MCU与至少一个会议终端连接。录播服务器 还可以直接连接有播放器或会议终端,播放器或会议终端未参加会议,其可以作为点播者。如图19所示,首先是多媒体会议的录制过程1901、录播装置记录会议中各会场的多路会议媒体流。录播装置根据会议级录制策略确定将要录制的多路会议媒体流,录播装置并记录 所述多路会议媒体流。1902、录播装置为多路会议媒体流分配关联标识。录播装置根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联 标识,所述关联标识用于关联各会场的会议媒体流。如,每个会场创建一个文件,l.avi, 2. avi,3. avi,关联标识 confl 关联 1. avi,2. avi,3. avi0接着是多媒体会议的回播过程1903、播放器发送携带有关联标识的回播请求给录播装置。播放器可以用RTSP等流控制协议通过录播装置点播会议confl,如H323/SIP呼叫 方式点播confl ο
1904、录播装置将关联标识对应的多路会议媒体流发送给多点控制单元MCU。录播装置根据confl,获得对应的多路会议媒体流1. avi,2. avi,3. avi发送给多 点控制单元MCU。1905、多点控制单元MCU对多路会议媒体流进行组合录制处理。多点控制单元MCU根据媒体级录制策略对多路会议媒体流1. avi, 2. avi, 3. avi进 行组合录制处理。如合成多画面、远程呈现屏幕拼接、声音混合、主流和辅流合并、叠加会议 召开时间、进行时长等处理。1906、多点控制单元MCU将录制处理后的媒体流发送给录播装置。
1907、录播装置发送录制处理后的媒体流给播放器。1908、播放器录制处理后的媒体流。播放器根据录制处理后的媒体流,实现回播。可以知道,多点控制单元MCU也可以将处理后的媒体流直接发给点播的播放器, 不需要经过录播装置转发。可以替换的是,1903中播放器可以发送携带有关联标识的回播请求给多点控制单 元MCU。此时,多点控制单元MCU需要转发回播请求给录播装置。接着,1904、录播装置将关 联标识对应的多路会议媒体流发送给多点控制单元MCU。1905、多点控制单元MCU对多路会 议媒体流进行组合录制处理。此时,1906、多点控制单元MCU录制处理后的媒体流发送给播 放器。播放器根据录制处理后的媒体流,实现回播。在上述实施方式中,多点控制单元MCU和录播装置都可以有多个,一个多点控制 单元MCU可以连接多个录播装置,一个录播装置可以连接多个多点控制单元MCU。多点控制 单元MCU和录播设备也可以集成为一个设备。
具体实施方式
4以图20所示多媒体会议的录播系统来说明多媒体会议的录制、回播方法。录播系 统中,录播服务器与至少一个会议终端连接,与录播服务器连接的会议终端再与多点控制 单元MCU连接,多点控制单元MCU还连接有其他未与录播服务器连接的至少一个会议终端。 录播服务器还可以直接连接播放器或会议终端,播放器或会议终端未参加会议,其可以作 为点播者。如图21所示,首先是多媒体会议的录制过程2101、录播装置记录会议中各会场的多路会议媒体流。录播装置根据会议级录制策略确定将要录制的多路会议媒体流,录播装置并记录 所述多路会议媒体流。2102、录播装置为多路会议媒体流分配关联标识。录播装置根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联 标识,所述关联标识用于关联各会场的会议媒体流。如,每个会场创建一个文件,l.avi, 2. avi, 3. avi,关联标识 confl 关联 1. avi, 2. avi, 3. avi0接着是多媒体会议的回播过程2103、会议终端发送携带有关联标识的回播请求给录播装置。与录播服务器连接的会议终端播放器可以用RTSP等流控制协议通过录播装置点 播会议confl,如H323/SIP呼叫方式点播confl。
2104、录播装置对多路会议媒体流进行组合录制处理。录播装置根据媒体级录制策略对多路会议媒体流1. avi,2. avi,3. avi进行组合 录制处理。如合成多画面、远程呈现屏幕拼接、声音混合、主流和辅流合并、叠加会议召开时 间、进行时长等处理。2105、录播装置将录制处理后的媒体流发送给会议终端。录播装置将录制处理后的媒体流发送给与录播服务器连接的会议终端。2106、会议终端回播录制处理后的媒体流。与录播服务器连接的会议终端实现回播。会议终端可以替换为播放器。可以替换的是,2104中录播装置可以发送多路会议媒体给会议终端。此时,会议终 端对多路会议媒体流进行组合录制处理,实现回播。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以 通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质 中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁 碟、光盘、只读存储记忆体(Read-Only Memory, ROM)或随机存储记忆体(Random Access Memory, RAM)等。以上所述,仅为本发明较佳的具体实施方式
,但本发明的保护范围并不局限于此, 任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换, 都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围 为准。28
权利要求
1.一种多媒体会议的录制方法,其特征在于,包括获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议媒体流至少为 视频媒体流或音频媒体流;根据媒体录制策略对所述多路会议媒体流进行组合录制处理。
2.根据权利要求1所述的多媒体会议的录制方法,其特征在于,所述获得根据会议级 录制策略确定的将要录制的多路会议媒体流,具体包括将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略包括声控切换会 场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录制模式;接收所述多点控制单元MCU根据所述会议级录制策略,确定的至少一个会场中将要录 制的多路会议媒体流,所述会场包括至少一个会议终端。
3.根据权利要求1所述的多媒体会议的录制方法,其特征在于,所述获得根据会议级 录制策略确定的将要录制的多路会议媒体流,具体包括将会议级录制策略发送给会议终端,所述会场包括至少一个会议终端,所述会议级录 制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或特定会场远端媒体流 录制模式;接收所述会议终端根据所述会议级录制策略确定的将要录制的多路会议媒体流。
4.根据权利要求2或3所述的多媒体会议的录制方法,其特征在于,根据媒体录制策略 对所述多路会议媒体流进行组合录制处理,具体包括根据媒体录制策略的视频媒体录制模式,将所述多路视频媒体流合成为一路或多路 视频多画面,或一路或多路视频画中画,或一路或多路宽屏视频,所述视频媒体录制模式包 括视频录制路数设置模式,或视频多画面录制模式,或视频画中画录制模式,或宽屏视频 媒体录制模式;根据媒体录制策略的音频媒体录制模式,将所述多路音频媒体流合成为音频单声道, 或音频多声道,所述音频媒体录制模式包括音频录制路数设置模式,或音频单声道录制模 式,或音频多声道录制模式。
5.根据权利要求4所述的多媒体会议的录制方法,其特征在于,所述获得根据会议级 录制策略确定的将要录制的多路会议媒体流,还包括获得所述多路会议媒体流中视频媒体流与音频媒体流的时间同步信息。
6.根据权利要求5所述的多媒体会议的录制方法,其特征在于,所述根据媒体录制策 略对所述多路会议媒体流进行组合录制处理,还包括根据所述视频媒体流与音频媒体流的时间同步信息,将合成后的所述视频媒体流的数 据与音频媒体流的数据复用编码为媒体文件;存储所述媒体文件,并为所述媒体文件设置媒体标识,所述媒体标识用于标识所述媒 体文件。
7.一种多媒体会议的录制装置,其特征在于,包括接收模块,用于接收根据会议级录制策略确定的将要录制的多路会议媒体流,所述会 议媒体流至少为视频媒体流或音频媒体流;录制处理模块,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。
8.根据权利要求7所述的多媒体会议的录制装置,其特征在于,所述接收模块,包括策略发送模块,用于将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略 包括声控切换会场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录 制模式;媒体流接收模块,用于接收所述多点控制单元MCU根据所述会议级录制策略,确定的 至少一个会场中将要录制的多路会议媒体流,所述会场包括至少一个会议终端。
9.根据权利要求7所述的多媒体会议的录制装置,其特征在于,所述接收模块,包括 策略发送模块,用于将会议级录制策略发送给会议终端,所述会场包括至少一个会议终端,所述会议级录制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或 特定会场远端媒体流录制模式;媒体流接收模块,用于接收所述会议终端根据所述会议级录制策略确定的将要录制的 多路会议媒体流。
10.根据权利要求8或9所述的多媒体会议的录制装置,其特征在于,所述录制处理模 块,包括视频录制处理模块,用于根据所述媒体录制策略的视频媒体录制模式,将所述多路视 频媒体流合成为一路或多路视频多画面,或一路或多路视频画中画,或一路或多路宽屏视 频,所述视频媒体录制模式包括视频录制路数设置模式,或视频多画面录制模式,或视频 画中画录制模式,或宽屏视频媒体录制模式;音频录制处理模块,用于根据所述媒体录制策略的音频媒体录制模式,将所述多路音 频媒体流合成为音频单声道,或音频多声道,所述音频媒体录制模式包括音频录制路数设 置模式,或音频单声道录制模式,或音频多声道录制模式。
11.根据权利要求10所述的多媒体会议的录制装置,其特征在于,所述接收模块,还包括时间同步信息接收模块,用于接收所述多路会议媒体流中视频媒体流与音频媒体流的 时间同步信息。
12.根据权利要求11所述的多媒体会议的录制装置,其特征在于,所述录制处理模块, 还包括媒体文件生成模块,用于根据所述视频媒体流与音频媒体流的时间同步信息,将合成 后的所述视频媒体流的数据与音频媒体流的数据复用编码为媒体文件;存储模块,用于存储所述媒体文件,并为所述媒体文件设置媒体标识,所述媒体标识用 于标识所述媒体文件。
13.一种多媒体会议的回播方法,其特征在于,包括接收携带有媒体标识的回播请求,所述媒体标识用于标识媒体文件; 根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体文件为根据录制策略 对多媒体会议中多路会议媒体流进行组合录制处理所获得。
14.根据权利要求13所述的多媒体会议的回播方法,其特征在于,所述方法,还包括 接收携带有媒体标识的回播请求之前,将媒体标识发送给多点控制单元MCU或会议终端。
15.一种多媒体会议的回播装置,其特征在于,包括回播请求接收模块,用于接收携带有媒体标识的回播请求,所述媒体标识用于标识媒 体文件;回播模块,用于根据所述媒体标识获得对应的媒体文件,以进行回播,所述媒体文件根 据录制策略对多媒体会议中多路会议媒体流进行组合录制处理获得,所述录制策略包括会 议级录制策略和媒体级录制策略。
16.根据权利要求15所述的多媒体会议的回播装置,其特征在于,还包括媒体标识发送模块,用于发送媒体标识给多点控制单元MCU或会议终端。
17.一种多媒体会议的录播装置,其特征在于,包括如权利要求7-12中任一所述的录 制装置或者如权利要求15或16所述的回播装置。
18.一种多媒体会议的录制方法,其特征在于,包括获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会议媒体流至少为 视频媒体流或音频媒体流;根据所述会议媒体流所属的会场,存储所述多路会议媒体流并分配关联标识,所述关 联标识用于关联各会场的会议媒体流。
19.根据权利要求18所述的多媒体会议的录制方法,其特征在于,所述获得根据会议 级录制策略确定的将要录制的多路会议媒体流,具体包括将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略包括声控切换会 场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录制模式;接收所述多点控制单元MCU根据所述会议级录制策略确定的至少一个会场中将要录 制的多路会议媒体流,所述会场包括至少一个会议终端。
20.根据权利要求18所述的多媒体会议的录制方法,其特征在于,所述获得根据会议 级录制策略确定的将要录制的多路会议媒体流,具体包括将会议级录制策略发送给会议终端,所述会场包括至少一个会议终端,所述会议级录 制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或特定会场远端媒体流 录制模式;接收所述会议终端根据所述会议级录制策略确定的将要录制的多路会议媒体流。
21.根据权利要求18所述的多媒体会议的录制方法,其特征在于,所述方法还包括获 得所述多路会议媒体流中视频媒体流与音频媒体流的时间同步信息。
22.根据权利要求18所述的多媒体会议的录制方法,其特征在于,所述方法还包括获 得多媒体会议中各会场的控制命令。
23.一种多媒体会议的录制装置,其特征在于,包括接收模块,用于获得根据会议级录制策略确定的将要录制的多路会议媒体流,所述会 议媒体流至少为视频媒体流或音频媒体流;关联标识分配模块,用于根据所述会议媒体流所属的会场,存储所述多路会议媒体流 并分配关联标识,所述关联标识用于关联各会场的会议媒体流。
24.根据权利要求23所述的多媒体会议的录制装置,其特征在于,所述接收模块,具体 包括策略发送模块,用于将会议级录制策略发送给多点控制单元MCU,所述会议级录制策略 包括声控切换会场录制模式,或广播会场录制模式,或主席会场录制模式,或特定会场录 制模式;媒体流接收模块,用于接收所述多点控制单元MCU根据所述会议级录制策略确定的至少一个会场中将要录制的多路会议媒体流,所述会场包括至少一个会议终端。
25.根据权利要求23所述的多媒体会议的录制装置,其特征在于,所述接收模块,具体 包括策略发送模块,用于将会议级录制策略发送给会议终端,所述会场包括至少一个会议 终端,所述会议级录制策略包括特定会场录制模式,或特定会场本地媒体流录制模式,或 特定会场远端媒体流录制模式;媒体流接收模块,用于接收所述会议终端根据所述会议级录制策略,确定的将要录制 的多路会议媒体流。
26.根据权利要求23所述的多媒体会议的录制装置,其特征在于,所述录制装置还包 括同步信息获取模块,用于获得所述多路会议媒体流中视频媒体流与音频媒体流的时间 同步信息。
27.根据权利要求23所述的多媒体会议的录制装置,其特征在于,所述录制装置还包 括控制命令获取模块,用于获得多媒体会议中各会场的控制命令。
28.一种多媒体会议的回播方法,其特征在于,包括接收携带有关联标识的回播请求,得到所述关联标识对应的多路会议媒体流,所述关 联标识用于关联各会场的会议媒体流,所述会议媒体流至少为视频媒体流或音频媒体流;根据媒体录制策略对所述多路会议媒体流进行组合录制处理。
29.根据权利要求观所述的多媒体会议的回播方法,其特征在于,所述媒体级录制策 略包括视频媒体录制模式和音频媒体录制模式,所述视频媒体录制模式包括视频录制路 数设置模式,或视频多画面录制模式,或视频画中画录制模式,或宽屏视频媒体录制模式, 所述音频媒体录制模式包括音频录制路数设置模式,或音频单声道录制模式,或音频多声 道录制模式;所述根据媒体录制策略对所述多路会议媒体流进行组合录制处理,具体包括根据所述媒体录制策略的视频媒体录制模式,将所述多路视频媒体流合成为一路或多 路视频多画面,或一路或多路视频画中画,或一路或多路宽屏视频;根据所述媒体录制策略的音频媒体录制模式,将所述多路音频媒体流合成为音频单声 道,或音频多声道。
30.根据权利要求观所述的多媒体会议的回播方法,其特征在于,所述方法还包括获得所述多路会议媒体流中视频媒体流与音频媒体流的时间同步信息;根据所述视频媒体流与音频媒体流的时间同步信息,将合成后的所述视频媒体流的数 据与音频媒体流的数据复用编码为媒体文件。
31.根据权利要求观所述的多媒体会议的回播方法,其特征在于,所述方法还包括获 得多媒体会议中各会场的控制命令,回播所述控制命令。
32.—种多媒体会议的回播装置,其特征在于,包括回播请求接收模块,用于接收携带有关联标识的回播请求,得到所述关联标识对应的 多路会议媒体流,所述关联标识用于关联各会场的会议媒体流,所述会议媒体流至少为视 频媒体流或音频媒体流;回播处理模块,用于根据媒体录制策略对所述多路会议媒体流进行组合录制处理。
33.根据权利要求32所述的多媒体会议的回播装置,其特征在于,所述回播处理模块包括视频录制处理模块,用于根据所述媒体录制策略的视频媒体录制模式,将所述多路视 频媒体流合成为一路或多路视频多画面,或一路或多路视频画中画,或一路或多路宽屏视 频,所述媒体级录制策略包括视频媒体录制模式和音频媒体录制模式,所述视频媒体录制 模式包括视频录制路数设置模式,或视频多画面录制模式,或视频画中画录制模式,或宽 屏视频媒体录制模式;音频录制处理模块,用于根据所述媒体录制策略的音频媒体录制模式,将所述多路音 频媒体流合成为音频单声道,或音频多声道。所述音频媒体录制模式包括音频录制路数设 置模式,或音频单声道录制模式,或音频多声道录制模式。
34.根据权利要求32所述的多媒体会议的回播装置,其特征在于,所述回播装置还包括同步信息获取模块,用于获得所述多路会议媒体流中视频媒体流与音频媒体流的时间 同步信息;媒体文件生成模块,用于根据所述视频媒体流与音频媒体流的时间同步信息,将合成 后的所述视频媒体流的数据与音频媒体流的数据复用编码为媒体文件。
35.根据权利要求32所述的多媒体会议的回播装置,其特征在于,所述回播装置还包 括控制命令回播模块,用于获得多媒体会议中各会场的控制命令,回播所述控制命令。
36.一种多媒体会议的录播装置,其特征在于,包括如权利要求23-27中任一所述的录 制装置或者如权利要求32-35中任一所述的回播装置。
全文摘要
本发明实施例提供一种多媒体会议的录播方法、装置及系统、回播方法及装置。其中,一种多媒体会议的录制方法,包括根据录制策略对多媒体会议中多路媒体流的数据进行组合录制处理,所述媒体流的数据至少为视频数据或音频数据或图片数据。由于可以根据录制策略实现对多媒体会议中多路会议媒体流进行组合录制处理,所以能够较佳的反应多媒体会议的综合情况,而且,录制策略地设置灵活。
文档编号H04N7/15GK102055949SQ20091021120
公开日2011年5月11日 申请日期2009年11月2日 优先权日2009年11月2日
发明者徐凌峰, 李凯, 王静, 詹五洲, 陈庆丰, 陈显义, 魏小霞 申请人:华为终端有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1