专利名称：多媒体数据的输出方法和设备的制作方法
技术领域：
本发明涉及多媒体处理领域，尤其涉及一种多媒体数据的输出方法和设备。
背景技术：
随着通讯产业的高速发展，会议电视作为近年来兴起的一种通讯方式，大大地改 善了人与人之间通讯的质量，从以前的只能听到声音，到现在的既可以听到声音的同时又 能互相看到对方的图像。会议电视改变了以往的会议模式，不但节省了人力、财力，还提高 了工作效率。 随着会议电视的发展，音频输入接口的种类越来越多，会议电视终端上的音频输 入接口包括有线麦克输入接口 、线路音频信号接口 、无线麦克输入接口 、蓝牙音频输入接 口、高清晰多媒体接口 (HDMI)等。 目前的会议电视系统中，会议电视的音频输入和视频输入作为独立的信号输入终 端，音频输入和视频输入互不相干，当终端加入会议时，所有的音频输入都参加混音发送到 远端。 终端将所有的音频输入都参加混音，因此接口种类的增加虽然为用户提供了更多 的接入方式的选择，但是也增加了用户操作的复杂性，用户不但要设置主视频、辅视频选择 何种接入方式，还要选择音频的接入方式。对于辅视频，例如原来只需要在会议上演示一段 视频，如果想听这段视频的声音，还要将该视频的音频接入终端，在播放完毕后，既要关闭 辅视频，又要将音频信号断开，以免影响会议的进行。 在实现本发明的过程中，发明人发现现有技术中存在以下技术问题 用户需要选择是否将音频输入信号接到终端上，每次使用都要拔插音频输入设
备，影响使用效果。并且，现有技术中只要会议电视终端的某个音频或视频输入接口处于开
启状态，则会议电视终端将该音频或视频输入接口输入的音频或视频数据输出到远端，音
频或视频数据输出方式较单一 。
发明内容
本发明实施例提供一种多媒体数据的输出方法和设备，用于提高终端输出多媒体 数据方式的多样性。 —种多媒体数据的输出方法，该方法包括 终端在第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输入接口之
间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应； 根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入
数据流的输出状态，并对第一多媒体输入接口输入的数据流进行输出处理以达到该输出状态。 —种终端，该终端包括 主控模块，用于在本终端的第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对 应；并根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入数 据流的输出状态； 数字信号处理模块，用于对第一多媒体输入接口输入的数据流进行输出处理，以
达到所述主控模块确定的第一多媒体输入接口输入数据流的输出状态。 本发明中，终端在第一多媒体输入接口处于开启状态时，根据预先设置的多媒体
输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应，根据
第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入数据流的输出
状态，并对第一多媒体输入接口输入的数据流进行输出处理以达到该输出状态。可见，本发
明中将一个多媒体输入接口与另一多媒体输入接口进行关联，终端自动根据该关联关系以
及另一多媒体输入接口的输出状态确定该一个多媒体输入接口的输出状态，与现有技术中
只要该一个多媒体输入接口处于开启状态就将该多媒体输入接口输入的数据流输出到远
端相比，多媒体数据流的输出方式多样化，有效地提高了多媒体数据的输出方式。
图1为本发明实施例提供的方法流程示意图； 图2为本发明实施例提供的方法所应用的系统结构示意图； 图3为本发明实施例提供的终端结构示意图； 图4为本发明实施例一的流程示意图； 图5为本发明实施例二的流程示意图； 图6为本发明实施例三的流程示意图。
具体实施例方式
为了提高终端输出多媒体数据方式的多样性，本发明实施例提供一种多媒体数据 的输出方法，本方法中，将终端的一个多媒体输入接口与其他多媒体输入接口进行绑定，根 据该其他多媒体输入接口的输出状态确定该一个多媒体输入接口的输出状态，并根据该输 出状态处理该一个多媒体输入接口输入的数据流。
参见图l，本发明实施例提供的多媒体数据的输出方法，具体包括以下步骤 步骤10 :终端在第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输
入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应； 步骤11 :根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入
接口输入数据流的输出状态； 步骤12 :对第一多媒体输入接口输入的数据流进行输出处理以达到上一步骤中 确定的第一多媒体输入接口输入数据流的输出状态。
本发明中，第一多媒体输入接口为音频接口，第二多媒体输入接口为视频接口 ；或
者，第一多媒体输入接口为视频接口 ，第二多媒体输入接口为音频接口 。
步骤10中，可以按照如下方式预先设置多媒体输入接口之间的对应关系 终端接收用户在该终端提供的图像用户界面(GUI)设置的多媒体输入接口之间
的对应关系，然后保存该对应关系，具体可以保存在终端的主控模块中。
预先设置的多媒体输入接口之间的对应关系可以是一对多或多对一或多对多的 对应关系。 步骤11中，输入数据流的输出状态可以是以下三种中的一种 第一，向远端设备输出该输入数据流；第二，在终端本地输出该输入数据流；第 三，不输出该输入数据流。 终端可以按照预先设置的数据流输出状态确定规则，根据第二多媒体输入接口输 入数据流的输出状态，确定第一多媒体输入接口输入数据流的输出状态。具体的数据流输 出状态确定规则的内容举例如下
例一 在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入主视频流的视频 接口 、该视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收该主视频 流的远端设备连接到电视会议系统中，则确定该音频接口输入数据流的输出状态为向远端 设备输出该数据流；否则，确定该音频接口输入数据流的输出状态为在本地输出该数据流。
在该视频接口输入数据流的输出状态转换为未输出该数据流(即关闭该数据流)
时，将该音频接口输入数据流的输出状态也转换为不输出该数据流。
例二 在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入辅视频流的视频 接口 、该视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收该辅视频 流的远端设备连接到电视会议系统中并且本地终端处于双流发送状态，则确定该音频接口 输入数据流的输出状态为向远端设备输出该数据流；若接收该辅视频流的远端设备连接到 电视会议系统中并且本地终端未处于双流发送状态，则确定该音频接口输入数据流的输出 状态为不输出该数据流；若接收该辅视频流的远端设备未连接到电视会议系统中，则确定 该音频接口输入数据流的输出状态为在本地输出该数据流。 在该视频接口输入数据流的输出状态转换为未输出该数据流(即关闭该数据流) 时，将该音频接口输入数据流的输出状态也转换为不输出该数据流。 上述两个例子中，在确定第一多媒体输入接口输入数据流的输出状态时，除了考 虑了第二多媒体输入接口输入数据流的输出状态，还考虑了终端所在会议电视系统的状态 (例如接收本终端输出的多媒体数据流的远端设备是否连接到电视会议系统中)以及本终 端的当前状态(例如本终端是否处于双流发送状态)。
例三 在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入主视频流的视频
接口时，若该视频接口输入数据流的输出状态为向远端设备输出该数据流，则确定该音频
接口输入数据流的输出状态为向远端设备输出该数据流；若该视频接口输入数据流的输出
状态为在本地输出该数据流，则也确定该音频接口输入数据流的输出状态为在本地输出该
数据流；若该视频接口输入数据流的输出状态为未输出该数据流，则也确定该音频接口输
入数据流的输出状态为不输出该数据流。
例四 在第一多媒体输入接口为音频接口 、第二多媒体输入接口包括输入主视频流的第 一视频接口和输入辅视频流的第二视频接口 、第一视频接口和第二视频接口输入数据流的输出状态均为向远端设备输出该数据流时，若接收该主视频流的远端设备连接到电视会议 系统中，则确定该音频接口输入数据流的输出状态为向远端设备输出该数据流；否则，确定 该音频接口输入数据流的输出状态为在本地输出该数据流。 在第一视频接口或第二视频接口输入数据流的输出状态转换为未输出该数据流 (即关闭该数据流)时，将该音频接口输入数据流的输出状态也转换为不输出该数据流。
例五 在第一多媒体输入接口为输入主视频流的视频接口 、第二多媒体输入接口为音频 接口时，若该音频接口输入数据流的输出状态为向远端设备输出该数据流，则确定该视频 接口输入数据流的输出状态为向远端设备输出该数据流；若该音频接口输入数据流的输出 状态为在本地输出该数据流，则也确定该视频接口输入数据流的输出状态为在本地输出该 数据流；若该音频接口输入数据流的输出状态为未输出该数据流，则也确定该视频接口输 入数据流的输出状态为不输出该数据流。 步骤12中，在确定的第一多媒体输入接口输入数据流的输出状态为向远端设备 输出该输入数据流时，将该输入数据流进行编码后发送给远端设备；在确定的第一多媒体 输入接口输入数据流的输出状态为在终端本地输出该输入数据流时，将该输入数据流传送 给本地多媒体输出接口进行输出；在确定的第一多媒体输入接口输入数据流的输出状态为 不输出该输入数据流时，屏蔽该输入数据流。 参见图2，为本发明方法可以应用的会议电视系统结构示意图，该会议电视系统包 括多点控制单元(MCU)和多个会议电视终端，每个会议电视终端和MCU通过IP网或者El 专线连接，其中每个终端又包含多路的音频和视频输入接口。步骤10 步骤12中的终端 可以是该会议电视系统中的一个会议电视终端，在该会议电视终端确定将多媒体输入接口 输入数据流的输出状态确定为向远端设备输出时，该远端设备可以是MCU和/或其他会议 电视终端。例如，在进行点到多点传输时，远端设备为MCU，MCU接收到会议电视终端发来的 多媒体数据流时，将该多媒体数据流转发给其他多个会议电视终端；在进行点到点传输时， 远端设备为一个其他会议电视终端，即会议电视终端将多媒体数据流直接发送给该会议电 视终端。 参见图3，为本发明中终端的结构示意图，终端包括GUI模块、主控模块和DSP模 块，音视频输入接口等与DSP相连，用户可以通过GUI模块设置多媒体输入接口之间的对应 关系，GUI模块将该对应关系保存在主控模块中，由主控模块根据该对应关系，确定第一多 媒体输入接口与第二多媒体输入接口相对应，并根据第二多媒体输入接口输入数据流的输 出状态，确定第一多媒体输入接口输入数据流的输出状态，并将该输出状态下发给DSP模 块，DSP模块由对第一多媒体输入接口输入的数据流进行输出处理以达到该输出状态。
下面对本发明进行具体说明 本发明中将一路或者多路音频输入同视频输入相关联，根据所关联视频输入的状 态，动态管理音频输入是否参加混音发送到远端或者将音频输出到本地扬声器或关闭该音 频输入。
具体包括以下步骤 步骤A :会议电视终端通过GUI设置每路音频输入是否启用自动伴音功能，如果启 用自动伴音功能，将该音频与某路视频输入相关联；
步骤B :GUI将自动伴音设置发送到主控模块保存； 步骤C:主控模块根据当前的会议状态和自动伴音设置决定某路音频输出到远 端，或某路音频输出到本地扬声器，或关闭某路音频输入；
步骤D :主控模块将音频输入的状态发送到DSP模块； 步骤E :DSP模块根据主控模块下发的状态确定每路音频的输出方式或关闭音频 输入。 下面结合附图对本发明方法进行说明
实施例一 如图4所示，具体包括以下步骤 步骤SOl :用户通过GUI进行如下设置将自动伴音功能设置为打开并将一音频关 联到主视频，GUI将该设置发送到主控模块保存； 步骤S02 :主控模块根据当前会议状态和自动伴音配置决定音频的输出状态，具 体的当自动伴音设置为打开并且音频关联到主视频时，如果终端没有处于会议状态，则将 此路音频输出到本地扬声器；如果终端处于会议状态，则将此路音频参加混音输出到远端 设备。主控模块将确定结果下发给DSP模块； 步骤S03 :DSP模块根据主控模块决定将音频输出到本地扬声器或参加混音输出
到远端设备。
实施例二 如图5所示，具体包括以下步骤 步骤Sll :用户通过GUI进行如下设置将自动伴音功能设置为打开并将一音频关 联到辅视频，GUI将该设置发送到主控模块保存； 步骤S12 :主控模块根据当前会议状态和自动伴音配置决定音频的输出状态，具 体的如果终端没有处于会议状态，则将此路音频输出到本地扬声器；如果终端处于会议 状态并且处于双流发送状态，则将此路音频参加混音输出到远端；如果终端处于会议状态 但是没有处于双流发送状态，则将此路音频输入关闭。主控模块将确定结果下发给DSP模 块； 步骤S13 :DSP模块根据主控模块决定将音频输出到本地扬声器或参加混音输出
到远端设备或关闭此路音频输入。
实施例三 如图6所示，具体包括以下步骤 步骤S21 :用户通过GUI进行如下设置将自动伴音功能设置为关闭，GUI将该设 置发送到主控模块保存； 步骤S22 :主控模块根据当前会议状态和自动伴音配置决定音频的输出状态，具 体的如果终端没有处于会议状态，则将此路音频输入关闭；如果终端处于会议状态，则将 此路音频参加混音输出到远端； 步骤S23 :DSP模块根据主控模块决定将音频参加混音输出到远端设备或关闭此 路音频输入。
仍参见图3，本发明实施例还提供一种终端，该终端包括 主控模块30，用于在本终端的第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相 对应；并根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入 数据流的输出状态； 数字信号处理模块(DSP)31，用于对第一多媒体输入接口输入的数据流进行输出
处理，以达到所述主控模块确定的第一多媒体输入接口输入数据流的输出状态。 所述数字信号处理模块31用于在所述主控模块确定的第一多媒体输入接口输
入数据流的输出状态为向远端设备输出该输入数据流时，将该输入数据流进行编码后发送
给远端设备； 在所述主控模块确定的第一多媒体输入接口输入数据流的输出状态为在终端本
地输出该输入数据流时，将该输入数据流传送给本地多媒体输出接口进行输出； 在所述主控模块确定的第一多媒体输入接口输入数据流的输出状态为不输出该
输入数据流时，屏蔽该输入数据流。 所述主控模块30用于 在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入主视频流的视频 接口 、所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述主 视频流的远端设备连接到电视会议系统中，则确定所述音频接口输入数据流的输出状态为 向所述远端设备输出该数据流；否则，确定所述音频接口输入数据流的输出状态为在本地 输出该数据流。
所述主控模块30用于 在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入辅视频流的视频
接口 、所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述辅
视频流的远端设备连接到电视会议系统中并且所述终端处于双流发送状态，则确定所述音
频接口输入数据流的输出状态为向远端设备输出该数据流；若接收所述辅视频流的远端设
备连接到电视会议系统中并且所述终端未处于双流发送状态，则确定所述音频接口输入数
据流的输出状态为不输出该数据流；若接收所述辅视频流的远端设备未连接到电视会议系
统中，则确定所述音频接口输入数据流的输出状态为在本地输出该数据流。 综上，本发明的有益效果包括 本发明实施例提供的方案中，终端在第一多媒体输入接口处于开启状态时，根据 预先设置的多媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入 接口相对应，根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口 输入数据流的输出状态，并对第一多媒体输入接口输入的数据流进行输出处理以达到该输 出状态。可见，本发明中将一个多媒体输入接口与另一多媒体输入接口进行关联，终端自动 根据该关联关系以及另一多媒体输入接口的输出状态确定该一个多媒体输入接口的输出 状态，与现有技术中只要该一个多媒体输入接口处于开启状态就将该多媒体输入接口输入 的数据流输出到远端相比，多媒体数据流的输出方式多样化，有效地提高了多媒体数据的 输出方式。 同时，本发明中无需用户手动设置多媒体输入接口的输出方式，例如通过连接或 断开多媒体输入接口来决定是否将该多媒体输入接口输入的数据流输出到远端，而是根据 与该多媒体输入接口关联的其他多媒体输入接口的输出状态决定该多媒体输入接口的输出状态，从而达到了简化用户操作的目的。 显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精 神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围 之内，则本发明也意图包含这些改动和变型在内。
权利要求
一种多媒体数据的输出方法，其特征在于，该方法包括终端在第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应；根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入数据流的输出状态，并对第一多媒体输入接口输入的数据流进行输出处理以达到该输出状态。
2. 如权利要求1所述的方法，其特征在于，所述输入数据流的输出状态为 向远端设备输出该输入数据流，或在终端本地输出该输入数据流，或不输出该输入数据流。
3. 如权利要求1所述的方法，其特征在于，在第一多媒体输入接口为音频接口 ，第二多 媒体输入接口为输入主视频流的视频接口时，所述根据第二多媒体输入接口输入数据流的 输出状态确定第一多媒体输入接口输入数据流的输出状态包括在所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述主 视频流的远端设备连接到电视会议系统中，则确定所述音频接口输入数据流的输出状态为 向所述远端设备输出该数据流；否则，确定所述音频接口输入数据流的输出状态为在本地 输出该数据流；在所述视频接口输入数据流的输出状态为未输出该数据流时，确定所述音频接口输入 数据流的输出状态为不输出该数据流。
4. 如权利要求1所述的方法，其特征在于，在第一多媒体输入接口为音频接口，第二多 媒体输入接口为输入辅视频流的视频接口时，所述根据第二多媒体输入接口输入数据流的 输出状态确定第一多媒体输入接口输入数据流的输出状态包括在所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述辅 视频流的远端设备连接到电视会议系统中并且所述本地终端处于双流发送状态，则确定所 述音频接口输入数据流的输出状态为向远端设备输出该数据流；若接收所述辅视频流的远 端设备连接到电视会议系统中并且所述本地终端未处于双流发送状态，则确定所述音频接 口输入数据流的输出状态为不输出该数据流；若接收所述辅视频流的远端设备未连接到电 视会议系统中，则确定所述音频接口输入数据流的输出状态为在本地输出该数据流；在所述视频接口输入数据流的输出状态为未输出该数据流时，确定所述音频接口输入 数据流的输出状态为不输出该数据流。
5. 如权利要求2-4中任一所述的方法，其特征在于，所述远端设备包括 多点控制单元MCU和/或会议电视终端。
6. 如权利要求1-4中任一所述的方法，其特征在于，第一多媒体输入接口为音频接口， 第二多媒体输入接口为视频接口 ；或者，第一多媒体输入接口为视频接口 ，第二多媒体输入接口为音频接口 。
7. —种终端，其特征在于，该终端包括主控模块，用于在本终端的第一多媒体输入接口处于开启状态时，根据预先设置的多 媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应； 并根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入数据流 的输出状态；数字信号处理模块，用于对第一多媒体输入接口输入的数据流进行输出处理，以达到所述主控模块确定的第一多媒体输入接口输入数据流的输出状态。
8. 如权利要求7所述的终端，其特征在于，所述数字信号处理模块用于在所述主控模 块确定的第一多媒体输入接口输入数据流的输出状态为向远端设备输出该输入数据流时， 将该输入数据流进行编码后发送给远端设备；在所述主控模块确定的第一多媒体输入接口输入数据流的输出状态为在终端本地输 出该输入数据流时，将该输入数据流传送给本地多媒体输出接口进行输出；在所述主控模块确定的第一多媒体输入接口输入数据流的输出状态为不输出该输入 数据流时，屏蔽该输入数据流。
9. 如权利要求7所述的终端，其特征在于，所述主控模块用于在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入主视频流的视频接 口 、所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述主视 频流的远端设备连接到电视会议系统中，则确定所述音频接口输入数据流的输出状态为向 所述远端设备输出该数据流；否则，确定所述音频接口输入数据流的输出状态为在本地输 出该数据流；在所述视频接口输入数据流的输出状态为未输出该数据流时，确定所述音频接口输入 数据流的输出状态为不输出该数据流。
10. 如权利要求7所述的终端，其特征在于，所述主控模块用于在第一多媒体输入接口为音频接口 、第二多媒体输入接口为输入辅视频流的视频接 口 、所述视频接口输入数据流的输出状态为向远端设备输出该数据流时，若接收所述辅视 频流的远端设备连接到电视会议系统中并且所述本地终端处于双流发送状态，则确定所述 音频接口输入数据流的输出状态为向远端设备输出该数据流；若接收所述辅视频流的远端 设备连接到电视会议系统中并且所述本地终端未处于双流发送状态，则确定所述音频接口 输入数据流的输出状态为不输出该数据流；若接收所述辅视频流的远端设备未连接到电视 会议系统中，则确定所述音频接口输入数据流的输出状态为在本地输出该数据流；在所述视频接口输入数据流的输出状态为未输出该数据流时，确定所述音频接口输入 数据流的输出状态为不输出该数据流。
全文摘要
本发明实施例公开了一种多媒体数据的输出方法和设备，属于多媒体处理领域，用于提高终端输出多媒体数据方式的多样性。本发明中，终端在第一多媒体输入接口处于开启状态时，根据预先设置的多媒体输入接口之间的对应关系，确定第一多媒体输入接口与第二多媒体输入接口相对应；根据第二多媒体输入接口输入数据流的输出状态，确定第一多媒体输入接口输入数据流的输出状态，并对第一多媒体输入接口输入的数据流进行输出处理以达到该输出状态。采用本发明，能够有效地提高多媒体数据的输出方式的多样性。
文档编号H04N7/15GK101710963SQ20091025925
公开日2010年5月19日 申请日期2009年12月15日 优先权日2009年12月15日
发明者刘峥, 汤宁, 谭明宇, 陈健 申请人:中兴通讯股份有限公司