专利名称：一种处理远程呈现会议用户信号的方法及系统的制作方法
技术领域：
本发明涉及通信技术领域，具体涉及一种处理远程呈现会议用户信号的方法及系统。
背景技术：
会议电视领域现在处于一个发展快速的时期，多种业务应用、合适的网络资源、使用操作便捷性都是用户、厂商、集成商关注的方面。针对传统的会议电视和新兴的远程呈现业务，业界更加关注网络资源利用率和易用性。
目前新兴的远程呈现业务，在每个会场有多个摄像头、多个显示屏、多个会议终端，分别对应不同位置的与会人员。
如图l所示，这是一个典型的远程呈现会场的布局图，其中每个用户
区域对应一个MIC, —个摄像机、 一个显示器、 一个会议终端，会场的2个喇叭布置在两台显示器的两边。通常开会时，摄像机l拾取用户区域l的图像送到本地会议终端1,本地会议终端1经过编码之后送到远端会场对应的会议终端1 ，然后由远端会场对应的会议终端l解码之后在远端会场对应的显示器l上显示。类似地，对于用户区域2和3的信号也进行相应的处理。为了简化操作，每次召集会议时，会场上多个摄像机、多个显示屏、多个会议终端都同时运行。在远程呈现多点业务时，通常，每个会场只有一、两个摄像机对应的区域有人，其他摄像机对应的区域没有坐人，多点控制单元(MCU， Multipoint Control Unit)在处理这些远程呈现会场的视频流时，无法知道这些会场哪些区域坐着人，哪些区域没有坐人，可能将会场中无人区域对应的视频码流也切换给其他会场，这样将导致传输链路资源浪费。如果需要有效去除这些没有人坐的区域的视频，必须人工获取这些信息，然后手动操作干预，去除无效的不坐人区域的图像，将坐人的区域图像进行拼接再发送给其他各会场，使用操作便捷性大大降低。
发明内容
4有鉴于此，本发明提供一种处理远程呈现会议用户信号的方法及系统，可将空闲会场的信号去除，从而提高会议系统的效率和效果。
本发明实施例提供的一种处理远程呈现会议用户信号的方法，包括获取远程呈现会场的用户签到信息或撤销信息，并根据所述用户签到
信息或撤销信息识别出在用用户区域和空闲用户区域；
确定来自所述空闲用户区域的信号为无效信号，所述在用用户区域的
信号为有效信号。本发明实施例提供的一种远程会议控制装置，包括信息接收单元，用于接收来自用户终端的用户签到信息或撤销信息；识别单元，用于根据该用户签到信息或撤销信息识别出空闲用户区
域；
选择单元，确定所述空闲用户区域的信号为无效信号，选择其他在用用户区域的信号作为有效信号。
本发明实施例还提供一种远程会议处理装置，包括信息获取单元，用于收集各用户区域的用户签到信息或撤销信息；发送单元，用于发送用户签到信息或撤销信息给控制装置。本发明实施例才是供的一种远程呈现会议系统，包括用户签到装置，设置在远程呈现会场，用于供用户到会时注册签到信息和离会时撤销信息；
远程会议处理装置，用于收集各用户区域的用户签到单元提供的签到信息和撤销信息，并经会议终端传送给多点控制单元MCU;
远程会议控制装置，根据所述用户签到信息识别出空闲用户区域；确定来自所述空闲用户区域的信号为无效信号，所述在用用户区域的信号为有效信号；将所述有效信号发送给所述远程呈现会场中至少之一。
本发明实施例提供的技术方案，在远程呈现应用场景中，能够根据终端侧简单方便的签到装置，识别各用户区域人员到会情况，并利用现有的多媒体通信网络中的设备通信信道，将这些信息传送到网络侧，网络侧在进行视频切换、画面组合、声音处理中，可以有效的、自动的去除无效的视频和音频码流，不需要人工干预，提高会议系统性能、效率及操作易用性。
图1为现有技术中远程呈现会场布局示意图2为本发明实施例中远程呈现会议系统组网示意图3为本发明实施例中远程呈现会议系统终端侧装置架构示意图4为本发明实施例中远程呈现会议系统的集中签到信息的界面示意
图5为本发明实施例中提供的一种远程会议控制装置架构示意图；图6为本发明实施例还提供一种远程会议处理装置架构示意图；图7为本发明实施例中远程呈现会场中终端侧装置架构示意图9为本发明实施例中音频处理具体流程；图10为本发明实施例中远程呈现会场多点会议系统架构示意图；图11为本发明实施例中远程呈现会场与普通会场融合的会议系统架构示意图12为本发明另一实施例中签到信息集中处理的组网示意图。
具体实施例方式
在远程呈现会议应用场景中，如何检测到摄像机组中某个摄像机对应的区域没有坐人，并把这些信息搜集保存在终端上，终端如何把这些信息发送到MCU上，从而MCU如何可以根据这些信息进行有效的会场拼接，进一步MCU如何根据这些信息控制视音频码流的转发，再进一步MCU还可以根据这些信息提示用户进行相应的会议控制。这些信息也可以通过MCU转发给会议主席，作为主席控制会议的依据。鉴于此，本发明提供一种远程呈现会议中处理空闲用户区域信号的方法及系统，可通过获取远程呈现会场的用户签到信息，并根据该用户签到信息识别出空闲用户区域；将来自所述空闲用户区域的信号确定为无效信号，其他在用用户区域的信号作为有效信号；根据预定策略，将所述有效信号发送给其他远程呈现会场。这样在给远程呈现会场发送多路视频码流时，只发送有效用户区域的视频码流；在给普通会场组合远程呈现会场各路视频码流组成的多画面时，也可以去除这些空闲用户区域对应的视频码流，或者各普通会场轮循远程呈现会场各路浮见频码流时，也可以去除这些空闲用户区域的视频码流。另外主席会场可以根据这些信息进行视频、音频、会议控制。
如图2所示，本发明系统由终端侧和网全各侧两部分组成。其中网络侧
包括
业务管理台，用于对多点控制单元(MCU， Multipoint Control Unit)进行管理操作；MCU,用于进行多点会议的交互；注册服务器，用于接收MCU、各会场终端的注册信息。在本发明另外的一些实施例中，网络侧可以没有注册服务器，因为El、 ISDN会议电视网络中不存在注册服务器。终端侧一般是由各远程呈现会场组成，包括会议室，以及会议室内部的桌椅、摄像机组、显示器组、MIC组、喇叭(音响)组、会场终端组等设备。
在本发明实施例中，需要在每个会场收集每个用户区域与会人员到会情况。为此，如图3所示，本实施例的远程呈现会议系统中，在终端侧的远程呈现会场设置用户签到装置和签到处理装置，其中用户签到装置可以是目前常用的有签到功能的MIC (每个MIC上都有签到按钮)，也可以是指紋识别的签到设备。可以理解的是，用户签到装置也可以是其他装置，其功能就是提供用户签到的界面或者按钮等交互接口 ，每个签到装置逻辑上对应一个用户区域，其中签到的概念包括用户到会时签到和离会后撤销。签到处理装置可以是目前常用的中控主机，也可以是其他签到处理设备，其功能就是收集各签到装置的签到信息(包括每个区域用户到会情况、离会情况)并汇聚发送给会议终端。会议终端接收到签到信息后予以保存，并发送给网络侧，由网络侧处理。
其中签到装置和签到处理装置也可以是同 一 台设备，在这台设备中收集各用户区域的到会和离会人员信息(收集的方式有多种，有手动输入、按钮输入、界面配置输入等)，然后传送给会议终端。比如，会场终端的呼叫控制操作界面上可以集成这个功能，如图4所示。
这里收集签到信息的会议终端可以是预先指定的，也可以就是会场的主会议终端。该会议终端中有每个用户区域的MIC信息(编号)、摄像机信息(编号)、显示器信息(编号)、会议终端信息(编号、号码、别名)、以及对应用户的签到信息。
7参照图5,本发明实施例提供的一种远程会议控制装置100,包括 信息接收单元110，用于接收来自用户终端的用户签到信息； 设置在远程呈现会场的用户签到装置，用户到会时注册签到信息和离
会时撤销与会信息，并将签到信息或撤销信息发送给会议控制侧；
这样，控制侧的远程会议控制装置接收远程呈现会场终端侧发送的所
述注册签到信息和撤销信息。
识别单元120，用于根据所述用户签到信息或措t销信息识别出空闲用
户区域；
用户到会时注册签到信息，表明该用户区域为在用区域；离会时撤销 与会信息，表明该用户区域为空闲用户区域。
选捧单元130，确定所述空闲用户区域的信号为无效信号，选择其他 在用用户区域的信号作为有效信号；
发送单元140,将所述选择单元确定的有效信号或有效信号的标识发 送给其他远程呈现会场。
参照图6，本发明实施例还提供一种远程会议处理装置200，包括
信息获取单元210,用于收集各用户区域的用户签到信息或撤销信息；
发送单元220，用于发送用户签到信息或撤销信息给控制装置。
参照图7，在本发明实施例中提供的一种远程呈现会议系统中，远程 呈现会场中终端侧包括
用户签到装置310，设置在远程呈现会场，用于供用户到会时注册签 到信息和离会时tt销信息；
远程会议处理装置320,用于收集各用户区域的用户签到单元提供的 签到信息和撤销信息，并通过会议终端传送给多点控制单元MCU。
远程会议控制装置330,如多点控制单元MCU,根据该用户的签到信 息识别出空闲用户区域；确定来自所述空闲用户区域的信号为无效信号， 其他在用用户区域的信号为有效信号；根据预定策略将所述有效信号发送 给其他远程呈现会场。
用户签到装置可以是集成在会议终端的签到功能装置，或具有签到功 能的拾音装置，或指紋识别的签到设备等。可以理解的是本发明实施例包
8括但不限于上述设备。
参照图8,本发明实施例提供的一种远程呈现会议中处理空闲用户区
域信号的方法，包括如下步骤
SlOl，获取远程呈现会场的用户签到信息，并根据该用户签到信息识 别出空闲用户区域；
所述获取会场的签到信息，具体包括
通过设置在远程呈现会场的用户签到装置，用户到会时注册签到信息 和离会时撤销信息；
接收远程呈现会场终端侧发送的所述注册签到信息和撤销信息。
所述用户签到装置为集成在会议终端的签到功能单元，或具有签到功 能的拾音装置，或指紋识别的签到设备。
S102,确定来自所述空闲用户区域的信号为无效信号，其他在用用户 区域的信号为有效信号；
根据预定策略，将所述有效信号发送给其他远程呈现会场。这些其他 远程呈现会场为存在与会用户的会场。或者，也可通过下述方式获取会议 终端的签到信息
网络侧服务器直接向各远程呈现会场收集签到信息，再将收集的签到 信息转发给MCU;或
网络侧服务器直接向各远程呈现会场收集签到信息，再将收集的签到 信息转发给主席会场的指定终端。
所述远程呈现会场终端侧发送所述注册签到信息和撤销信息，具体过 程如下
若所述远程呈现会场为IP网络的H. 323会场，则所述会议终端通过 RAS信道的非标信令通道发送所述注册签到信息和撤销信息到网络侧；
若所述远程呈现会场为IP网络的SIP会场，则所述会议终端通过SIP 的扩展通道发送所述注册签到信息和撤销信息到SIP注册服务器；
若所述远程呈现会场为El信道构建的会场，则所述会议终端通过连 接的El通道发送所述注册签到信息和撤销信息到MCU;
所述终端在呼叫过程中，通过呼叫的自选信令发送所述注册签到信息信令包括H. 221、 H. 242、 Q. 931、 H. 245非标 信令；
若所述远程呈现会场基于所述IP网络，则所述会议终端通过IP网络 采用私有协议发送到处理签到信息的服务器。
另外，无论从终端侧接收签到信息的服务器是哪种类型，与会人员的 签到信息都会由这些服务器转发给MCU或者MCU的管理台进行处理。
进一步地，根据预定策略将所述有效信号发送给其他远程呈现会场。
具体地，主会场的呼叫、会议控制处理方式如下
如果某个远程呈现会场的所有用户都没有签到，还可以不向这个会场 发送会议图像和声音；或者挂断这个远程呈现会场的所有与会终端；
或者，将在用用户区域和空闲用户区域的标识信息发送给远程呈现会 场，使得各远程呈现会场可选择相应的有效信号予以显示。
为了节约网络带宽，可将空闲用户区域对应终端的数据传输带宽控制 在预定速率内。
例如，MCU可以将空闲用户区域的一见频码流速率控制在50Kb/s以下； 根据会议签到信息，MCU和终端通过私有的约定，关闭无效用户区域对
应一见频码流的发送通道，禁止终端侧不发送该区域的^见频码流； 进行多画面组合时，无效用户区域的视频码流不力。入多画面中； 通常，在主会场MCU的管理台可以显示每个会场到会的情况，可根据这
些可以进行会议控制，比如广播整个会场、广播会场的某个有效区域、选看等。
MCU音频处理策略可以是
如果终端侧^^每个用户区域的音频码流分别送到MCU侧统一处理，则 MCU可以把无效用户区域对应的音频码流丟弃或者静音，不参加MCU侧的混 音处理。
如果远程呈现会场音频的处理是通过一台会议终端进行的，其他会议 终端不参加音频处理，即会场的所有MIC和喇叭都只与某个指定的会议终 端连接。这种处理方式的特点通常是在终端侧把各个用户区域的音频码流 进行混音，把混音后的码流送给MCU处理。则在本发明中增加会议终端直
10接把无效用户区域的码流去除或者静音，再进行本地的混音处理，然后再 发送给MCU。
参见图9，本实施例中的音频处理具体流程如下
S201 ，将各用户区域的音频信号发送给会议终端；
S202,判断是否为在用用户区域对应的音频；若是，则进行正常处理； 否则执行步骤S203;
S203，进一步判断是否在终端侧混音？若是，则将该混音信号丟弃或 者静音；否则，执行步骤S204;
S204，将终端侧的音频信号发给MCU进^"处理；
S205, MCU将空闲用户区域的音频信号丟弃或者静音。
主席会场处理
MCU把与会人员的签到信息发送给主席，发送方式同"终端侧把与会
人员的签到信息发送到网络侧的过程"；
主席终端收到这些信息后，进行保存，可以随时查看； 主席终端可以根据这些信息进行会议控制，比如指定广播策略，是广
播整个会场还是会场的一部分等等。
例如，某远程呈现会场的用户签到情况的表格如下
远程呈现 会场名称用户区域1用户区域2用户区域3是否在用对应的会议 终端号码是否有效对应的会议 终端号码是否有效对应的会议 终端号码
远程呈现 会场l在用075001无效075002无效075003
远程呈现 会场2在用021001在用021002在用021003
远程呈现 会场3无效028001在用028002在用028003
应用场景一会议中只有远程呈现会场
如图10所示，区域A、 C对应的用户没有签到或者离会，即空闲用户 区域。MCU给各远程呈现会场进行图像拼接(即选择哪几路视频流发送给
ii这个会场)时，首先会去除这些空闲用户区域对应的视频码流，然后根据
MCU内部的处理策略，4巴其他有效用户区域的码流发送给各个远程呈现会 场。启动语音激励功能时，进行视频切换时也不会把这些空闲会场的视频 流切换给会议中的各个会场。另外在MCU的管理台界面上，对这些远程呈 现会场的空闲用户区域给予提示。
应用场景二远程呈现会场和普通会场在同一个会议中 如图ll所示，区域A、 C对应的用户没有签到或者离会，即空闲用户区 域。如上图所示，当远程呈现会场和普通会场在同一个会中时，MCU在给 普通会场发其中一个远程呈现会场的各路码流的组合画面时，可以去除这 些空闲的用户区域对应的码流，如图的普通会场1看远程呈现会场2的图像 时，MCU只需要把D和E的视频流组合成多画面发送给普通会场1观看。普通 会场轮循远程呈现会场的各路视频码流时，也可以去除这些空闲的用户区 域的码流，如上图的普通会场2轮循远程呈现会场2的码流时，MCU只需要 把D和E的视频码流发送给它轮循观看，而不会把F发给它观看。
进行整个会议的多画面组合时，空闲用户区域的视频码流不加入多画 面中。
实施例二
本实施例与前述实施例基本相同，区别之处在于，用户签到信息不通 过会议终端转发给网络侧，而是由网络侧某个设备(如签到服务器，这个 设备也可以放置在某个终端侧)直接向各会场收集签到信息，然后再将这 些信息通过IP网络或者串口转发给MCU (管理台)，如图12所示。
这种方式实现复杂，需要在签到处理设备上维护用户区域信息，比如 和会议终端的对应关系，比较复杂。MCU也需要额外增加对接设备和信息 翻译。不能利用现有的视频通信系统设备，引入第三方对接，使得整个系 统冗余、复杂。
另外，用户签到信息的也可以不通过MCU转发给主席会场，而是由网 络上的某个设备(如签到服务器)直接向各会场收集签到信息，然后再将 这些信息通过IP网络或者串口转发给主席会场的指定终端。
需要说明的是，在普通的会议电视领域也可以利用到会签到召开会议，即签到率达到80%,就自动召集会议，不需要人工干预，离会率到70%, 就自动结束会议；
利用主要与会人员的指紋签到控制会议的召开，替代会议密码，保证 会议的安全性；
普通的会议电视行业应用领域，会议一般都是统一召集的，有可能会 议召集起来后，某个会场没有人到会，这种情况下釆用签到功能，可以把 这个会场挂断，或者不准入会，或者不给它发送会议的图像声音信息，保 证信息安全。
综上所述，本发明实施例提供的一种处理远程呈现会议中用户信号的 方法及系统，通过识别出远程呈现会场中的空闲用户区域；将来自所述空 闲用户区域的视频和音频信号去除；根据预定策略，将其他在用用户区域 的视频和音频信号发送给其他远程呈现会场。这样在给远程呈现会场发送 多^各视频码流时，只发送在用用户区域的-见频码流；在给普通会场组合远 程呈现会场各路视频码流组成的多画面时，也可以去除这些空闲用户区域 对应的视频码流，或者各普通会场轮循远程呈现会场各路视频码流时，也 可以去除这些空闲用户区域的视频码流。另外主席会场可以根据这些信息 进行视频、音频、会议控制。
根据本发明，在远程呈现应用场景中，能够根据终端侧简单方便的签 到装置，识别各用户区域人员到会情况，并利用现有的多々某体通信网络中 的设备通信信道，将这些信息传送到网络侧，网络侧在进行视频切换、画 面组合、声音处理中，可以有效的、自动的去除无效的^L频和音频码流， 不需要人工干预，提高会议效率，提高系统易用性。
显然，本领域的技术人员应该明白，上述的本发明的各步骤可以用通 用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多 个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序 代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或 者将它们分别制作成各个集成电路模块，或者将它们中的步骤制作成单个 集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
13以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护 范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等, 均包含在本发明的保护范围内。
权利要求
1、一种处理远程呈现会议用户信号的方法，其特征在于，包括获取远程呈现会场的用户签到信息或撤销信息，并根据所述用户签到信息或撤销信息识别出在用用户区域和空闲用户区域；确定来自所述空闲用户区域的信号为无效信号，所述在用用户区域的信号为有效信号。
2、 如权利要求1所述的方法，其特征在于，还包括将所述有效信号 发送给所述在用用户区域的远程呈现会场中至少之一。
3、 如权利要求l所述的方法，其特征在于，还包括 将在用用户区域和/或空闲用户区域的标识信息发送给远程呈现会场。
4、 如权利要求1所述的方法，其特征在于，所述获取会议终端的签到 信息，具体包括通过设置在远程呈现会场的用户签到装置，用户到会时注册签到信息和 离会时撤销信息；接收远程呈现会场终端侧发送的所述注册签到信息和撤销信息。
5、 如权利要求l所述的方法，其特征在于，所述获取会议终端的签到 信息，具体包括网络侧服务器直接向各远程呈现会场收集签到信息，再将收集的签到信 息转发给多点控制单元MCU;或网络侧服务器直接向各远程呈现会场收集签到信息，再将收集的签到信 息转发给主席会场的终端。
6、 如权利要求l所述的方法，其特征在于，所述远程呈现会场终端侧 发送所述注册签到信息和招i销信息，具体包括若所述远程呈现会场为IP网络的H.323会场，则所述会议终端通过RAS 信道的非标信令通道发送所述注册签到信息和^:销信息到网络侧；或若所述远程呈现会场为IP网络的SIP会场，则所述会议终端通过SIP 的扩展通道发送所述注册签到信息和撤销信息到SIP注册服务器；或若所述远程呈现会场为El网络的会场，则所述会议终端通过连接的El 通道发送所述注册签到信息和撤销信息到多点控制单元MCU;或所述终端在呼叫过程中，通过呼叫的自定义信令发送所述注册签到信息和撤销信息给多点控制单元MCU;或若所述远程呈现会场基于所述IP网络，则所述会议终端通过IP网络釆 用私有协议发送到处理签到信息的服务器。
7、 如权利要求l所述的方法，其特征在于， 所述其他远程呈现会场为存在与会用户的会场。
8、 如权利要求l所述的方法，其特征在于，将空闲用户区域对应终端的数据传输带宽控制在预定速率内。
9、 一种远程会议控制装置，其特征在于，包括 信息接收单元，用于接收来自用户终端的用户签到信息或撤销信息； 识别单元，用于根据该用户签到信息或撤销信息识别出空闲用户区域； 选捧单元，确定所述空闲用户区域的信号为无效信号，选择其他在用用户区域的信号作为有效信号。
10、 如权利要求9所述的装置，其特征在于，还包括发送单元，将所述选择单元确定的有效信号或有效信号的标识发送给所 述远程呈现会场中至少之一。
11、 一种远程会议处理装置，其特征在于，包括 信息获取单元，用于收集各用户区域的用户签到信息或撤销信息； 发送单元，用于发送用户签到信息或撤销信息给控制装置。
12、 一种远程呈现会议系统，其特征在于，包括 用户签到装置，设置在远程呈现会场，用于供用户到会时注册签到信息和离会时撤销信息；远程会议处理装置，用于收集各用户区域的用户签到单元提供的签到信 息和撤销信息，并经会议终端传送给多点控制单元MCU;远程会议控制装置，根据所述用户签到信息识别出空闲用户区域；确定 来自所述空闲用户区域的信号为无效信号，所述在用用户区域的信号为有效 信号；将所述有效信号发送给所述远程呈现会场中至少之一。
13、 如权利要求12所述的系统，其特征在于，所述用户签到装置为集 成在会议终端的签到功能单元，或具有签到功能的拾音装置，或指紋识别的 签到设备。
全文摘要
本发明实施例公开了一种处理远程呈现会议用户信号的方法，包括获取远程呈现会场的用户签到信息，并根据该用户签到信息识别出空闲用户区域；确定来自所述空闲用户区域的信号为无效信号，其他在用用户区域的信号为有效信号。本发明还提供相关装置及系统。根据本发明在远程呈现应用场景中，能够根据终端侧简单方便的签到装置，识别各用户区域人员到会情况，并根据这些信息在进行视频切换、画面组合、声音处理中，可以有效的、自动的去除无效的视频和音频码流，以提高会议系统性能、效率及操作易用性。
文档编号H04N7/15GK101510990SQ20091011833
公开日2009年8月19日 申请日期2009年2月27日 优先权日2009年2月27日
发明者吴姣黎 申请人:深圳华为通信技术有限公司