专利名称：自动调整视频会议显示模式的方法及系统的制作方法
技术领域：
本发明涉及多媒体通信技术领域，特别涉及一种能自动调整视频会议显示模式 的方法及系统。
背景技术：
借助互联网的迅猛发展，视频会议实现了流畅的远距离视频和音频同步沟通， 将真实的会议场景呈现，帮助企业足不出户即可进行远程会议、商务、办公的信息化通 讯。及时、快捷的视频会议方式能实现无延迟的实时沟通，达到信息的高速同步传递和 互动，它成功代替了传统的电话、出差沟通方式，而且能大幅缩减企业在差旅费用、通 讯费用上的支出，在高效信息传递、成功缩减差旅费用、优化企业财务状况方面优势明 显，已成为成本压力下的众多大、中、小企业的首选方式。然而，当有多方参加会议时，所有参会方在屏幕中如何显示，比例如何分布， 使用何种显示模式，则需要一套相应的控制机制。现有的视频会议中，终端参会软件 提供几种模式给用户选择，当参会的某一方要让自己的图像显示比例变大，达到突出显 示的效果，如要开始发言了，则需要手动改变显示模式以实现讲话方的突出显示，如图 3所示，有参会者A、B、C、D共4方参加了同一个视频会议，会中，每一方的视频显 示画面都是平均分配的，要实现如图4所示的某一方突出显示而其它三方缩小显示的效 果，只能通过手动的方式改变视频显示模式，无法实现视频显示模式的自动调整，因此 操作比较麻烦。
发明内容
本发明提供一种自动调整视频会议显示模式的方法，不需手动操作，能够自动 的调整视频会议的显示模式。本发明的自动调整视频会议显示模式的方法，包括以下步骤 步骤Si，接收各参会者的音视频信号；
步骤S2，获取各参会者的声音和图像的变化率；
步骤S3，当变化率符合预定规则时改变视频显示模式参数；
步骤S4，根据视频显示模式参数合成视频并发送给各参会者。本发明的自动调整视频会议显示模式的系统，包括多个终端以及多点处理单元 MCU ；
各终端的功能是将音视频信号发送给多点处理单元MCU ；以及接收多点处理单元 MCU中的音视频信号；
MCU的功能是接收各终端的音视频信号，获取各终端的声音和图像的变化率，当变 化率符合预定规则时改变视频显示模式参数，并根据该视频显示模式参数合成视频，然 后将合成后的视频的音视频信号发送给各终端。从以上方案可以看出，本发明的自动调整视频会议显示模式的方法及系统，通过实时采集声音和图像的变化率，当变化率达到一定规格时能够自动调整视频显示模 式，不需手动配置即可实现讲话方在视频会议中的突出显示，避免了手动配置所带来的 操作上的麻烦。
图1为本发明自动调整视频会议显示模式的方法流程图； 图2为本发明自动调整视频会议显示模式的系统结构示意图； 图3为视频会议中各参会者平均分布的示意图4为视频会议中讲话方突出显示的示意图。
具体实施例方式本发明提供了一种自动调整视频会议显示模式的方法及系统，该方法及系统能 够解决现有技术中需要手动配置视频显示模式的问题。如图3所示，视频会议开始时各参会者A、B、C、D在视频显示画面上是平均 分配的，而本发明所要实现的是当某个参会者(比如A)突然挥一下手，或者突然大声 讲话，那么该参会者在会议中对应的图像将会变大，达到突出显示的目的，而其它参会 者的图像顺应缩小，如图4所示。这整个过程不需要参会者手动进行配置，完全由服务 器自动判断执行。为此，本发明提供一种自动调整视频会议显示模式的方法，如图1所示，包括 以下步骤
步骤Si，视频会议的各参会终端发送经编码的音视频信号给MCU (Multipoint Control Units,多点处理单元)，MCU是视频会议系统的核心部分，可以为用户提供群组 会议、多组会议的连接服务，MCU接收到各参会者的音视频信号后，进行解码操作，还 原出编码前的音视频信号。步骤S2,获取各参会者的声音和图像的变化率。MCU收到某一终端的某一帧 音视频信号时，从音视频解码器获取该终端的这一帧信号与上一帧信号的差率，该差率 即为变化率。步骤S3,当变化率符合预定规则时改变视频显示模式参数。这个预定规则可 根据具体情况而定，作为一个较好的实施例，本发明采用的规则如下当某个参会都的 变化率达到30%以上，且变化持续时间达到5秒以上，则改变视频显示模式参数，将该 参会者的比例设为最大。仅以视频信号为例，当接收到的参会者的视频信号与从音视频 解码器中获取的上一帧视频信号相比，变化率达到30%以上，且变化时间持续了 5秒以 上，则可以认为该终端上的参会者要进行发言了，因此改变MCU中的视频显示模式参 数，即将该参会者的比例设为最大。对于音频信号的处理与视频信号类似。另外，当视频信号的变化率达到30%以上，但是变化的持续时间没有达到5 秒，则不会进行改变视频显示模式参数的操作。之所以设置时间上的限制条件，是为了 避免引起误操作，例如某一参会者打哈欠或伸懒腰的时候，由于动作比较大，音视频解 码器获取的图像变化率会大于30%，但是这种情况下参会者并不是想要进行发言，也不 用在视频会议中突出显示，考虑到打哈欠或伸懒腰这些动作的持续时间不超过5秒，因
4此设置变化持续时间需要达到5秒以上才进行改变视频显示模式参数的操作。步骤S4，步骤S3中的视频显示模式参数的作用在于设置合成图像的显示模式， 该参数中包括各参会终端的显示比例和各终端的位置等信息，一旦该参数设定，MCU就 会根据该视频显示模式参数合成视频，并发送给各参会终端。视频显示模式参数可以根 据具体需要设置，例如设置成图3中的参会者A、B、C、D的1 : 1 1 : 1，或者设置成 图4中的9: 1: 1: 1，当然也可以设置成其他的模式比如4: 3: 2: 1等，总之会有一 个突出显示的参会者的比例最大。当一个视频会议初始创建时，MCU按照1:1: 1:1 的模式进行图像合成，各终端显示的也是按照这个比例平均分配的画面；当有某个终端 的变化率符合预定的规则时，则该终端获得图4中终端A的位置，画面变成9: 11 1，具体过程如下视频显示模式参数变化为9: 111, MCU根据该新参数确定显示 比例和各终端的位置，使各终端按照新的显示模式进行图像合成，然后将合成后的视频 图像发送给各参会终端，使各终端最终显示为终端A突出显示的视频画面。整个视频会议可能会持续一段较长的时间，而在会议中间也不可避免的会有其 他参会者进行发言，例如当会议途中终端B也达到变化条件时，则此终端B将会获得图2 中参会者A的突出显示的位置，而参会者A则失去突出显示的位置，为此MCU只需重新 设置视频显示模式参数，然后按照新的显示模式参数进行图像合成，即可实现终端B突 出显示的需求。为了避免视频会议中屏幕的频繁变化，作为一个优选的实施例，在改变视频显 示模式的条件中，多加一个时间有效期(例如IOs)，即一次视频显示模式改变后(或称 一次视频合成后)，即使有另外一个终端达到变化要求，但是在此IOs的时间有效期内， 视频显示模式不再进行改变，直到该有效期过后如果变化仍然存在，则进行改变视频显 示模式的操作。另外，若多个参会终端均发生较大变化，且变化率也均符合预定规则，则按照 时间先后顺序改变视频显示模式，将视频显示模式参数设置为在先变化的参会者的比例 最大，即谁先发生变化则谁将获得突出显示的权利，而忽视在后变化的参会者(当然如 果一个时间有效期过去，且在后变化的参会者仍然有声音和图像的变化，则可根据情况 突出该在后变化的参会者的显示)。还有一种情况，若多个参会终端的变化率均符合预 定规则，且发生变化的时间也相同，则先比较各参会者的图像变化率的大小，若参会者 A的图像变化为31%，而参会者B的图像变化率为33%，则在视频显示模式参数中将参会 者B的比例设为最大，改变视频显示模式为图像变化率较大的参会者B为突出显示；另 外，如果多个参会终端的变化率均符合预定规则、发生变化的时间相同，且图像的变化 率的大小也相同，这时候可以比较各变化终端的声音变化率的大小，并在视频显示模式 参数中将声音变化率较大的参会者的比例设为最大，即改变视频显示为声音变化率较大 的参会者突出显示的模式。另外本发明还提供一种自动调整视频会议显示模式的系统，如图2所示，包括 多个终端以及MCU;
各终端的功能是将音视频信号发送给MCU ；以及接收MCU中的音视频信号； MCU的功能是接收各终端中的音视频信号，获取各终端的声音和图像的变化率，当 变化率符合预定规则时改变视频显示模式参数，并根据该视频显示模式参数合成视频，然后将合成后的视频的音视频信号发送给各终端。MCU中包括音视频解码器，该音视频解码器的功能是将接收到的音视频信号进 行解码，以及获取解码后的这一帧信号与上一帧信号的差率(即变化率)，目前市场上 大部分的音视频解码器均具有上述功能。本发明的自动调整视频会议显示模式的方法及系统，通过实时采集声音和图像 的变化率，当变化率符合一定条件时能够自动调整视频显示模式，不需手动配置即可实 现讲话方在视频会议中的突出显示，在给各参会者带来视觉上的直观性的同时，避免了 手动配置所带来的操作上的麻烦。以上所述的本发明实施方式，并不构成对本发明保护范围的限定。任何在本发 明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明的权利要求保 护范围之内。
权利要求
1.一种自动调整视频会议显示模式的方法，其特征在于，包括以下步骤步骤Si，接收各参会者的音视频信号；步骤S2，获取所述各参会者的声音和图像的变化率；步骤S3，当所述变化率符合预定规则时改变视频显示模式参数；步骤S4，根据所述视频显示模式参数合成视频并发送给所述各参会者。
2.根据权利要求1所述的自动调整视频会议显示模式的方法，其特征在于，步骤S3 具体为当参会者的变化率达到30%以上，且变化持续时间达到5秒以上，则改变视频 显示模式参数，将该参会者的比例设为最大。
3.根据权利要求2所述的自动调整视频会议显示模式的方法，其特征在于，步骤S4 中所述视频合成后有一时间有效期，在该时间有效期内视频显示模式保持不变。
4.根据权利要求2所述的自动调整视频会议显示模式的方法，其特征在于，若多个参 会者的变化率均符合所述预定规则，则在所述视频显示模式参数中将在先变化的参会者 的比例设为最大。
5.根据权利要求2所述的自动调整视频会议显示模式的方法，其特征在于，若多个参 会者的变化率均符合所述预定规则，且发生变化的时间相同，则在所述视频显示模式参 数中将图像变化率较大的参会者的比例设为最大。
6.根据权利要求2所述的自动调整视频会议显示模式的方法，其特征在于，若多个参 会者的变化率均符合所述预定规则、发生变化的时间相同，且所述图像变化率的大小也 相同，则在所述视频显示模式参数中将声音变化率较大的参会者的比例设为最大。
7.—种自动调整视频会议显示模式的系统，包括多个终端，其特征在于，还包括多 点处理单元MCU ；所述各终端用于将音视频信号发送给所述多点处理单元MCU ；以及接收所述多点处 理单元MCU中的音视频信号；所述多点处理单元MCU用于接收所述各终端的音视频信号，获取所述各终端的声音 和图像的变化率，当所述变化率符合预定规则时改变视频显示模式参数，并根据该视频 显示模式参数合成视频，然后将合成后的视频的音视频信号发送给所述各终端。
8.根据权利要求7所述的自动调整视频会议显示模式的系统，其特征在于，所述多点 处理单元MCU中包括音视频解码器，所述音视频解码器用于将接收到的音视频信号进行 解码，以及获取该解码后的信号与上一帧信号的变化率。
全文摘要
本发明提供一种自动调整视频会议显示模式的方法及系统，该方法包括以下步骤接收各参会者的音视频信号；获取各参会者的声音和图像的变化率；当变化率符合预定规则时改变视频显示模式参数；根据视频显示模式参数合成视频并发送给各参会者。本发明的自动调整视频会议显示模式的方法及系统，通过实时采集声音和图像的变化率，当变化率符合一定条件时能够自动调整视频显示模式，不需手动配置即可实现讲话方在视频会议中的突出显示，避免了手动配置所带来的操作上的麻烦。
文档编号H04N7/26GK102025970SQ20101058928
公开日2011年4月20日 申请日期2010年12月15日 优先权日2010年12月15日
发明者刘明宇, 谢艳霞 申请人:广东威创视讯科技股份有限公司