一种有序控制会议终端发言的方法、MCU及存储介质与流程

本发明实施例涉及但不限于视频会议领域，具体而言，涉及但不限于一种有序控制会议终端发言的方法、MCU及存储介质。

背景技术：

随着视频会议系统的普及，会议终端的使用者能力参差不齐，在召开视频会议时往往是多点服务单元即MCU对终端的发言权限进行控制，仅仅允许指定发言终端发言，其他终端则进行闭音处理，非指定发言终端即使是开着麦克风，它传送过来的音频信息也不会被MCU进行混音处理，当需要它发言的时候再把该终端的发言权限打开，MCU才会把该终端的音频数据加入混音，其他与会终端才能听到该终端的声音。这也就保证了视频会议召开的有序性。

视频会议主要分为主席模式和导演模式；主席模式下普通终端需要发言，一般有两种途径实现：

1.主席点名发言，直接打开终端的发言权限。

2.普通终端主动申请发言，MCU收到请求后将它列入申请发言列表，主席端在控制台从申请发言列表中选中该终端发言，即给予发言权限。

导演模式下普通终端需要发言，也有两种途径实现：

1.会议管理员在会议控制台从会议终端列表中找到该终端，然后直接打开它的发言权限。

2.普通终端主动申请发言，MCU收到请求后将它列入申请发言列表，会议管理员在会议控制台从申请发言列表中选中该终端发言，即给予发言权限。

由上所述，现有两种模式下实现控制终端发言的方式可以归为两类，一是点名方式，由主席或会议管理员发起；二是申请发言方式，由会议终端发起。这两种方式都存在一定的不足，首先第一种方式，需要管理员或主席从所有与会终端中把需要发言终端找出来，特别是在超大容量会议的情况下，这就需要花费不少的时间，简单发言的情况下，可能管理员找到该终端时发言都已经结束了。第二种方式则必须要求与会人员具备一定的会议终端操作能力，且该会议终端必须具备这种与MCU对接的申请发言功能，需要终端与MCU的信令互通，这就存在了不同厂家不同型号终端与MCU无法互通的风险。

技术实现要素：

本发明实施例提供的一种有序控制会议终端发言的方法、MCU及存储介质，主要解决的技术问题是相关技术中的视频会议中点名终端发言方式存在的管理员或主席操作繁杂、终端申请发言方式存在的会议终端的使用成本和不同终端与MCU无法互通的问题。

为解决上述技术问题，本发明实施例提供一种有序控制会议终端发言的方法，包括：

接收接入MCU的会议终端输入的音频数据；

根据所述音频数据确定对应会议终端是否有发言需求；

当会议终端有发言需求时，对所述会议终端的发言权限进行控制。

本发明实施例还提供一种会议终端有序发言的MCU，包括：

音频输入模块，用于接收接入MCU的会议终端输入的音频数据；

音频处理模块，用于根据所述音频数据确定对应会议终端是否有发言需求；

发言权限控制模块，用于当会议终端有发言需求时，对所述会议终端的发言权限进行控制。

本发明实施例还提供一种存储介质，存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如上所述的有序控制会议终端发言的方法中的步骤

本发明的有益效果是：

根据本发明实施例提供的一种有序控制会议终端发言的方法、MCU及存储介质，通过接收接入MCU的会议终端输入的音频数据；根据所述音频数据确定对应会议终端是否有发言需求；当会议终端有发言需求时，对所述会议终端的发言权限进行控制；本发明实施例中的有序控制会议终端发言的方法，根据会议终端输入的音频数据，由MCU对会议终端的发言权限进行控制，相对于相关技术中的方案可以更快速更精准地实时获取到会议终端的发言请求，并且无需会议终端配合，有效地避免了会议终端与MCU之间的互通性问题。

本发明其他特征和相应的有益效果在说明书的后面部分进行阐述说明，且应当理解，至少部分有益效果从本发明说明书中的记载变的显而易见。

附图说明

图1为本发明实施例一的有序控制会议终端发言的方法流程图；

图2为本发明实施例二的相关技术中的视频会议终端的系统示意图；

图3为本发明实施例二的有序控制会议终端发言的MCU示意图；

图4为本发明实施例二的一种视频会议终端的系统示意图；

图5为本发明实施例二的另一种视频会议终端的系统示意图；

图6为本发明实施例三的一种基于MCU有序控制会议终端发言的方法的流程图；

图7为本发明实施例三的另一种基于MCU有序控制会议终端发言的方法的流程图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，下面通过具体实施方式结合附图对本发明实施例作进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

实施例一：

在相关技术中，现有两种模式下实现控制终端发言的方式可以归为两类，一是点名方式，由主席或会议管理员发起；二是申请发言方式，由会议终端发起。这两种方式都存在一定的不足，首先第一种方式，需要管理员或主席从所有与会终端中把需要发言终端找出来，特别是在超大容量会议的情况下，这就需要花费不少的时间，简单发言的情况下，可能管理员找到该终端时发言都已经结束了。第二种方式则必须要求与会人员具备一定的会议终端操作能力，且该会议终端必须具备这种与MCU对接的申请发言功能，需要终端与MCU的信令互通，这就存在了不同厂家不同型号终端与MCU无法互通的风险；为了解决上述问题，本发明实施例中通过对输入的音频数据进行检测或识别，在MCU侧有序控制会议终端的发言权，无需会议终端干预；如图1所示，图1为本发明实施例提供的有序控制会议终端发言的方法的流程图，该有序控制会议终端发言的方法包括：

S101、接收接入MCU的会议终端输入的音频数据。

在本发明实施例中，会议终端接入MCU，进而MCU接收会议终端实时输入的音频数据，该音频数据可以是通过会议终端的麦克风采集的任意音频数据；其中会议终端包括发言会议终端和闭音会议终端，发言会议终端指的是该会议终端具体发言权限，使得MCU对发言会议终端的音频数据进行混音，其他会议终端能听到该会议终端的发言内容；闭音会议终端指的是该会议终端不具备发言权限，会议终端是闭音的，MUC不会对该闭音会议终端输入的音频数据进行混音处理，其他会议终端不会听到该闭音会议终端的发言内容。

S102、根据音频数据确定对应会议终端是否有发言需求。

值得注意的是，本发明实施例中根据音频数据实时确定对应会议终端是否有发言需求，其中根据音频数据所对应的会议终端的不同，会议终端是否有发言需求的确定方式也不同。

当接收所有闭音会议终端输入的音频数据时，判断音频数据是否包括有效活动音，如是，有效活动音所对应的闭音会议终端有发言需求。其中有效活动音指的是闭音会议终端的发言人声，例如音频数据1为会议终端1输入的“对于**观点，我认为…..”，音频数据2为会议终端2输入的环境声音(如手机响铃声)，则音频数据1为有效活动音；较优的，本实施例中的有效活动音指的闭音会议终端的发言人声中的发言内容关于会议主题的音频数据，则接受所有闭音会议终端输入的音频数据时，判断音频数据是否为有效的发言人声，如是，进一步对该音频数据进行识别，确定该音频数据的发言内容，当发言内容与会议内容相关时，确定该音频数据为有效活动音，例如识别得到音频数据1为“对于**观点，我认为…..”，音频数据3为会议终端3输入的“不好意思，借过一下”，对比音频数据1，确定音频数据1为有效活动音，确保会议终端1是真正的发言；可以理解的是，有效活动音可以包括一个，也可以包括多个。

当接收所有发言会议终端输入的音频数据时，对音频数据进行语音识别，判断音频数据是否包括要求闭音会议终端发言的关键字；如是，关键字所对应闭音会议终端有发言需求。例如接收到发言会议终端1输入的音频数据1，并识别出音频数据1中包括“请编号7的会议终端发言”的关键字，且该编号7的会议终端当前处于闭音状态，则确定该编号7的会议终端有发言需求。

S103、当会议终端有发言需求时，对会议终端的发言权限进行控制。

在本实施例中，当闭音会议终端有发言需求时，MCU对该闭音会议终端的发言权限进行控制；当根据闭音会议终端的有效活动音确定闭音会议终端有发言需求时，MCU将该闭音会议终端加入申请发言列表，进一步地，当音频数据包括一个有效活动音时，此时只有一个有发言需求的闭音会议终端，则MCU打开该闭音会议终端的发言权限，闭音会议终端有发言权限，当音频数据包括至少两个有效活动音时，对应至少两个闭音会议终端，为了保证发言权限有序控制，此时将至少两个有效活动音所对应的所述闭音会议终端加入申请发言列表，该申请发言列表用于提醒会议管理员或主席哪些闭音会议终端申请发言，进而会议管理员或主席根据该申请发言列表仲裁是否给与该闭音会议终端发言权限，其中申请发言列表存储在MCU中，会议管理员或主席从MCU的申请发言列表选择闭音会议终端，给与发言权限；在一些实施例中申请发言列表也可以存储在第三方装置中，例如控制台中，会议管理员或主席在控制台从申请发言列表中选中该闭音议终端发言，即给予发言权限。即在本发明实施例中，无需闭音会议终端发起申请发言，有效地避免了终端与MCU之间的互通性问题，MCU根据音频数据智能将闭音会议终端加入申请发言列表，为闭音会议终端发起申请发言请求。

需要说明的是，由于有效活动音可能包括多个，则申请发言列表中的有发言需求的闭音会议终端存在多个，为了便于主席或会议管理员从申请发言列表中高效的仲裁，MCU还可以将闭音会议终端的标签添加到申请发言列表，其中该闭音会议终端的标签可以是有效活动音对应的确定时间，例如在t1时刻确定闭音会议终端1的音频数据存在有效活动音，在t2时刻确定闭音会议终端2的音频数据存在有效活动音，则在申请发言列表中包括“闭音会议终端1，t1”、“闭音会议终端2，t2”，在一些实施例中，闭音会议终端的标签还可以是该闭音闭音会议终端所对应用户的身份。

在本发明实施例中，当根据发言会议终端的关键字确定闭音会议终端有发言需求时，MCU根据关键字中的闭音会议终端身份信息从与会列表中确定闭音会议终端，其中闭音会议终端身份信息可以是该闭音会议终端自身的身份信息，例如会议终端编号等，也可以是该闭音会议终端所对应的用户的身份信息，例如用户的名称等，此时MCU存储有用户名称与闭音会议终端的对应关系；可以理解的是，当发言会议终端的关键字较为准确，则可以从与会终端中确定至少一个闭音会议终端，当确定闭音会议终端包括一个时，闭音会议终端有发言权限；即MCU可以打开关键字所对应的一个闭音会议终端的发言权限，无需会议管理员或主席授权仲裁。

当关键字对应的闭音会议终端包括至少两个时，将至少两个闭音会议终端加入申请发言列表，以便于会议管理员或主席对闭音会议终端的发言权限进行控制；当未能精确到某个闭音会议终端，且确定出多个闭音会议终端时，例如语音识别出发言会议终端1的音频数据包括“请会议终端3发言”的关键字1，发言会议终端2的音频数据包括“请会议终端6发言”的关键字2，根据关键字中的闭音会议终端身份信息确定出两个闭音会议终端(会议终端3和会议终端6)；又例如语音识别出发言会议终端1的音频数据包括“请张三发言”，而与会人员中包括两个“张三”用户，根据关键字中的闭音会议终端身份信息确定出多个闭音会议终端，将该多个闭音会议终端增加的申请发言列表中，交由主席或会议管理员进行仲裁，确保了发言权限给予的准确性。

在一些实施例中，当语音识别出所有发言会议终端中只有一个发言会议终端的音频数据包括要求闭音会议终端发言的关键字，其该关键字中包括依次包括要求第一、第二闭音会议终端发言的指令性信息，则MCU确定出该两个闭音会议终端时，MCU可以先打开第一闭音会议终端的发言权限，在第一闭音会议终端发言结束后，再打开第二闭音会议终端的发言权限。

在一些实施例中，当根据闭音会议终端的音频数据中的有效活动音，将第一组闭音会议终端加入申请发言列表，同时根据发言会议终端的音频数据中的包括要求闭音会议终端发言的关键字，将第二组闭音会议终端加入申请发言列表，此时当第一组闭音会议终端与第二组闭音会议终端不同时，在申请发言列表中，第二组闭音会议终端相对于第一组闭音会议终端位置靠前，便于主席或会议管理员优先为第二组闭音会议终端仲裁发言权限。

在一些实施例中，当接收所有发言会议终端输入的音频数据，该关键字还可以根据实际需求进行灵活调整，例如当发言会议终端同时存在多个发言时，判断音频数据是否包括要求发言会议终端闭音的关键字，如是，MCU关闭发言会议终端的发言权限。

本发明实施例提供了一种有序控制会议终端发言的方法，接收接入MCU的闭音会议终端输入的音频数据；检测到音频数据包括有效活动音时，将该闭音会议终端加入申请发言列表，由会议管理员或主席决定是否打开该闭音会议终端的发言权限；或接收所有发言会议终端的音频数据，通过语音识别确定音频数据中包括要求闭音会议终端发言的关键字，且精确确定出一个闭音会议终端时，直接打开该闭音会议终端的发言权限；当确定出至少两个闭音会议终端时，将该至少两个闭音会议终端加入申请发言列表；采用本发明实施例提供的有序控制会议终端发言的方法，相对于相关技术中的方案可以更快速更精准地实时获取到会议终端的发言请求，并且无需会议终端配合，有效地避免了会议终端与MCU之间的互通性问题。

实施例二：

如图2所示，图2为相关技术中的视频会议终端的系统示意图，包括会议终端，MCU，主席或会议管理员；MCU包括音频输入模块，接收接入MCU的会议终端输入的音频数据，发言权限控制模块确定哪些会议终端是闭音，即不参加混音处理；确定哪些会议终端具备发言权限可加入混音，通过消息通知混音模块；混音模块接收发言权限控制模块的指令，仅允许具备发言权限的会议终端的音频数据参与混音，并输出混音后的音频数据。音频输出模块将混音后的音频数据分发给入会的所有会议终端。当会议终端发起发言申请，通过消息发送给MCU；发言权限控制模块接收会议终端的发言申请，加入申请发言列表；由主席或会议管理员仲裁是否给予发言权限，反馈回发言权限控制模块；发言权限控制模块允许下发给会场终端发言权限，进而通过消息控制混音模块允许该会场的音频数据进入混音。

如图3所示，本发明实施例提供一种有序控制会议终端发言的MCU；如图3所示，该MCU至少包括：

音频输入模块301，用于接收接入MCU的会议终端输入的音频数据；

音频处理模块302，用于根据音频数据确定对应会议终端是否有发言需求；

发言权限控制模块303，用于当会议终端有发言需求时，对会议终端的发言权限进行控制。

在本发明实施例中，MCU中音频处理模块302包括音频检测模块3021；音频输入模块301，用于所有闭音会议终端输入的音频数据；音频检测模块3021，用于检测音频数据是否包括有效活动音，当包括有效活动音，通知发言权限控制模块303；发言权限控制模块303，将有效活动音所对应的闭音会议终端加入申请发言列表，以便于会议管理员或主席对闭音会议终端的发言权限进行控制。在一些实施例中，当所述音频数据包括一个有效活动音时，发言权限控制模块303控制所述有效活动音所述对应的闭音会议终端有发言权限；当所述音频数据包括至少两个有效活动音时，发言权限控制模块303将所述至少两个有效活动音所对应的所述闭音会议终端加入申请发言列表，以便于会议管理员或主席对所述闭音会议终端的发言权限进行控制。如图4所示，图4为本发明实施例中的视频会议终端的一种系统示意图，MCU还包括混音模块304、音频输出模块305；由主席或会议管理员仲裁根据第三方装置的申请发言列表是否给予发言权限，反馈回发言权限控制模块303；发言权限控制模块303允许下发给闭音会议终端发言权限，进而通过消息控制混音模块304允许该会场的音频数据进入混音，最后音频输出模块305输出混音后的音频数据。

在本发明实施例中，音频处理模块302包括音频识别模块3022；音频输入模块301，用于所有发言会议终端输入的音频数据；音频识别模块3022，用于对音频数据进行语音识别，判断音频数据是否包括要求闭音会议终端的关键字，当包括关键字时，根据关键字中的闭音会议终端身份信息从与会列表中确定闭音会议终端，通知发言权限控制模块303；发言权限控制模块303，所述关键字对应闭音会议终端包括一个时，控制闭音会议终端的发言权限；所述关键字对应闭音会议终端包括至少两个时，将闭音会议终端加入申请发言列表，以便于会议管理员或主席对闭音会议终端的发言权限进行控制；如图5所示，图5为本发明实施例中的视频会议终端的另一种系统示意图。

本发明实施例提供一种有序控制会议终端发言的MCU，相对于相关技术中的MCU，增加了音频检测模块，检测音频输入模块接收到的闭音会议终端音频数据，检测到有发言需求的会议终端后通过消息通知发言权限控制模块，发言权限控制模块更新申请发言列表；或相对于相关技术中的MCU，增加音频识别模块，对当前发言会议终端的音频数据进行识别，识别出当前会议是否要求其他闭音终端发言，进而识别结果发给发言权限控制模块，并且无需会议终端配合，智能的为会议终端申请发言或为会议终端打开发言权限，有效地避免了会议终端与MCU之间的互通性问题。

实施例三：

为了便于理解，本实施例以一个较为具体的例子，对有序控制会议终端发言的方法和MCU进行说明，如图6所示，图6为一种基于MCU有序控制会议终端发言的方法的流程图，包括：

S601、音频检测模块接收音频输入模块发送的所有闭音终端采集的音频数据。

S602、音频检测模块对音频输入模块发送的音频数据进行有效活动音检测，确定闭音会议终端存在真正的发言。

在本发明实施例中，首先判断音频数据是否为会议人员的声音，如是，继续判断该音频数据对应的内容是否与会议主题相关，例如音频数据为“对于**观点，我认为…..”，则该音频数据为有效活动音，进而确定该有效活动音所对应的闭音会议终端存在真正的发言。

S603、当检测到有效活动音，向发言权限控制模块输出闭音会议终端申请发言的消息。

S604、发言权限控制模块将该闭音会议终端增加到申请发言列表。

在本发明实施例中，该申请发言列表用于提醒会议管理员或主席哪些闭音会议终端申请发言，进而会议管理员或主席根据该申请发言列表仲裁是否给与该闭音会议终端发言权限，其中申请发言列表也可以存储在第三方装置中，例如控制台中，会议管理员或主席在控制台从申请发言列表中选中该议终端发言，即给予发言权限，反馈给发言权限控制模块，发言权限控制模块根据反馈的信息确定为哪个闭音会议终端打开发言权限，并通知混音模块，接收发言权限控制模块的指令，仅允许具备发言权限的闭音会议终端的音频数据参与混音，并输出混音后的音频数据，使得所有会议终端能听到该闭音会议终端的发言。

如图7所示，图7为另一种基于MCU有序控制会议终端发言的方法的流程图，包括

S701、音频识别模块接收音频输入模块发送的所有发言终端采集的音频数据。

S702、音频识别模块对音频数据进行识别，判断音频数据是否包括要求闭音会议终端的关键字，如是，转S703，如否，转S702。

在本发明实施例中，关键字包括要求闭音会议终端发言的指令性信息，例如“请某某会议终端发言”。

S703、音频识别模块识别出闭音会议终端名称，并根据该名称在与会终端列表中查找，若精确匹配到1个闭音会议终端则进入S704，若名称不够精确匹配到了多个会场则进入S705。

音频识别模块根据关键字识别闭音会议终端名称“某某会议终端”，并在与会终端列表中查找，该与会终端列表包括所有参加会议的终端。

S704、精确匹配到了闭音会议终端名称，则产生打开该闭音会议终端发言权限的请求给发言权限控制模块。

发言权限控制模块接收到请求后，直接打开该闭音会议终端的发言权限，确定闭音会议终端具备发言权限可加入混音。

S705、若未能精准匹配到闭音会议终端，且有多个的情况下，匹配到的几个闭音会议终端提交申请发言请求给发言权限控制模块，交由主席或会议管理员进行仲裁，确保了发言权限给予的准确性。

本发明实施例中检测音频输入模块接收到的闭音会议终端音频数据，检测到有发言需求的会议终端后通过消息通知发言权限控制模块，发言权限控制模块更新申请发言列表，交由主席或会议管理员进行仲裁，确保了发言权限给予的准确性；或音频识别模块，对当前发言会议终端的音频数据进行识别，识别出当前会议是否要求其他闭音终端发言，进而识别结果发给发言权限控制模块，并且无需会议终端配合，智能的为会议终端申请发言或为会议终端打开发言取消，有效地避免了会议终端与MCU之间的互通性问题。

实施例四

本发明实施例还提供了一种存储介质，该存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、计算机程序模块或其他数据)的任何方法或技术中实施的易失性或非易失性、可移除或不可移除的介质。存储介质包括但不限于RAM(Random Access Memory，随机存取存储器),ROM(Read-Only Memory，只读存储器),EEPROM(Electrically Erasable Programmable read only memory，带电可擦可编程只读存储器)、闪存或其他存储器技术、CD-ROM(Compact Disc Read-Only Memory，光盘只读存储器)，数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。

本发明实施例中的存储介质可用于存储一个或者多个计算机程序，其存储的一个或者多个计算机程序可被处理器执行，以实现上述有序控制会议终端发言的方法的至少一个步骤。

可见，本领域的技术人员应该明白，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件(可以用计算装置可执行的计算机程序代码来实现)、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。

此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、计算机程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。所以，本发明不限制于任何特定的硬件和软件结合。

以上内容是结合具体的实施方式对本发明实施例所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。