视联网会议处理方法、装置、电子设备及存储介质与流程

本申请涉及信息处理
技术领域：
，特别是涉及视联网会议处理方法、装置、电子设备及存储介质。
背景技术：
：视联网是网络发展的重要里程碑，其能够实现目前互联网无法实现的全网高清视频实时传输，是以太网的高级形态，能够实现高清视频实时传输，将众多互联网应用推向高清视频化，高清面对面。目前，由于视联网具有传输速度快、高清视频化，可以支持大量视频在线传输的优势，越来越多的客户使用视联网进行视频会议。目前利用视联网进行视频会议时，都会设置主席方，由主席方进行视频会议的发言人管理，当参会方想发言时，需要通过专门的遥控器进行发言申请，主席方才能将终端切换为发言人。这样，在遥控器遥控信号不好时，常常使得参会方花费很长的时间进行发言申请，使得发言过程十分繁琐。而视联网会议一般是多地区的远程协作会议，上述十分繁琐的申请发言过程降低了参会方之间的互动效率，在视联网会议中往往产生多个静默的会议过程，降低了视联网会议的会议效果。技术实现要素：本申请提供了一种视联网会议处理方法、装置、电子设备及存储介质以解决上述存在的技术问题。第一方面，本申请实施例提供一种视联网会议处理方法，所述方法应用于视联网终端，所述视联网终端与视联网会议管理系统通信连接，所述视联网会议管理系统与帕米尔客户端通信连接，所述方法包括：在所述视联网终端当前参与的视联网会议中，接收所述视联网会议管理系统发送的第一会议模式信令；所述第一会议模式信令由所述帕米尔客户端在检测到所述视联网会议的预设会议模式被开启时生成，并发送给所述视联网会议管理系统；响应于所述第一会议模式信令，从预设距离范围内的多个语音中，识别所述视联网终端对应的参会用户的语音；在识别到所述参会用户的语音时，生成发言指令；将所述发言指令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述发言指令发送给所述帕米尔客户端，所述帕米尔客户端用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。可选地，所述视联网会议管理系统还与参与所述视联网会议的多个会议终端通信连接，所述视联网终端及所述多个会议终端与视联网服务器通信连接；在识别到所述参会用户的语音，生成发言指令的同时，所述方法还包括：将识别到的所述参会用户的语音录制为第一音频数据，并将所述第一音频数据进行本地存储；在将所述发言指令发送给所述视联网会议管理系统之后，所述方法还包括：接收所述视联网会议管理系统发送的切换发言回复信令；其中，所述切换发言回复信令由所述帕米尔客户端在将所述视联网终端切换为所述视联网会议中的发言方时生成，并发送给所述视联网会议管理系统；响应于所述切换发言回复信令，将本地存储的所述第一音频数据发送给所述视联网服务器，所述视联网服务器用于将所述第一音频数据分别发送给所述多个会议终端。可选地，将所述发言指令发送给所述视联网会议管理系统之后，所述方法还包括：接收所述视联网会议管理系统发送的第二会议模式信令，所述第二会议模式信令由所述帕米尔客户端在检测到所述预设会议模式被关闭时生成；响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。可选地，响应于所述切换发言回复信令，将本地存储的所述第一音频数据发送给所述视联网服务器，包括：响应于所述切换发言回复信令，从本地存储中获取所述第一音频数据，并将所述参会用户的当前语音录制为第二音频数据；将所述第一音频数据与所述第二音频数据合成为混合音频数据；将所述混合音频数据发送给所述视联网服务器，所述视联网服务器用于将所述混合音频数据分别发送给所述多个会议终端。第二方面，本申请实施例提供另一种视联网会议处理方法，所述方法应用于帕米尔客户端，所述帕米尔客户端与视联网会议管理系统通信连接，所述视联网会议管理系统与视联网终端通信连接，所述方法包括：在当前进行的视联网会议中，检测到所述视联网会议的预设会议模式被开启时，生成第一会议模式信令；将所述第一会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述第一会议模式信令发送给所述视联网终端；所述视联网终端用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音；接收所述视联网会议管理系统发送的发言指令；其中，所述发言指令由所述视联网终端在识别到所述参会用户的语音时生成，并发送给所述视联网会议管理系统；响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。可选地，所述视联网会议管理系统还与参与所述视联网会议的多个会议终端通信连接；响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方，包括：在确定所述视联网终端不为所述视联网会议中当前发言的终端时，将所述视联网终端的标识添加到预设发言终端列表中；所述预设发言终端列表中预先存储有至少一个会议终端标识，所述至少一个会议终端标识为所述多个会议终端中请求发言的会议终端的标识，且所述至少一个会议终端标识按照请求发言的时间先后顺序排列；按照所述请求发言的时间先后顺序，在依次将所述至少一个会议终端标识对应的会议终端切换为所述视联网会议中的发言方后，将所述视联网终端切换为所述视联网会议中的发言方。可选地，将所述视联网终端切换为所述视联网会议中的发言方之后，所述方法还包括：在检测到所述视联网会议的预设会议模式被关闭时，生成第二会议模式信令，并将所述预设发言终端列表清空；将所述第二会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述第二会议模式信令发送给所述视联网终端，所述视联网终端用于响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。第三方面，本申请实施例提供一种视联网会议处理装置，以保证上述第一方面所述的视联网会议处理方法的实现，所述装置应用于视联网终端，所述视联网终端与视联网会议管理系统通信连接，所述视联网会议管理系统与帕米尔客户端通信连接，所述装置包括：第一会议模式信令接收模块，用于在所述视联网终端当前参与的视联网会议中，接收所述视联网会议管理系统发送的第一会议模式信令；所述第一会议模式信令由所述帕米尔客户端在检测到所述视联网会议的预设会议模式被开启时生成，并发送给所述视联网会议管理系统；语音识别模块，用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音；发言指令生成模块，用于在识别到所述参会用户的语音时，生成发言指令；发言指令发送模块，用于将所述发言指令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述发言指令发送给所述帕米尔客户端，所述帕米尔客户端用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。第四方面，本申请实施例提供另一种视联网会议处理装置，以保证上述第二方面所述的视联网会议处理方法的实现所述装置应用于帕米尔客户端，所述帕米尔客户端与视联网会议管理系统通信连接，所述视联网会议管理系统与视联网终端通信连接，所述装置包括：第一会议模式信令生成模块，用于在当前进行的视联网会议中，检测到所述视联网会议的预设会议模式被开启时，生成第一会议模式信令；第一会议模式信令发送模块，用于将所述第一会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述第一会议模式信令发送给所述视联网终端；所述视联网终端用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音；发言指令接收模块，用于接收所述视联网会议管理系统发送的发言指令；其中，所述发言指令由所述视联网终端在识别到所述参会用户的语音时生成，并发送给所述视联网会议管理系统；发言方切换模块，用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。第五方面，本申请实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器被配置为：执行第一方面或第二方面所述的视联网会议处理方法。第六方面，本申请实施例提一种非临时性计算机可读存储介质，当所述存储介质中的指令由服务器端的处理器执行时，使得服务器能够执行第一方面或第二方面所述的视联网会议处理方法。与现有技术相比，本申请实施例包括以下优点：本申请实施例，在视联网会议的预设会议模式被开启时，从预设距离范围内的多个语音中，识别视联网终端对应的参会用户的语音，在识别到参会用户的语音时，自动生成发言指令，并将该发言指令发送给帕米尔客户端，以使帕米尔客户端将视联网终端切换为视联网会议中的发言方。由于视联网终端可以在预设会议模式中，识别到参会用户的语音时自动生成发言指令，并将发言指令发送给视联网会议管理系统，使得参会方在视联网会议中直接说话便可以被切换为会议中的发言方，减少了会议操作过程，大大减少了视联网会议中的静默过程，提高了参会终端的效率。附图说明图1是本申请的一种视联网的组网示意图；图2是本申请的一种节点服务器的硬件结构示意图；图3是本申请的一种接入交换机的硬件结构示意图；图4是本申请的一种以太网协转网关的硬件结构示意图；图5是本申请实施例的一种视联网会议处理方法的通信环境图；图6是本申请实施例的一种视联网会议处理方法的步骤流程图；图7是本申请实施例的另一种视联网会议处理方法的步骤流程图；图8是本申请实施例一个具体实例中该视联网会议处理方法的完整流程示意图；图9是本申请实施例的一种视联网会议处理装置的结构框图；图10是本申请实施例的另一种视联网会议处理装置的结构框图；图11是本申请实施例提供的一种电子设备的框架示意图。具体实施方式为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。在阐述本申请实施例之前，首先对本申请所述的视联网进行详细介绍。视联网是网络发展的重要里程碑，是一个实时网络，能够实现高清视频实时传输，将众多互联网应用推向高清视频化，高清面对面。视联网采用实时高清视频交换技术，可以在一个网络平台上将所需的服务，如高清视频会议、视频监控、智能化监控分析、应急指挥、数字广播电视、延时电视、网络教学、现场直播、vod点播、电视邮件、个性录制(pvr)、内网(自办)频道、智能化视频播控、信息发布等数十种视频、语音、图片、文字、通讯、数据等服务全部整合在一个系统平台，通过电视或电脑实现高清品质视频播放。为使本领域技术人员更好地理解本申请实施例，以下对视联网进行介绍：视联网所应用的部分技术如下所述：网络技术(networktechnology)视联网的网络技术创新改良了传统以太网(ethernet)，以面对网络上潜在的巨大第一视频流量。不同于单纯的网络分组包交换(packetswitching)或网络电路交换(circuitswitching)，视联网技术采用packetswitching满足streaming需求。视联网技术具备分组交换的灵活、简单和低价，同时具备电路交换的品质和安全保证，实现了全网交换式虚拟电路，以及数据格式的无缝连接。交换技术(switchingtechnology)视联网采用以太网的异步和包交换两个优点，在全兼容的前提下消除了以太网缺陷，具备全网端到端无缝连接，直通用户终端，直接承载ip数据包。用户数据在全网范围内不需任何格式转换。视联网是以太网的更高级形态，是一个实时交换平台，能够实现目前互联网无法实现的全网大规模高清视频实时传输，将众多网络视频应用推向高清化、统一化。服务器技术(servertechnology)视联网和统一视频平台上的服务器技术不同于传统意义上的服务器，它的流媒体传输是建立在面向连接的基础上，其数据处理能力与流量、通讯时间无关，单个网络层就能够包含信令及数据传输。对于语音和视频业务来说，视联网和统一视频平台流媒体处理的复杂度比数据处理简单许多，效率比传统服务器大大提高了百倍以上。储存器技术(storagetechnology)统一视频平台的超高速储存器技术为了适应超大容量和超大流量的媒体内容而采用了最先进的实时操作系统，将服务器指令中的节目信息映射到具体的硬盘空间，媒体内容不再经过服务器，瞬间直接送达到用户终端，用户等待一般时间小于0.2秒。最优化的扇区分布大大减少了硬盘磁头寻道的机械运动，资源消耗仅占同等级ip互联网的20％，但产生大于传统硬盘阵列3倍的并发流量，综合效率提升10倍以上。网络安全技术(networksecuritytechnology)视联网的结构性设计通过每次服务单独许可制、设备与用户数据完全隔离等方式从结构上彻底根除了困扰互联网的网络安全问题，一般不需要杀毒程序、防火墙，杜绝了黑客与病毒的攻击，为用户提供结构性的无忧安全网络。服务创新技术(serviceinnovationtechnology)统一视频平台将业务与传输融合在一起，不论是单个用户、私网用户还是一个网络的总合，都不过是一次自动连接。用户终端、机顶盒或pc直接连到统一视频平台，获得丰富多彩的各种形态的多媒体视频服务。统一视频平台采用“菜谱式”配表模式来替代传统的复杂应用编程，可以使用非常少的代码即可实现复杂的应用，实现“无限量”的新业务创新。视联网的组网如下所述：视联网是一种集中控制的网络结构，该网络可以是树型网、星型网、环状网等等类型，但在此基础上网络中需要有集中控制节点来控制整个网络。如图1所示，视联网分为接入网和城域网两部分。接入网部分的设备主要可以分为3类：节点服务器，接入交换机，终端(包括各种机顶盒、编码板、存储器等)。节点服务器与接入交换机相连，接入交换机可以与多个终端相连，并可以连接以太网。其中，节点服务器是接入网中起集中控制功能的节点，可控制接入交换机和终端。节点服务器可直接与接入交换机相连，也可以直接与终端相连。类似的，城域网部分的设备也可以分为3类：城域服务器，节点交换机，节点服务器。城域服务器与节点交换机相连，节点交换机可以与多个节点服务器相连。其中，节点服务器即为接入网部分的节点服务器，即节点服务器既属于接入网部分，又属于城域网部分。城域服务器是城域网中起集中控制功能的节点，可控制节点交换机和节点服务器。城域服务器可直接连接节点交换机，也可直接连接节点服务器。由此可见，整个视联网络是一种分层集中控制的网络结构，而节点服务器和城域服务器下控制的网络可以是树型、星型、环状等各种结构。形象地称，接入网部分可以组成统一视频平台(虚线圈中部分)，多个统一视频平台可以组成视联网；每个统一视频平台可以通过城域以及广域视联网互联互通。视联网设备分类1.1本申请实施例的视联网中的设备主要可以分为3类：服务器，交换机(包括以太网协转网关)，终端(包括各种机顶盒，编码板，存储器等)。视联网整体上可以分为城域网(或者国家网、全球网等)和接入网。1.2其中接入网部分的设备主要可以分为3类：节点服务器，接入交换机(包括以太网协转网关)，终端(包括各种机顶盒，编码板，存储器等)。各接入网设备的具体硬件结构为：节点服务器：如图2所示，主要包括网络接口模块201、交换引擎模块202、cpu模块203、磁盘阵列模块204；其中，网络接口模块201，cpu模块203、磁盘阵列模块204进来的包均进入交换引擎模块202；交换引擎模块202对进来的包进行查地址表205的操作，从而获得包的导向信息；并根据包的导向信息把该包存入对应的包缓存器206的队列；如果包缓存器206的队列接近满，则丢弃；交换引擎模块202轮询所有包缓存器队列，如果满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零。磁盘阵列模块204主要实现对硬盘的控制，包括对硬盘的初始化、读写等操作；cpu模块203主要负责与接入交换机、终端(图中未示出)之间的协议处理，对地址表205(包括下行协议包地址表、上行协议包地址表、数据包地址表)的配置，以及，对磁盘阵列模块204的配置。接入交换机：如图3所示，主要包括网络接口模块(下行网络接口模块301、上行网络接口模块302)、交换引擎模块303和cpu模块304；其中，下行网络接口模块301进来的包(上行数据)进入包检测模块305；包检测模块305检测包的目地地址(da)、源地址(sa)、数据包类型及包长度是否符合要求，如果符合，则分配相应的流标识符(stream-id)，并进入交换引擎模块303，否则丢弃；上行网络接口模块302进来的包(下行数据)进入交换引擎模块303；cpu模块304进来的数据包进入交换引擎模块303；交换引擎模块303对进来的包进行查地址表306的操作，从而获得包的导向信息；如果进入交换引擎模块303的包是下行网络接口往上行网络接口去的，则结合流标识符(stream-id)把该包存入对应的包缓存器307的队列；如果该包缓存器307的队列接近满，则丢弃；如果进入交换引擎模块303的包不是下行网络接口往上行网络接口去的，则根据包的导向信息，把该数据包存入对应的包缓存器307的队列；如果该包缓存器307的队列接近满，则丢弃。交换引擎模块303轮询所有包缓存器队列，可以包括两种情形：如果该队列是下行网络接口往上行网络接口去的，则满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零；3)获得码率控制模块产生的令牌；如果该队列不是下行网络接口往上行网络接口去的，则满足以下条件进行转发：1)该端口发送缓存未满；2)该队列包计数器大于零。码率控制模块308是由cpu模块304来配置的，在可编程的间隔内对所有下行网络接口往上行网络接口去的包缓存器队列产生令牌，用以控制上行转发的码率。cpu模块304主要负责与节点服务器之间的协议处理，对地址表306的配置，以及，对码率控制模块308的配置。以太网协转网关：如图4所示，主要包括网络接口模块(下行网络接口模块401、上行网络接口模块402)、交换引擎模块403、cpu模块404、包检测模块405、码率控制模块408、地址表406、包缓存器407和mac添加模块409、mac删除模块410。其中，下行网络接口模块401进来的数据包进入包检测模块405；包检测模块405检测数据包的以太网macda、以太网macsa、以太网lengthorframetype、视联网目地地址da、视联网源地址sa、视联网数据包类型及包长度是否符合要求，如果符合则分配相应的流标识符(stream-id)；然后，由mac删除模块410减去macda、macsa、lengthorframetype(2byte)，并进入相应的接收缓存，否则丢弃；下行网络接口模块401检测该端口的发送缓存，如果有包则根据包的视联网目地地址da获知对应的终端的以太网macda，添加终端的以太网macda、以太网协转网关的macsa、以太网lengthorframetype，并发送。以太网协转网关中其他模块的功能与接入交换机类似。终端：主要包括网络接口模块、业务处理模块和cpu模块；例如，机顶盒主要包括网络接口模块、视音频编解码引擎模块、cpu模块；编码板主要包括网络接口模块、视音频编码引擎模块、cpu模块；存储器主要包括网络接口模块、cpu模块和磁盘阵列模块。1.3城域网部分的设备主要可以分为2类：节点服务器，节点交换机，城域服务器。其中，节点交换机主要包括网络接口模块、交换引擎模块和cpu模块；城域服务器主要包括网络接口模块、交换引擎模块和cpu模块构成。2、视联网数据包定义2.1接入网数据包定义接入网的数据包主要包括以下几部分：目的地址(da)、源地址(sa)、保留字节、payload(pdu)、crc。如下表所示，接入网的数据包主要包括以下几部分：dasareservedpayloadcrc其中：目的地址(da)由8个字节(byte)组成，第一个字节表示数据包的类型(例如各种协议包、组播数据包、单播数据包等)，最多有256种可能，第二字节到第六字节为城域网地址，第七、第八字节为接入网地址；源地址(sa)也是由8个字节(byte)组成，定义与目的地址(da)相同；保留字节由2个字节组成；payload部分根据不同的数据报的类型有不同的长度，如果是各种协议包的话是64个字节，如果是单组播数据包话是32+1024＝1056个字节，当然并不仅仅限于以上2种；crc有4个字节组成，其计算方法遵循标准的以太网crc算法。2.2城域网数据包定义城域网的拓扑是图型，两个设备之间可能有2种、甚至2种以上的连接，即节点交换机和节点服务器、节点交换机和节点交换机、节点交换机和节点服务器之间都可能超过2种连接。但是，城域网设备的城域网地址却是唯一的，为了精确描述城域网设备之间的连接关系，在本申请实施例中引入参数：标签，来唯一描述一个城域网设备。本说明书中标签的定义和mpls(multi-protocollabelswitch，多协议标签交换)的标签的定义类似，假设设备a和设备b之间有两个连接，那么数据包从设备a到设备b就有2个标签，数据包从设备b到设备a也有2个标签。标签分入标签、出标签，假设数据包进入设备a的标签(入标签)是0x0000，这个数据包离开设备a时的标签(出标签)可能就变成了0x0001。城域网的入网流程是集中控制下的入网过程，也就意味着城域网的地址分配、标签分配都是由城域服务器主导的，节点交换机、节点服务器都是被动的执行而已，这一点与mpls的标签分配是不同的，mpls的标签分配是交换机、服务器互相协商的结果。如下表所示，城域网的数据包主要包括以下几部分：dasareserved标签payloadcrc即目的地址(da)、源地址(sa)、保留字节(reserved)、标签、payload(pdu)、crc。其中，标签的格式可以参考如下定义：标签是32bit，其中高16bit保留，只用低16bit，它的位置是在数据包的保留字节和payload之间。结合上述视联网的特性，提出本申请实施例的核心构思之一在于，在视联网会议的预设会议模式被开启时，从预设距离范围内的多个语音中，识别视联网终端对应的参会用户的语音，在识别到参会用户的语音时，自动生成发言指令，并将该发言指令发送给帕米尔客户端，以使帕米尔客户端将视联网终端切换为视联网会议中的发言方。参照图5，示出了本申请的一种视联网会议处理方法实施例的通信环境图，如图5所示，包括视联网会议管理系统、帕米尔客户端，其中，视联网会议管理系统与帕米尔客户端通信连接，视联网会议管理系统与视联网终端通信连接，其中，视联网会议管理系统还可以与多个会议终端通信连接，视联网终端与多个会议终端均为视联网会议的参会方。帕米尔客户端是指在视联网中进行视联网会议的会议控制的客户端，如设置主席方角色、切换参会方、控制会议进度、会议模式等。视联网会议管理系统是指在视联网中进行视联网会议管理的系统，如，组建视联网会议、对要进行的视联网会议进行预约审批等。其中，视联网终端可以是视联网中开发的极光系列终端或启明系列终端，会议终端也可以是与视联网终端同型号的终端，也可以是其他智能设备，如智能手机、电脑等。参照图6所示，示出了本申请的一种视联网会议处理方法实施例的步骤流程图，视联网会议处理方法可以应用于视联网终端，如图6所示，具体可以包括如下步骤：步骤s601，在所述视联网终端当前参与的视联网会议中，接收所述视联网会议管理系统发送的第一会议模式信令。其中，所述第一会议模式信令由所述帕米尔客户端在检测到所述视联网会议的预设会议模式被开启时生成，并发送给所述视联网会议管理系统。其中，视联网终端与视联网会议管理系统可以通过视联网协议进行通信，以接收视联网会议管理系统在视联网中发送的第一会议模式信令。实际中，为了规范管理视联网会议，使得视联网会议有序进行，视联网会议可以包括：自由发言模式、主席讲话模式、会议学习模式等，其中，自由发言模式是指参会各方可以自由发言，以讨论或沟通会议中的各项工作；主席讲话模式是指参会各方不发言而主席发言，以便主席方可以安排和主持会议，会议学习模式是指参会各方均不发言，以学习会议上播放的教育视频。本申请实施例中，预设会议模式则可以是指视联网会议中的自由发言模式，在该会议模式下，参会各方虽然可以自由发言。具体实施时，帕米尔客户端上可以设置用于控制会议模式的功能按钮，当预设会议模式的功能按钮被置于开启状态时，则视联网会议进入自由发言模式，帕米尔客户端随即则生成第一会议模式信令，以通知参会各方视联网会议进入自由发言阶段。步骤s602，响应于所述第一会议模式信令，从预设距离范围内的多个语音中，识别所述视联网终端对应的参会用户的语音。实际中，视联网终端可以配置有现有的语音监听装置，响应于该第一会议模式信令可以是指视联网终端对该第一会议模式信令进行解析，读取出该第一会议模式信令中携带的有效数据，从而依据该有效数据，开启语音监听装置，以对预设距离范围内的多个语音进行识别，以识别出所述视联网终端对应的参会用户的语音。其中，视联网终端对应的参会用户可以是指当前使用该视联网终端进行参会的用户。具体地，预设距离范围是指以所述视联网终端为圆心，距离该视联网终端为预设距离的范围，例如，预设距离为1米，则视联网终端需要对距离该视联网终端在1米内所产生的多个语音进行识别，该多个语音可以是指参会用户所在的会场中其他用户发出的语音。实际中，距离视联网终端越近，则视联网终端监听到的语音的分贝数越大，如此，使用视联网终端进行参会的用户发出的语音的分贝数可以是最大的。因此，视联网终端可以采用现有的语音分贝识别技术，从多个语音中确定是否存在分贝大于预设值的语音，若存在，则表示视联网终端的参会用户发出了语音。出于对需要保密的视联网会议的需求，需要严格识别参会方的身份，因此，在一种可选的示例中，视联网终端可以利用现有的语音识别技术，从多个语音中识别出参会用户的语音，例如，可以在语音监听装置上配置语音识别系统，在该语音识别系统中预先存储参会用户的音频，并将多个语音输入该语音识别系统以验证每个语音是否与预先存储的参会用户的音频相匹配，若匹配，则表示识别到参会用户的语音；若不匹配，则表示未识别到参会用户的语音。步骤s603，在识别到所述参会用户的语音时，生成发言指令。实际中，对参会用户的语音进行识别的过程可以是持续性的过程，当参会用户未发出语音时，则不能识别到参会用户的语音；当处于预设会议模式的视联网会议正在进行过程中的任一时间段，识别到了该参会用户的语音，则随即生成发言指令。相比于现有技术中，参会用户要发言时，需要通过遥控器向视联网终端发出信号，视联网终端在接收到信号后再根据信号类型生成发言指令的方式，本申请实施例中的参会用户只要说话即可，而无需依赖遥控器，进而优化了用户体验，且避免了因遥控器的信号不稳定、遥控器设备故障等因素而造成的信号无法发送以致无法请求发言的问题。本实施例中，发言指令可以是符合视联网协议的指令，该发言指令中可以包括视联网终端的标识。步骤s604，将所述发言指令发送给所述视联网会议管理系统。其中，所述视联网会议管理系统用于将所述发言指令发送给所述帕米尔客户端，所述帕米尔客户端用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。实际中，该发言指令可以经由视联网会议管理系统发送至帕米尔客户端，以使帕米尔客户端根据该发言指令，将视联网终端切换为发言方。本申请实施例，由于视联网终端可以在预设会议模式中，识别到参会用户的语音时自动生成发言指令，并将发言指令发送给视联网会议管理系统，使得参会方在视联网会议中直接说话便可以被切换为会议中的发言方，减少了会议操作过程，大大减少了视联网会议中的静默过程，增大了参会终端的效率。结合上述实施例，在一种可选的示例中，参照图5所示，该视联网会议处理方法所应用的通信环境中还可以包括视联网服务器，所述视联网终端及所述多个会议终端与视联网服务器通信连接，其中，视联网服务器为视联网中的核心服务器，可以用于在多个终端中进行视联网数据的转发。具体地，在步骤s603中识别到所述参会用户的语音生成发言指令的同时，该步骤s603还可以包括以下步骤：步骤s6031，将识别到的所述参会用户的语音录制为第一音频数据，并将所述第一音频数据进行本地存储。由于本申请实施例中，参会用户只需要发出语音便可以请求切换为发言人，为了使得在视联网终端被切换为发言方后进行发言时，参与视联网会议的其他参会方可以获知参会用户在预设会议模式的过程中所发出的语音，避免参会用户发出的语音被遗漏，以保证会议信息的完整性。本可选示例中，可以在识别到参会用户的语音时，便将参会用户的语音录制为第一音频数据并本地存储，以便后期在参会用户成为发言方时，将该第一音频数据发送给其他参会方。相应地，在步骤s604中将所述发言指令发送给所述视联网会议管理系统之后，所述方法还可以包括以下步骤：步骤s605，接收所述视联网会议管理系统发送的切换发言回复信令。其中，所述切换发言回复信令由所述帕米尔客户端在将所述视联网终端切换为所述视联网会议中的发言方时生成，并发送给所述视联网会议管理系统。步骤s606，响应于所述切换发言回复信令，将本地存储的所述第一音频数据发送给所述视联网服务器，所述视联网服务器用于将所述第一音频数据分别发送给所述多个会议终端。接收到切换发言回复信令时，表明该视联网终端成为视联网会议当前的发言方。此时，视联网终端可以将之前录制的第一音频数据发送给视联网服务器，以使视联网服务器将第一音频数据发送给参加该视联网会议的各个会议终端。各个会议终端便可以播放该第一音频数据，以使其他参会人员能听到该视联网终端的参会用户在申请发言时所说的话。可选地，该步骤s606具体可以包括以下步骤：步骤s6061，响应于所述切换发言回复信令，从本地存储中获取所述第一音频数据，并将所述参会用户的当前语音录制为第二音频数据。实际中，在接收到切换发言回复信令时，参会用户成为发言人，可以在视联网会议中发表自己的意见。因此，在从本地存储中获取第一音频数据外，还可以将参会用户当前发出的语音进行录制，以得到第二音频数据。步骤s6062，将所述第一音频数据与所述第二音频数据合成为混合音频数据。其中，因第一音频数据和第二音频数据是两个时段录入的音频数据，具有时序性，因此，可以将第一音频数据与第二音频数据合成为一路音频数据，该一路音频数据即为混合音频数据，该混合音频数据可以基于时序性被分开解码和播放。步骤s6063，将所述混合音频数据发送给所述视联网服务器。其中，所述视联网服务器用于将所述混合音频数据分别发送给所述多个会议终端。在各会议终端接收到该混合音频数据时，可以播放该混合音频数据，以获知到视联网终端的参会用户在申请发言时发出的语音和当前发言时发出的语音。采用上述技术方案时，由于将参会用户申请发言时的语音进行了录制，避免了参会用户发出的语音被遗漏，以保证会议信息的完整性。结合上述实施例，在一种可选的示例中，在步骤s604中将所述发言指令发送给所述视联网会议管理系统之后，所述方法还可以包括以下步骤：步骤s607，接收所述视联网会议管理系统发送的第二会议模式信令。其中，所述第二会议模式信令由所述帕米尔客户端在检测到所述预设会议模式被关闭时生成。步骤s608，响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。当预设会议模式被关闭时，表示该视联网会议不需要参会方自由发言，这时，视联网终端在接收到该第二会议模式信令，可以对该第二会议模式信令进行解析，读取出该第二会议模式信令中携带的有效数据，从而依据该有效数据，将之前开启的语音监听装置进行关闭，以停止对参会用户的语音进行识别，以维护视联网会议的正常进行。参照图7所示，示出了本申请实施例的另一种视联网会议处理方法的步骤流程图，所述视联网会议处理方法具体可以用于帕米尔客户端中，具体地，该视联网会议处理方法的通信环境图可以参照图5所示，如图7所示，具体可以包括以下步骤：步骤s701，在当前进行的视联网会议中，检测到所述视联网会议的预设会议模式被开启时，生成第一会议模式信令。实际中，帕米尔客户端可以安装在终端设备上，如智能手机、电脑等，以便用户登录该帕米尔客户端进行会议操作。在该帕米尔客户端上可以设置用于控制会议模式的功能按钮，当预设会议模式的功能按钮被置于开启状态时，则视联网会议进入自由发言模式，帕米尔客户端随即则生成第一会议模式信令，以通知参会各方视联网会议进入自由发言阶段。步骤s702，将所述第一会议模式信令发送给所述视联网会议管理系统。其中，所述视联网会议管理系统用于将所述第一会议模式信令发送给所述视联网终端；所述视联网终端用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音。实际中，视联网会议管理系统除将该第一会议模式信令发送给视联网终端外，还可以将该第一会议模式信令发送给参与到该视联网会议的各个会议终端，以使得视联网会议中的所有参会的终端都能接收到该第一会议模式信令。具体地，所述视联网终端用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音的具体过程，可以参照上述步骤s602的过程，在此不再赘述。步骤s703，接收所述视联网会议管理系统发送的发言指令。其中，所述发言指令由所述视联网终端在识别到所述参会用户的语音时生成，并发送给所述视联网会议管理系统。实际中，该发言指令可以包括视联网终端的标识，该标识可以是视联网终端的id号、名称等，在接收到该发言指令后，也可以将该发言指令中的视联网终端的标识进行显示，以便操作人员获知申请发言的终端。步骤s704，响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。实际中，帕米尔客户端可以对该发言指令进行解析，以读取出其携带的有效数据，该有效数据可以包括视联网终端的标识。接着，帕米尔客户端可以根据该有效数据，在确定视联网终端不为视联网会议当前发言的终端时，将该视联网终端切换为发言方。本申请实施例，由于拍米尔客户端可以在预设会议模式被开启时，向视联网终端发送第一会议模式信令，以使视联网终端响应于该第一会议模式信令，识别视联网终端的参会用户的语音，并在识别到参会用户的语音时，发送发言指令，帕米尔客户端便根据该发言指令，自动将视联网终端切换为发言方。因帕米尔客户端可以根据发言指令，自动将视联网终端切换为发言方，而无需操作员手动切换，从而减少了会议操作过程，增大了参会终端的效率。结合上述实施例，在一种可选的实例中，由于所述视联网会议管理系统还与参与所述视联网会议的多个会议终端通信连接，实际中，多个会议终端也可以向帕米尔客户端发出发言指令以申请发言，相应地，步骤s704具体可以包括以下步骤：步骤s7041，在确定所述视联网终端不为所述视联网会议中当前发言的终端时，将所述视联网终端的标识添加到预设发言终端列表中。其中，所述预设发言终端列表中预先存储有至少一个会议终端标识，所述至少一个会议终端标识为所述多个会议终端中请求发言的会议终端的标识，且所述至少一个会议终端标识按照请求发言的时间先后顺序排列。由于帕米尔客户端可以将第一会议模式信令发送给视联网会议中的各个会议终端，这样，各会议终端也可以按照上述步骤s601至步骤s604的过程，向帕米尔客户端发送申请发言的发言指令。这样，帕米尔客户端每接收到一个会议终端发送的发言指令，便可以将该会议终端的标识添加到预设发言终端列表中，在该预设发言终端列表中，先发送发言指令的会议终端的标识排列在后发送指令的会议终端的标识之后。示例地，以参与视联网会议的会议终端有4个为例，该5个会议终端分别称为参会方2、参会方3、参会方4、参会方5，其中参会方1为视联网终端。帕米尔客户端先接收到参会方3的发言指令，再接收到参会方5的发言指令，最后接收到该视联网终端(参会方1)的发言指令，则在预设发言终端列表中，按照时间先后顺序依次排列有参会方3的标识、参会方5的标识、参会方1的标识。步骤s7042，按照所述请求发言的时间先后顺序，在依次将所述至少一个会议终端标识对应的会议终端切换为所述视联网会议中的发言方后，将所述视联网终端切换为所述视联网会议中的发言方。实际中，在视联网会议中，为了保证发言方每次的发言质量，同一时刻可以有一个发言方发言，当发言方发言完毕后，再由下一个发言方发言。具体实施时，当会议终端的标识排列在视联网终端的标识之前，表明该会议终端的标识对应的会议终端先于视联网终端申请发言，则实际中，可以依次将这些排列在前的会议终端的标识对应的会议终端切换为发言方后，再将视联网终端切换为视联网会议中的发言方。相应地，在一种可选的实例中，在将所述视联网终端切换为所述视联网会议中的发言方之后，还可以包括以下步骤：步骤s705，在检测到所述视联网会议的预设会议模式被关闭时，生成第二会议模式信令，并将所述预设发言终端列表清空。实际中，帕米尔客户端在检测到预设会议模式的功能按钮被置于关闭状态时，可以随即则生成第二会议模式信令，以通知参会各方视联网会议的自由发言阶段结束。步骤s706，将所述第二会议模式信令发送给所述视联网会议管理系统。其中，所述视联网会议管理系统用于将所述第二会议模式信令发送给所述视联网终端，所述视联网终端用于响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。实际中，视联网会议管理系统还可以将第二会议模式信令转发给各会议终端，以使各会议终端也停止对自身的参会用户的语音识别。结合上述实施例，从视联网终端和拍米尔客户端侧对视联网会议处理方法的过程进行完整地阐述，具体地，可以包括以下步骤：步骤a，帕米尔客户端在当前进行的视联网会议中，检测到所述视联网会议的预设会议模式被开启时，生成第一会议模式信令。步骤b，帕米尔客户端将第一会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统并将所述第一会议模式信令发送给所述视联网终端。步骤c，所述视联网终端接收所述第一会议模式信令，并响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别视联网终端的参会用户的语音。步骤d，所述视联终端在识别到所述参会用户的语音时，生成发言指令。步骤e，所述视联终端将所述发言指令发送给所述视联网会议管理系统，所述视联网会议管理系统将所述发言指令发送给所述帕米尔客户端。步骤f，所述帕米尔客户端接收所述视联网会议管理系统发送的发言指令，并响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。参照图8所示，示出了在一个具体实例中该视联网会议处理方法的完整流程示意图，图8中，参会方1为视联网终端，其他参会方2至参会方n为图5所示的会议终端，会议管理系统为视联网会议管理系统，pamirmobile为安装帕米尔客户端的终端。具体地，可以包括以下步骤：首先，在视联网会进入自由发言模式(上述的预设会议模式)时，参会方1从预设距离范围内的多个语音中识别参会用户的语音。在未识别到说话或识别到杂音时，则待机，在识别到说话时，该参会方生成发言指令，并将该发言指令发送给会议管理系统。图8中的终端即为参会方1(视联网终端)。接着，会议管理系统将该发言指令推送给pamirmobile。之后，pamirmobile在确定该参会方1不是发言人2(即上述步骤s604所述的发言方)时，检测是否有用户正在说话，若有，则将该参会方1加入到队列(即上述步骤s7041所述的将所述视联网终端的标识添加到预设发言终端列表中)中。最后，pamirmobile在等待当前正在发言的发言人说完话后，将该参会方1切换为视联网会议中的发言人2。需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本申请实施例所必须的。参照图9，示出了本申请一种视联网会议处理装置的结构框图，所述装置可以应用于视联网终端，所述视联网终端可以与视联网会议管理系统通信连接，所述视联网会议管理系统可以与帕米尔客户端通信连接，所述装置具体可以包括以下模块：第一会议模式信令接收模块901，用于在所述视联网终端当前参与的视联网会议中，接收所述视联网会议管理系统发送的第一会议模式信令；所述第一会议模式信令由所述帕米尔客户端在检测到所述视联网会议的预设会议模式被开启时生成，并发送给所述视联网会议管理系统；语音识别模块902，用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音；发言指令生成模块903，用于在识别到所述参会用户的语音时，生成发言指令；发言指令发送模块904，用于将所述发言指令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述发言指令发送给所述帕米尔客户端，所述帕米尔客户端用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。可选地，所述视联网会议管理系统还与参与所述视联网会议的多个会议终端通信连接，所述视联网终端及所述多个会议终端与视联网服务器通信连接；所述装置还包括：音频录制模块，用于将识别到的所述参会用户的语音录制为第一音频数据，并将所述第一音频数据进行本地存储；回复信令接收模块，用于接收所述视联网会议管理系统发送的切换发言回复信令；其中，所述切换发言回复信令由所述帕米尔客户端在将所述视联网终端切换为所述视联网会议中的发言方时生成，并发送给所述视联网会议管理系统；音频数据发送模块，用于响应于所述切换发言回复信令，将本地存储的所述第一音频数据发送给所述视联网服务器，所述视联网服务器用于将所述第一音频数据分别发送给所述多个会议终端。可选地，所述装置还可以包括以下模块：第二会议模式信令接收模块，用于接收所述视联网会议管理系统发送的第二会议模式信令，所述第二会议模式信令由所述帕米尔客户端在检测到所述预设会议模式被关闭时生成；语音识别停止模块，用于响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。可选地，所述音频数据发送模块具体可以包括以下单元：音频获取单元，用于响应于所述切换发言回复信令，从本地存储中获取所述第一音频数据，并将所述参会用户的当前语音录制为第二音频数据；混频单元，用于将所述第一音频数据与所述第二音频数据合成为混合音频数据；发送单元，用于将所述混合音频数据发送给所述视联网服务器，所述视联网服务器用于将所述混合音频数据分别发送给所述多个会议终端。参照图10所示，示出了本申请另一种视联网会议处理装置的结构框图，所述装置可以应用于帕米尔客户端，所述帕米尔客户端可以与视联网会议管理系统通信连接，所述视联网会议管理系统可以与视联网终端通信连接，所述装置具体可以包括以下模块：第一会议模式信令生成模块1001，用于在当前进行的视联网会议中，检测到所述视联网会议的预设会议模式被开启时，生成第一会议模式信令；第一会议模式信令发送模块1002，用于将所述第一会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述第一会议模式信令发送给所述视联网终端；所述视联网终端用于响应于所述第一会议模式信令，从预设距离范围内的多个语音中识别所述视联网终端对应的参会用户的语音；发言指令接收模块1003，用于接收所述视联网会议管理系统发送的发言指令；其中，所述发言指令由所述视联网终端在识别到所述参会用户的语音时生成，并发送给所述视联网会议管理系统；发言方切换模块1004，用于响应于所述发言指令，将所述视联网终端切换为所述视联网会议中的发言方。可选地，所述视联网会议管理系统还与参与所述视联网会议的多个会议终端通信连接；所述发言方切换模块1004具体可以包括以下单元：列表添加单元，用于在确定所述视联网终端不为所述视联网会议中当前发言的终端时，将所述视联网终端的标识添加到预设发言终端列表中；所述预设发言终端列表中预先存储有至少一个会议终端标识，所述至少一个会议终端标识为所述多个会议终端中请求发言的会议终端的标识，且所述至少一个会议终端标识按照请求发言的时间先后顺序排列；依次切换单元，用于按照所述请求发言的时间先后顺序，在依次将所述至少一个会议终端标识对应的会议终端切换为所述视联网会议中的发言方后，将所述视联网终端切换为所述视联网会议中的发言方。可选地，所述装置还可以包括以下模块：第二会议模式信令生成模块，用于在检测到所述视联网会议的预设会议模式被关闭时，生成第二会议模式信令，并将所述预设发言终端列表清空；第二会议模式信令发送模块，用于将所述第二会议模式信令发送给所述视联网会议管理系统，所述视联网会议管理系统用于将所述第二会议模式信令发送给所述视联网终端，所述视联网终端用于响应于所述第二会议模式信令，停止对所述参会用户的语音进行识别。对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。参考图11，示出了本申请实施例的一种电子设备1100的结构示意图，该电子设备1100可以用于进行视联网会议处理，可以包括存储器1101、处理器1102及存储在存储器1101上并可在处理器上运行的计算机程序，所述处理器1102被配置为执行所述的视联网会议处理方法。本申请实施例还提供了一种计算机可读存储介质，其上存储的计算机程序使得处理器执行所述的视联网会议处理方法。本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。本领域内的技术人员应明白，本申请实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本申请实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。本申请实施例是参照根据本申请实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。尽管已描述了本申请实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例范围的所有变更和修改。最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。以上对本申请所提供的一种视联网会议处理方法、一种视联网会议处理装置、一种电子设备及一种计算机可读存储介质，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。当前第1页1 2 3