多画面组合的呈现方法及装置制造方法

文档序号:6505377阅读:196来源:国知局
多画面组合的呈现方法及装置制造方法【专利摘要】本发明实施例提供一种多画面组合的呈现方法及装置。该方法包括:发送媒体画面组合能力指示信息给媒体接收方;接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息;根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。本发明实施例提供的方法解决了现有技术中发送多画面组合的视频媒体画面缺乏灵活性的技术问题,提高了媒体接收方用户的会议体验度。【专利说明】多画面组合的呈现方法及装置【
技术领域
】[0001]本发明实施例涉及通信【
技术领域
】,尤其涉及一种多画面组合的呈现方法及装置。【
背景技术
】[0002]随着近几年视频会议的发展,多点会议的应用也越来越广泛,但经常会出现会议中的某一个用户会场可能接收到的视频画面的数目多于自身的显示屏幕,尤其是对于远程呈现会议来说,其用户会场中会有多路摄像机、多路活动视频以及多个显示器,这使得接收视频画面数目与显示屏幕数目不匹配的现象更加突出,而为了能达到更为完整的会议呈现,需要在一个显示屏幕上同时观看到多个视频画面,即需要利用多画面组合技术进行多画面组合;具体的,多点会议系统中的多点控制单元(MultipointControlUnit,以下简称MCU)通过图像拼接和缩放技术,把多路视频图像画面组合在一个画面中,或者,该多画面组合技术也适用于点对点会议,但需要点对点会议中的会场是有多个画面生成以完成多画面组合的会场,则多画面组合由系统中的画面控制设备来完成。一般的,将发送组合画面的一方称为媒体提供方,接收组合画面的一方称为媒体接收方。[0003]现有技术中,由媒体提供方将设定的多画面组合的视频媒体画面发送给媒体接收方,由媒体接收方直接进行呈现。但是这种多画面组合的视频媒体画面呈现方法缺乏灵活性,影响接收方用户的会议体验度。【
发明内容】[0004]本发明实施例提供一种多画面组合的呈现方法及装置,解决了现有技术中媒体接收方被动接收媒体提供方发送的组合画面导致媒体接收方用户的会议体验度不高的问题。[0005]第一方面,本发明实施例提供一种多画面组合的呈现方法,包括:[0006]发送媒体画面组合能力指示信息给媒体接收方;[0007]接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息;[0008]根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0009]结合第一方面,在第一方面的第一种可能的实现方式中,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。[0010]结合第一方面,在第一方面的第二种可能的实现方式中,所述根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,包括:[0011]若支持所述媒体画面组成信息,则发送组合画面的第一媒体参数给所述媒体接收方;接收所述媒体接收方发送的所述组合画面的第二媒体参数;将根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面发送给所述媒体接收方;或者,[0012]若不支持所述媒体画面组成信息,则发送否定应答消息给所述媒体接收方。[0013]结合第一方面的第二种可能的实施方式,在第一方面的第三种可能的实施方式中,发送媒体画面组合能力指示信息给媒体接收方,包括:[0014]发送第一远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;[0015]接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:[0016]接收所述媒体接收方发送的第一CLUE媒体配置消息,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0017]结合第一方面的第二种可能的实施方式,在第一方面的第四种可能的实施方式中,发送媒体画面组合能力指示信息给媒体接收方,包括:[0018]发送第一会话描述协议SDP请求消息给所述媒体接收方,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则[0019]接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:[0020]接收所述媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息。[0021]结合第一方面的第二种可能的实施方式,在第一方面的第五种可能的实施方式中,发送媒体画面组合能力指示信息给媒体接收方,包括:[0022]发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使所述媒体接收方从所述门户网站获取所述媒体画面组合能力指示信息和所述媒体画面的缩略图;则[0023]接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:[0024]从所述门户网站获取所述媒体接收方发送的根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定的所述媒体画面组成信息。[0025]结合第一方面的第三种可能的实施方式,在第一方面的第六种可能的实施方式中,发送远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方之前,还包括:[0026]发送第二SDP请求消息给所述媒体接收方,所述第二SDP请求消息携带支持CLUE协议指示;[0027]接收所述媒体接收方发送的第二SDP响应消息,所述第二SDP响应消息携带支持所述CLUE协议指示。[0028]结合第一方面的第三种可能的实施方式或第一方面的第四种可能的实施方式,在第一方面的第七种可能的实施方式中,发送组合画面的第一媒体参数给所述媒体接收方,包括:[0029]发送第三SDP请求消息给所述媒体接收方,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;则[0030]接收所述媒体接收方发送的所述组合画面的第二媒体参数,包括:[0031]接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0032]结合第一方面的第五种可能的实施方式,在第一方面的第八种可能的实施方式中,发送组合画面的第一媒体参数给所述媒体接收方,包括:[0033]发送所述组合画面的第一媒体参数给门户网站,以使所述媒体接收方从所述门户网站获取所述组合画面的所述第一媒体参数;则[0034]接收所述媒体接收方发送的所述组合画面的第二媒体参数,包括:[0035]从门户网站获取所述媒体接收方发送的所述组合画面的第二媒体参数。[0036]结合第一方面,在第一方面的第九种可能的实施方式中,根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:[0037]发送媒体画面变化信息给所述媒体接收方;[0038]接收所述媒体接收方根据所述媒体画面变化信息生成的更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;[0039]根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0040]结合第一方面,在第一方面的第十种可能的实施方式中,根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:[0041]接收所述媒体接收方更新后的第二媒体画面组成信息,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息;[0042]根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0043]结合第一方面,在第一方面的第十一种可能的实施方式中,发送媒体画面组合能力指示信息给媒体接收方,还包括:[0044]发送至少一种媒体画面组合选择信息给所述媒体接收方,以使所述媒体接收方根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0045]本发明实施例第二方面提供一种多画面组合的呈现方法,包括:[0046]接收媒体提供方发送的媒体画面组合能力指示信息;[0047]根据所述媒体画面组合能力指示信息确定媒体画面组成信息;[0048]将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0049]结合第二方面,在第二方面的第一种可能的实施方式中,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。[0050]结合第二方面,在第二方面的第二种可能的实施方式中,将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,包括:[0051]若所述媒体提供方支持所述媒体画面组成信息,则接收所述媒体提供方发送的组合画面的第一媒体参数;并发送所述组合画面的第二媒体参数给所述媒体提供方;并接收所述媒体提供方根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面;或者,[0052]若所述媒体提供方不支持所述媒体画面组成信息,则接收所述媒体提供方发送的否定应答消息。[0053]结合第二方面的第二种可能的实施方式,在第二方面的第三种可能的实施方式中,接收媒体提供方发送的媒体画面组合能力指示信息,包括:[0054]接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;[0055]则将所述媒体画面组成信息发送给所述媒体提供方,包括:[0056]发送第一CLUE媒体配置消息给所述媒体提供方,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0057]结合第二方面的第二种可能的实施方式,在第二方面的第四种可能的实施方式中,接收媒体提供方发送的媒体画面组合能力指示信息,包括:[0058]接收所述媒体提供方发送的第一会话描述协议SDP请求消息,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则[0059]将所述媒体画面组成信息发送给所述媒体提供方,包括:[0060]发送第一SDP响应消息给所述媒体提供方,所述第一SDP响应消息中携带所述媒体画面组成信息。[0061]结合第二方面的第二种可能的实施方式,在第二方面的第五种可能的实施方式中,接收媒体提供方发送的媒体画面组合能力指示信息,包括:[0062]从门户网站获取所述媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图;则[0063]将所述媒体画面组成信息发送给所述媒体提供方,包括:[0064]根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定所述媒体画面组成信息,并将所述媒体画面组成信息发送给所述门户网站,以使所述媒体提供方从所述门户网站获取所述媒体画面组成信息。[0065]结合第二方面的第三种可能的实施方式,在第二方面的第六种可能的实施方式中,在接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息之前,还包括:[0066]接收所述媒体提供方发送的第二SDP请求消息,所述第二SDP请求消息携带支持CLUE协议指示;[0067]发送第二SDP响应消息给所述媒体提供方,所述第二SDP响应消息中携带支持所述CLUE协议指示。[0068]结合第二方面的第三种可能的实施方式或第二方面的第四种可能的实施方式,在第二方面的第七种可能的实施方式中,接收所述媒体提供方发送的组合画面的第一媒体参数,包括:[0069]接收所述媒体提供方发送的第三SDP请求消息,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;则[0070]发送所述组合画面的第二媒体参数给所述媒体提供方,包括:[0071]发送第三SDP响应消息给所述媒体提供方,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0072]结合第二方面的第五种可能的实施方式,在第二方面的第八种可能的实施方式中,接收所述媒体提供方发送的组合画面的第一媒体参数,包括:[0073]从门户网站获取所述媒体提供方发送的所述组合画面的第一媒体参数;则[0074]发送所述组合画面的第二媒体参数给所述媒体提供方,包括:[0075]将所述组合画面的第二媒体参数发送至所述门户网站,以使所述媒体提供方从所述门户网站获取所述组合画面的第二媒体参数。[0076]结合第二方面,在第二方面的第九种可能的实施方式中,在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:[0077]接收所述媒体提供方发送的媒体画面变化信息;[0078]根据所述媒体画面变化信息生成更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;[0079]将所述第一媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0080]结合第二方面,在第二方面的第十种可能的实施方式中,在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:[0081]发送更新后的第二媒体画面组成信息给所述媒体提供方,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息,以使所述媒体提供方根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0082]结合第二方面,在第二方面的第十一种可能的实施方式中,所述接收媒体提供方发送的媒体画面组合能力指示信息,还包括:[0083]接收所述媒体提供方发送的至少一种媒体画面组合选择信息;[0084]则根据所述媒体画面组合能力指示信息确定媒体画面组成信息,包括:[0085]根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0086]本发明第三方面提供一种多画面组合的装置,包括:[0087]第一发送模块,用于发送媒体画面组合能力指示信息给媒体接收方;[0088]第一接收模块,用于接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息;[0089]处理模块,用于根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0090]结合第三方面,在第三方面的第一种可能的实施方式中,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。[0091]结合第三方面,在第三方面的第二种可能的实施方式中,所述处理模块,包括:[0092]第一处理单元,用于若支持所述媒体画面组成信息,则发送组合画面的第一媒体参数给所述媒体接收方;并接收所述媒体接收方发送的所述组合画面的第二媒体参数;并将根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面发送给所述媒体接收方;或者,[0093]第二处理单元,用于若不支持所述媒体画面组成信息,则发送否定应答消息给所述媒体接收方。[0094]结合第三方面的第二种可能的实施方式,在第三方面的第三种可能的实施方式中,所述第一发送模块,包括:[0095]第一发送单元,用于发送第一远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;[0096]则所述第一接收模块包括:[0097]第一接收单元,用于接收所述媒体接收方发送的第一CLUE媒体配置消息,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0098]结合第三方面的第二种可能的实施方式,在第三方面的第四种可能的实施方式中,所述第一发送模块,包括:[0099]第二发送单元,用于发送第一会话描述协议SDP请求消息给所述媒体接收方,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;[0100]则所述第一接收模块,包括:[0101]第二接收单元,用于接收所述媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息。[0102]结合第三方面的第二种可能的实施方式,在第三方面的第五种可能的实施方式中,所述第一发送模块,包括:[0103]第三发送单元,用于发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使所述媒体接收方从所述门户网站获取所述媒体画面组合能力指示信息和所述媒体画面的缩略图;[0104]则所述第一接收模块,包括:[0105]第三接收单元,用于从所述门户网站获取所述媒体接收方发送的根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定的所述媒体画面组成信息。[0106]结合第三方面的第三种可能的实施方式,在第三方面的第六种可能的实施方式中,所述装置还包括:[0107]第二发送模块,用于在发送远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方之前,发送第二SDP请求消息给所述媒体接收方,所述第二SDP请求消息携带支持CLUE协议指示;[0108]第二接收模块,用于接收所述媒体接收方发送的第二SDP响应消息,所述第二SDP响应消息携带支持所述CLUE协议指示。[0109]结合第三方面的第三种可能的实施方式或第三方面的第四种可能的实施方式,在第三方面的第七种可能的实施方式中,所述第一处理单元,包括:[0110]第一发送子单元,用于发送第三SDP请求消息给所述媒体接收方,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;[0111]第一接收子单元,用于接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0112]结合第三方面的第五种可能的实施方式,在第三方面的第八种可能的实施方式中,所述第一处理单元,包括:[0113]第二发送子单元,用于发送所述组合画面的第一媒体参数给门户网站,以使所述媒体接收方从所述门户网站获取所述组合画面的所述第一媒体参数;[0114]第二接收子单元,用于从门户网站获取所述媒体接收方发送的所述组合画面的第二媒体参数。[0115]结合第三方面,在第三方面的第九种可能的实施方式中,所述装置还包括:[0116]第三发送模块,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送媒体画面变化信息给所述媒体接收方;[0117]第三接收模块,用于接收所述媒体接收方根据所述媒体画面变化信息生成的更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;[0118]则所述处理模块还用于根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0119]结合第三方面,在第三方面的第十种可能的实施方式中,所述装置还包括:[0120]第四接收模块,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体接收方更新后的第二媒体画面组成信息,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息;[0121]则所述处理模块还用于根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0122]结合第三方面,在第三方面的第十一种可能的实施方式中,第一发送模块,还用于发送至少一种媒体画面组合选择信息给所述媒体接收方,以使所述媒体接收方根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0123]本发明实施例第四方面提供一种多画面组合的装置,包括:[0124]第一接收模块,用于接收媒体提供方发送的媒体画面组合能力指示信息;[0125]确定模块,用于根据所述媒体画面组合能力指示信息确定媒体画面组成信息;[0126]第一发送模块,用于将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0127]结合第四方面,在第四方面的第一种可能的实施方式中,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。[0128]结合第四方面,在第四方面的第二种可能的实施方式中,所述第一发送模块,包括:[0129]第一处理单元,用于若所述媒体提供方支持所述媒体画面组成信息,则接收所述媒体提供方发送的组合画面的第一媒体参数;并发送所述组合画面的第二媒体参数给所述媒体提供方;并接收所述媒体提供方根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面;或者,[0130]第二处理单元,用于若所述媒体提供方不支持所述媒体画面组成信息,则接收所述媒体提供方发送的否定应答消息。[0131]结合第四方面的第二种可能的实施方式,在第四方面的第三种可能的实施方式中,所述第一接收模块,包括:[0132]第一接收单元,用于接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;[0133]则所述第一发送模块,包括:[0134]第一发送单元,用于发送第一CLUE媒体配置消息给所述媒体提供方,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0135]结合第四方面的第二种可能的实施方式,在第四方面的第四种可能的实施方式中,所述第一接收模块,包括:[0136]第二接收单元,用于接收所述媒体提供方发送的第一会话描述协议SDP请求消息,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;[0137]则所述第一发送模块,包括:[0138]第二发送单元,用于发送第一SDP响应消息给所述媒体提供方,所述第一SDP响应消息中携带所述媒体画面组成信息。[0139]结合第四方面的第二种可能的实施方式,在第四方面的第五种可能的实施方式中,所述第一接收模块,包括:[0140]第三接收单元,用于从门户网站获取所述媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图;[0141]则所述第一发送模块,包括:[0142]第三发送单元,用于根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定所述媒体画面组成信息,并将所述媒体画面组成信息发送给所述门户网站,以使所述媒体提供方从所述门户网站获取所述媒体画面组成信息。[0143]结合第四方面的第三种可能的实施方式,在第四方面的第六种可能的实施方式中,所述装置还包括:[0144]第二接收模块,用于在接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息之前,接收所述媒体提供方发送的第二SDP请求消息,所述第二SDP请求消息携带支持CLUE协议指示;[0145]第二发送模块,用于发送第二SDP响应消息给所述媒体提供方,所述第二SDP响应消息中携带支持所述CLUE协议指示。[0146]结合第四方面的第三种可能的实施方式或第四方面的第四种可能的实施方式,在第四方面的第七种可能的实施方式中,所述第一处理单元,包括:[0147]第一接收子单元,用于接收所述媒体提供方发送的第三SDP请求消息,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;[0148]第一发送子单元,用于发送第三SDP响应消息给所述媒体提供方,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0149]结合第四方面的第五种可能的实施方式,在第四方面的第八种可能的实施方式中,所述第一处理单元,包括:[0150]第二接收子单元,用于从门户网站获取所述媒体提供方发送的所述组合画面的第一媒体参数;[0151]第二发送子单元,用于将所述组合画面的第二媒体参数发送至所述门户网站,以使所述媒体提供方从所述门户网站获取所述组合画面的第二媒体参数。[0152]结合第四方面,在第四方面的第九种可能的实施方式中,所述装置还包括:[0153]第三接收模块,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体提供方发送的媒体画面变化信息;[0154]生成模块,用于根据所述媒体画面变化信息生成更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;[0155]第三发送模块,用于将所述第一媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0156]结合第四方面,在第四方面的第十种可能的实施方式中,所述装置还包括:[0157]第四发送模块,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送更新后的第二媒体画面组成信息给所述媒体提供方,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息,以使所述媒体提供方根据对所述第二的支持能力,向所述媒体接收方执行相应的操作。[0158]结合第四方面,在第四方面的第十一种可能的实施方式中,所述第一接收模块还用于接收所述媒体提供方发送的至少一种媒体画面组合选择信息;[0159]则所述确定模块具体用于根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0160]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送媒体画面组合能力指示信息,媒体接收方根据所接收到的媒体画面能力指示信息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,即确定所要呈现的媒体画面的组合信息以及布局信息,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以根据自身能力呈现所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。【专利附图】【附图说明】[0161]为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。[0162]图1为本发明提供的多画面组合的呈现方法实施例一的流程示意图;[0163]图2为本发明提供的多画面组合的呈现方法实施例二的流程示意图;[0164]图3为本发明提供的多画面组合的呈现方法实施例三的流程示意图;[0165]图4为本发明提供的多画面组合的呈现方法实施例四的流程示意图;[0166]图5为本发明提供的多画面组合的呈现方法实施例五的流程示意图;[0167]图6为本发明提供的多画面组合的呈现方法实施例六的流程示意图;[0168]图7为本发明提供的多画面组合的呈现方法实施例七的流程示意图;[0169]图8为本发明提供的多画面组合的呈现方法实施例八的流程示意图;[0170]图9为本发明提供的多画面组合的呈现方法实施例九的流程示意图;[0171]图10为本发明提供的多画面组合的呈现方法实施例十的流程示意图;[0172]图11为本发明提供的多画面组合的呈现方法实施例十一的流程示意图;[0173]图12为本发明提供的多画面组合的呈现方法实施例十二的流程示意图;[0174]图13为本发明提供的多画面组合的呈现方法实施例十三的流程示意图;[0175]图14为本发明提供的多画面组合的呈现方法实施例十四的流程示意图;[0176]图15为本发明提供的多画面组合的呈现方法实施例十五的信令流程图;[0177]图16为本发明提供的多画面组合的呈现方法实施例十六的信令流程图;[0178]图17为本发明提供的多画面组合的呈现方法实施例十七的信令流程图;[0179]图18为本发明提供的多画面组合的呈现方法实施例十八的信令流程图;[0180]图19为本发明提供的多画面组合的呈现方法实施例十九的信令流程图;[0181]图20为本发明提供的多画面组合的呈现方法实施例二十的信令流程图;[0182]图21为本发明提供的多画面组合的装置实施例一的结构示意图;[0183]图22为本发明提供的多画面组合的装置实施例二的结构示意图;[0184]图23为本发明提供的多画面组合的装置实施例三的结构示意图;[0185]图24为本发明提供的多画面组合的装置实施例四的结构示意图;[0186]图25为本发明提供的多画面组合的装置实施例五的结构示意图;[0187]图26为本发明提供的多画面组合的装置实施例六的结构示意图。【具体实施方式】[0188]为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。[0189]图1为本发明提供的多画面组合的呈现方法实施例一的流程示意图,本发明实施例涉及的执行主体是媒体提供方,这里的媒体提供方可以是发送组合画面的会议终端,媒体接收方是接收该组合画面的会议终端。如图1所示,该方法包括:[0190]S101:发送媒体画面组合能力指示信息给媒体接收方。[0191]该媒体画面组合能力指示信息用于向媒体接收方告知该媒体提供方具有组合媒体画面的能力,媒体画面组合能力指示信息可以有多种不同的实现方式:例如简单的仅仅说明媒体发送方可以组合;或者媒体发送方给出一些多路媒体画面的组合、布局信息的可选项等等。[0192]S102:接收媒体接收方发送的根据上述媒体画面组合能力指示信息确定的媒体画面组成信息。[0193]具体的,媒体接收方在收到媒体提供方发送的媒体画面组合能力指示信息之后,根据该媒体画面组合能力指示信息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面组成信息,并且这里的媒体画面组成信息可以包括至少两路媒体画面的组合信息和布局信息的场景,或者,仅有至少两路媒体画面组合信息的场景;媒体接收方将该媒体画面组成信息发送给媒体提供方。[0194]S103:根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0195]具体的,媒体提供方接收媒体接收方发送的媒体画面组成信息,并根据对该媒体画面组成信息中的任一场景的的支持能力,向媒体接收方执行相应的操作,例如:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,则媒体提供方按照媒体组成信息以及相关的媒体参数向媒体接收方发送组合画面;若媒体提供方不支持至少两路媒体画面的组合和至少两路媒体画面的布局,则媒体提供方向媒体接收方发送否定应答消息,以使媒体接收方重新生成新的媒体画面组成信息。[0196]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送媒体画面组合能力指示信息,媒体接收方根据所接收到的媒体画面能力指示信息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,即确定所要呈现的媒体画面的组合信息以及布局信息,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以根据自身能力呈现所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0197]在上述图1所示实施例的基础上,本实施例涉及的方法是媒体提供方根据对媒体接收方发送的媒体组成信息的支持能力执行的具体操作,即上述S103包括:若支持上述媒体画面组成信息,则发送组合画面的第一媒体参数给媒体接收方;接收媒体接收方发送的上述组合画面的第二媒体参数;将根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定的所述组合画面发送给媒体接收方;或者,若不支持上述媒体画面组成信息,则发送否定应答消息给媒体接收方。[0198]具体的,媒体接收方将媒体画面组成信息发送给媒体提供方,该媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息;媒体提供方对媒体接收方发送的媒体画面组成信息进行是否支持的判断,分为两种实现方式:[0199]第一种:若媒体提供方支持上述媒体画面组成信息中所包含的至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持至少两路媒体画面的组合两种场景中的任一个场景,则媒体提供方发送组合画面的第一媒体参数给媒体接收方,并且该组合画面是媒体提供方根据媒体画面组成信息所确定的;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商;之后,媒体提供方根据上述至少两路媒体画面的组合信息、至少两路媒体画面的布局信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0200]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0201]图2为本发明提供的多画面组合的呈现方法实施例二的流程示意图,本发明实施例的执行主体是媒体提供方,在上述实施例的基础上,如图2所示,该方法包括:[0202]S201:发送第一远程呈现的多流控制(ControllingmultiplestreamsforTelepresence,以下简称CLUE)媒体通告消息给媒体接收方,该第一CLUE媒体通告消息中携带媒体画面组合能力指示信息。[0203]具体的,媒体提供方发送第一CLUE媒体通告消息给媒体接收方,该第一CLUE媒体通告消息携带媒体画面组合能力指示信息,用以使得媒体接收方根据第一CLUE媒体通告消息获知媒体提供方具有组合画面的能力、媒体提供方提供的多路媒体画面以及多路媒体画面相关的位置信息;在此以一个例子来说明:媒体提供方可以提供3路单独媒体画面(VCO,VC1,VC2),媒体提供方在第一CLUE媒体通告消息中的媒体组合画面能力相关描述如下:[0204]Advertisement:[0205]CaptureScene1:[0206]CaptureSceneEntry1:VCO,VC1,VC2[0207]CaptureSceneEntry2:VC4[0208]VCO:encodinggroup=EG0,content=view:table,left;[0209]VC1:encodinggroup=EG0,content=view:table,center;[0210]VC2:encodinggroup=EG0,content=view:table,right;[0211]VC4:encodinggroup=EGl,content=view:room,composed=true;[0212]上述例子中,对于媒体画面组合能力描述的定义包含在composed中,携带该composed参数,即隐含表征媒体提供方具有媒体画面组合的能力。[0213]S202:接收媒体接收方发送的第一CLUE媒体配置消息,该第一CLUE媒体配置消息中携带媒体画面组成信息。[0214]具体的,媒体接收方接收到媒体提供方发送的第一CLUE媒体通告消息后,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一CLUE配置消息,该第一CLUE媒体配置消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路媒体画面,最终媒体接收方选择采用其中2路媒体画面(VC0,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一CLUE配置消息中的媒体组合选择相关描述如下:[0215]Configurat1n:[0216]CaptureScene1:[0217]CaptureSceneEntry2:VC4[0218]VC4:encodinggroup=EGl,content=view:room,partial,composed=true,composedlayout={VC0(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}[0219]上述例子中,媒体画面组合结果包含在composedlayout参数中,表示该组合画面由哪些单独媒体画面组成,而且画面的布局中每个单独画面采用三维立体坐标来表示媒体画面的范围。[0220]S203:根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0221]具体的,媒体提供方接收媒体接收方发送的第一CLUE媒体配置消息后,根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作,即S203具体可以分为两种实现方式:[0222]第一种:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的组合这两种场景中的任一场景,则上述S203具体包括:[0223]S2031:发送组合画面的第一媒体参数给媒体接收方。[0224]S2032:接收媒体接收方发送的组合画面的第二媒体参数。[0225]S2033:将根据至少两路媒体画面的组合信息、至少两路媒体画面的布局信息、第一媒体参数和第二媒体参数确定的组合画面发送给媒体接收方。[0226]具体的,媒体提供方发送组合画面的第一媒体参数给媒体接收方,并且上述组合画面是媒体提供方根据媒体画面组成信息所确定的;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0227]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则上述S203具体为:发送否定应答消息给媒体接收方。[0228]具体的,媒体提供方发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在第一CLUE媒体配置消息中再次发送给媒体提供方,媒体提供方接收更新后的第一CLUE媒体配置消息,依然对其再次进行上述的判断过程。[0229]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送携带媒体画面组合能力指示信息的第一CLUE媒体通告消息,媒体接收方根据所接收到的第一CLUE媒体通告消息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息携带在第一CLUE媒体配置消息中,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0230]在上述图2所示实施例的基础上,进一步地,在S201之前,该方法还包括:[0231]S301:发送第二SDP请求消息给媒体接收方,该第二SDP请求消息携带支持CLUE协议指示。[0232]S302:接收媒体接收方发送的第二SDP响应消息,该第二SDP响应消息携带支持所述CLUE协议指示。[0233]具体的,在图2所示的采用CLUE协议方式实现多画面组合的实施例中,在媒体提供方发送第一CLUE媒体通告消息给媒体接收方之前,要进行CLUE通道的建立,即媒体提供方会将支持CLUE协议指示的信息携带在第二SDP请求消息中发送给媒体接收方,相应的,媒体接收方在获知媒体提供方支持CLUE协议后,会向媒体提供方发送第二SDP响应消息,该第二SDP响应消息中携带支持CLUE协议指示,CLUE通道建立成功。[0234]图3为本发明提供的多画面组合的呈现方法实施例三的流程示意图,在上述实施例的基础上,如图3所示,该方法的执行主体为媒体提供方,该方法包括:[0235]S401:发送第一会话描述协议(Sess1nDescript1nProtocol,以下简称SDP)请求消息给媒体接收方,该第一SDP请求消息中携带媒体画面组合能力指示信息。[0236]具体的,媒体提供方向媒体接收方发送第一SDP请求消息,该第一SDP请求消息携带媒体画面组合能力指示信息,并且还携带了多路媒体画面信息,并且该第一SDP请求消息可以携带在会话初始化协议(Sess1nInitiat1nProtocol,以下简称SIP)消息中传输,此处以一个例子来说明:媒体提供方可以提供3路单独媒体视频画面(VC0,VC1,VC2),媒体提供方在第一SDP请求消息中的媒体画面信息相关描述如下:[0237]a=video-compose_capa,指不具有画面组合能力;[0238]m=video10000RTP/AVP98,指示第一路画面信息VC0;[0239]a=label:VCO[0240]a=rtpmap:98H264/90000[0241]m=video10002RTP/AVP98,指示第二路画面信息VC1;[0242]a=label:VC1[0243]a=rtpmap:98H264/9000[0244]m=video10004RTP/AVP31,指示第三路画面信息VC2;[0245]a=label:VC2[0246]a=rtpmap:31H261/9000。[0247]S402:接收媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息,该媒体画面组成信息包括:至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息。[0248]具体的,媒体接收方接收媒体提供方发送的第一SDP请求消息,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一SDP响应消息,该第一SDP响应消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路视频画面,最终媒体接收方选择采用其中2路视频画面(VCO,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一SDP响应消息中的媒体画面组合的相关描述如下:[0249]a=composedlayout:VCO(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0),表示媒体接收方希望将VCO,VC1组合,按照左右布局,各占50%;[0250]m=video20000RTP/AVP98,指示第一路画面信息VCO;[0251]a=label:VC0[0252]a=rtpmap:98H264/90000[0253]m=video0RTP/AVP31,指示第二路画面信息VC1;[0254]a=label:VC1[0255]a=rtpmap:31H261/9000[0256]m=video0RTP/AVP31,指示第三路画面信息VC2;[0257]a=label:VC2[0258]a=rtpmap:31H261/9000。[0259]S403:根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0260]具体的,媒体提供方接收媒体接收方发送的第一SDP响应消息后,根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作,即S303具体可以分为两种实现方式:[0261]第一种:若媒体提供方支持至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的组合两种场景中的任一场景,则上述S403具体包括:[0262]S4031:发送组合画面的第一媒体参数给媒体接收方。[0263]S4032:接收媒体接收方发送的组合画面的第二媒体参数。[0264]S4033:将根据至少两路媒体画面的组合信息、至少两路媒体画面的布局信息、第一媒体参数和第二媒体参数确定的组合画面发送给媒体接收方。[0265]具体的,媒体提供方发送组合画面的第一媒体参数给媒体接收方,并且上述组合画面是媒体提供方根据媒体画面组成信息所确定的;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0266]第二种:若媒体提供方不支持媒体画面组成信息中的任一场景,则上述S403具体为:发送否定应答消息给媒体接收方。[0267]具体的,媒体提供方发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在第一SDP响应消息中再次发送给媒体提供方,媒体提供方接收更新后的第一SDP响应消息,依然对其再次进行上述的判断过程。[0268]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送携带媒体画面组合能力指示信息的第一SDP请求消息,媒体接收方根据所接收到的第一SDP请求消息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息携带在第一SDP响应消息中,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0269]图4为本发明提供的多画面组合的呈现方法实施例四的流程示意图,本发明实施例的执行主体为媒体提供方,该方法包括:[0270]S501:发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使媒体接收方从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图。[0271]具体的,本发明实施例中媒体提供方和媒体接收放都已经成功登陆到门户网站上;媒体提供方通过门户网站的接口将媒体画面组合能力指示信息和媒体画面的缩略图发送给门户网站,并且呈现在门户网站的界面上,以使媒体接收方从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图。[0272]S502:从上述门户网站获取媒体接收方发送的根据媒体画面组合能力指示信息和媒体画面的缩略图确定的媒体画面组成信息,该媒体画面组成信息包括:至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息。[0273]具体的,媒体接收方通过门户网站接口查看到媒体提供方提供的媒体画面缩略图,从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图,并结合媒体接收方的会议室的终端显示能力以及媒体接收方本地策略,确定媒体画面组成信息,并将该媒体画面组成信息中包含至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息,通过门户网站接口呈现在门户网站界面上;媒体提供方从门户网站上获取该媒体画面组成信息。[0274]S503:根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0275]具体的,媒体提供方从门户网站上获取该媒体画面组成信息之后,对该媒体画面组成信息中所包含的内容进行是否支持的判断,分为两种实现方式:[0276]第一种:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的组合两种场景中的任一场景,则媒体提供方发送组合画面的第一媒体参数给门户网站,以使媒体接收方从门户网站获取第一媒体参数;媒体接收方从门户网站获取到媒体提供方发送的第一媒体参数之后,向门户网站发送第二媒体参数,以使媒体提供方可以从门户网站获取第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商;之后,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0277]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则发送否定应答消息给门户网站,以使媒体接收方从门户网站获知媒体提供方不接受该媒体画面组成信息,则媒体接收方会重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息再次发送给门户网站,媒体提供方从门户网站获取更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0278]本发明实施例提供的方法,通过媒体提供方向门户网站发送携带媒体画面组合能力指示信息和媒体画面缩略图,媒体接收方从门户网站获取该媒体画面组合能力指示信息和媒体画面缩略图后,结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息发送给门户网站;媒体提供方根据从门户网站获取的媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0279]在图2和图3所示的实施例的基础上,进一步地,S2031和S4031具体为:发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数;则S2032和S4032具体为:接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0280]图5为本发明提供的多画面组合的呈现方法实施例五的流程示意图,本实施例主要涉及的是在视频会议召开之后,由于某种需要,可以是网络情况变化(比如拥塞,或者组合画面中某一源会场离会,或者新的会场入会等),组合画面需要做出调整,即媒体组成信息需要进行变更的处理方法;本发明实施例的执行主体是媒体提供方,在图1所示实施例的基础上,在S103之后,该方法还包括:[0281]S601:发送媒体画面变化信息给媒体接收方。[0282]具体的,在视频会议召开之后,即在媒体提供方发送组合画面给媒体接收方之后,媒体提供方检测到网络情况发生变化,比如拥塞或者组合画面中某一源会场离会或者新的会场入会等,则媒体提供方会向媒体接收方发送媒体画面变化信息,其中,该媒体画面变化信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,此处以该媒体画面变化信息携带在CLUE媒体通告消息中为例来说明,假设媒体提供方原来提供3路单独视频画面(VCO,VC1,VC2),媒体接收方选择VCO,VC1进行组合,这时VC0画面消失,媒体提供方在CLUE媒体通告消息中通知组合画面变更,具体描述如下:[0283]Advertisement:[0284]CaptureScene1:[0285]CaptureSceneEntryl:VC1,VC2[0286]CaptureSceneEntry2:VC4[0287]VC1:encodinggroup=EG0,content=view:table,center;[0288]VC2:encodinggroup=EG0,content=view:table,right;[0289]VC4:encodinggroup=EGl,content=view:room,composed=true,composedupdate:{VCO:off,VC1};[0290]上述例子中,媒体画面组合结果包含在composedupdate中,表示组合画面变更,VC0关闭。[0291]S602:接收媒体接收方根据上述媒体画面变化信息生成的更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息。[0292]具体的,媒体接收方在接收到媒体提供方发送的媒体画面变化信息之后,获知该视频会议的网络情况发生变化,则媒体接收方根据该媒体画面变化信息生成更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息;并将该第一媒体画面组成信息发送给媒体提供方,其中,该第一媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP请求响应消息中,与S601中所举例子对应,这里同样以第一媒体画面组成信息携带在CLUE媒体配置消息中为例来说明:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新的媒体画面组合选择相关描述如下:[0293]Configurat1n:[0294]CaptureScene1:[0295]CaptureSceneEntry2:VC4[0296]VC4:encodinggroup=EGlcontent=view:room.partial,composed=true,[0297]composedlayout={VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0298]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0299]S603:根据对上述第一媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0300]具体的,媒体提供方接收媒体接收方发送的第一媒体画面组成信息,并对第一媒体组成信息中的内容执行判断操作,即判断是否支持至少两路媒体画面的第一更新组合和至少两路媒体画面的第一更新布局,或,是否支持至少两路媒体画面的第一更新组合两种场景中的任一场景,可以分为两种实现方式:[0301]第一种:若媒体提供方支持上述第一媒体画面组成信息中的任一场景,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,会向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体提供方根据上述第一媒体画面组成信息、第一媒体参数和第二媒体参数确定更新后的组合画面,并将更新后组合画面发送给媒体接收方予以呈现。[0302]第二种:若媒体提供方不支持上述第一媒体画面组成信息中的任一场景,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第一媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0303]在图5所示实施例的基础上,进一步地,上述的媒体画面变化信息可以携带在CLUE媒体通告消息中,第一媒体画面组成信息可以携带在CLUE媒体配置消息中,即图5所示的实施例可以与图2所示的实施例进行结合(在S203之后执行S601、S602、S603);或者,媒体画面变化信息可以携带在SDP请求消息中,第一媒体画面组成信息可以携带在SDP响应消息中,即图5所示的实施例可以与图3所示的实施例进行结合(在S403之后,执行S601、S602、S603);或者,媒体提供方可以将媒体画面变化信息发送给门户网站,由媒体接收方从门户网站获取该媒体画面变化信息,从而发送第一媒体组成信息给门户网站,以使媒体提供方从门户网站获取第一媒体组成信息,即图5所示的实施例可以与图4所示的实施例进行结合(在S503之后,执行S601、S602、S603)。[0304]本发明实施例提供的方法,在视频会议召开之后,网络发生变化的情况下,通过媒体提供方向媒体接收方发送媒体画面变化信息,以使媒体接收方根据媒体画面变化信息生成更新后的第一媒体画面组成信息,媒体提供方根据第一媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第一媒体画面组成信息确定的媒体组合画面,同时还使得媒体提供方和媒体接收方可以实时根据网络变化情况对所所组合的媒体画面做出调整,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0305]图6为本发明提供的多画面组合的呈现方法实施例六的流程示意图,本发明实施例涉及的方法主要是媒体接收方自行发起组合画面调整的指示,该方法的执行主体是媒体提供方,在上述图1所示实施例的基础上,在S103之后,该方法还包括:[0306]S701:接收所述媒体接收方更新后的第二媒体画面组成信息,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息。[0307]S702:根据对上述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0308]具体的,媒体接收方自行想更新所呈现的组合画面,则媒体接收方根据自身的能力生成更新后的第二媒体画面组成信息,并将该第二媒体画面组成信息发送给媒体提供方,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息,其中,该第二媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,这里以第二媒体画面组成信息携带在CLUE媒体配置消息中为例:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新媒体画面组合选择相关描述如下:[0309]Configuration:[0310]CaptureScene1:[0311]CaptureSceneEntry2:VC4[0312]VC4:encodinggroup=EGl,content=view:room,partial,composed=true,[0313]composedlayout={VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0314]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0315]媒体提供方接收媒体接收方发送的第二媒体画面组成信息,根据对上述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,即判断是否支持至少两路媒体画面的第二更新组合和至少两路媒体画面的第二更新布局,或,是否支持至少两路媒体画面的第二更新组合这两种场景中的任一场景,可以分为两种实现方式:[0316]第一种:若媒体提供方支持上述第二媒体画面组成信息中的任一场景,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体提供方根据上述第二媒体画面组成信息、第一媒体参数和第二媒体参数确定更新后的组合画面,并将更新后组合画面发送给媒体接收方予以呈现。[0317]第二种:若媒体提供方不支持上述第二媒体画面组成信息中的任一场景,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第二媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0318]在图6所示实施例的基础上,进一步地,上述第二媒体画面组成信息可以携带在CLUE媒体配置消息中,即图6所示的实施例可以与图2所示的实施例进行结合(在S203之后执行S701、S702);或者,第二媒体画面组成信息可以携带在SDP响应消息中,即图6所示的实施例可以与图3所示的实施例进行结合(在S403之后,执行S701、S702);或者,媒体接收方发送第二媒体组成信息给门户网站,以使媒体提供方从门户网站获取第二媒体组成信息,即图5所示的实施例可以与图4所示的实施例进行结合(在S503之后,执行S701、S702)。[0319]本发明实施例提供的方法,在视频会议召开之后,媒体提供方自行更新媒体画面,即媒体接收方自行生成更新后的第二媒体画面组成信息,媒体提供方根据第二媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第二媒体画面组成信息确定的媒体组合画面,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0320]图7为本发明提供的多画面组合的呈现方法实施例七的流程示意图,本发明实施例涉及的方法是媒体提供方提供多种默认的组合画面给媒体接收方,以使媒体接收方根据自身的终端显示能力和本地策略进行选择,本发明实施例的执行主体是媒体提供方,该方法包括如下步骤:[0321]S801:发送至少一种媒体画面组合选择信息给媒体接收方。[0322]S802:接收媒体接收方根据上述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0323]具体的,媒体提供方向媒体接收方发送至少一种媒体画面组合选择信息,该媒体画面组合选择信息为媒体提供方自行组合的媒体组合画面,其中,该媒体画面组合选择信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,还可以是媒体提供方将至少一种的媒体画面组合选择信息发送给门户网站,由媒体接收方从门户网站获取该至少一种媒体画面组合选择信息,此处以上述媒体画面组合选择信息携带在CLUE媒体配置消息中为例:媒体提供方原来提供3路单独视频画面(VC0,VC1,VC2),默认的组合方式为:三个单独画面的组合{VC0,VC1,VC2},两个单独画面的组合{VC0,VC1},媒体提供方在CLUE媒体通告消息中通知默认的媒体组合画面,具体描述如下:[0324]Advertisement:[0325]CaptureScene1:[0326]CaptureSceneEntryl:VC0,VC1,VC2[0327]CaptureSceneEntry2:VC4[0328]VCO:encodinggroup=EG0,content=view:table,left;[0329]VC1:encodinggroup=EG0,content=view:table,center;[0330]VC2:encodinggroup=EG0,content=view:table,right;[0331]VC4:encodinggroup=EGl,content=view:room,composed=true,composedopt1n={composedlayout1,composedlayout2},[0332]composedlayout1={VCO(0,0,0)(341,0,0)(0,768,0)(512,768,0),[0333]VC1(512,384,0)(1024,384,0)(512,768,0)(1024,768,0),[0334]VC2(512,0,0)(1024,0,0)(512,384,0)(1024,384,0)},[0335]Composedlayout2={VCl(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0336]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0337]媒体接收方接收媒体提供方发送的至少一种媒体画面组合选择信息,并结合媒体接收方的终端显示能力、媒体接收方的本地策略确定媒体画面组成信息,该媒体画面组成信息中包括了媒体接收方的组合画面的选择结果,该媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,还可以是媒体接收方将媒体画面组成信息发送给门户网站,由媒体提供方从门户网站获取媒体接收方的组合画面的选择结果,此处以媒体画面组成信息携带在CLUE媒体配置消息中为例,媒体接收方选择采用3路视频画面(VC0,VC1,VC2)的组合,媒体接收方在CLUE媒体配置消息中的媒体画面组合选择相关描述如下:[0338]Configurat1n:[0339]CaptureScene1:[0340]CaptureSceneEntry2:VC4[0341]VC4:encodinggroup=EGl,content=view:room.full,composed=true,composedopt1n={composedlayoutl}。[0342]媒体提供方获知媒体接收方的组合画面选择结果之后,向媒体接收方发送组合画面的第一媒体参数,该第一媒体参数可以携带在第三SDP响应消息中,还可以是媒体提供方将该组合画面的第一媒体参数发送给门户网站,由媒体接收方从门户网站获取;媒体接收方接收到组合画面的第一媒体参数之后,向媒体提供方发送组合画面的第二媒体参数,该第二媒体参数可以携带在第三SDP响应消息中,还可以是媒体接收方将组合画面的第二媒体参数发送给门户网站,由媒体提供方从门户网站获取该组合画面的第二媒体参数,需要注意的是,媒体提供方和媒体接收方之间进行组合画面的第一媒体参数和第二媒体参数的交互主要是进行组合画面的编解码方式和带宽等参数的协商;之后,媒体提供方将媒体接收方选择的组合画面发送给媒体接收方予以呈现。[0343]本实施例提供的方法中,通过媒体提供方将至少一种媒体画面组合选择信息发送给媒体接收方,媒体接收方根据其终端的显示能力以及本地策略媒体画面组合选择信息进行选择,并将选择结果携带在媒体画面组成信息中发送给媒体提供方,以使媒体提供方将对应的组合画面发送给媒体接收方,即媒体接收方是按照自身的意愿或者能力对组合画面进行选择和呈现,因此提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0344]图8为本发明提供的多画面组合的呈现方法实施例八的流程示意图,本实施例涉及的方法的执行主体为媒体接收方,该方法包括:[0345]S901:接收媒体提供方发送的媒体画面组合能力指示信息。[0346]S902:根据媒体画面组合能力指示信息确定媒体画面组成信息。[0347]S903:将媒体画面组成信息发送给媒体提供方,以使媒体提供方根据对上述媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0348]具体的,媒体提供方发送媒体画面组合能力指示信息给媒体接收方,该媒体画面组合能力指示信息用于向媒体接收方告知该媒体提供方具有组合媒体画面的能力,媒体画面组合能力指示信息可以有多种不同的实现方式:例如简单的仅仅说明媒体发送方可以组合;或者媒体发送方给出一些多路媒体画面的组合、布局信息的可选项等等;媒体接收方在收到媒体提供方发送的媒体画面组合能力指示信息之后,结合该媒体画面组合能力指示信息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面组成信息,并且这里的媒体画面组成信息可以包括至少两路媒体画面的组合信息和布局信息的场景,或者,包括仅有至少两路媒体画面组合信息的场景;。[0349]媒体接收方将上述媒体画面组成信息发送给媒体提供方,媒体提供方根据对上述媒体画面组成信息中任一场景的的支持能力,向媒体接收方执行相应的操作,例如:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,则媒体接收方接收媒体提供方按照媒体组成信息以及相关的媒体参数发送的组合画面;若媒体提供方不支持至少两路媒体画面的组合和至少两路媒体画面的布局,则媒体接收方接收媒体提供方发送的否定应答消息。[0350]本发明实施例提供的方法,通过媒体接收方接收媒体提供方发送的媒体画面组合能力指示信息,并结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,即确定所要呈现的媒体画面的组合信息以及布局信息,使得媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0351]在图8所示实施例的基础上,进一步地,上述S903包括:若媒体提供方支持媒体画面组成信息,则接收媒体提供方发送的组合画面的第一媒体参数;并发送组合画面的第二媒体参数给媒体提供方;并接收媒体提供方根据所述媒体画面组成信息、第一媒体参数和第二媒体参数确定的组合画面;或者,若媒体提供方不支持媒体画面组成信息,则接收媒体提供方发送的否定应答消息。[0352]具体的,媒体接收方将媒体画面组成信息发送给媒体提供方,该媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,使得媒体提供方对媒体接收方发送的媒体画面组成信息中所包含的内容进行是否支持的判断,媒体接收方根据媒体提供方的判断做出相应的操作,分为两种实现方式:[0353]第一种:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持至少两路媒体画面的组合这两种场景中的任一场景,则媒体接收方接收媒体提供方发送的组合画面的第一媒体参数(该组合画面是媒体提供方根据媒体画面组成信息所确定的),并向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商;之后,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0354]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则媒体接收方接收媒体提供方发送的否定应答消息,该否定应答消息表示媒体提供方不接受该媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0355]图9为本发明提供的多画面组合的呈现方法实施例九的流程示意图,本发明实施例涉及的方法的执行主体是媒体接收方,该方法包括:[0356]S1001:接收媒体提供方发送的第一CLUE媒体通告消息,该第一CLUE媒体通告消息中携带媒体画面组合能力指示信息。[0357]具体的,媒体接收方接收媒体发送方发送的第一CLUE媒体通告消息,根据该第一CLUE媒体通告消息中的媒体画面组合能力指示信息获知媒体提供方具有组合画面的能力、媒体提供方提供的多路媒体画面以及多路媒体画面相关的位置信息,媒体提供方在第一CLUE媒体通告消息中的媒体组合画面能力相关描述如下:[0358]Advertisement:[0359]CaptureScene1:[0360]CaptureSceneEntryl:VCO,VC1,VC2[0361]CaptureSceneEntry2:VC4[0362]VCO:encodinggroup=EG0,content=view:table,left;[0363]VC1:encodinggroup=EG0,content=view:table,center;[0364]VC2:encodinggroup=EG0,content=view:table,right;[0365]VC4:encodinggroup=EGl,content=view:room,composed=true;[0366]上述例子中,对于媒体画面组合能力描述的定义包含在composed中,携带该composed参数,即隐含表征媒体提供方具有媒体画面组合的能力。[0367]S1002:根据媒体画面组合能力指示信息确定媒体画面组成信息。[0368]S1003:发送第一CLUE媒体配置消息给媒体提供方,该第一CLUE媒体配置消息中携带媒体画面组成信息。[0369]具体的,媒体接收方在接收到媒体提供方发送的第一CLUE媒体通告消息之后,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一CLUE配置消息,该第一CLUE媒体配置消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路媒体画面,最终媒体接收方选择采用其中2路媒体画面(VC0,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一CLUE配置消息中的媒体组合选择相关描述如下:[0370]Configurat1n:[0371]CaptureScene1:[0372]CaptureSceneEntry2:VC4[0373]VC4:encodinggroup=EGl,content=view:room,partial,composed=true,composedlayout={VC0(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}[0374]上述例子中,媒体画面组合结果包含在composedlayout参数中,表示该组合画面由哪些单独媒体画面组成,而且画面的布局中每个单独画面采用三维立体坐标来表示媒体画面的范围。[0375]媒体接收方将第一CLUE媒体配置消息发送给媒体提供方之后,媒体提供方根据第一CLUE媒体配置消息中的媒体画面组成信息对媒体接收方进行相应的操作,即媒体提供方根据对上述媒体画面组成信息中的任一场景的支持能力,向媒体接收方执行相应的操作,具体有两种实现方式:[0376]第一种:若媒体提供方支持上述媒体画面组成信息中的任一场景,则媒体接收方接收媒体提供方发送的组合画面的第一媒体参数,并向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,之后,媒体接收方接收媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定的组合画面,予以呈现。[0377]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则媒体接收方接收媒体提供方发送的否定应答消息,获知媒体提供方不接受该媒体画面组成信息,则媒体接收方重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在第一CLUE媒体配置消息中再次发送给媒体提供方,媒体提供方接收更新后的第一CLUE媒体配置消息,依然对其再次进行上述的判断过程。[0378]本发明实施例提供的方法,通过媒体接收方接收媒体提供方发送的携带媒体画面组合能力指示信息的第一CLUE媒体通告消息,并结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,将该媒体画面的组成信息携带在第一CLUE媒体配置消息中,使得媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0379]在上述图9所示实施例的基础上,进一步地,在S1001之前,该方法还包括:[0380]S2001:接收媒体提供方发送的第二SDP请求消息,该第二SDP请求消息携带支持CLUE协议指示。[0381]S2002:发送第二SDP响应消息给媒体提供方,该第二SDP响应消息中携带支持CLUE协议指示。[0382]具体的,在图9所示的采用CLUE协议方式实现多画面组合的实施例中,在媒体接收方接收媒体提供方发送的第一CLUE媒体通告消息之前,要进行CLUE通道的建立,即媒体提供方会将支持CLUE协议指示的信息携带在第二SDP请求消息中发送给媒体接收方,相应的,媒体接收方在获知媒体提供方支持CLUE协议后,会向媒体提供方发送第二SDP响应消息,该第二SDP响应消息中携带支持CLUE协议指示,CLUE通道建立成功。[0383]图10为本发明提供的多画面组合的呈现方法实施例十的流程示意图,在上述实施例的基础上,如图10所示,该方法的执行主体为媒体接收方,该方法包括如下步骤:[0384]S3001:接收媒体提供方发送的第一SDP请求消息,该第一SDP请求消息中携带所述媒体画面组合能力指示信息。[0385]具体的,媒体接收方接收媒体提供方发送的第一SDP请求消息,该第一SDP请求消息携带媒体画面组合能力指示信息,并且还携带了多路媒体画面信息,并且该第一SDP请求消息可以携带在SIP消息中传输,此处以一个例子来说明:媒体提供方可以提供3路单独媒体视频画面(VCO,VC1,VC2),媒体提供方在第一SDP请求消息中的媒体画面信息相关描述如下:[0386]a=video-compose_capa,指不具有画面组合能力;[0387]m=video10000RTP/AVP98,指示第一路画面信息VC0;[0388]a=label:VC0[0389]a=rtpmap:98H264/90000[0390]m=video10002RTP/AVP98,指示第二路画面信息VC1;[0391]a=label:VC1[0392]a=rtpmap:98H264/9000[0393]m=video10004RTP/AVP31,指示第三路画面信息VC2;[0394]a=label:VC2[0395]a=rtpmap:31H261/9000。[0396]S3002:根据媒体画面组合能力指示信息确定媒体画面组成信息。[0397]S3003:发送第一SDP响应消息给媒体提供方,该第一SDP响应消息中携带所述媒体画面组成信息。[0398]具体的,媒体接收方接收媒体提供方发送的第一SDP请求消息,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一SDP响应消息,该第一SDP响应消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路视频画面,最终媒体接收方选择采用其中2路视频画面(VC0,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一SDP响应消息中的媒体画面组合的相关描述如下:[0399]a=composedlayout:VCO(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0),表示媒体接收方希望将VCO,VC1组合,按照左右布局,各占50%;[0400]m=video20000RTP/AVP98,指示第一路画面信息VCO;[0401]a=label:VC0[0402]a=rtpmap:98H264/90000[0403]m=video0RTP/AVP31,指示第二路画面信息VC1;[0404]a=label:VC1[0405]a=rtpmap:31H261/9000[0406]m=video0RTP/AVP31,指示第三路画面信息VC2;[0407]a=label:VC2[0408]a=rtpmap:31H261/9000。[0409]媒体提供方接收媒体接收方发送的第一SDP响应消息后,根据对上述媒体画面组成信息中的内容的支持能力,向媒体接收方执行相应的操作,实际上也就是媒体接收方根据媒体提供方对媒体画面组成信息进行是否支持的判断结果执行相应的操作,具体可以分为两种实现方式:[0410]第一种:若媒体提供方支持至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持至少两路媒体画面的组合这两种场景中的任一场景,媒体接收方接收媒体提供方发送的组合画面的第一媒体参数,之后向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,媒体接收方接收媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定的组合画面,予以呈现。[0411]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,则媒体提供方发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在第一SDP响应消息中再次发送给媒体提供方,媒体提供方接收更新后的第一SDP响应消息,依然对其再次进行上述的判断过程。[0412]本发明实施例提供的方法,通过媒体接收方接收媒体提供方发送的携带媒体画面组合能力指示信息的第一SDP请求消息,并结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,将该媒体画面的组成信息携带在第一SDP响应消息中,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0413]图11为本发明提供的多画面组合的呈现方法实施例十一的流程示意图,本发明实施例的执行主体为媒体接收方,如图11所示,该方法包括:[0414]S4001:从门户网站获取媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图。[0415]S4002:根据媒体画面组合能力指示信息和媒体画面的缩略图确定媒体画面组成信息,并将该媒体画面组成信息发送给门户网站,以使媒体提供方从门户网站获取媒体画面组成信息。[0416]具体的,本发明实施例中媒体提供方和媒体接收放都已经成功登陆到门户网站上;媒体提供方通过门户网站的接口将媒体画面组合能力指示信息和媒体画面的缩略图发送给门户网站,并且呈现在门户网站的界面上;媒体接收方从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图,并结合媒体接收方的会议室的终端显示能力以及媒体接收方本地策略,确定媒体画面组成信息,并将该媒体画面组成信息中包含至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息,通过门户网站接口呈现在门户网站界面上;媒体提供方从门户网站上获取该媒体画面组成信肩、Ο[0417]媒体提供方从门户网站上获取该媒体画面组成信息之后,判断是否支持该媒体画面组成信息中所包含的内容,媒体接收方根据媒体提供方的判断结果进行相应的操作,具体分为两种实现方式:[0418]第一种:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的组合这两种场景中的任一场景,则媒体提供方发送组合画面的第一媒体参数给门户网站,媒体接收方从门户网站获取第一媒体参数,并向门户网站发送第二媒体参数,以使媒体提供方可以从门户网站获取第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商;之后,媒体接收方接收媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定的组合画面,予以呈现。[0419]第二种:若媒体提供方不支持上述媒体画面组成信息中的任一场景,,则发送否定应答消息给门户网站,媒体接收方从门户网站获知媒体提供方不接受该媒体画面组成信息,则媒体接收方会重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息再次发送给门户网站,媒体提供方从门户网站获取更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0420]本发明实施例提供的方法,通过媒体提供方向门户网站发送携带媒体画面组合能力指示信息和媒体画面缩略图,媒体接收方从门户网站获取该媒体画面组合能力指示信息和媒体画面缩略图后,结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息发送给门户网站;媒体提供方根据从门户网站获取的媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0421]在图9和图10所示实施例的基础上,进一步地,接收媒体提供方发送的组合画面的第一媒体参数,具体可以为:接收媒体提供方发送的第三SDP请求消息,该第三SDP请求消息中携带组合画面的第一媒体参数;则发送组合画面的第二媒体参数给所述媒体提供方,具体可以为发送第三SDP响应消息给所述媒体提供方,该第三SDP响应消息中携带所述组合画面的第二媒体参数。[0422]图12为本发明提供的多画面组合的呈现方法实施例十二的流程示意图,本实施例主要涉及的是在视频会议召开之后,由于某种需要,可以是网络情况变化(比如拥塞,或者组合画面中某一源会场离会,或者新的会场入会等),组合画面需要做出调整,即媒体组成信息需要进行变更的处理方法;本发明实施例的执行主体是媒体接收方,在图8所示实施例的基础上,在S903之后,该方法还包括:[0423]S5001:接收媒体提供方发送的媒体画面变化信息。[0424]具体的,在视频会议召开之后,即在媒体提供方发送组合画面给媒体接收方之后,媒体提供方检测到网络情况发生变化,比如拥塞或者组合画面中某一源会场离会或者新的会场入会等,则媒体提供方会向媒体接收方发送媒体画面变化信息,其中,该媒体画面变化信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,媒体接收方接收媒体提供方发送的媒体画面变化信息,此处以该媒体画面变化信息携带在CLUE媒体通告消息中为例来说明,假设媒体提供方原来提供3路单独视频画面(VCO,VC1,VC2),媒体接收方选择VCO,VC1进行组合,这时VC0画面消失,媒体提供方在CLUE媒体通告消息中通知组合画面变更,具体描述如下:[0425]Advertisement:[0426]CaptureScene1:[0427]CaptureSceneEntry1:VC1,VC2[0428]CaptureSceneEntry2:VC4[0429]VC1:encodinggroup=EG0,content=view:table,center;[0430]VC2:encodinggroup=EG0,content=view:table,right;[0431]VC4:encodinggroup=EGl,content=view:room,composed=true,composedupdate={VC0:off,VC1};[0432]上述例子中,媒体画面组合结果包含在composedupdate中,表示组合画面变更,VC0关闭。[0433]S5002:根据媒体画面变化信息生成更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息。[0434]S5003:将第一媒体画面组成信息发送给媒体提供方,以使媒体提供方根据对上述第一媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0435]具体的,媒体接收方在接收到媒体提供方发送的媒体画面变化信息之后,获知该视频会议的网络情况发生变化,则媒体接收方根据该媒体画面变化信息生成更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息,并将该第一媒体画面组成信息发送给媒体提供方,其中,该第一媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP请求响应消息中,与S4001中所举例子对应,这里同样以第一媒体画面组成信息携带在CLUE媒体配置消息中为例来说明:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新的媒体画面组合选择相关描述如下:[0436]Configurat1n:[0437]CaptureScene1:[0438]CaptureSceneEntry2:VC4[0439]VC4:encodinggroup=EGlcontent=view:room.partial,composed=true,[0440]composedlayout={VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0441]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0442]媒体提供方接收媒体接收方发送的第一媒体画面组成信息,对第一媒体组成信息中的内容执行判断操作,即判断是否支持至少两路媒体画面的第一更新组合和至少两路媒体画面的第一更新布局,或,是否支持至少两路媒体画面的第一更新组合这两种场景中的任一场景,媒体接收方根据媒体提供方的判断结果作出相应的操作,具体可以分为两种实现方式:[0443]第一种:若媒体提供方支持上述第一媒体画面组成信息中的任一场景,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,会向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体接收方接收媒体提供方根据第一媒体画面组成信息、第一媒体参数和第二媒体参数确定的更新后的组合画面,并将更新后组合画面予以呈现。[0444]第二种:若媒体提供方不支持上述第一媒体画面组成信息中的任一场景,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第一媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0445]在图12所示实施例的基础上,进一步地,上述的媒体画面变化信息可以携带在CLUE媒体通告消息中,第一媒体画面组成信息可以携带在CLUE媒体配置消息中,即图12所示的实施例可以与图9所示的实施例进行结合(在S1003之后执行S5001、S5002、S5003);或者,媒体画面变化信息可以携带在SDP请求消息中,第一媒体画面组成信息可以携带在SDP响应消息中,即图12所示的实施例可以与图10所示的实施例进行结合(在S3003之后,执行S5001、S5002、S5003);或者,媒体提供方可以将媒体画面变化信息发送给门户网站,由媒体接收方从门户网站获取该媒体画面变化信息,从而发送第一媒体组成信息给门户网站,以使媒体提供方从门户网站获取第一媒体组成信息,即图12所示的实施例可以与图11所示的实施例进行结合(在S4002之后,执行S5001、S5002、S5003)。[0446]本发明实施例提供的方法,在视频会议召开之后,网络发生变化的情况下,通过媒体提供方向媒体接收方发送媒体画面变化信息,媒体接收方根据媒体画面变化信息生成更新后的第一媒体画面组成信息,即生成更新的媒体画面组合和布局,媒体提供方根据第一媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第一媒体画面组成信息确定的媒体组合画面,同时还使得媒体提供方和媒体接收方可以实时根据网络变化情况对所所组合的媒体画面做出调整,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0447]图13为本发明提供的多画面组合的呈现方法实施例十三的流程示意图,本发明实施例涉及的方法主要是媒体接收方自行发起组合画面调整的指示,该方法的执行主体是媒体接收方,在上述图8所示实施例的基础上,在S903之后,该方法还包括:[0448]S6001:发送更新后的第二媒体画面组成信息给媒体提供方,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息,以使媒体提供方根据对第二媒体画面组成信息的支持能力,向媒体接收方执行相应的操作。[0449]具体的,媒体接收方自行想更新所呈现的组合画面,则媒体接收方根据自身的能力生成更新后的第二媒体画面组成信息,并将该第二媒体画面组成信息发送给媒体提供方,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息,其中,该第二媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,这里第二媒体画面组成信息携带在CLUE媒体配置消息中为例:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新媒体画面组合选择相关描述如下:[0450]Configurat1n:[0451]CaptureScene1:[0452]CaptureSceneEntry2:VC4[0453]VC4:encodinggroup=EGl,content=view:room.partial,composed=true,[0454]composedlayout={VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0455]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0456]媒体接收方向媒体提供方发送第二媒体画面组成信息,媒体提供方根据对第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,即判断是否支持至少两路媒体画面的第二更新组合和至少两路媒体画面的第二更新布局,或,是否支持至少两路媒体画面的第二更新组合这两种场景中的任一场景,媒体接收方根据媒体提供方的判断结果进行相应的操作,具体可以分为两种实现方式:[0457]第一种:若媒体提供方支持上述第二媒体画面组成信息中的任一场景,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体接收方接收媒体提供方根据第二媒体画面组成信息、第一媒体参数和第二媒体参数确定的更新后的组合画面,并将更新后组合画面发送予以呈现。[0458]第二种:若媒体提供方不支持上述至少两路媒体画面的第二更新组合和至少两路媒体画面的第二更新布局,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第二媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述的判断过程。[0459]在图13所示实施例的基础上,进一步地,上述第二媒体画面组成信息可以携带在CLUE媒体配置消息中,即图13所示的实施例可以与图9所示的实施例进行结合(在S1003之后执行S6001);或者,第二媒体画面组成信息可以携带在SDP响应消息中,即图13所示的实施例可以与图10所示的实施例进行结合(在S3003之后,执行S6001);或者,媒体接收方发送第二媒体组成信息给门户网站,以使媒体提供方从门户网站获取第二媒体组成信息,即图5所示的实施例可以与图11所示的实施例进行结合(在S4002之后,执行S6001)。[0460]本发明实施例提供的方法,在视频会议召开之后,媒体提供方自行更新媒体画面,即媒体接收方自行生成更新后的第二媒体画面组成信息,媒体提供方根据第二媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第二媒体画面组成信息确定的媒体组合画面,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0461]图14为本发明提供的多画面组合的呈现方法实施例十四的流程示意图,本发明实施例涉及的方法是媒体提供方提供多种默认的组合画面给媒体接收方,媒体接收方根据自身的终端显示能力和本地策略进行选择,本发明实施例的执行主体是媒体接收方,该方法包括如下步骤:[0462]S7001:接收媒体提供方发送的至少一种媒体画面组合选择信息。[0463]S7002:根据上述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0464]具体的,媒体接收方接收媒体提供方发送的至少一种媒体画面组合选择信息,该媒体画面组合选择信息为媒体提供方自行组合的媒体组合画面,其中,该媒体画面组合选择信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,还可以是媒体提供方将至少一种的媒体画面组合选择信息发送给门户网站,由媒体接收方从门户网站获取该至少一种媒体画面组合选择信息,此处以上述媒体画面组合选择信息携带在CLUE媒体配置消息中为例:媒体提供方原来提供3路单独视频画面(VCO,VC1,VC2),默认的组合方式为:三个单独画面的组合{VC0,VC1,VC2},两个单独画面的组合{VCO,VC1},媒体提供方在CLUE媒体通告消息中通知默认的媒体组合画面,具体描述如下:[0465]Advertisement:[0466]CaptureScene1:[0467]CaptureSceneEntryl:VC0,VC1,VC2[0468]CaptureSceneEntry2:VC4[0469]VCO:encodinggroup=EG0,content=view:table,left;[0470]VC1:encodinggroup=EG0,content=view:table,center;[0471]VC2:encodinggroup=EG0,content=view:table,right;[0472]VC4:encodinggroup=EGl,content=view:room,composed=true,composedopt1n={composedlayout1,composedlayout2},[0473]composedlayoutl={VCO(0,0,0)(341,0,0)(0,768,0)(512,768,0),[0474]VC1(512,384,0)(1024,384,0)(512,768,0)(1024,768,0),[0475]VC2(512,0,0)(1024,0,0)(512,384,0)(1024,384,0)},[0476]Composedlayout2={VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0477]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0478]媒体接收方接收媒体提供方发送的至少一种媒体画面组合选择信息,并结合媒体接收方的终端显示能力、媒体接收方的本地策略确定媒体画面组成信息,该媒体画面组成信息中包括了媒体接收方的组合画面的选择结果,该媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,还可以是媒体接收方将媒体画面组成信息发送给门户网站,由媒体提供方从门户网站获取媒体接收方的组合画面的选择结果,此处以媒体画面组成信息携带在CLUE媒体配置消息中为例,媒体接收方选择采用3路视频画面(VC0,VC1,VC2)的组合,媒体接收方在CLUE媒体配置消息中的媒体画面组合选择相关描述如下:[0479]Configurat1n:[0480]CaptureScene1:[0481]CaptureSceneEntry2:VC4[0482]VC4:encodinggroup=EGl,content=view:room.full,composed=true,composedopt1n={composedlayoutl}。[0483]媒体提供方获知媒体接收方的组合画面选择结果之后,向媒体接收方发送组合画面的第一媒体参数,该第一媒体参数可以携带在第三SDP响应消息中,还可以是媒体提供方将该组合画面的第一媒体参数发送给门户网站,由媒体接收方从门户网站获取;媒体接收方接收到组合画面的第一媒体参数之后,向媒体提供方发送组合画面的第二媒体参数,该第二媒体参数可以携带在第三SDP响应消息中,还可以是媒体接收方将组合画面的第二媒体参数发送给门户网站,由媒体提供方从门户网站获取该组合画面的第二媒体参数,需要注意的是,媒体提供方和媒体接收方之间进行组合画面的第一媒体参数和第二媒体参数的交互主要是进行组合画面的编解码方式和带宽等参数的协商;之后,媒体提供方将媒体接收方选择的组合画面发送给媒体接收方予以呈现。[0484]本实施例提供的方法中,通过媒体提供方将至少一种媒体画面组合选择信息发送给媒体接收方,媒体接收方根据其终端的显示能力以及本地策略媒体画面组合选择信息进行选择,并将选择结果携带在媒体画面组成信息中发送给媒体提供方,以使媒体提供方将对应的组合画面发送给媒体接收方,即媒体接收方是按照自身的意愿或者能力对组合画面进行选择和呈现,因此提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0485]图15为本发明提供的多画面组合的呈现方法实施例十五的信令流程图,本实施例涉及的方法是通过CULE方式来实现多画面组合呈现的,如图15所示,该方法包括:[0486]S8001:媒体提供方发送第二SDP请求消息给媒体接收方,该第二SDP请求消息携带支持CLUE协议指示。[0487]S8002:媒体接收方发送第二SDP响应消息给媒体提供方,该第二SDP响应消息携带支持CLUE协议指示。[0488]具体的,在媒体提供方发送第一CLUE媒体通告消息给媒体接收方之前,要进行CLUE通道的建立,即媒体提供方将支持CLUE协议指示的信息携带在第二SDP请求消息中发送给媒体接收方,相应的,媒体接收方在获知媒体提供方支持CLUE协议后,会向媒体提供方发送第二SDP响应消息,该第二SDP响应消息中携带支持CLUE协议指示,CLUE通道建立成功。[0489]S8003:媒体提供方发送第一CLUE媒体通告消息给媒体接收方,该第一CLUE媒体通告消息中携带媒体画面组合能力指示信息。[0490]S8004:媒体接收方发送第一CLUE媒体配置消息给媒体提供方,第一CLUE媒体配置消息中携带媒体画面组成信息。[0491]具体的,媒体提供方发送第一CLUE媒体通告消息给媒体接收方,该第一CLUE媒体通告消息携带媒体画面组合能力指示信息,用以使得媒体接收方根据第一CLUE媒体通告消息获知媒体提供方具有组合画面的能力、媒体提供方提供的多路媒体画面以及多路媒体画面相关的位置信息;在此以一个例子来说明:媒体提供方可以提供3路单独媒体画面(VCO,VC1,VC2),媒体提供方在第一CLUE媒体通告消息中的媒体组合画面能力相关描述如下:[0492]Advertisement:[0493]CaptureScene1:[0494]CaptureSceneEntry1:VCO,VC1,VC2[0495]CaptureSceneEntry2:VC4[0496]VCO:encodinggroup=EG0,content=view:table,left;[0497]VC1:encodinggroup=EG0,content=view:table,center;[0498]VC2:encodinggroup=EG0,content=view:table,right;[0499]VC4:encodinggroup=EGl,content=view:room,composed=true;[0500]上述例子中,对于媒体画面组合能力描述的定义包含在composed中,携带该composed参数,即隐含表征媒体提供方具有媒体画面组合的能力。[0501]具体的,媒体接收方接收到媒体提供方发送的第一CLUE媒体通告消息后,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一CLUE配置消息,该第一CLUE媒体配置消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路媒体画面,最终媒体接收方选择釆用其中2路媒体画面(VC0,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一CLUE配置消息中的媒体组合选择相关描述如下:[0502]Configuration:[0503]CaptureScene1:[0504]CaptureSceneEntry2:VC4[0505]VC4:encodinggroup=EGl,content=view:room,partial,composed=true,composedlayout={VC0(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}[0506]上述例子中,媒体画面组合结果包含在composedlayout参数中,表示该组合画面由哪些单独媒体画面组成,而且画面的布局中每个单独画面采用三维立体坐标来表示媒体画面的范围。[0507]S8005:媒体提供方判断是否支持上述媒体画面组成信息;若支持,执行步骤S8006,若不支持,则执行步骤S8009。[0508]S8006:媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数。[0509]S8007:媒体接收方发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数。[0510]S8008:媒体提供方发送组合画面给媒体接收方。[0511]具体的,媒体提供方接收媒体接收方发送的第一CLUE媒体配置消息后,该第一CLUE媒体配置消息携带媒体画面组成信息,并且该媒体画面组成信息包括至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息,则媒体提供方根据对上述媒体画面组成信息中的支持能力,进行判断:若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的这两种场景中的任一场景,则媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数,并且上述组合画面是媒体提供方根据媒体画面组成信息所确定的;媒体接收方接收到媒体提供方发送的第三SDP请求消息之后,发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0512]S8009:媒体提供方发送否定应答消息给媒体接收方。[0513]S8100:媒体接收方根据否定应答消息生成更新后的媒体画面组成信息并携带在更新后的第一CLUE媒体配置消息中,发送给媒体提供方。[0514]S8101:媒体提供方对第一CLUE媒体配置消息进行S8005的判断。[0515]具体的,若媒体提供方不支持上述媒体画面组成信息,,则媒体提供方发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,该否定应答消息可以是CLUE否定应答消息;媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在更新后的第一CLUE媒体配置消息中再次发送给媒体提供方,媒体提供方接收更新后的第一CLUE媒体配置消息,依然对其再次进行上述S8005的判断过程,在此不再赘述。[0516]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送携带媒体画面组合能力指示信息的第一CLUE媒体通告消息,媒体接收方根据所接收到的第一CLUE媒体通告消息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息携带在第一CLUE媒体配置消息中,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0517]图16为本发明提供的多画面组合的呈现方法实施例十六的信令流程图,本实施例涉及的方法是通过SDP协议的方式实现多画面组合的呈现的,如图16所示,该方法包括:[0518]S9001:媒体提供方发送第一SDP请求消息给媒体接收方,该第一SDP请求消息中携带媒体画面组合能力指示信息。[0519]S9002:媒体接收方发送第一SDP响应消息给媒体提供方,该第一SDP响应消息中携带所述媒体画面组成信息。[0520]具体的,媒体提供方向媒体接收方发送第一SDP请求消息,该第一SDP请求消息携带媒体画面组合能力指示信息,并且还携带了多路媒体画面信息,并且该第一SDP请求消息可以携带在SIP消息中传输;此处以一个例子来说明:媒体提供方可以提供3路单独媒体视频画面(VCO,VC1,VC2),媒体提供方在第一SDP请求消息中的媒体画面信息相关描述如下:[0521]a=video-compose_capa,指不具有画面组合能力;[0522]m=video10000RTP/AVP98,指示第一路画面信息VCO;[0523]a=label:VCO[0524]a=rtpmap:98H264/90000[0525]m=video10002RTP/AVP98,指示第二路画面信息VC1;[0526]a=label:VC1[0527]a=rtpmap:98H264/9000[0528]m=video10004RTP/AVP31,指示第三路画面信息VC2;[0529]a=label:VC2[0530]a=rtpmap:31H261/9000。[0531]媒体接收方接收媒体提供方发送的第一SDP请求消息后,结合媒体接收方会议室的终端显示能力以及媒体接收方的本地策略,确定媒体画面组成信息,例如选择由哪几个媒体画面来进行组合、该组合画面如何布局等,并向媒体提供方发送第一SDP响应消息,该第一SDP响应消息中携带媒体画面组成信息;此处,同样以一个例子来说明:假设媒体接收方只有一个显示屏,只能接收1路视频画面,最终媒体接收方选择采用其中2路视频画面(VCO,VC1)来组合成一路,二路呈现左右平分画面;媒体接收方在第一SDP响应消息中的媒体画面组合的相关描述如下:[0532]a=composedlayout:VCO(0,0,0)(512,0,0)(0,768,0)(512,768,0),VC1(512,0,0)(1024,0,0)(512,768,0)(1024,760,0),表示媒体接收方希望将VCO,VC1组合,按照左右布局,各占50%;[0533]m=video20000RTP/AVP98,指示第一路画面信息VCO;[0534]a=label:VC0[0535]a=rtpmap:98H264/90000[0536]m=video0RTP/AVP31,指示第二路画面信息VC1;[0537]a=label:VC1[0538]a=rtpmap:31H261/9000[0539]m=video0RTP/AVP31,指示第三路画面信息VC2;[0540]a=label:VC2[0541]a=rtpmap:31H261/9000。[0542]S9003:媒体提供方判断是否支持上述媒体画面组成信息;若支持,执行步骤S9004,若不支持,则执行步骤S9007。[0543]S9004:媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数。[0544]S9005:媒体接收方发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数。[0545]S9006:媒体提供方发送组合画面给媒体接收方。[0546]具体的,媒体提供方接收媒体接收方发送的第一SDP响应消息,该第一SDP响应消息中携带媒体画面组成信息,并且该媒体画面组成信息中包括至少两路媒体画面的组合信息以及至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息,媒体提供方根据对上述至少两路媒体画面的组合和至少两路媒体画面的布局的支持能力,进行判断;若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,则若媒体提供方支持上述至少两路媒体画面的组合和至少两路媒体画面的布局,或,支持上述至少两路媒体画面的组合这两种场景中的任一场景,则媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数,并且上述组合画面是媒体提供方根据媒体画面组成信息所确定的;媒体接收方接收到媒体提供方发送的第三SDP请求消息之后,发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,媒体接收方和媒体提供方根据媒体画面参数的协商结果,建立双向多流媒体传输通道,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0547]S9007:媒体提供方发送否定应答消息给媒体接收方。[0548]S9008:媒体接收方根据否定应答消息生成更新后的媒体画面组成信息并携带在第一SDP响应消息中,发送给媒体提供方。[0549]S9009:媒体提供方对第一SDP响应消息执行S9003的判断。[0550]具体的,若媒体提供方不支持上述媒体画面组成信息中的任一场景,则媒体提供方发送否定应答消息给媒体接收方,向媒体接收方表示不接受该媒体画面组成信息,该否定应答消息可以是SIP否定应答消息;媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息携带在第一SDP响应消息中再次发送给媒体提供方,媒体提供方接收更新后的第一SDP响应消息,依然对其再次进行上述S9003的判断过程,在此不再赘述。[0551]本发明实施例提供的方法,通过媒体提供方向媒体接收方发送携带媒体画面组合能力指示信息的第一SDP请求消息,媒体接收方根据所接收到的第一SDP请求消息、媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息携带在第一SDP响应消息中,媒体提供方根据媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0552]图17为本发明提供的多画面组合的呈现方法实施例十七的信令流程图,本实施例涉及的方法是通过门户网站的方式实现多画面组合的呈现的,如图17所示,该方法包括:[0553]S1100:媒体提供方发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站。[0554]S1101:媒体接收方从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图,并根据上述媒体画面组合能力指示信息和媒体画面的缩略图确定媒体画面组成信肩、Ο[0555]S1102:媒体接收方发送媒体画面组成信息给门户网站。[0556]S1103:媒体提供方从门户网站获取媒体接收方发送的媒体画面组成信息。[0557]具体的,本发明实施例中媒体提供方和媒体接收放都已经成功登陆到门户网站上;媒体提供方通过门户网站的接口将媒体画面组合能力指示信息和媒体画面的缩略图发送给门户网站,并且呈现在门户网站的界面上,以使媒体接收方从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图;媒体接收方通过门户网站接口查看到媒体提供方提供的媒体画面缩略图,从门户网站获取媒体画面组合能力指示信息和媒体画面的缩略图,并结合媒体接收方的会议室的终端显示能力以及媒体接收方本地策略,确定媒体画面组成信息,并将该媒体画面组成信息中包含至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息,通过门户网站接口呈现在门户网站界面上;媒体提供方从门户网站上获取该媒体画面组成信息。[0558]S1104:媒体提供方判断是否支持上述媒体画面组成信息;若支持,执行步骤S1105,若不支持,则执行步骤S1108。[0559]S1105:媒体提供方发送组合画面的第一媒体参数给门户网站。[0560]S1106:媒体接收方从门户网站获取组合画面的第一媒体参数,并发送组合画面的第二媒体参数给门户网站。[0561]S1107:媒体提供方接收上述第二媒体参数,并发送组合画面给媒体接收方。[0562]具体的,媒体提供方从门户网站上获取该媒体画面组成信息,并且该媒体画面组成信息包括至少两路媒体画面的组合信息及至少两路媒体画面的布局信息,或,至少两路媒体画面的组合信息;媒体提供方对该媒体画面组成信息中所包含的内容进行是否支持的判断,具体为:若媒体提供方支持上述媒体画面组成信息,则媒体提供方发送组合画面的第一媒体参数给门户网站,以使媒体接收方从门户网站获取第一媒体参数;媒体接收方从门户网站获取到媒体提供方发送的第一媒体参数之后,向门户网站发送第二媒体参数,以使媒体提供方可以从门户网站获取第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商;之后,媒体提供方根据上述媒体画面组成信息、第一媒体参数和第二媒体参数确定组合画面,并将组合画面发送给媒体接收方予以呈现。[0563]S1108:媒体提供方发送否定应答消息给门户网站。[0564]S1109:媒体接收方从门户网站获取否定应答消息,并根据否定应答消息生成更新后的媒体画面组成信息,发送给门户网站。[0565]S1110:媒体提供方从门户网站获取更新后的媒体画面组成信息,并对更新后的媒体画面组成信息执行S1104的判断。[0566]具体的,若媒体提供方不支持上述媒体画面组成信息,则发送否定应答消息给门户网站,以使媒体接收方从门户网站获知媒体提供方不接受该媒体画面组成信息,则媒体接收方会重新生成新的媒体画面组成信息,即更新至少两路媒体画面的组合信息和至少两路媒体画面的布局信息,将更新后的媒体画面组成信息再次发送给门户网站,媒体提供方从门户网站获取更新后的媒体画面组成信息,依然对其再次进行S1104的判断过程,在此不再赘述。[0567]本发明实施例提供的方法,通过媒体提供方向门户网站发送携带媒体画面组合能力指示信息和媒体画面缩略图,媒体接收方从门户网站获取该媒体画面组合能力指示信息和媒体画面缩略图后,结合媒体接收方的终端显示能力以及媒体接收方的本地策略确定媒体画面的组成信息,并将该媒体画面的组成信息发送给门户网站;媒体提供方根据从门户网站获取的媒体接收方所确定的媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的媒体画面组成信息确定的媒体组合画面,即媒体接收方可以定制自身所要呈现的组合画面,从而提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0568]图18为本发明提供的多画面组合的呈现方法实施例十八的信令流程图,本实施例涉及的方法针对的是会议召开之后,网络情况发生变化,组合画面发生变更的处理方法,如图18所示,该方法包括:[0569]S2100:媒体提供方发送媒体画面变化信息给媒体接收方。[0570]S2101:媒体接收方接收该媒体画面变化信息,并根据该媒体画面变化信息生成的更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息。[0571]S2102:媒体接收方发送更新后的第一媒体画面组成信息。[0572]具体的,在视频会议召开之后,即在媒体提供方发送组合画面给媒体接收方之后,媒体提供方检测到网络情况发生变化,比如拥塞或者组合画面中某一源会场离会或者新的会场入会等,则媒体提供方会向媒体接收方发送媒体画面变化信息,其中,该媒体画面变化信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,还可以是媒体提供方将媒体画面变化信息发送给门户网站,由媒体接收方从门户网站获取该媒体画面变化信息;此处以该媒体画面变化信息携带在CLUE媒体通告消息中为例来说明,假设媒体提供方原来提供3路单独视频画面(VCO,VC1,VC2),媒体接收方选择VCO,VC1进行组合,这时VC0画面消失,媒体提供方在CLUE媒体通告消息中通知组合画面变更,具体描述如下:[0573]Advertisement:[0574]CaptureScene1:[0575]CaptureSceneEntry1:VC1,VC2[0576]CaptureSceneEntry2:VC4[0577]VC1:encodinggroup=EG0,content=view:table,center;[0578]VC2:encodinggroup=EG0,content=view:table,right;[0579]VC4:encodinggroup=EGl,content=view:room,composed=true,composedupdate={VCO:off,VC1};[0580]上述例子中,媒体画面组合结果包含在composedupdate中,表示组合画面变更,VC0关闭。[0581]媒体接收方在接收到媒体提供方发送的媒体画面变化信息之后,获知该视频会议的网络情况发生变化,则媒体接收方根据该媒体画面变化信息生成更新后的第一媒体画面组成信息,该第一媒体画面组成信息中包括:至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,或,至少两路媒体画面的第一更新组合信息,并将该第一媒体画面组成信息发送给媒体提供方,其中,该第一媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP请求响应消息中,还可以是媒体接收方将更新后的第一媒体画面组成信息发送给门户网站,由媒体提供方从门户网站获取更新后的第一媒体画面组成信息;这里同样以第一媒体画面组成信息携带在CLUE媒体配置消息中为例来说明:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新的媒体画面组合选择相关描述如下:[0582]Configurat1n:[0583]CaptureScene1:[0584]CaptureSceneEntry2:VC4[0585]VC4:encodinggroup=EGlcontent=view:room.partial,composed=true,[0586]composedlayout:{VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0587]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0588]S2103:媒体提供方判断是否支持上述第一媒体画面组成信息,若支持,则执行S2104,若不支持,则执行S2107。[0589]S2104:媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数。[0590]S2105:媒体接收方发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数。[0591]S2106:媒体提供方发送组合画面给媒体接收方。[0592]具体的,媒体提供方接收媒体接收方发送的第一媒体画面组成信息,并对第一媒体组成信息中的内容执行判断操作,即判断是否支持至少两路媒体画面的第一更新组合和至少两路媒体画面的第一更新布局,或,至少两路媒体画面的第一更新组合这两种场景中的任一场景,具体为:若媒体提供方支持上述第一媒体画面组成信息,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,会向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体提供方根据上述第一媒体画面组成信息、第一媒体参数和第二媒体参数确定更新后的组合画面,并将更新后组合画面发送给媒体接收方予以呈现。[0593]S2107:媒体提供方发送否定应答消息给媒体接收方。[0594]S2108:媒体接收方根据否定应答消息生成更新后的媒体画面组成信息,发送给媒体提供方。[0595]S2109:媒体提供方对更新后的媒体画面组成信息执行S2103的判断。[0596]具体的,媒体提供方不支持上述第一媒体画面组成信息,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第一媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第一更新组合信息和至少两路媒体画面的第一更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述S2103的判断过程,在此不再赘述。[0597]本发明实施例提供的方法,在视频会议召开之后,网络发生变化的情况下,通过媒体提供方向媒体接收方发送媒体画面变化信息,以使媒体接收方根据媒体画面变化信息生成更新后的第一媒体画面组成信息,媒体提供方根据第一媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第一媒体画面组成信息确定的媒体组合画面,同时还使得媒体提供方和媒体接收方可以实时根据网络变化情况对所所组合的媒体画面做出调整,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0598]图19为本发明提供的多画面组合的呈现方法实施例十九的信令流程图,本实施例涉及的方法是在会议召开之后,由媒体接收方主动发起组合画面调整的指示,如图19所示,该方法包括:[0599]S3100:媒体接收方发送更新后的第二媒体画面组成信息,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息。[0600]具体的,媒体接收方自行想更新所呈现的组合画面,则媒体接收方根据自身的能力生成更新后的第二媒体画面组成信息,并将该第二媒体画面组成信息发送给媒体提供方,该第二媒体画面组成信息中包括:至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,或,至少两路媒体画面的第二更新组合信息,其中,该第二媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,还可以是媒体接收方将更新后的第二媒体画面组成信息发送给门户网站,由媒体提供方从门户网站获取该更新后的第二媒体画面组成信息;这里以第二媒体画面组成信息携带在CLUE媒体配置消息中为例:媒体接收方选择采用2路视频画面(VC1,VC2)来组合成一路,二路呈现左右平分画面,媒体接收方在CLUE媒体配置消息中的新媒体画面组合选择相关描述如下:[0601]Configurat1n:[0602]CaptureScene1:[0603]CaptureSceneEntry2:VC4[0604]VC4:encodinggroup=EGl,content=view:room.partial,composed=true,[0605]composedlayout:{VC1(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0606]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0607]S3101:媒体提供方接收更新后的第二媒体画面组成信息,判断是否支持上述第二媒体画面组成信息;若支持,执行S3102,若不支持,则执行S3105。[0608]S3102:媒体提供方发送第三SDP请求消息给媒体接收方,该第三SDP请求消息中携带组合画面的第一媒体参数。[0609]S3103:媒体接收方发送第三SDP响应消息给媒体提供方,该第三SDP响应消息中携带组合画面的第二媒体参数。[0610]S3104:媒体提供方发送组合画面给媒体接收方。[0611]具体的,媒体提供方接收媒体接收方发送的第二媒体画面组成信息,判断是否支持上述更新后的第二媒体画面组成信息,具体为:若媒体提供方支持上述至少两路媒体画面的第二更新组合和至少两路媒体画面的第二更新布局,或,支持上述至少两路媒体画面的第二更新组合这两种场景中的任一场景,可选的,媒体提供方可以发送组合画面的第一媒体参数给媒体接收方;媒体接收方接收到媒体提供方发送的第一媒体参数之后,向媒体提供方发送第二媒体参数,这里的第一媒体参数和第二媒体参数是媒体提供方和媒体接收方对组合画面的编解码方式以及传输带宽等参数的协商,需要注意的,本实施例中也可以不进行组合画面的第一媒体参数和组合画面的第二媒体参数的交互,因为在视频会议召开之前媒体发送方和媒体接收方针对组合画面的第一媒体参数和第二媒体参数已经协商过了;之后,媒体提供方根据上述第二媒体画面组成信息、第一媒体参数和第二媒体参数确定更新后的组合画面,并将更新后组合画面发送给媒体接收方予以呈现。[0612]S3105:媒体提供方发送否定应答消息给媒体接收方。[0613]S3106:媒体接收方根据否定应答消息生成更新后的媒体画面组成信息,发送给媒体提供方。[0614]S3107:媒体提供方接收更新后的媒体画面组成信息执行S3101的判断。[0615]具体的,若媒体提供方不支持上述第二媒体画面组成信息,则发送否定应答消息给媒体接收方,向媒体接收方表示不接受该第二媒体画面组成信息,媒体接收方在接收到该否定应答消息之后,重新生成新的媒体画面组成信息,即更新至少两路媒体画面的第二更新组合信息和至少两路媒体画面的第二更新布局信息,将更新后的媒体画面组成信息再次发送给媒体提供方,媒体提供方接收更新后的媒体画面组成信息,依然对其再次进行上述S3101的判断过程,在此不再赘述。[0616]本发明实施例提供的方法,在视频会议召开之后,媒体提供方自行更新媒体画面,即媒体接收方自行生成更新后的第二媒体画面组成信息,媒体提供方根据第二媒体画面组成信息执行相应的操作,使得媒体接收方接收到的媒体组合画面为媒体提供方根据媒体接收方发送的第二媒体画面组成信息确定的媒体组合画面,提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度和适用性。[0617]图20为本发明提供的多画面组合的呈现方法实施例二十的信令流程图,本实施例涉及的方法是针对多点视频会议中,媒体提供方发送多个默认组合的媒体画面给媒体接收方,以供媒体接收方根据自身的能力选择合适的组合画面,如图20所示,该方法包括:[0618]S4100:媒体提供方发送至少一种媒体画面组合选择信息给媒体接收方。[0619]S4101:媒体接收方根据上述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0620]具体的,媒体提供方向媒体接收方发送至少一种媒体画面组合选择信息,该媒体画面组合选择信息为媒体提供方自行组合的媒体组合画面,其中,该媒体画面组合选择信息可以携带在CLUE媒体通告消息中,也可以携带在SDP请求消息中,还可以是媒体提供方将至少一种的媒体画面组合选择信息发送给门户网站,由媒体接收方从门户网站获取该至少一种媒体画面组合选择信息,此处以上述媒体画面组合选择信息携带在CLUE媒体配置消息中为例:媒体提供方原来提供3路单独视频画面(VC0,VC1,VC2),默认的组合方式为:三个单独画面的组合{VC0,VC1,VC2},两个单独画面的组合{VC0,VC1},媒体提供方在CLUE媒体通告消息中通知默认的媒体组合画面,具体描述如下:[0621]Advertisement:[0622]CaptureScene1:[0623]CaptureSceneEntryl:VC0,VC1,VC2[0624]CaptureSceneEntry2:VC4[0625]VCO:encodinggroup=EG0,content=view:table,left;[0626]VC1:encodinggroup=EG0,content=view:table,center;[0627]VC2:encodinggroup=EG0,content=view:table,right;[0628]VC4:encodinggroup=EGl,content=view:room,composed=true,composedopt1n={composedlayoutl,composedlayout2},[0629]composedlayout1={VCO(0,0,0)(341,0,0)(0,768,0)(512,768,0),[0630]VC1(512,384,0)(1024,384,0)(512,768,0)(1024,768,0),[0631]VC2(512,0,0)(1024,0,0)(512,384,0)(1024,384,0)},[0632]Composedlayout2={VCl(0,0,0)(512,0,0)(0,768,0)(512,768,0),[0633]VC2(512,0,0)(1024,0,0)(512,768,0)(1024,760,0)}。[0634]媒体接收方接收媒体提供方发送的至少一种媒体画面组合选择信息,并结合媒体接收方的终端显示能力、媒体接收方的本地策略确定媒体画面组成信息,该媒体画面组成信息中包括了媒体接收方的组合画面的选择结果,该媒体画面组成信息可以携带在CLUE媒体配置消息中,也可以携带在SDP响应消息中,还可以是媒体接收方将媒体画面组成信息发送给门户网站,由媒体提供方从门户网站获取媒体接收方的组合画面的选择结果,此处以媒体画面组成信息携带在CLUE媒体配置消息中为例,媒体接收方选择采用3路视频画面(VC0,VC1,VC2)的组合,媒体接收方在CLUE媒体配置消息中的媒体画面组合选择相关描述如下:[0635]Configuration:[0636]CaptureScene1:[0637]CaptureSceneEntry2:VC4[0638]VC4:encodinggroup=EGl,content=view:room.full,composed=true,composedopt1n={composedlayoutl}。[0639]媒体提供方获知媒体接收方的组合画面选择结果之后,向媒体接收方发送组合画面的第一媒体参数,该第一媒体参数可以携带在第三SDP响应消息中,还可以是媒体提供方将该组合画面的第一媒体参数发送给门户网站,由媒体接收方从门户网站获取;媒体接收方接收到组合画面的第一媒体参数之后,向媒体提供方发送组合画面的第二媒体参数,该第二媒体参数可以携带在第三SDP响应消息中,还可以是媒体接收方将组合画面的第二媒体参数发送给门户网站,由媒体提供方从门户网站获取该组合画面的第二媒体参数,需要注意的是,媒体提供方和媒体接收方之间进行组合画面的第一媒体参数和第二媒体参数的交互主要是进行组合画面的编解码方式和带宽等参数的协商;之后,媒体提供方将媒体接收方选择的组合画面发送给媒体接收方予以呈现。[0640]本实施例提供的方法中,通过媒体提供方将至少一种媒体画面组合选择信息发送给媒体接收方,媒体接收方根据其终端的显示能力以及本地策略媒体画面组合选择信息进行选择,并将选择结果携带在媒体画面组成信息中发送给媒体提供方,以使媒体提供方将对应的组合画面发送给媒体接收方,即媒体接收方是按照自身的意愿或者能力对组合画面进行选择和呈现,因此提高了组合媒体画面呈现的灵活性,提升了媒体接收方用户的会议体验度。[0641]本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:R0M、RAM、磁碟或者光盘等各种可以存储程序代码的介质。[0642]图21为本发明提供的多画面组合的装置实施例一的结构示意图,如图21所示,该装置包括:第一发送模块10,用于发送媒体画面组合能力指示信息给媒体接收方;第一接收模块11,用于接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息;处理模块12,用于根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0643]本实施例的多画面组合的装置可以执行图1所示的方法实施例,实现原理相类似,在此不再赘述。[0644]图22为本发明提供的多画面组合的装置实施例二的结构示意图,在上述图21所示实施例的基础上,上述处理模块12,包括:第一处理单元120,用于若支持所述媒体画面组成信息,则发送组合画面的第一媒体参数给所述媒体接收方;并接收所述媒体接收方发送的所述组合画面的第二媒体参数;并将根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面发送给所述媒体接收方;或者,第二处理单元121,用于若不支持所述媒体画面组成信息,则发送否定应答消息给所述媒体接收方。[0645]在上述图22所示实施例的基础上,进一步地,上述第一发送模块10,包括:第一发送单元101,用于发送第一远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;则上述第一接收模块11包括:第一接收单元111,用于接收所述媒体接收方发送的第一CLUE媒体配置消息,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0646]本实施例的多画面组合的装置可以执行图2所示的方法实施例,实现原理相类似,在此不再赘述。[0647]继续参照图22,进一步地,在上述图22所示实施例的基础上,上述第一发送模块10包括:第二发送单元102,用于发送第一会话描述协议SDP请求消息给所述媒体接收方,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则上述第一接收模块11,包括:第二接收单元112,用于接收所述媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息。[0648]本实施例的多画面组合的装置可以执行图3所示的方法实施例,实现原理相类似,在此不再赘述。[0649]继续参照图22,进一步地,在上述图22所示实施例的基础上,上述第一发送模块10包括:第三发送单元103,用于发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使所述媒体接收方从所述门户网站获取所述媒体画面组合能力指示信息和所述媒体画面的缩略图;则所述第一接收模块11,包括:第三接收单元113,用于从所述门户网站获取所述媒体接收方发送的根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定的所述媒体画面组成信息。[0650]本实施例的多画面组合的装置可以执行图4所示的方法实施例,实现原理相类似,在此不再赘述。[0651]图23为本发明提供的多画面组合的装置实施例三的结构示意图,在上述图22所示实施例的基础上,该装置还包括:第二发送模块13,用于在发送远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方之前,发送第二SDP请求消息给所述媒体接收方,所述第二SDP请求消息携带支持CLUE协议指示;第二接收模块14,用于接收所述媒体接收方发送的第二SDP响应消息,所述第二SDP响应消息携带支持所述CLUE协议指示。[0652]本实施例的多画面组合的装置可以执行图2所示的方法实施例,实现原理相类似,在此不再赘述。[0653]继续参照图23,在图23所示实施例的基础上,上述第一处理单元120包括:第一发送子单元1201,用于发送第三SDP请求消息给所述媒体接收方,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;第一接收子单元1202,用于接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0654]本实施例的多画面组合的装置可以执行上述方法实施例,实现原理相类似,在此不再赘述。[0655]继续参照图23,在图23所示实施例的基础上,上述第一处理单元120还包括:第二发送子单元1203,用于发送所述组合画面的第一媒体参数给门户网站,以使所述媒体接收方从所述门户网站获取所述组合画面的所述第一媒体参数;第二接收子单元1204,用于从门户网站获取所述媒体接收方发送的所述组合画面的第二媒体参数。[0656]本实施例的多画面组合的装置可以执行上述方法实施例,实现原理相类似,在此不再赘述。[0657]继续参照图23,在图23所示实施例的基础上,该装置还包括:第三发送模块15,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送媒体画面变化信息给所述媒体接收方;第三接收模块16,用于接收所述媒体接收方根据所述媒体画面变化信息生成的更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;则所述处理模块12还用于根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0658]本实施例的多画面组合的装置可以执行图5所示的方法实施例,实现原理相类似,在此不再赘述。[0659]继续参照图23,在图23所示实施例的基础上,该装置还包括:第四接收模块17,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体接收方更新后的第二媒体画面组成信息,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息;则所述处理模块12还用于根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0660]本实施例的多画面组合的装置可以执行图6所示的方法实施例,实现原理相类似,在此不再赘述。[0661]进一步地,在图23所示实施例的基础上,上述第一发送模块10,还用于发送至少一种媒体画面组合选择信息给所述媒体接收方,以使所述媒体接收方根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0662]本实施例的多画面组合的装置可以执行图7所示的方法实施例,实现原理相类似,在此不再赘述。[0663]图24为本发明提供的多画面组合的装置实施例四的结构示意图,如图24所示,该装置包括:第一接收模块20,用于接收媒体提供方发送的媒体画面组合能力指示信息;确定模块21,用于根据所述媒体画面组合能力指示信息确定媒体画面组成信息;第一发送模块22,用于将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0664]本实施例的多画面组合的装置可以执行图8所示的方法实施例,实现原理相类似,在此不再赘述。[0665]图25为本发明提供的多画面组合的装置实施例五的结构示意图,在上述图24所示实施例的基础上,上述第一发送模块22,包括:第一处理单元220,用于若所述媒体提供方支持所述媒体画面组成信息,则接收所述媒体提供方发送的组合画面的第一媒体参数;并发送所述组合画面的第二媒体参数给所述媒体提供方;并接收所述媒体提供方根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面;或者,第二处理单元221,用于若所述媒体提供方不支持所述媒体画面组成信息,则接收所述媒体提供方发送的否定应答消息。[0666]在上述图25所不实施例的基础上,进一步地,上述第一接收模块20,包括--第一接收单元201,用于接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;则所述第一发送模块22,包括:第一发送单元222,用于发送第一CLUE媒体配置消息给所述媒体提供方,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。[0667]本实施例的多画面组合的装置可以执行图9所示的方法实施例,实现原理相类似,在此不再赘述。[0668]继续参照图25,在图25所示实施例的基础上,进一步地,上述第一接收模块20,包括:第二接收单元202,用于接收所述媒体提供方发送的第一会话描述协议SDP请求消息,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则所述第一发送模块22,包括:第二发送单兀223,用于发送第一SDP响应消息给所述媒体提供方,所述第一SDP响应消息中携带所述媒体画面组成信息。[0669]本实施例的多画面组合的装置可以执行图10所示的方法实施例,实现原理相类似,在此不再赘述。[0670]继续参照图25,在图25所示实施例的基础上,进一步地,上述第一接收模块20,包括:第三接收单元203,用于从门户网站获取所述媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图;则所述第一发送模块22,包括:第三发送单元224,用于根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定所述媒体画面组成信息,并将所述媒体画面组成信息发送给所述门户网站,以使所述媒体提供方从所述门户网站获取所述媒体画面组成信息。[0671]本实施例的多画面组合的装置可以执行图11所示的方法实施例,实现原理相类似,在此不再赘述。[0672]图26为本发明提供的多画面组合的装置实施例六的结构示意图,在上述图25所示实施例的基础上,该装置还包括:第二接收模块23,用于在接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息之前,接收所述媒体提供方发送的第二SDP请求消息,所述第二SDP请求消息携带支持CLUE协议指示;第二发送模块24,用于发送第二SDP响应消息给所述媒体提供方,所述第二SDP响应消息中携带支持所述CLUE协议指示。[0673]本实施例的多画面组合的装置可以执行图9所示的方法实施例,实现原理相类似,在此不再赘述。[0674]继续参照图26,在图26所示实施例的基础上,进一步地,上述第一处理单元220,包括:第一接收子单元2201,用于接收所述媒体提供方发送的第三SDP请求消息,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;第一发送子单元2202,用于发送第三SDP响应消息给所述媒体提供方,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。[0675]本实施例的多画面组合的装置可以执行上述方法实施例,实现原理相类似,在此不再赘述。[0676]继续参照图26,在图26所示实施例的基础上,进一步地,上述第一处理单元220,还包括:第二接收子单元2203,用于从门户网站获取所述媒体提供方发送的所述组合画面的第一媒体参数;第二发送子单元2204,用于将所述组合画面的第二媒体参数发送至所述门户网站,以使所述媒体提供方从所述门户网站获取所述组合画面的第二媒体参数。[0677]本实施例的多画面组合的装置可以执行上述方法实施例,实现原理相类似,在此不再赘述。[0678]继续参照图26,在图26所示实施例的基础上,进一步地,该装置还包括:第三接收模块25,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体提供方发送的媒体画面变化信息;生成模块26,用于根据所述媒体画面变化信息生成更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;第三发送模块27,用于将所述第一媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0679]本实施例的多画面组合的装置可以执行图12所示的方法实施例,实现原理相类似,在此不再赘述。[0680]继续参照图26,在图26所示实施例的基础上,进一步地,该装置还包括:第四发送模块28,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送更新后的第二媒体画面组成信息给所述媒体提供方,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息,以使所述媒体提供方根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。[0681]本实施例的多画面组合的装置可以执行图13所示的方法实施例,实现原理相类似,在此不再赘述。[0682]继续参照图26,在图26所示实施例的基础上,进一步地,上述第一接收模块20还用于接收所述媒体提供方发送的至少一种媒体画面组合选择信息;则所述确定模块21具体用于根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。[0683]本实施例的多画面组合的装置可以执行图14所示的方法实施例,实现原理相类似,在此不再赘述。[0684]最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。【权利要求】1.一种多画面组合的呈现方法,其特征在于,包括:发送媒体画面组合能力指示信息给媒体接收方;接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成息;根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。2.根据权利要求1所述的方法,其特征在于,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。3.根据权利要求1所述的方法,其特征在于,所述根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,包括:若支持所述媒体画面组成信息,则发送组合画面的第一媒体参数给所述媒体接收方;接收所述媒体接收方发送的所述组合画面的第二媒体参数;将根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面发送给所述媒体接收方;或者,若不支持所述媒体画面组成信息,则发送否定应答消息给所述媒体接收方。4.根据权利要求3所述的方法,其特征在于,发送媒体画面组合能力指示信息给媒体接收方,包括:发送第一远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:接收所述媒体接收方发送的第一CLUE媒体配置消息,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。5.根据权利要求3所述的方法,其特征在于,发送媒体画面组合能力指示信息给媒体接收方,包括:发送第一会话描述协议SDP请求消息给所述媒体接收方,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:接收所述媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息。6.根据权利要求3所述的方法,其特征在于,发送媒体画面组合能力指示信息给媒体接收方,包括:发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使所述媒体接收方从所述门户网站获取所述媒体画面组合能力指示信息和所述媒体画面的缩略图;则接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息,包括:从所述门户网站获取所述媒体接收方发送的根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定的所述媒体画面组成信息。7.根据权利要求4所述的方法,其特征在于,发送远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方之前,还包括:发送第二SDP请求消息给所述媒体接收方,所述第二SDP请求消息携带支持CLUE协议指示;接收所述媒体接收方发送的第二SDP响应消息,所述第二SDP响应消息携带支持所述CLUE协议指示。8.根据权利要求4或5所述的方法,其特征在于,发送组合画面的第一媒体参数给所述媒体接收方,包括:发送第三SDP请求消息给所述媒体接收方,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;则接收所述媒体接收方发送的所述组合画面的第二媒体参数,包括:接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。9.根据权利要求6所述的方法,其特征在于,发送组合画面的第一媒体参数给所述媒体接收方,包括:发送所述组合画面的第一媒体参数给门户网站,以使所述媒体接收方从所述门户网站获取所述组合画面的所述第一媒体参数;则接收所述媒体接收方发送的所述组合画面的第二媒体参数,包括:从门户网站获取所述媒体接收方发送的所述组合画面的第二媒体参数。10.根据权利要求1所述的方法,其特征在于,根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:发送媒体画面变化信息给所述媒体接收方;接收所述媒体接收方根据所述媒体画面变化信息生成的更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。11.根据权利要求1所述的方法,其特征在于,根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:接收所述媒体接收方更新后的第二媒体画面组成信息,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和/或所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息;根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。12.根据权利要求1所述的方法,其特征在于,发送媒体画面组合能力指示信息给媒体接收方,还包括:发送至少一种媒体画面组合选择信息给所述媒体接收方,以使所述媒体接收方根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。13.—种多画面组合的呈现方法,其特征在于,包括:接收媒体提供方发送的媒体画面组合能力指示信息;根据所述媒体画面组合能力指示信息确定媒体画面组成信息;将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。14.根据权利要求13所述的方法,其特征在于,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。15.根据权利要求13所述的方法,其特征在于,将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作,包括:若所述媒体提供方支持所述媒体画面组成信息,则接收所述媒体提供方发送的组合画面的第一媒体参数;并发送所述组合画面的第二媒体参数给所述媒体提供方;并接收所述媒体提供方根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面;或者,若所述媒体提供方不支持所述媒体画面组成信息,则接收所述媒体提供方发送的否定应答消息。16.根据权利要求15所述的方法,其特征在于,接收媒体提供方发送的媒体画面组合能力指示信息,包括:接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;则将所述媒体画面组成信息发送给所述媒体提供方,包括:发送第一CLUE媒体配置消息给所述媒体提供方,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。17.根据权利要求15所述的方法,其特征在于,接收媒体提供方发送的媒体画面组合能力指示信息,包括:接收所述媒体提供方发送的第一会话描述协议SDP请求消息,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则将所述媒体画面组成信息发送给所述媒体提供方,包括:发送第一SDP响应消息给所述媒体提供方,所述第一SDP响应消息中携带所述媒体画面组成信息。18.根据权利要求15所述的方法,其特征在于,接收媒体提供方发送的媒体画面组合能力指示信息,包括:从门户网站获取所述媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图;则将所述媒体画面组成信息发送给所述媒体提供方,包括:根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定所述媒体画面组成信息,并将所述媒体画面组成信息发送给所述门户网站,以使所述媒体提供方从所述门户网站获取所述媒体画面组成信息。19.根据权利要求16所述的方法,其特征在于,在接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息之前,还包括:接收所述媒体提供方发送的第二SDP请求消息,所述第二SDP请求消息携带支持CLUE协议指示;发送第二SDP响应消息给所述媒体提供方,所述第二SDP响应消息中携带支持所述CLUE协议指示。20.根据权利要求16或17所述的方法,其特征在于,接收所述媒体提供方发送的组合画面的第一媒体参数,包括:接收所述媒体提供方发送的第三SDP请求消息,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;则发送所述组合画面的第二媒体参数给所述媒体提供方,包括:发送第三SDP响应消息给所述媒体提供方,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。21.根据权利要求18所述的方法,其特征在于,接收所述媒体提供方发送的组合画面的第一媒体参数,包括:从门户网站获取所述媒体提供方发送的所述组合画面的第一媒体参数;则发送所述组合画面的第二媒体参数给所述媒体提供方,包括:将所述组合画面的第二媒体参数发送至所述门户网站,以使所述媒体提供方从所述门户网站获取所述组合画面的第二媒体参数。22.根据权利要求13所述的方法,其特征在于,在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:接收所述媒体提供方发送的媒体画面变化信息;根据所述媒体画面变化信息生成更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;将所述第一媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。23.根据权利要求13所述的方法,其特征在于,在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,还包括:发送更新后的第二媒体画面组成信息给所述媒体提供方,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息,以使所述媒体提供方根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。24.根据权利要求13所述的方法,其特征在于,所述接收媒体提供方发送的媒体画面组合能力指示信息,还包括:接收所述媒体提供方发送的至少一种媒体画面组合选择信息;则根据所述媒体画面组合能力指示信息确定媒体画面组成信息,包括:根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。25.—种多画面组合的装置,其特征在于,包括:第一发送模块,用于发送媒体画面组合能力指示信息给媒体接收方;第一接收模块,用于接收所述媒体接收方发送的根据所述媒体画面组合能力指示信息确定的媒体画面组成信息;处理模块,用于根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。26.根据权利要求25所述的装置,其特征在于,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。27.根据权利要求25所述的装置,其特征在于,所述处理模块,包括:第一处理单元,用于若支持所述媒体画面组成信息,则发送组合画面的第一媒体参数给所述媒体接收方;并接收所述媒体接收方发送的所述组合画面的第二媒体参数;并将根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面发送给所述媒体接收方;或者,第二处理单元,用于若不支持所述媒体画面组成信息,则发送否定应答消息给所述媒体接收方。28.根据权利要求27所述的装置,其特征在于,所述第一发送模块,包括:第一发送单元,用于发送第一远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;则所述第一接收模块包括:第一接收单元,用于接收所述媒体接收方发送的第一CLUE媒体配置消息,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。29.根据权利要求27所述的装置,其特征在于,所述第一发送模块,包括:第二发送单元,用于发送第一会话描述协议SDP请求消息给所述媒体接收方,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则所述第一接收模块,包括:第二接收单元,用于接收所述媒体接收方发送的第一SDP响应消息,所述第一SDP响应消息中携带所述媒体画面组成信息。30.根据权利要求27所述的装置,其特征在于,所述第一发送模块,包括:第三发送单元,用于发送媒体画面组合能力指示信息以及媒体画面的缩略图给门户网站,以使所述媒体接收方从所述门户网站获取所述媒体画面组合能力指示信息和所述媒体画面的缩略图;则所述第一接收模块,包括:第三接收单元,用于从所述门户网站获取所述媒体接收方发送的根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定的所述媒体画面组成信息。31.根据权利要求28所述的装置,其特征在于,所述装置还包括:第二发送模块,用于在发送远程呈现的多流控制CLUE媒体通告消息给所述媒体接收方之前,发送第二SDP请求消息给所述媒体接收方,所述第二SDP请求消息携带支持CLUE协议指示;第二接收模块,用于接收所述媒体接收方发送的第二SDP响应消息,所述第二SDP响应消息携带支持所述CLUE协议指示。32.根据权利要求28或29所述的装置,其特征在于,所述第一处理单元,包括:第一发送子单元,用于发送第三SDP请求消息给所述媒体接收方,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;第一接收子单元,用于接收所述媒体接收方发送的第三SDP响应消息,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。33.根据权利要求30所述的装置,其特征在于,所述第一处理单元,包括:第二发送子单元,用于发送所述组合画面的第一媒体参数给门户网站,以使所述媒体接收方从所述门户网站获取所述组合画面的所述第一媒体参数;第二接收子单元,用于从门户网站获取所述媒体接收方发送的所述组合画面的第二媒体参数。34.根据权利要求25所述的装置,其特征在于,所述装置还包括:第三发送模块,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送媒体画面变化信息给所述媒体接收方;第三接收模块,用于接收所述媒体接收方根据所述媒体画面变化信息生成的更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;则所述处理模块还用于根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。35.根据权利要求25所述的装置,其特征在于,所述装置还包括:第四接收模块,用于在根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体接收方更新后的第二媒体画面组成信息,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息;则所述处理模块还用于根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。36.根据权利要求25所述的装置,其特征在于,第一发送模块,还用于发送至少一种媒体画面组合选择信息给所述媒体接收方,以使所述媒体接收方根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。37.一种多画面组合的装置,其特征在于,包括:第一接收模块,用于接收媒体提供方发送的媒体画面组合能力指示信息;确定模块,用于根据所述媒体画面组合能力指示信息确定媒体画面组成信息;第一发送模块,用于将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。38.根据权利要求37所述的装置,其特征在于,所述媒体画面组成信息包括:至少两路媒体画面的组合信息,或,至少两路媒体画面的组合信息和至少两路媒体画面的布局信息。39.根据权利要求37所述的装置,其特征在于,所述第一发送模块,包括:第一处理单元,用于若所述媒体提供方支持所述媒体画面组成信息,则接收所述媒体提供方发送的组合画面的第一媒体参数;并发送所述组合画面的第二媒体参数给所述媒体提供方;并接收所述媒体提供方根据所述媒体画面组成信息、所述第一媒体参数和所述第二媒体参数确定的所述组合画面;或者,第二处理单元,用于若所述媒体提供方不支持所述媒体画面组成信息,则接收所述媒体提供方发送的否定应答消息。40.根据权利要求39所述的装置,其特征在于,所述第一接收模块,包括:第一接收单元,用于接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息,所述第一CLUE媒体通告消息中携带所述媒体画面组合能力指示信息;则所述第一发送模块,包括:第一发送单兀,用于发送第一CLUE媒体配置消息给所述媒体提供方,所述第一CLUE媒体配置消息中携带所述媒体画面组成信息。41.根据权利要求39所述的装置,其特征在于,所述第一接收模块,包括:第二接收单元,用于接收所述媒体提供方发送的第一会话描述协议SDP请求消息,所述第一SDP请求消息中携带所述媒体画面组合能力指示信息;则所述第一发送模块,包括:第二发送单元,用于发送第一SDP响应消息给所述媒体提供方,所述第一SDP响应消息中携带所述媒体画面组成信息。42.根据权利要求39所述的装置,其特征在于,所述第一接收模块,包括:第三接收单元,用于从门户网站获取所述媒体提供方发送的所述媒体画面组合能力指示信息以及媒体画面的缩略图;则所述第一发送模块,包括:第三发送单元,用于根据所述媒体画面组合能力指示信息和所述媒体画面的缩略图确定所述媒体画面组成信息,并将所述媒体画面组成信息发送给所述门户网站,以使所述媒体提供方从所述门户网站获取所述媒体画面组成信息。43.根据权利要求40所述的装置,其特征在于,所述装置还包括:第二接收模块,用于在接收所述媒体提供方发送的第一远程呈现的多流控制CLUE媒体通告消息之前,接收所述媒体提供方发送的第二SDP请求消息,所述第二SDP请求消息携带支持CLUE协议指示;第二发送模块,用于发送第二SDP响应消息给所述媒体提供方,所述第二SDP响应消息中携带支持所述CLUE协议指示。44.根据权利要求40或41所述的装置,其特征在于,所述第一处理单元,包括:第一接收子单元,用于接收所述媒体提供方发送的第三SDP请求消息,所述第三SDP请求消息中携带所述组合画面的第一媒体参数;第一发送子单元,用于发送第三SDP响应消息给所述媒体提供方,所述第三SDP响应消息中携带所述组合画面的第二媒体参数。45.根据权利要求42所述的装置,其特征在于,所述第一处理单元,包括:第二接收子单元,用于从门户网站获取所述媒体提供方发送的所述组合画面的第一媒体参数;第二发送子单元,用于将所述组合画面的第二媒体参数发送至所述门户网站,以使所述媒体提供方从所述门户网站获取所述组合画面的第二媒体参数。46.根据权利要求37所述的装置,其特征在于,所述装置还包括:第三接收模块,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,接收所述媒体提供方发送的媒体画面变化信息;生成模块,用于根据所述媒体画面变化信息生成更新后的第一媒体画面组成信息,所述第一媒体画面组成信息中包括:所述至少两路媒体画面的第一更新组合信息和所述至少两路媒体画面的第一更新布局信息,或,所述至少两路媒体画面的第一更新组合信息;第三发送模块,用于将所述第一媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述第一媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。47.根据权利要求37所述的装置,其特征在于,所述装置还包括:第四发送模块,用于在将所述媒体画面组成信息发送给所述媒体提供方,以使所述媒体提供方根据对所述媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作之后,发送更新后的第二媒体画面组成信息给所述媒体提供方,所述第二媒体画面组成信息中包括:所述至少两路媒体画面的第二更新组合信息和所述至少两路媒体画面的第二更新布局信息,或,所述至少两路媒体画面的第二更新组合信息,以使所述媒体提供方根据对所述第二媒体画面组成信息的支持能力,向所述媒体接收方执行相应的操作。48.根据权利要求37所述的装置,其特征在于,所述第一接收模块还用于接收所述媒体提供方发送的至少一种媒体画面组合选择信息;则所述确定模块具体用于根据所述至少一种媒体画面组合选择信息确定媒体画面组成信息。【文档编号】G06F3/14GK104253969SQ201310279136【公开日】2014年12月31日申请日期:2013年6月28日优先权日:2013年6月28日【发明者】任军刚,杨玮玮,魏海涛,肖晶申请人:华为技术有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1