专利名称：媒体消息的处理方法和系统的制作方法
技术领域：
本发明涉及移动通信技术领域，特别涉及一种媒体消息的处理方法和系统。
背景技术：
如今，多媒体消息业务，包括即时消息和非实时消息业务，越来越受到用户的欢迎。用户可以通过消息客户端编辑一条包含音频、图片、视频等多媒体内容的消息发送给接收方。本文提出了一种带有背景音的多媒体消息系统，即发送方用户可以发送一条带有背景音乐的多媒体消息，那么无疑提高了用户体验。
发明内容
本发明要解决的技术问题是提供一种媒体消息处理方法及系统，以提供一种新的媒体内容处理机制。为解决以上技术问题，本发明提供了一种媒体消息的处理方法，该方法包括发送方客户端生成并发送媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间播放关系的标记信息；媒体服务器接收所述发送方客户端发送的媒体消息；所述接收方客户端从所述媒体服务器获取所述媒体消息并根据所述标记信息的指示播放所述媒体内容。进一步地，所述媒体内容包括音频数据、文本、视频、图片或图像。进一步地，所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。进一步地，所述标记信息通过同步多媒体集成语言(SMIL)携带。为解决以上技术问题，本发明还一种媒体消息的处理方法，该方法包括发送方客户端发送第一媒体消息，其中携带第一媒体内容；媒体服务器接收所述发送方客户端发送的第一媒体消息，从第一媒体消息中获得所述第一媒体内容，并生成第二媒体消息，所述第二媒体消息携带所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；所述接收方客户端从所述媒体服务器获取所述第二媒体消息并根据所述标记信息播放所述第一媒体内容和第二媒体内容。进一步地，所述第一及第二媒体内容包括音频数据、文本、视频、图片或图像。进一步地，所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码。进一步地，所述标记信息通过同步多媒体集成语言(SMIL)携带。进一步地，所述第二媒体内容是发送方用户预先存放在媒体服务器上的媒体内容。
5
为解决以上技术问题，本发明还提供了一种媒体消息的处理系统，该系统包括发送方客户端包括媒体消息生成模块、媒体消息传输模块，所述媒体消息生成模块，用于生成媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间播放关系的标记信息；所述媒体消息传输模块，用于发送所述媒体消息；所述媒体服务器，用于接收发送方客户端发送的媒体消息；所述接收方客户端，用于从所述媒体服务器获取所述媒体消息并根据所述标记信息播放所述媒体内容。进一步地，所述媒体内容包括音频数据、文本、视频、图片或图像。进一步地，所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。进一步地，所述标记信息通过同步多媒体集成语言(SMIL)携带。为解决以上技术问题，本发明还提供了一种媒体消息的处理系统，该系统包括发送方客户端用于发送第一媒体消息，其中携带第一媒体内容；媒体服务器，包括第一媒体消息接收分析模块、第二媒体消息生成模块和第二消息媒体消息传输模块，所述第一媒体消息接收分析模块，用以接收发送方客户端发送所述第一媒体消息，并且从所述第一媒体消息中获得所述第一媒体内容；所述第二媒体消息生成模块，用于生成第二媒体消息，所述第二媒体消息包含所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；接收方客户端，用于从所述媒体服务器获取所述第二媒体消息并根据所述标记信息播放所述第一媒体内容和第二媒体内容。进一步地，所述第一及第二媒体内容包括音频数据、文本、视频、图片或图像。进一步地，所述标记信息通过同步多媒体集成语言(SMIL)携带。进一步地，所述第二媒体内容是发送方用户预先存放在媒体服务器上的媒体内容。为解决以上技术问题，本发明还提供了一种媒体消息的处理方法，该方法包括主叫终端通过实时录音方式将语音留言录制到被叫方语音信箱服务器；所述被叫方语音信箱服务器生成媒体消息，其中携带所述语音留言、背景媒体及表明所述语音留言与背景媒体的播放关系的标记信息；所述被叫终端从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体。进一步地，所述背景媒体包括音频数据、文本、视频、图片或图像。进一步地，所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。进一步地，表明媒体内容之间的播放关系的标记信息通过同步多媒体集成语言 (SMIL)携带。为解决以上技术问题，本发明还提供了一种媒体消息的处理系统，该系统包括主叫终端，用于通过实时录音方式将语音留言录制到被叫方语音信箱服务器；
所述被叫方语音信箱服务器，用于生成媒体消息，其中携带所述语音留言、背景媒体及表明所述语音留言与背景媒体的播放关系的标记信息；所述被叫终端，用于从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体。进一步地，所述背景媒体包括音频数据、文本、视频、图片或图像。进一步地，所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。进一步地，所述标记信息通过同步多媒体集成语言(SMIL)携带。相对于现有技术，本发明方法和系统提供了一种灵活的媒体消息处理机制。
图1是本发明媒体消息的处理方法的实施例一的示意图；图2是本发明媒体消息的处理方法的实施例二的示意图；图3是本发明媒体消息的处理系统的实施例一的模块结构示意图；图4是本发明媒体消息的处理系统的实施例二的模块结构示意图。
具体实施例方式下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。实施例一实施例一中，由发送方媒体消息客户端(以下简称客户端)生成携带标记信息的媒体消息，如图1所示，该实施例包括以下步骤步骤101 发送方客户端生成并发送媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间时间播放顺序关系的标记信息；这里的媒体内容可以是音频、图片、图像、文本或视频，其中音频也可以是经过混音处理的音频。为了满足媒体内容见特定的播放方式，比如播放顺序、播放主次关系等， 媒体消息还携带表明媒体内容之间播放关系的标记信息。标记信息可采用标记语言如 SMIL (同步多媒体集成语言，SynchronizedMultimedia Integration Language)，以指明哪个媒体内容是主音频、哪个是背景音频，各媒体内容之间的播放顺序等。媒体消息最终以MIME (Multipurpose Internet Mail Extensions，多用途互联网邮件扩展)方式编码。发送方客户端发送最终编码后的媒体消息，可以通过以下两种方式方式一发送方客户端通过SMTP (Simple Mail Transfer Protocol，简单邮件传输协议)协议SEND指令发送编码后的媒体消息，媒体消息由其归属的媒体服务器接收；方式二发送方客户端通过 IMAP4anternet Message Access Protocol 4，即交互式数据消息访问协议第四个版本)客户端建立与其归属的服务器之间的IMAP4链接，通过IMAP4扩展指令，如可以命名为DELIVER的发送指令，发送媒体消息，媒体消息由其归属的媒体服务器接收。
步骤102 接收方媒体服务器接收所述媒体消息；发送方客户端归属媒体服务器可以通过SMTP协议将语音数据传输给接收方语音服务器。步骤103 所述接收方客户端从所述接收方媒体服务器获取所述媒体消息并根据所述标记信息播放所述媒体内容。接收方客户端可以通过IMAP协议FETCH指令下载媒体消息的全部或者部分内容。如果携带有标记语言SMIL，则解析SMIL后按照指示标记进行播放(如，将某一个音频媒体作为背景音处理)。以上实施例一是基于媒体服务器实现的，当然也可以由可实现以上接收、发送媒体消息功能的服务器(包括代理服务器)实现，本发明将该类统称为媒体服务器。本发明的重点在于采用标记信息表明各媒体内容之间的播放顺序关系。以下实施例同。实施例二在该实施例二中，由发送方媒体服务器生成携带标记信息的媒体消息，如图2所示，该实施例包括以下步骤步骤201 发送方客户端发送第一媒体消息，其中携带第一媒体内容；第一媒体消息以MIME (Multipurpose Internet Mail Extensions，多用途互联网邮件扩展)方式编码，第一媒体消息可以包含用户的留言内容(即语音媒体)；步骤202 所述发送方媒体服务器接收所述发送方客户端发送的第一媒体消息， 提取出第一媒体内容，并生成第二媒体消息，所述第二媒体消息携带所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；这里的媒体内容可以是音频、图片、图像、文本或视频，其中音频也可以是经过混音处理的音频。为了满足媒体内容之间特定的播放方式，比如播放顺序、播放主次关系等， 媒体消息还携带表明媒体内容之间播放关系的标记信息。标记信息可采用标记语言如 SMIL,以指明哪个媒体内容是主音频、哪个是背景音频，各媒体内容之间的播放顺序等。第二媒体消息最终以MIME (Multipurpose Internet Mail Extensions，多用途互联网邮件扩展)方式编码。发送方媒体服务器可以采用SMTP传输协议将媒体消息发送出去。步骤203 接收方媒体服务器接收发送方媒体服务器发送的第二媒体消息；步骤204 所述接收方客户端从所述接收方媒体服务器获取所述第二媒体消息并根据所述标记信息的指示播放所述第一媒体内容和第二媒体内容。接收方客户端可以通过IMAP协议FETCH指令下载媒体消息的全部或者部分内容。 接收方客户端通过IMAP4客户端建立与接收方归属的媒体服务器之间的链接，接收方客户端通过!^etch指令将媒体消息从服务器上下载到接收方客户端本地。本地终端对MIME媒体消息进行解码处理，取出第一媒体内容和第二媒体内容；以上实施例中，接收方客户端可以通过以下方式获取合成的语音留言接收方客户端通过媒体消息客户端访问媒体服务器接收方通过IMAP4anternet Message Access Protocol 4，即交互式数据消息访问协议第四个版本)客户端建立与接收方归属的媒体服务器之间的链接，接收方通过Fetch (取)指令将媒体消息从服务器上下载到接收方客户端本地。本地终端对MME进行解码处理，取出。
可变换的，生成携带标记信息的媒体消息的功能也可以在接收方媒体服务器实现。实施例二中，发送方客户端和接收方客户端分别归属不同的媒体服务器，当然发送方用户端和接收方用户端也可能归属同一媒体服务器。实施例二的特点在于，由媒体服务器生成携带标记信息的媒体消息。以上实施例二是基于媒体服务器实现的，当然也可以由可实现以上接收、发送媒体消息功能的服务器(包括代理服务器)实现，本发明将该类服务器统称为媒体服务器。本发明的重点在于采用标记信息表明各媒体内容之间的播放关系，至于媒体消息的寻址路由方式并不是本发明所关注的。实施例三该实施例基于现有的语音信箱架构实现，具体包括以下步骤步骤301 主叫终端通过实时录音方式将语音留言录制到被叫方语音信箱服务器；主叫终端通过现有移动通信技术呼叫被叫，当需要留言时，比如当被叫不可达时， 呼叫信令转移到被叫方归属的语音信箱服务器，通过语音电话、实时录音的方式将语音留言传输到被叫方语音信箱服务器上存放，进行终端与服务器端的留言录音。步骤302 所述被叫方语音信箱服务器接收所述语音留言，生成媒体消息，语音留言为媒体消息的一部分内容，媒体消息中采用标记信息指示某一音频为另一个音频的背景
曰尔；背景音乐指用来作为背景的音频媒体，可以不仅仅指音乐。本发明所说的背景媒体包括背景音乐，还可以包括搭配播放的一种或多种媒体数据，比如，文本、图片、图像。以下实施例同。媒体消息可以包括语音留言、背景音乐及二者关联的标记信息。可以通过标记信息设置播放语音留言时候的搭配播放的一种或多种媒体数据，比如，背景音乐，文本、图片、图像等。标记信息是指采用标记语言如SMIL (Synchronized Multimedia Integration Language,同步多媒体集成语言)，指明哪些多媒体是背景媒体。最终发给接收方的媒体消息(或称留言消息)除了包括语音留言之外，还有可能包括其他多媒体内容，如文本、图片、图像、音频等。媒体消息最终以MIME (Multipurpose Internet Mail Extensions，多用途互联网邮件扩展)方式编码。步骤303 所述被叫终端从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体播放。被叫终端可以通过IMAP协议FETCH指令下载媒体消息的全部或者部分内容。所述媒体消息中包含标记信息时，所述被叫终端根据所述标记信息同步播放所述语音留言。具体方法可以是，如携带有标记语言SMIL，则解析SMIL后按照指示标记进行播放(如，将某一个音频媒体作为背景音处理)。如图3所示，与实施例一对应的媒体消息处理系统，包括发送方客户端包括媒体消息生成模块、媒体消息传输模块，所述媒体消息生成模块，用于生成媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间时间播放关系的标记信息；
所述媒体消息传输模块，用于发送所述媒体消息；所述媒体服务器，用于接收发送方客户端发送的媒体消息；所述接收方客户端，用于从所述媒体服务器获取所述媒体消息并根据所述标记信息的指示播放所述媒体内容。所述媒体内容包括音频数据、文本、视频、图片或图像。所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展发送指令发送所述媒体消息。所述标记信息通过同步多媒体集成语言(SMIL)携带。如图4所示，与实施例二对应的媒体消息处理系统，包括发送方客户端用于发送第一媒体消息，其中携带第一媒体内容；媒体服务器，包括第一媒体消息接收分析模块、第二媒体消息生成模块和第二消息媒体消息传输模块，所述第一媒体消息接收分析模块，用以接收发送方客户端发送所述第一媒体消息，并且从所述第一媒体消息中获得所述第一媒体内容；所述第二媒体消息生成模块，用于生成第二媒体消息，所述第二媒体消息包含所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；接收方客户端，用于从所述媒体服务器获取所述第二媒体消息并根据所述标记信息播放所述第一媒体内容和第二媒体内容。所述第一及第二媒体内容包括音频数据、文本、视频、图片或图像。所述标记信息通过同步多媒体集成语言(SMIL)携带。以上实施例虽然以一般的媒体消息为例，可以对应语音信箱业务，处理留言消息， 但本发明提出的方案则具有一般性。与实施例三对应的媒体消息的处理系统包括主叫终端，用于通过实时录音方式将语音留言录制到被叫方语音信箱服务器；所述被叫方语音信箱服务器，用于生成媒体消息，其中携带所述语音留言、背景媒体及表明所述语音留言与背景媒体的播放关系的标记信息；所述被叫终端，用于从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体。所述背景媒体包括音频数据、文本、视频、图片或图像。所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。所述标记信息通过同步多媒体集成语言(SMIL)携带。上述提到的终端是指运行信箱客户端的物理实体，一般情况，一个物理实体上可以运行一个媒体消息客户端，如语音信箱客户端，所以，如无特殊说明，本发明发送给特定终端也就是发送给运行在该终端上的媒体消息客户端，如语音信息客户端。本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成，所述程序可以存储于计算机可读存储介质中，如只读存储器、磁盘或光盘等。可选地，上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现。相应地，上述实施例中的各模块/单元可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。 以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
权利要求
1.一种媒体消息的处理方法，其特征在于，该方法包括发送方客户端生成并发送媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间播放关系的标记信息；媒体服务器接收所述发送方客户端发送的媒体消息；所述接收方客户端从所述媒体服务器获取所述媒体消息并根据所述标记信息的指示播放所述媒体内容。
2.如权利要求1所述的方法，其特征在于，所述媒体内容包括音频数据、文本、视频、图片或图像。
3.如权利要求1所述的方法，其特征在于所述媒体消息采用多用途互联网邮件扩展 (MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。
4.如权利要求1所述的方法，其特征在于所述标记信息通过同步多媒体集成语言 (SMIL)携带。
5.一种媒体消息的处理方法，其特征在于，该方法包括发送方客户端发送第一媒体消息，其中携带第一媒体内容；媒体服务器接收所述发送方客户端发送的第一媒体消息，从第一媒体消息中获得所述第一媒体内容，并生成第二媒体消息，所述第二媒体消息携带所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；所述接收方客户端从所述媒体服务器获取所述第二媒体消息并根据所述标记信息播放所述第一媒体内容和第二媒体内容。
6.如权利要求5所述的方法，其特征在于，所述第一及第二媒体内容包括音频数据、文本、视频、图片或图像。
7.如权利要求5所述的方法，其特征在于所述媒体消息采用多用途互联网邮件扩展 (MIME)方式编码。
8.如权利要求5所述的方法，其特征在于所述标记信息通过同步多媒体集成语言 (SMIL)携带。
9.如权利要求5所述的方法，其特征在于所述第二媒体内容是发送方用户预先存放在媒体服务器上的媒体内容。
10.一种媒体消息的处理系统，其特征在于，该系统包括发送方客户端包括媒体消息生成模块、媒体消息传输模块，所述媒体消息生成模块，用于生成媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间播放关系的标记信息；所述媒体消息传输模块，用于发送所述媒体消息；所述媒体服务器，用于接收发送方客户端发送的媒体消息；所述接收方客户端，用于从所述媒体服务器获取所述媒体消息并根据所述标记信息播放所述媒体内容。
11.如权利要求10所述的系统，其特征在于，所述媒体内容包括音频数据、文本、视频、 图片或图像。
12.如权利要求10所述的系统，其特征在于所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。
13.如权利要求10所述的系统，其特征在于所述标记信息通过同步多媒体集成语言 (SMIL)携带。
14.一种媒体消息的处理系统，其特征在于，该系统包括发送方客户端用于发送第一媒体消息，其中携带第一媒体内容；媒体服务器，包括第一媒体消息接收分析模块、第二媒体消息生成模块和第二消息媒体消息传输模块，所述第一媒体消息接收分析模块，用以接收发送方客户端发送所述第一媒体消息，并且从所述第一媒体消息中获得所述第一媒体内容；所述第二媒体消息生成模块，用于生成第二媒体消息，所述第二媒体消息包含所述第一媒体内容、第二媒体内容及表明第一媒体内容与第二媒体内容之间播放关系的标记信息；接收方客户端，用于从所述媒体服务器获取所述第二媒体消息并根据所述标记信息播放所述第一媒体内容和第二媒体内容。
15.如权利要求14所述的系统，其特征在于，所述第一及第二媒体内容包括音频数据、 文本、视频、图片或图像。
16.如权利要求14所述的系统，其特征在于所述标记信息通过同步多媒体集成语言 (SMIL)携带。
17.如权利要求14所述的系统，其特征在于所述第二媒体内容是发送方用户预先存放在媒体服务器上的媒体内容。
18.一种媒体消息的处理方法，其特征在于，该方法包括主叫终端通过实时录音方式将语音留言录制到被叫方语音信箱服务器；所述被叫方语音信箱服务器生成媒体消息，其中携带所述语音留言、背景媒体及表明所述语音留言与背景媒体的播放关系的标记信息；所述被叫终端从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体。
19.如权利要求18所述的方法，其特征在于，所述背景媒体包括音频数据、文本、视频、 图片或图像。
20.如权利要求18所述的方法，其特征在于所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。
21.如权利要求18所述的方法，其特征在于表明媒体内容之间的播放关系的标记信息通过同步多媒体集成语言(SMIL)携带。
22.—种媒体消息的处理系统，其特征在于，该系统包括主叫终端，用于通过实时录音方式将语音留言录制到被叫方语音信箱服务器；所述被叫方语音信箱服务器，用于生成媒体消息，其中携带所述语音留言、背景媒体及表明所述语音留言与背景媒体的播放关系的标记信息；所述被叫终端，用于从所述被叫方语音信箱服务器获取所述媒体消息并根据所述标记信息播放所述语音留言和背景媒体。
23.如权利要求22所述的系统，其特征在于，所述背景媒体包括音频数据、文本、视频、 图片或图像。
24.如权利要求22所述的系统，其特征在于所述媒体消息采用多用途互联网邮件扩展(MIME)方式编码；所述发送方客户端通过简单邮件传输协议(SMTP)协议指令或交互式数据消息访问协议(IMAP)扩展指令发送所述媒体消息。
25.如权利要求22所述的系统，其特征在于所述标记信息通过同步多媒体集成语言 (SMIL)携带。
全文摘要
本发明涉及一种媒体消息处理方法及系统，该方法包括发送方客户端生成并发送媒体消息，所述媒体消息中携带至少两个媒体内容及表明媒体内容之间播放关系的标记信息；媒体服务器接收所述发送方客户端发送的媒体消息；所述接收方客户端从所述媒体服务器获取所述媒体消息并根据所述标记信息的指示播放所述媒体内容。本发明方法和系统提供了一种新的媒体内容处理机制。
文档编号H04L29/06GK102546537SQ20101059096
公开日2012年7月4日 申请日期2010年12月15日 优先权日2010年12月15日
发明者丁欣, 卢艳 申请人:中兴通讯股份有限公司