专利名称：Cmmb手机电视的终端多模式处理方法及其处理终端的制作方法
技术领域：
本发明涉及CMMB与蜂窝网融合的互动手机电视，尤其是涉及能够在兼容动态 交互模式和普通模式的多模式处理方法和处理终端。
背景技术：
在基于GSM，GPRS和TD-SCDMA的设备上观看流媒体通常是通过点播和单 播的方式，对于每个用户都需要建立一对一的流媒体连接，用户数量越多，所消耗的蜂 窝网带宽资源也越多，所以单播方式会增加蜂窝网络的负荷，影响视频播放的效果。另 夕卜，也可以使用MBMS (多媒体广播和组播服务)等组播技术在蜂窝网来实现流媒体应 用，但是由于蜂窝网的频带特性，即使使用组播技术，蜂窝网在同一小区内支持的观看 人数仍然受到限制。手机电视是以庞大的手机用户群为基础，具有很大的市场前景。在中国最有希 望推广的手机电视标准是CMMB。CMMB是广播模式的手机电视，手机电视信号通过 单向广播方式发送到移动终端。这样手机电视的运营成本和收看质量不受观看人数的限 制。基于这一 CMMB标准手机电视功能正融合到基于TD-SCDMA标准的通讯设备中。当前，无论在手机电视，IPTV，还是在数字电视领域，互动增值服务面临巨大 的增长空间。这些增值服务实质上是通过对富媒体(Rich Media)中各种内容要素(文 本，视频，音频，向量图形等)的交互而实现的。尽管手机电视CMMB标准和蜂窝网 TD-SCDMA标准分别提供了广播视频和双向互动的通道，但是在这一平台上并没有允 许用户和手机电视上的富媒体进行动态交互。这主要是由于目前的CMMB技术不能实 现动态富媒体应用，仅有的富媒体也只是单纯的静态的浏览器用户界面，另一个问题是 CMMB技术不具有上行通道，所以不能实现交互应用。因此，希望在CMMB和TD-SCDMA这两个传输通道上应有动态富媒体的融合 业务，以实现交互式的手机电视。此外，希望终端能根据自身的能力选择普通CMMB手机电视或者富媒体手机电 视，以实现两种模式的兼容。
发明内容
本发明的一个目的是提出一种CMMB手机电视的终端多模式处理方法，可以实 现动态交互的手机电视，并且兼容普通模式。本发明的另一目的是提供一种具有上述能力的CMMB手机电视终端。本发明一个方面提出一种CMMB手机电视的终端多模式处理方法，包括以下步 骤接收CMMB复用帧；获取一指示所述CMMB复用帧是否包含动态富媒体的场景描 述数据的通知；根据所述通知确定所述CMMB复用帧是否包含动态富媒体的场景描述数 据；确定是否根据所述场景描述数据解析场景，若是，则执行以下步骤解析所述场景描述数据并生成场景描述；根据所述场景描述提取多媒体内容要素；以及对所述 多媒体内容要素进行解码并组合成富媒体形式的呈现；若不是，则按照符合CMMB标准的协议提取所述多媒体内容要素并进行解码。在本发明的一实施例中，所述CMMB复用帧是于一服务器端被配置为承载多媒 体内容要素以及是否承载所述动态富媒体的场景描述数据，且通过一 CMMB下行通道发 送给所述终端。在本发明的一实施例中，在对所述多媒体内容要素进行解码并组合成富媒体形 式的呈现之后还包括显示所述富媒体形式的呈现给终端用户；响应于用户操作产生远 程交互事件，通过一蜂窝网交互信道发送所述远程交互事件至所述服务器。在本发明的一实施例中，上述方法还包括响应用户操作产生本地交互事件，且 根据所述本地交互事件更改终端富媒体的呈现。在本发明的一实施例中，所述通知是一包含在所述CMMB复用帧内的指示参数。在本发明的一实施例中，所述通知是通过一蜂窝网交互信道发送给所述终端。在本发明的一实施例中，所述多媒体内容要素包括以下的部分或全部音频、 视频、向量图形、文本、图片。本发明的另一方面提出一种CMMB手机电视的多模式处理终端，包括复用帧 数据接收器、解复用器和处理器。复用帧数据接收器接收来自CMMB下行广播信道的 CMMB复用帧。解复用器提取所接收的CMMB复用帧中的多媒体内容要素，并根据一 指示参数确定所述CMMB复用帧是否包含动态富媒体的场景描述数据以及提取所述场景 描述数据。处理器确定是否根据所述场景描述数据解析场景，若是，则解析所述场景描 述数据并生成场景描述，根据所述场景描述提取所述多媒体内容要素，以及对所述多媒 体内容要素进行解码并组合成富媒体形式的呈现；若不是，则按照符合CMMB标准的协 议提取所述多媒体内容要素并进行解码。在本发明的一实施例中，上述终端还包括输入设备，响应于用户操作产生远 程交互事件；以及信息收发器，将所述远程交互事件通过蜂窝网交互信道从终端发送给 服务器。在本发明的一实施例中，上述输入设备还响应用户操作产生本地互动事件，所 述第二处理器根据所述本地互动事件更改本地富媒体的呈现。在本发明的一实施例中，上述指示参数来自所述CMMB复用帧。在本发明的一实施例中，上述指示参数是来自一蜂窝网交互信道，所述终端还 包括一用于接收所述指示参数的信息收发器。在本发明的一实施例中，上述富媒体内容要素包括以下的部分或全部音频、 视频、向量图形、文本、图片。本发明通过以上技术方案，使得CMMB手机电视可以实现富媒体动态交互，并 允许终端选择是否按照富媒体安排进行播放，以提供灵活的兼容能力。
图1示出本发明一实施例的CMMB手机电视系统框图。
图2示出本发明一实施例的CMMB手机电视的发送端处理流程图。图3示出本发明一实施例的CMMB手机电视的接收端处理流程。图4示出本发明一实施例的CMMB手机电视的接收端的互动操作反馈流程。图5示出本发明一实施例的CMMB手机电视系统的具体实现。图6示出本发明一实施例的动态富媒体的布局示例。图7示出本发明一实施例的发送端的富媒体处理过程。
具体实施方式
在下述的实施例中，描述了基于CMMB手机电视与蜂窝网的融合的动态富媒体 交互技术，其中蜂窝网可以是2G网络，例如GSM网络，或者是3G网络，例如WCDMA 网络或者是TD-SCDMA网络。如果没有特别说明，在本发明的上下文中，把动态富媒 体简称为富媒体。首先描述动态富媒体场景及其生成和传输。动态富媒体场景技术阐述了如何对 富媒体内容进行编码并在各种通讯信道和设备上传输并解码统一格式的的富媒体资源。 这些富媒体资源包括但不限于音频、视频、向量图形，文本、图片等。如图5所示，富 媒体场景描述技术的基本功能是描述富媒体内容要素在空间和时间上的布局，支持富 媒体的各内容要素在呈现时的动态更新和交互。在本发明的实施例中，动态富媒体场景 描述的数据格式可以有很多种，包括FLASH，SLIVERLIGHT,和MPEG-LASER等。在 一个特定实施例中，使用符合ISO/IEC 14496-20规范的MPEG-LASER作为例子说明。富媒体场景描述技术描述了富媒体内容要素在空间和时间上的布局，这通过一 种称为动态富媒体场景数据的数据来实现。动态富媒体场景数据包含场景描述，这一场 景描述体现音频、视频、向量图形，文本、图片等富媒体内容要素的布局。在图6的示 例中，界面左侧表示在时刻T的空间布局，其中包含视频、图形和字幕等富媒体内容要 素的布置，而界面右侧是在时间T+1时刻的空间布局。界面右侧不仅仅体现了空间布 局，还反应了从时间T到T+1时刻的场景变化。本发明的一实施例通过上述富媒体、CMMB和TD-SCDMA融合应用的实现交 互式手机电视。参照图1所示，本实施例的交互手机电视系统由交互手机电视服务器100 和移动终端200构成。其中在交互手机电视服务器100和移动终端200之间建立CMMB 下行信道300和TD-SCDMA交互信道400。CMMB下行信道300作为下行广播传输机 制，而TD-SCDMA交互信道400是一个典型的蜂窝网双向互动通道，用于提供交互式服 务。交互手机电视服务器100负责向移动终端用户提供交互富媒体手机电视业务。 服务器100的具体功能包括使用CMMB下行通道，以广播方式下发富媒体场景描述数据 及其所关联的音频，视频等数据，还包括通过TD-SCDMA交互信道400，从移动终端 200接收互动反馈。CMMB下行通道300的功能是调制并发送CMMB复用帧。TD-SCDMA交互信
道400的功能是解调并接收移动终端200发送过来的互动反馈。移动终端200的功能是解调并接收CMMB复用帧，并提取复用子帧和其中的音 频段，视频段和数据段。移动终端200还对数据段中的富媒体场景描述数据进行解析并生成场景描述，并根据所生成的场景描述把复用子帧中的音频，视频，向量图形等多媒体的内容要素组合成富媒体形式的呈现，并显示在移动终端200的显示屏上。此外，移 动终端200把用户与富媒体形式的呈现之间的互动反馈编码并调制成TD-SCDMA信号， 然后发送给交互手机电视服务器100。在一个实施例中，互动包括本地互动，用户与富媒体呈现的界面互动后产生的 事件作用于本地富媒体播放，例如改变本地富媒体播放的呈现。在另一个实施例中，互 动包括远程互动，用户与富媒体呈现的界面互动后产生的事件向远端服务器发送反馈。 也就是说，把用户与富媒体形式的呈现之间的互动反馈编码并调制成TD-SCDMA信号并 发送给交互手机电视服务器。在实际中，并不是所有移动终端200都具有富媒体解码能力。因此需要使支持 富媒体技术的CMMB手机电视和既有的CMMB电视节目传输系统反向兼容。由于富媒体 场景数据作为一个单独的数据流在CMMB的复用帧内承载并通过广播方式传送，这样对 已有的CMMB的手机电视传输系统的改动很小。发送端，即交互手机电视服务器100可 以在CMMB电视节目的带内或带外附加一个指示该节目是否包含富媒体场景描述数据的 通知。接收端，即移动终端200可以通过该通知确定所接收的节目是否包含富媒体流。 根据这一信息，接收端可以很方便地选择解析或者不解这一路富媒体场景。事实上，上述的实施例也适用于其他类型的下行广播和双向互动传输通道的结 合，例如CMMB与GSM的结合，CMMB与WCDMA的结合等。下面首先说明在发送端的CMMB中可选地结合富媒体流的方法。同时参照图1 和图2所示，此流程包括以下步骤步骤S10，在交互手机电视服务器100中，在CMMB复用子帧的数据段内承载 音频段、视频段等多媒体数据，并可选地承载富媒体场景描述数据。步骤S20，在CMMB复用帧内(或CMMB的带外)设置一个富媒体电视指示参 数，说明该CMMB复用帧是否包含富媒体场景描述数据。步骤S30，使用CMMB通道300，以广播方式向移动终端200发送CMMB复用
帧。此复用帧可包含若干个复用子帧。在一个实施例中，富媒体场景描述包括的场景数据的格式符合XML(Extensible Markup Language，可扩展标记语言)规范。在另一实施例中，富媒体场景描述包括的场 景数据的格式符合SVG(Scalable Vector Graphics，可缩放矢量图形)规范。在又一实施 例中，富媒体场景描述包括的场景数据的格式符合IS0/IEC 14496-20 (MPEG-LASER)规范。参照图7所示，步骤SlO中若包含动态富媒体场景，则其承载、打包和传输等处 理过程的步骤具体如下步骤S11，把动态富媒体场景数据分割打包成数据段；步骤S12，把数据段和音视频段一起放入CMMB的复用子帧中；步骤S13，将若干个复用子帧构成一个复用帧；步骤S14，将若干个复用帧构成一个广播信道帧；步骤S15，移动广播信道调制并发送此广播信道帧。相应地，接收端(即终端200)的富媒体处理流程如图3所示，包括以下步骤
手机终端接收CMMB复用帧，并按照下面两种模式和步骤解析手机电视数据步骤S110，通过移动广播信道接收广播信道帧；步骤S120，解调该广播信道帧并获取CMMB复用帧；步骤S130，接收富媒体电视指示参数，该参数可从复用帧内接收，或者通过另 外的通道，如TD-SCDMA交互信道100接收；步骤S140，根据富媒体电视指示参数判断复用帧内是否包含富媒体场景描述数 据；步骤S150，确定是否需要解析场景。 如果富媒体电视指示参数表明CMMB复用帧包含富媒体场景数据并且移动终端 200选择依据富煤体场景的安排播放手机电视，那么移动终端进行以下步骤于步骤S160，首先对复用帧的数据段中的富媒体场景描述数据进行解析并生成 场景描述；于步骤S170，根据所生成的场景描述提取音频、视频、向量图形等多媒体内容 要素；这些多媒体内容要素已经过解复用的过程从复用子帧中分离。于步骤S180，对多媒体资源进行解码并组合成富媒体形式的呈现，并于步骤 S200在移动终端的显示屏上播放多媒体内容要素。如果富媒体电视指示参数表明CMMB复用帧不包含富媒体场景数据，或者移动 终端200不选择依据富媒体场景的安排播放手机电视(例如不具备富媒体解码能力)，那 么移动终端200于步骤S190按符合CMMB标准的解码协议对音视频等数据进行解包、提 取，并于步骤S200进行播放。在移动终端200将音频、视频、向量图形等多媒体资源组合成富媒体形式的呈 现在显示屏上的情形中，参照图4所示，于步骤S210，移动终端200可接收用户通过输 入设备(如键盘、触摸屏等)与富媒体的呈现界面进行的人机互动操作。于步骤S220，将上述人机互动后产生的远程互动事件通过TD-SCDMA交互通 道400向交互手机电视服务器100发送交互反馈。另外，互动还包括本地互动，在步骤S230，将用户与富媒体呈现的界面互动后 产生的事件作用于本地富媒体播放。图5示出本发明一实施例的CMMB手机电视系统的具体实现。参照图5所示， 交互手机电视服务器100进一步包含复用器102、CMMB调制发送器104以及信息收发器 106和处理器108。移动终端200进一步包括CMMB解调器202、复用帧数据接收器204、解复用器 206、处理器208、显示屏210、输入设备212、以及信息收发器214。在交互手机电视服务器100侧，音视频数据10和可选的场景描述数据20 (以虚 框表示)以图7所示方式在复用器102中组成CMMB复用帧，并进一步组成广播信道帧。 在复用帧中还设置一个富媒体电视指示参数，说明是否该CMMB复用帧包含富媒体场景 描述数据。然后于CMMB调制发送器104中调制并发送此广播信道帧。CMMB网络提 供广播信道帧的广播下行信道。在替换性实施例中，也可以通过信息收发器106发送上 述富媒体电视指示参数。在移动终端200侧，CMMB解调器202用于接收并解调广播信道帧。此广播信道帧经复用帧数据接收器204获取CMMB复用帧，经解复用器206处理后提取其中的 音视频数据10等多媒体内容要素，并且解复用器206还根据复用帧内包含(或者是信息 收发器214接收)的富媒体电视指示参数决定是否提取场景描述数据20。数据通过处理 器208处理，如果处理器208决定按富媒体场景的安排播放手机电视，则按照富媒体模式 处理数据(如前述步骤S160-S180)并于显示屏210中呈现富媒体的用户交互界面。相 反，如果处理器208决定不按富媒体场景的安排播放手机电视(例如不具备富媒体解码能 力)， 则按照普通模式处理数据(如前述步骤S190)并于显示屏210中呈现普通CMMB手 机电视界面。在富媒体模式下，移动终端200侧接收用户通过输入设备212输入的交互操作。 这一操作可通过信息收发器214经3G网络发出。3G网络提供交互信息上行/下行的 TD-SCDMA交互信道。交互手机电视服务器100可以通过信息收发器106接收上述交互信息，通过处理 器108处理后，根据交互信息修改下一次发给移动终端的音视频数据10和场景描述数据 20。上述的系统和方法在诸多领域均可应用。在一个应用例中，交互手机电视服务 器100生成投票按钮并作为场景描述数据和音视频数据一起通过CMMB下行信道发送到 移动终端200。终端用户打开CMMB手机电视，接收CMMB电视信号并开始播放，点 击手机电视界面上的投票按钮，发送相关的投票信息到服务器100上。服务器100可以 统计相关的投票信息。在另一个应用例中，交互手机电视服务器100生成视频的位置并把视频位置置 为缩略图形式并作为场景描述数据和音视频数据一起通过CMMB发送到移动终端200。 终端用户打开CMMB手机电视，接收CMMB电视信号并开始播放，接收视频位置场景数 据，并把按视频缩小化形式(比如1/4屏幕大小)播放。因此，借助本发明实施例所提出的方法和系统，使得CMMB手机电视可以实现 富媒体动态交互；而且，允许终端根据自身能力选择是否按照富媒体安排进行播放，以 提供灵活的兼容能力。上述实施例是提供给本领域普通技术人员来实现或使用本发明的，本领域普通 技术人员可在不脱离本发明的发明思想的情况下，对上述实施例做出种种修改或变化， 因而本发明的保护范围并不被上述实施例所限，而应该是符合权利要求书提到的创新性 特征的最大范围。
权利要求
1.一种CMMB手机电视的终端多模式处理方法，包括以下步骤 接收CMMB复用帧；获取一指示所述CMMB复用帧是否包含动态富媒体的场景描述数据的通知；根据所述通知确定所述CMMB复用帧是否包含动态富媒体的场景描述数据；确定是否根据所述场景描述数据解析场景，若是，则执行以下步骤解析所述场景描述数据并生成场景描述；根据所述场景描述提取多媒体内容要素；以及对所述多媒体内容要素进行解码并组合成富媒体形式的呈现；若不是，则按照符合CMMB标准的协议提取所述多媒体内容要素并进行解码。
2.如权利要求1所述的方法，其特征在于，所述CMMB复用帧是于一服务器端被 配置为承载多媒体内容要素以及是否承载所述动态富媒体的场景描述数据，且通过一 CMMB下行通道发送给所述终端。
3.如权利要求1所述的方法，其特征在于，在对所述多媒体内容要素进行解码并组合 成富媒体形式的呈现之后还包括显示所述富媒体形式的呈现给终端用户；响应于用户操作产生远程交互事件，通过一蜂窝网交互信道发送所述远程交互事件 至所述服务器。
4.如权利要求3所述的方法，其特征在于，还包括响应用户操作产生本地交互事件， 且根据所述本地交互事件更改终端富媒体的呈现。
5.如权利要求1所述的方法，其特征在于，所述通知是一包含在所述CMMB复用帧 内的指示参数。
6.如权利要求1所述的方法，其特征在于，所述通知是通过一蜂窝网交互信道发送给 所述终端。
7.如权利要求1所述的方法，其特征在于，所述动态富媒体的场景描述数据符合 XML规范。
8.如权利要求1所述的方法，其特征在于，所述动态富媒体的场景描述数据符合SVG 规范。
9.如权利要求1所述的方法，其特征在于，所述动态富媒体的场景描述数据符合 MPEG-LASER 规范。
10.如权利要求3或6所述的方法，其特征在于，所述蜂窝网交互信道为GSM交互信 道、TD-SCDMA交互信道、WCDMA交互信道其中之一。
11.如权利要求1所述的方法，其特征在于，所述多媒体内容要素包括以下的部分或 全部音频、视频、向量图形、文本、图片。
12.—种CMMB手机电视的多模式处理终端，包括复用帧数据接收器，接收来自CMMB下行广播信道的CMMB复用帧； 解复用器，提取所接收的CMMB复用帧中的多媒体内容要素，并根据一指示参数确 定所述CMMB复用帧是否包含动态富媒体的场景描述数据以及提取所述场景描述数据；处理器，确定是否根据所述场景描述数据解析场景，若是，则解析所述场景描述数 据并生成场景描述，根据所述场景描述提取所述多媒体内容要素，以及对所述多媒体内容要素进行解码并组合成富媒体形式的呈现；若不是，则按照符合CMMB标准的协议提 取所述多媒体内容要素并进行解码。
13.如权利要求12所述的终端，其特征在于，还包括 输入设备，响应于用户操作产生远程交互事件；以及信息收发器，将所述远程交互事件通过蜂窝网交互信道从终端发送给服务器。
14.如权利要求13所述的终端，其特征在于，所述输入设备还响应用户操作产生本地 互动事件，所述第二处理器根据所述本地互动事件更改本地富媒体的呈现。
15.如权利要求12所述的终端，其特征在于，所述指示参数来自所述CMMB复用帧。
16.如权利要求12所述的终端，其特征在于，所述指示参数是来自一蜂窝网交互信 道，所述终端还包括一用于接收所述指示参数的信息收发器。
17.如权利要求12所述的终端，其特征在于，所述动态富媒体的场景描述数据符合 XML规范。
18.如权利要求12所述的终端，其特征在于，所述动态富媒体的场景描述数据符合 SVG规范。
19.如权利要求12所述的终端，其特征在于，所述动态富媒体的场景描述数据符合 MPEG-LASER 规范。
20.如权利要求12所述的终端，其特征在于，所述蜂窝网交互信道为GSM交互信 道、TD-SCDMA交互信道、WCDMA交互信道其中之一。
21.如权利要求12所述的终端，其特征在于，所述富媒体内容要素包括以下的部分或 全部音频、视频、向量图形、文本、图片。
全文摘要
本发明涉及一种CMMB手机电视的终端多模式处理方法及其处理终端，该方法包括以下步骤接收CMMB复用帧；获取一指示CMMB复用帧是否包含动态富媒体的场景描述数据的通知；根据该通知确定CMMB复用帧是否包含动态富媒体的场景描述数据，并确定是否根据场景描述数据解析场景，若是，则执行以下步骤解析场景描述数据并生成场景描述；根据场景描述提取多媒体内容要素；以及对多媒体内容要素进行解码并组合成富媒体形式的呈现；否则按照符合CMMB标准的协议提取所述多媒体内容要素并进行解码。本发明的终端可兼容交互式手机电视和普通CMMB手机电视。
文档编号H04M1/725GK102026022SQ20091019565
公开日2011年4月20日 申请日期2009年9月14日 优先权日2009年9月14日
发明者丁亚强, 林福辉 申请人:展讯通信(上海)有限公司