组成用于排列多媒体元素的标记的方法和装置制造方法
【专利摘要】提供一种在多媒体通信系统中配置用于多媒体元素的组成的标记的方法，所述方法包括：配置与在场景中包含的多个区域中的每个区域对应的区域描述信息，配置与在所述多个区域中的每个区域中包含的至少一个多媒体对应的多媒体描述信息，配置描述所述多个区域中的每个区域的空间组成和时间组成的场景组成信息，配置包含所述场景组成信息、所述区域描述信息和所述多媒体描述信息的标记。
【专利说明】组成用于排列多媒体元素的标记的方法和装置
【技术领域】
[0001] 本发明涉及多媒体元素，更具体说，本发明涉及一种组成用于在空间和时间上排 列和同步多媒体元素的标记的方法和装置。
【背景技术】
[0002] 对于多媒体服务的需求在持续增加，同时为当前显示设备提供各种多媒体服务以 及配置用于提供各种多媒体服务的新标记的需求也在增加。
[0003] 定义网络上多媒体元素的技术主要包括超文本链接标记语言（HTML)和同步多媒 体集成语言（SMIL)。以下，将参照图1和2更详细描述HTML和SMIL。
[0004] 图1图解根据现有技术的在多媒体通信系统中的HTML文档结构。
[0005] 参照图1，HTML是定义超文本文档结构的标记语言，对应于当今在网络上最广泛 使用的技术，其版本5的修订工作正在实施。HTML版本5具有对多媒体服务（诸如视频、音 频等）的增强的支持，但是由于HTML基本上是定义静态文档结构的语言，因此不支持诸如 媒体的时间组合或交互、同步等之类的功能。
[0006] 如图 1 中所不，HTML 文档结构包含〈header〉、<nav>、〈section〉、〈article〉、 〈footer〉和〈aside〉。
[0007] 〈header〉指示标识区域，<nav>指示菜单区域，〈section〉指示本体的内容， 〈article〉指示在本体内的主要内容区域，〈footer〉指示网站的下部，〈aside〉指示子区域 或广告内容区域。
[0008] 图2图解根据现有技术的在多媒体通信系统中通过使用SMIL来排列多媒体元素 的示例。
[0009] 参照图2, SMIL是通过使用可扩展标记语言（XML)在时间和空间上组合并控制诸 如视频、音频、图像、文本等之类的多媒体数据所建立的网际网路联盟（W3C)标准。
[0010] 如图2中所示，通过使用SMIL在时间和空间上组合并控制多媒体数据是有优点 的。然而，由于通过XML来定义SMIL，所以SMIL要求单独的播放器以再现通过SMIL定义的 文件，并且因而对应于在当前工业领域中实际并不使用的标准。
[0011] 如上所述，虽然通过上述HTML或SMIL来定义多媒体元素，但是HTML和SMIL两者 都只能组成多媒体，并且两者都不能配置包含多个区域的场景。因此，需要将多媒体元素划 分为场景、区域和媒体级别以配置标记的装置及方法。
【发明内容】
[0012] 技术问题
[0013] 提供以上信息作为背景信息仅用来帮助理解本公开。对于以上所述的任何内容是 否可用作本公开的现有技术，不作任何决定和任何主张。
[0014] 技术方案
[0015] 本公开的各方面解决至少以上提到的问题和/或缺点，并提供至少以下所述的优 点。相应地，本公开一个方面提供将多媒体元素划分为场景、区域和多媒体级别以配置标记 的装置及方法。
[0016] 本公开另一方面提供在多媒体通信系统中在时间和/或空间上组成多媒体元素 并配置可支持多媒体之间的同步的标记的方法及装置。
[0017] 根据本公开一个方面，提供一种在多媒体通信系统中配置用于组成多媒体元素的 标记的方法。所述方法包括：配置包含场景组成信息、区域描述信息和多媒体描述信息的标 记并根据所配置标记在时间和空间上组成多媒体元素。
[0018] 根据本公开另一方面，提供一种在多媒体通信系统中配置用于多媒体元素的组成 的标记的显示设备。所述显示设备包括：标记配置单元，被配置成配置与在场景中包含的多 个区域中的每个区域对应的区域描述信息、配置与在所述多个区域中的每个区域中包含的 至少一个多媒体对应的多媒体描述信息、配置描述所述多个区域中的每个区域的空间组成 和时间组成的场景组成信息、以及配置包含所述场景组成信息、所述区域描述信息和所述 多媒体描述信息的标记；以及显示单元，被配置成基于所述标记显示场景。
[0019] 本公开不仅能在空间和/或时间上组成多媒体元素，而且能提供在多媒体之间的 同步方式。并且，可在不支持扩展标记的浏览器中配置基本场景。另外，本公开提供其中通 过将场景描述信息和实际区域描述和多媒体表达信息分开而在将来在多个设备中不同地 配置和使用场景信息的方式。
[0020] 从以下结合附图进行的、公开了本公开各种实施例的详细描述中，本公开的其它 方面、优点和突出特征对于本领域技术人员来说将变得清楚。
【专利附图】
【附图说明】
[0021] 从以下结合附图进行的描述中，本公开的以上和其它方面、特性和优点将更加清 楚，在附图中：
[0022] 图1图解根据现有技术的在多媒体通信系统中的超文本链接标记语言（HTML)文 档结构；
[0023] 图2图解根据现有技术的在多媒体通信系统中的通过使用同步多媒体集成语言 (SMIL)来组成多媒体元素的示例；
[0024] 图3图解根据本公开一实施例的在多媒体通信系统中为显示设备配置场景的示 例；
[0025] 图4A图解根据本公开第一实施例的在多媒体通信系统中配置标记的示例；
[0026] 图4B图解根据本公开第二实施例的在多媒体通信系统中配置标记的示例；
[0027] 图5A图解根据本公开第一实施例的在多媒体通信系统中配置的标记和基于所述 标记运行的场景的示例；
[0028] 图5B图解根据本公开第二实施例的基于在多媒体通信系统中配置的标记运行的 场景的不例；
[0029] 图6A图解根据本公开一实施例的在支持多媒体通信系统中配置的标记的浏览器 中配置的场景的示例；
[0030] 图6B图解根据本公开一实施例的在仅支持多媒体通信系统中的HTML的浏览器中 配置的场景的示例；
[0031] 图7是图解根据本公开一实施例的其中显示设备基于在多媒体通信系统中配置 的标记而在空间上配置场景的过程的流程图；
[0032] 图8A是图解根据本公开第一实施例的其中显示设备基于在多媒体通信系统中配 置的标记在时间上配置场景的过程的流程图；
[0033] 图8B是图解根据本公开第二实施例的其中显示设备基于在多媒体通信系统中配 置的标记在时间上配置场景的过程的流程图；
[0034] 图9图解根据本公开一实施例的根据在多媒体通信系统中配置的标记配置场景 的示例；
[0035] 图10图解根据本公开一实施例的场景组成（诸如在图9中所示的场景组成）的 示例的时间配置信息；以及
[0036] 图11图解根据本公开一实施例的基于在多媒体通信系统中配置的标记在空间上 和时间上配置场景的显示设备。
[0037] 贯穿附图，相似的附图标号被理解为指代相似的部分、组件和结构。
【具体实施方式】
[0038] 提供下列参考附图的描述以帮助全面理解由权利要求及其等效内容定义的本公 开的各个实施例。它包括各种特定细节以帮助理解，但是这些将被认为是示例性的。因此， 本领域普通技术人员应该认识到：在不脱离本公开的范围和精神的前提下，可以对在此描 述的各种实施例进行各种变化和修改。另外，为了清楚和简洁，可能省略对公知功能和结构 的描述。
[0039] 在下列描述和权利要求中使用的术语和词汇不限于字面含义，而是仅被发明人用 来使得能够清楚和一致地理解本公开。因此，本领域普通技术人员应当清楚：提供下列对本 公开的各种实施例的描述仅仅是出于说明的目的，而不是出于限制由所附权利要求及其等 效内容定义的本公开的目的。
[0040] 应当理解，单数形式"一"、"一个"和"所述"，除非文中清楚地指明，否则包括多个 指代，因此，例如，对"一部件表面"的指代包括对一个或多个这样的表面的指代。
[0041] 图3图解根据本公开一实施例的在多媒体通信系统中为显示设备配置场景的示 例。
[0042] 参照图3,示出的场景300是在文档结构中的最上端，在该文档内可能存在多个场 景300。例如，当假定一小时的广播节目由多个场景组成时，可通过包含在第一个30分钟中 的场景1#和包含在第二个30分钟中的场景2#来配置该广播节目。
[0043] 一个场景300被划分为多个区域。区域的个数基于一个场景可以是一到η。而 且，区域可以被认为是独立单元，当前独立广播节目、视频点播（VoD)服务或者网络服务的 文档可被认为是一个区域。也就是说，独立区域310、320和330聚集起来以形成一个场景 300 〇
[0044] 一个区域由多个多媒体组成。该多媒体可包含所有多媒体数据，诸如视频、音频、 图像、文本等。也就是说，区域310、320和330分别包含多媒体315、325和335。
[0045] 下文中，将参照图4Α和4Β描述根据本公开实施例的配置用于在图3中示出的场 景300的标记的方法。
[0046] 图4A图解根据本公开第一实施例的在多媒体通信系统中配置标记的示例。
[0047] 参照图4A，示出的标记文档包含场景组成信息400、场景描述信息410和在场景 300中包含的区域。而且，多媒体信息以一对一的关系对应关于标记文档的信息。也就是 说，区域310和多媒体315的每一元素通过区域描述信息420和多媒体描述信息425来表 达，区域320和多媒体325的每一元素通过区域描述信息430和多媒体描述信息435来表 达，区域330和多媒体335的每一元素通过区域描述信息440和多媒体描述信息445来表 达。
[0048] 场景组成信息400描述在场景中包含的每一区域的空间组成和时间组成。关于每 个区域的实际信息分开存在以便区域可独立运行。而且，可通过分开描述场景的空间组成 和时间组成而在一个文档中配置多个场景。
[0049] 虽然在图4A中示出了一个场景组成信息400,但是场景组成信息400的数目可以 是表达包含场景#1、场景#2等多个场景的多个。而且，虽然在图4A中场景组成信息400与 时间信息和空间信息一起描述，但是时间信息和空间信息可分开描述。下文中，将参照图4B 描述根据本公开一实施例的分开描述时间信息和空间信息的示例。
[0050] 图4B图解根据本公开第二实施例的在多媒体通信系统中配置标记的示例。
[0051] 参照图4B，配置了包含场景组成信息450和描述在场景中包含的每个多媒体的时 间信息的多媒体时间信息455的单独标记文档401，包含基本区域描述信息470、480和490 以及多媒体描述信息475、485和495的场景描述信息460被描述为一个标记文档。在这种 情况下，浏览器读取指示场景描述信息460的标记文本和一起指示场景组成信息450与多 媒体时间信息455的单独标记文本401以配置最终场景。如上所述，当场景组成信息450 和多媒体时间信息455被配置成单独标记文档时，不能支持本公开提供的方法的浏览器也 能显示场景描述信息460。
[0052] 图5A图解根据本公开第一实施例的在多媒体通信系统中配置的标记和基于所述 标记运行的场景的示例。也就是说，图5A图解基于根据图4A的方法配置的标记运行的场 景的示例。
[0053] 参照图5A，示出的标记文档包含场景组成信息、场景描述信息、区域描述信息、多 媒体描述信息和支持传统浏览器的描述信息。
[0054] (1)场景组成信息
[0055] 场景组成信息包含〈mmt-ci : composition〉元素和〈mmt-ci : divLocation〉元素。 〈mmt-ci : composition〉元素描述场景组成信息并且包含〈mmt-ci : divLocation〉元素作为 低层元素，<mmt-ci:divLocation>元素描述每个区域的组成信息并且具有下表1所示的属 性。
[0056] 【表1】
[0057]
【权利要求】
1. 一种在多媒体通信系统中配置用于多媒体元素的组成的标记的方法，所述方法包 括： 配置与在场景中包含的多个区域中的每个区域对应的区域描述信息； 配置与在所述多个区域中的每个区域中包含的至少一个多媒体对应的多媒体描述信 息； 配置描述所述多个区域中的每个区域的空间组成和时间组成的场景组成信息；并且 配置包含所述场景组成信息、所述区域描述信息和所述多媒体描述信息的标记。
2. 如权利要求1所述的方法，还包括；基于所述标记在空间上组成所述场景， 其中，所述场景的空间组成包括： 从所述场景组成信息中获取所述多个区域中的每个区域的宽度和高度信息，并从所述 区域描述信息获取div元素的宽度和高度信息； 考虑所述区域的宽度和高度信息和div元素的宽度和高度信息配置区域；并且 从所述多媒体描述信息中获取多媒体的宽度和高度信息，并考虑所述区域的宽度和高 度信息和所述多媒体的宽度和高度信息配置场景。
3. 如权利要求2所述的方法，其中，所述场景的配置包括： 比较所述区域的宽度和高度与所述div元素的宽度和高度； 当所述区域的宽度和高度大于所述div元素的宽度和高度时，缩小所述区域的宽度和 高度W匹配所述div元素的宽度和高度；W及 当所述区域的宽度和高度小于所述div元素的宽度和高度时，扩大所述区域的宽度和 高度W匹配所述div元素的宽度和高度；
4. 如权利要求3所述的方法，其中，所述场景的配置包括： 比较所述区域的宽度和高度与所述多媒体的宽度和高度； 当所述多媒体的宽度和高度大于所述区域的宽度和高度时，缩小所述多媒体的宽度和 高度W匹配所述区域的宽度和高度；W及 当所述多媒体的宽度和高度小于所述区域的宽度和高度时，保持所述多媒体的宽度和 高度；
5. 如权利要求1所述的方法，还包括；基于所述标记在时间上组成场景， 其中，所述场景的时间组成包括： 从所述场景组成信息中获取所述场景的时间信息，并根据所述场景的时间信息组成整 个场景； 从所述区域描述信息中获取所述区域的时间信息，并根据所述区域的时间信息组成每 个区域；化及 从所述多媒体描述信息中获取多媒体时间信息，并根据所述多媒体时间信息组成所述 多媒体。
6. 如权利要求5所述的方法，其中，当通过与所述标记分开的标记来配置所述场景组 成信息时，根据所述多媒体时间信息组成多媒体包括从所述分开的标记中检测与所述多媒 体的标识符相匹配的时间信息，并通过将所检测到的时间信息反映到所述多媒体中而在时 间上组成所述多媒体。
7. 如权利要求1所述的方法，其中，所述场景组成信息包括X轴偏移、y轴偏移、区域的 宽度、区域的高度、区域的起始时间、区域的结束时间、和区域的持续时间中的至少一个属 性。
8. 如权利要求1所述的方法，其中，所述区域描述信息包括div元素的宽度、div元素 的高度、div元素的起始时间、div元素的结束时间和div元素的持续时间中的至少一个属 性。
9. 一种在多媒体通信系统中配置用于多媒体元素的组成的标记的显示设备，所述显示 设备包括： 标记配置单元，被配置成配置与在场景中包含的多个区域中的每个区域对应的区域描 述信息，配置与在所述多个区域中的每个区域中包含的至少一个多媒体对应的多媒体描述 信息，配置描述所述多个区域中的每个区域的空间组成和时间组成的场景组成信息，配置 包含所述场景组成信息、所述区域描述信息和所述多媒体描述信息的标记；W及 显示单元，被配置成基于所述标记显示场景。
10. 如权利要求9所述的显示设备，其中，所述显示单元被配置成从所述场景组成信息 中获取多个区域中的每个区域的宽度和高度信息，从所述区域描述信息获取所述div元素 的宽度和高度信息，考虑所述区域的宽度和高度信息和所述div元素的宽度和高度信息配 置区域，从所述多媒体描述信息中获取多媒体的宽度和高度信息，并考虑所述区域的宽度 和高度信息和所述多媒体的宽度和高度信息配置场景。
11. 如权利要求10所述的显示设备，其中，所述显示单元被配置成比较所述区域的宽 度和高度与所述div元素的宽度和高度，当所述区域的宽度和高度大于所述div元素的宽 度和高度时，缩小所述区域的宽度和高度W匹配所述div元素的宽度和高度，而当所述区 域的宽度和高度小于所述div元素的宽度和高度时，扩大所述区域的宽度和高度W匹配所 述div元素的宽度和高度。
12. 如权利要求11所述的显示设备，其中，所述显示单元被配置成比较所述区域的宽 度和高度与多媒体的宽度和高度，当所述多媒体的宽度和高度大于所述区域的宽度和高度 时，缩小所述多媒体的宽度和高度W匹配所述区域的宽度和高度，而当所述多媒体的宽度 和高度小于所述区域的宽度和高度时，保持所述多媒体的宽度和高度；
13. 如权利要求9所述的显示设备，其中，所述显示单元被配置成从所述场景组成信息 中获取所述场景的时间信息，并根据所述场景的时间信息组成整个场景，从所述区域描述 信息中获取所述区域的时间信息，并根据所述区域的时间信息组成每个区域，从所述多媒 体描述信息中获取多媒体时间信息，并根据所述多媒体时间信息组成所述多媒体。
14. 如权利要求13所述的显示设备，其中，当通过与所述标记分开的标记配置所述场 景组成信息时，所述显示单元被配置成从所述分开的标记中检测与所述多媒体的标识符相 匹配的时间信息，并通过将所检测到的时间信息反映到所述多媒体中而在时间上组成所述 多媒体。
15. 如权利要求9所述的显示设备，其中，所述场景组成信息包括X轴偏移、y轴偏移、 区域的宽度、区域的高度、区域的起始时间、区域的结束时间、和区域的持续时间中的至少 一个属性。
16. 如权利要求9所述的显示设备，其中，所述区域描述信息包括div元素的宽度、div 元素的高度、div元素的起始时间、div元素的结束时间和div元素的持续时间中的至少一 个属性。
17.-种存储下述指令的非暂时性计算机可读存储介质，所述指令被运行时使得至少 一个处理器执行如权利要求1所述的方法。
【文档编号】G06F17/21GK104471562SQ201380037083
【公开日】2015年3月25日 申请日期:2013年7月12日 优先权日:2012年7月12日
【发明者】柳永善, 宋在涓 申请人:三星电子株式会社