存取与元媒体数据相关组合信息的装置与方法

专利名称：存取与元媒体数据相关组合信息的装置与方法
技术领域：
本发明涉及媒体领域的数据传输和提供。更具体地说，本发明涉及一种存 取与元媒体数据相关组合信息的系统。
背景技术：
媒体服务提供商正在不断寻求新的和独特的方式来提供资讯给媒体消费 者。尤其是，媒体服务提供商总是寻求创新的方法来向潜在消费者提供广告客 户的信息，吸引消费者的注意，并提示消费者寻求更多关于产品或服务的信息， 如该广告的产品或服务。目前的挑战就是完全不依赖传统方法提供广告信息， 如不采用传统的插播于电视或电台节目片段之间广告的方法。
一种方法是在电影和电视节目中的"置入性行销"，其中广告客户的产品 是突出的一个场景出现在电影或电视节目。虽然这种方法已有效地得到消费者 关注广告客户的产品，但是这种方法可以让消费者提供的产品信息量有限。最 好能提供消费者一个简单、愉快获取有关产品或服务更多信息的方式，如访问 获取信息的网站或通过电子邮件接收信息。
现在需要的是一种当消费者正在体验媒体服务时或体验之后弓I导其获取 更多有关产品或服务的方法。

发明内容
为满足上述和其它需要，本发明的不同实施例提供不同的装置和方法，向 正在体验媒体信息(如电视、广播、电影和实时转播)的媒体接收者分发相关 信息。组合信息可以是一些直接链接，媒体接收者使用这些链接存取补充信息， 如因特网的网站，这些链接与元媒体关联。由于组合信息能引导媒体接收者获 取补充信息，所以无需媒体接收者自己搜索。在本发明的不同实施例中，直接链接被传送到可直接存取补充信息的通讯 设备。在某些情况下，直接链接从原始媒体数据流中抽取或拷贝形成。因此， 本发明实施例中，从"单向"元媒体数据流中抽取组合信息，再利用组合信息 交互从"双向"信息媒体(如因特网、无线通讯网络)中存取补充信息。因此， 本发明提供"单向"媒体(如电视、广播、电影和视频)转化为"双向"媒体 (如互联网和无线通信网络)的方法。
元媒体展示可以被看作是一个"往后"体验，但不一定是可互动的。然而， 使用直接链接提供了一个"往前"或交互性的体验能够增强元媒体实时性，因 为媒体收件者可利用链接存取补充信息。
在本发明优选实施例中，提供了一种把媒体信息从媒体信息源传输到媒体 接收者的方法，该方法包括
(a) 从媒体信息源接受媒体数据流，媒体数据流包括元数据和组合信息， 其中元数据包括一元媒体展示和组合信息，组合信息指向与元媒体展示关联的 补充信息；
(b) 根据元数据向媒体接收者提供元媒体展示；
(c) 以媒体数据流形式存取组合信息；
(d) 以组合信息为基础确定补充信息位置；
(e) 从(d)中确定的位置存取补充信息；
(f) 向媒体接收者展示补充信息。
在本发明优选实施例中，步骤(a)包括从电视节目的服务提供商获取媒 体数据流；步骤(b)包括在电视播放设备上展示电视节目。在一些实施例中， (a)包括从广播节目的服务提供商获取媒体数据流；步骤(b)包括在广播设 备上展示广播节目。在其它实施例中，(a)包括从数字媒体播放设备如DVD 播放器、CD播放器或数字音乐播放器获取媒体数据流。在极个别实施例中，(a) 包括从影院电影放影设备获取媒体数据流；步骤(b)包括使用投影设备在在影剧院展示电影功能。还有在一些实施例中，(a)包括为大格式视频显示设 备从视频数据源获取媒体数据流；步骤(b)实时在大格式视频显示设备上展
示视频节目。
在另一个方面，该发明提供了一个装置用于操作由元数据和组合信息组成 的媒体数据流。其中，元数据包含元媒体展示，组合信息指向与元媒体展示相 关的补充信息。在本发明优选实施例中，装置包括一个组合信息存取设备和一 个组合信息接收设备。其中，组合信息存取设备包含一个从媒体数据源接收媒 体数据流的媒体数据流输入、 一个从媒体数据流中存取组合信息的提取电路、 一个向组合信息接收装置提供组合信息的组合信息输出、 一个向元数据展示设 备提供元数据的元数据输出组成。组合数据接收装置用于接收组合数据、存取 由组合信息指明位置的补充信息和向媒体接收者展示补充信息。
在一些实施例中，组合信息接收设备是移动电话或具有无线通信能力的个 人数字助理设备。在其它实施例中，组合数据接收装置可以是个人计算机、笔 记本电脑的组件。补充信息将被提供给装备了显示设备的个人计算机或笔记本 电脑。同时，补充信息将提供给显示设备与个人计算机或笔记本电脑。
在一些实施例中，组合信息存取是移动电话、数码媒体播放器、数字音乐
播放器、DVD播放器、CD播放器、个人数字助理设备、笔记本电脑、个人计算 机、卫星电视接收装置、有线电视接收装置、地面电视接收装置、卫星广播接 收装置或地面广播接收装置的组件。


根据附图的详细描述，本发明优点是显而易见的。其中的内容没有放大以 便更清楚地显示细节，所有图示中，相同的数字表示相同的内容。
图l描述了本发明优选实施例中提供存取与元媒体数据相关的组合信息的 装置功能框图；图2描述了本发明优选实施例中提供存取与元媒体数据相关组合信息的方
法流程图3描述了本发明优选实施例中提供存取与元视频数据相关组合信息的方 法流程图4描述了本发明另 一个实施例中提供存取与元视频数据相关组合信息的 方法流程图5A描述了本发明优选实施例中提供存取与元媒体数据相关的组合信息 的装置功能框图5B描述了本发明另一实施例中提供存取与元媒体数据相关的组合信息 的装置功能框图； ..
图6描述了本发明第一实施例中提供存取与元视频数据相关的组合信息的 装置功能框图7描述图6进一步的细节的装置功能框图8描述嵌入于媒体数据流中组合数据的一实施例；
图9描述图6更进一步细节的装置功能框图10A描述元视频数据展示的一实施例，元视频数据展示基于本发明优选 实施例的补充信息；
图10B描述以网页形式在显示设备上展示基于本发明优选实施例的补充信 息的一实施例；
图11描述了本发明第二实施例中提供存取与元媒体数据相关的组合信息 的装置功能框图12描述了本发明另一实施例中提供存取与元媒体数据相关组合信息的 方法流程图13描述了本发明第三实施例中提供存取与元媒体数据相关的组合信息 的装置功能框图；图14描述了本发明第四实施例中提供存取与元媒体数据相关的组合信息 的装置功能框图15描述了本发明另一优选实施例中提供存取与元媒体数据相关组合信
息的方法流程图。
具体实施例方式
图1描述了系统10的一优选实施例，系统10提供存取与元媒体数据相关 的组合信息。为了这个说明，"元媒体数据"就是提供或传送媒体内容的信息。 例如，元媒体数据包括但不限于通过任何方式转化的视频、音频、图像或文本 数据。"组合信息"是指向补充信息源并以任何形式存在的信息。其中，补充 信息源以一定的方式与元媒体数据关联。例如，组合信息可以包括但不限于网 页的链接、网络地址、计算机的应用程序、文件、Email信息、短信、语音信 息或数据字符串。
视频数据包括可能被卫星传送的电视数据、有线或无线地面信号、存储于 存储介质如DVD或其它光盘或硬盘中的视频信息。视频信息通过通信网络(如 因特网)传送，视频信息显示在大格式视频显示屏，如索尼JumboTron tm屏幕 和电影院中的视频信息投影。
音频数据包括可能被卫星传送的无线广播数据、有线或无线地面信号、存 储于存储介质如CD或其它光盘或硬盘中的音频信息。音频信息存在于现场媒 体活动，如音乐会或体育赛事，音频信息存在于电影配乐。音频信息通过通信 网络(如因特网)传送。音频信息可以以任何一个编码的多种格式存在，如MP3、 杜比数字、DTS和Windows媒体音频。
如图1所示，系统10包括一媒体数据源12，媒体数据源12提供或传送元 媒体数据。在优选实施例中，媒体数据源12可以是一卫星电视服务供应商、 有线电视服务供应商、地面电视广播商、卫星广播服务提供商、有线广播服务 提供商、地面广播商、互联网、个人计算机的数字媒体播放器、DVD播放器、CD播放器、MP3播放器、数字磁带播放器、计算机硬盘、光盘或电影的配乐。本
发明中媒体数据源12不限于上述所列装置或源。媒体数据源12生成或传送由 箭头14标记的媒体数据流。在优选实施例中，媒体数据流14同时传送元媒体
数据和相关信息。在另一实施例中，部分或全部的组合信息是通过一与媒体数
据流14独立的渠道或路径传送的。
继续参照图1，系统10包括一组合信息存取设备16，组合信息存取设备 16接收由媒体数据源12提供的媒体数据流14。在本发明优选实施例中，组合 信息存取设备16存取存在于媒体数据流14或联合通道中的组合信息中。如下 用一实施例作更详细描述，其中，组合信息存取设备16检测组合信息是否存 在，从媒体数据流14或其它通道中抽取或拷贝组合信息，如必要则解码组合 信息，向组合信息存取设备内存16写入组合信息。在不同的实施例中，组合 信息存取设备16是如下设备的组成部分，这些设备包括卫星电视接收装置、 有线电视接收装置或地面电视接收装置(统称为STB机顶盒)、个人计算机电 视接收卡、数字录像设备、卫星广播接收装置、地面或有线广播接收装置、无 线通信设备(如移动电话、个人数字助理设备PDA)、 DVD播放器、CD播放器及 其它媒体播放设备。
在本发明优选实施例中，组合信息存取设备16解码或处理存在于媒体数 据流14中的元媒体数据，产生一媒体信息信号18。媒体信息信号18以视频或 音频的形式向元媒体数据展示设备2.0传送元媒体节目。然后，元媒体数据展 示设备20向媒体接收者提供元媒体节目。在本发明的另一实施例中，相关的 数据接入设备16存取组合信息后不改变数据形式直接传送元媒体数据。在这 些实施例当中，元媒体数据展示设备20解码和处理元媒体数据。
组合信息存取设备16通过数据链接24a向一组合信息接收设备22a提供 组合信息。在本发明的一些实施例中，存在多个组合信息接收设备和数据链接， 如图1所展示的另一个组合信息接收设备22b和另一数据链接24b。在本发明优选实施例中，组合信息接收设备22a、 22b分别由个人计算机、笔记本电脑、 服务器、个人数字助理设备PDA、移动电话或其它无线通信设备组成。 一般而 言，组合信息接收设备22a、 22b的功能包括从组合信息存取设备16接收组合 信息、存取由组合信息指示的一个或多个地址中的补充信息和向媒体接收者提 供补充信息。
为了说明需要，"补充信息"定义为组合信息指定且一定程度上与元媒体 数据相关的信息。例如，补充信息可包括但不限于网页、计算机应用程序、电 子信息、视频数据文件、音频数据文件、文本数据文件、短信、语音信息或图 片数据文件。各种实施例中的补充信息如下作更加详细说明。
在图1的实施例中，媒体数据源12、组合信息存取设备16和组合信息接 收设备22a、 22b与广泛的通信网络连接，如因特网。
在本发明的一些实施例中，组合信息存取设备16能够与组合信息接收设 备22a通过非直接通信链接进行通信，这些非直接通信链接包括(l)组合信 息存取设备16与媒体数据源12之间的网络连接24c; (2)媒体数据源12与通 信网络28之间的网络连接24d; (3)通信网络28与组合信息接收设备22a之 间的网络连接24f。在本发明优选实施例中，网络连接24c与元媒体数据14 一样通过相同的通讯渠道提供。例如，如果媒体数据源12是一有线电视提供 商，网络连接24c和有线电视数据14将通过物理同轴电缆或光纤连接。
在本发明的一些实施例中，组合信息存取设备16能够利用其它方式与组 合信息接收设备22a通过非直接通信链接进行通信，这些非直接通信链接包括: (1)组合信息存取设备16与通信网络28之间的网络连接24e; (2)通信网络 28与组合信息接收设备22a之间的网络连接24f 。
同样，组合信息存取设备16与组合信息接收设备22b之间的有各种可替 代连接选项，并与网络连接24g有关。
在本发明一些优选实施例中，网络连接24a至24g是无线数据链接(如无线连接WiFi IEEE 802.11)、蓝牙连接IEEE 802.15.1、移动连接如全球移 动通信系统GSM、红外线串行连接)。在本发明其它优选实施例中，网络连接 24a至24g是有线连接(如通过通用串行总线USB、外围组件互连PCI总线、 局域网LAN、广域网WAN如因特网)。
在本发明一些优选实施例中，组合信息接收设备22a只是在内存中保存组 合信息并通过直接数据连接30或通过网络连接(24f、 24g和通信网络28)传 送组合信息至第二个组合信息接收设备22b。第二个组合信息接收设备22b具 备上述第一个组合信息接收设备22a的部分或全部功能。在本发明优选实施例 中，第二个组合信息接收设备22b由个人计算机、笔记本电脑、服务器、个人 数字助理设备PDA、移动电话或其它无线无线通信设备组成，也可以是上述任 一设备。直接数据连接30可以是无线数据链接(如WiFi连接)、蓝牙连接、 移动连接、红外连接)。另外，直接数据连接30也可以是有线连接(如通过USB 连接、PCI总线、局域网LAN连接、广域网WAN连接)。
参照图1，元媒体数据展示设备20从组合信息存取设备16接收媒体信息 信号18。在优选实施例中，组合信息存取设备16解码和处理元媒体数据，元 媒体数据展示设备20由电视显示设备、音频接收器/放大器/喇叭、计算机的 LCD显示器、PDA或移动电话、电影投影机，数字投影仪或大格式的视频显示 设备。在其它实施例中，组合信息存取设备16传送元媒体数据，元媒体数据 展示设备20由解码和处理部件组成，这些解码和处理部件用于以兼容的格式 (如电视显示设备、音频接收器/放大器/喇叭、计算机的LCD显示器、电影投 影机，数字投影仪或大格式的视频显示设备的输入格式)提供元媒体信息。
在本发明一些优选实施例中，组合信息存取设备16、组合信息接收设备 22a和元媒体数据展示设备20是一个独立媒体数据展示设备的组成部分。这些 独立媒体数据展示设备如个人计算机、笔记本电脑、PDA或移动电话。这些实 施例如下作更详细说明。根据组合信息，可以定位(步骤iio)补充信息，如补充信息的网络地址。 然后补充信息将被第一个组合信息存取装置22a或第二个组合信息存取装置 22b存取(步骤112)，同时向媒体接收者提供补充信息(步骤116)。在处理过 程中，元媒体内容如电视、电影、广播、音乐或实时转播同时通过元媒体数据 展示设备20向媒体接收者提供(步骤116)。
图3描述了图2实施例中的方法。在这个实施例中，这种方法包括接受来 自视频数据源12的视频数据流14，其中，视频数据流14包含MPEG-2或MPEG-4 视频流。其中，频数据源12可以是卫星或有线电视服务供应商、DVD播放器、 数字磁带播放器或电脑的媒体播放器(步骤118)。组合信息存取设备16 (步 骤102)存取嵌入于视频数据流14中的统一资源定位器(URL)信息，并将URL 信息提供给个人计算机22a (步骤122)。根据URL信息，可以定位(步骤124) 补充信息数据文件的网络地址，补充信息数据文件如超文本标记语言(HTML) 文件、视频文件或音频文件，然后被存取(步骤126)，并提供给个人计算机22a， 同时向媒体接收者提供补充信息(步骤130)。处理过程中，元媒体内容同时通 过视频显示设备展示给媒体接收者(步骤128)。
图4描述了图2实施例中的方法。在这个实施例中，这种方法包括接受来 自视频数据源12的视频数据流14，其中，视频数据流14包含MPEG-2或MPEG-4 视频流。其中，频数据源12可以是卫星或有线电视服务供应商、DVD播放器、 数字磁带播放器或电脑的媒体播放器(步骤132)。和图3中的实施例相同，组 合信息存取设备16 (步骤134)存取嵌入于视频数据流14中的统一资源定位 器(URL)信息。但是，图4的实施例中，URL信息不提供给个人计算机。相反， URL信息被组合信息存取设备16处理并定位补充信息数据文件的网络地址(步 骤136)。补充信息数据文件(如超文本标记语言HTML文件或视频文件)然后被 存取(步骤138)，并在视频显示设备上向媒体接收者展示(步骤142)。处理 过程中，元视频内容同时通过相同的视频显示展示设备20向媒体接收者展示(步骤140)。
图4是一实施例的方法，其中，移动电话或PDA接收视频片段或音乐片段， 移动电话或PDA存取经编码于视频片段或音乐片段中的URL，再使用URL来访 问有关视频片段或音乐片段的网页。图4的方法还包括另一实施例，其中，元 媒体数据就是通过个人计算机媒体播放器播放的媒体数据文件，计算机中的应 用程序将存取经编码于媒体数据文件中的URL，再使用URL来访问有关媒体数 据文件的网页。
图5A描述了本发明一优选实施例，其中，源媒体内容是电视节目。这个 实施例中，媒体数据源12是媒体数据服务提供商12 (如有线或卫星电视服务 提供商)。组合信息存取设备16就是电视/计算机接口 16，组合信息接收设备 就是个人计算机22a，元媒体数据展示设备就是电视显示设备20。
图6描述了电视/计算机接口 16，从发明的优选实施例可知，电视/计算机 接口16包含于机顶盒中。电视/计算机接口 16包括数据提取器34,其中，数 据提取器34从电视媒体数据源12中接收数字媒体流14。本实施例中，数据提 取器34作用是从数字媒体流中提取或拷贝组合信息。
为不同用途，组合信息可能存在于数字媒体流14中，例如需要标识元电 视节目的来源或用于生成或编码视频数据的软件类型时。如先前提到，组合信 息也可用于向消费者提供关于产品或服务的信息。
组合信息可能被嵌入在数字媒体流14的"用户数据"段内。如下有更详 细的描述，数据提取器34监测已编码的数据流14同时"听取""用户数据" 的开始。当检测到"用户数据"段时，数据提取器34从数字媒体流14中拷贝 组合信息并向接口控制器44传送。接口控制器44通过网络连接24a从数据提 取器34向计算机22a传送。本发明一些实施例中，接口控制器44从组合信息 中提取图形数据并发送到图形控制器38。尽管组合信息是当数字媒体流14通 过数据提取器34时从数字媒体流14中拷贝得到，进入电视/计算机接口 16中的数字媒体流14在通过数据提取器'34时没有被改变。
本发明优选实施例中，数据提取器34作为一监听端口补丁 (增加)到数 字媒体数据流14中。如图7所示，数据提取器34包括一个数据提取处理器60, 数据提取处理器60监测数据流14，寻找存在于数字媒体媒体信号中组合信息 的序号。数据提取器34又包括只读存储器(R0M)62用于存储程序指令和内存 (RAM)64用于临时存放数据。
为了提供背景知识用于描述数据提取器34的运作，MPEG-2的数据格式第 一次被描述出来如图8所示，它代表了以十六进制数据表示的标准MPEG-2数 据。如图8所示，MPEG-2数据流包括多个不同的"开始码"，表示数据流的不 同部分。根据ISO/IEC 13818-2规定的数字视频MPEG-2标准，"开始码"是特 殊的位模式，不会出现于视频流中。每一种"开始码"由开始码前缀和开始码 码值构成。
根据MPEG-2标准，"开始码"前缀是一个值为零，长度为23位字符串后 跟1组成，因此，"开始码"前缀是位字符串"0000 0000 0000 0000 0000 0001" (0000 01十六进制)。紧跟"开始码"前缀之后是开始码码值，码值是8位整 型数，用于标识"开始码"类型。大多数"开始码"只有一位码值。
MPEG-2流中"用户数据"部分的十六进制开始码码值为"b2",因此，如 图8所示，"用户数据"的十六进制"开始码"是"0000 01b2 "。用户数据包 括所有紧跟"开始码"直到结束码(或下一个"开始码")之间的数据。用户 数据可以是任意长度数据。图8所示的用户数据为"2153 8846 8468 ld4e 356a"。
SMPTE注册机构(LLC)是目前被国际标准化组织(ISO)授权注册MPEG-2 格式标识符的注册机构。注册MPEG-2标准的描述是由国际标准化标准13818-1 提供，目的是允许用户在MPEG-2标准上传送明确的用户数据而这些用户数据 在目前公认的MPEG-2标准中尚没有规定。这一规定允许的MPEG-2视频传输标 准传送不同类型的数据，同时提供明确的鉴定方法来识别其中的私有数据。向SMPTE注册的实体将被指定一个独特的代码，这个代码可以在视频流中 被识别。使用此注册代码，实体可以在视频数据流的用户数据部分嵌入具体的 组合信息。此注册代码还可以用于定位和提取组合信息。
根据图7，数据提取处理器60基于保存于ROM 62中的程序指令监听MPEG-2 数据流中的用户数据"开始码"(0000 01B2)。 一旦用户数据"开始码"被检 测，处理器60跳转至ROM中另一段程序，开始监听合适的注册码。当注册码 被检测时，处理器60开始拷贝前方数据到内存64直到停止码被检测为止。处 理器60转发保存在内存中的数据到接口控制器44。处理器60然后重复开始监 听下一个用户数据"开始码"。
当视频流通过数据提取器34后，解码器36 (如MPEG-2或MPEG-4解码器) 解码数字媒体流成一个纯数字亮度/色度(Y/C)信号。本发明一些实施例中， 解码后的媒体信号提供给图形控制器38，图形控制器38集成媒体流和计算机 22a中的图形数据(如果是指示这样做)。最后，再次根据电视/计算机接口 16 和正在使用的电视显示设备20的情况，在视频接口 40中的数字媒体信号可能 会转换成一个或多个模拟信号。因此，根据一个特殊的实施例，提供给电视显 示设备20的信号可以由视频、复合视频、数字视频接口 (DVI)、高清晰度多 媒体接口 (HDMI)或其它视频或多媒体组成。
图9描述了本发明优选实施例中的计算机22a，计算机22a包括计算机接 口控制器50、处理器52、硬盘54、内存56、通讯网络接口 58、视频图形卡 60和显示设备62。其中，接口控制器50可能是一个局域网网络接口卡、USB 控制器或地址/数据总线(如PC工总线)。接口控制器50提供了电视/计算机接 口 16和处理器52之间的数据接口。
根据从电视/计算机接口 16接收到的组合信息的类型，处理器52利用硬 盘54、内存56对组合信息进行处理。如果组合信息是一个通过因特网可访问 网页的链接，处理器52将使用游览器软件通过通讯网络接口 58获取网页信息。在本发明优选实施例中，网页图形将在计算机显示设备62中显示出来，处理
器52根据链接数据生成网页图形指令数据，并将图形指令数据发送给计算机 视频图形卡60。
如图7所示，接口控制器44包括一接口控制处理器84 (用于与控制设备 接口 42通信)、数据提取器34和图形控制器38。控制设备接口 42和数据提取 器34向接口控制处理器84提供数据，处理器84根据保存在ROM 86的指令对 数据进行处理。这些指令决定处理器84如何修改组合信息并发送给计算机22a 上的网络接口卡(NIC) 90，而且，修改后的组合信息必须被运行于计算机22a 上的软件识别。在修改组合信息发送给网络接口卡(NIC) 90之前，存储在RAM 88中。
本发明的一些优选实施例中，接口控制器44中的处理器84从组合信息中 提取文本字符串，然后向插入到显示视频的显示设备20中，图形控制器38发 送提取的文本字符串。处理器84还负责通过网络接口卡90和链接24a传送组 合信息到计算机22a。在一些实施例中，接口控制器44等待控制设备46的发 送指令，才将组合信息发送到计算机22a。在其它的实施例中，接口控制器44 自动将组合信息传送给计算机22a，只要接口控制器44从数据提取器34接收 到组合信息。
恰好这些操作的逆向运作方式也是一样的。当网卡90接收到来自网络连 接24的数据时，转发数据给处理器84。处理器84执行保存于R0M86的指令正 确修改接收到的数据，然后发送给图形控制器38。数据在发送至图形控制器 38之前一直保存在RAM88中等待合适的发送时间。
如图7所示，图形控制器38提供了一个系统用于产生图形和将其同步嵌 入到数字媒体流。本发明的优选实施例中，图形控制器38包括含有RAM68和 R0M70的数字交换机控制器、数据交换72、图形卡74、含有RAM 76和ROM 78 的图形处理器以及数字视频编码器82 。在本发明的一个实施例中，数字交换机控制器66从接口控制器44接收指 令，并将其分离成图形指令和嵌入指令。数字交换机控制器66向图形卡74发 送图形指令，在RAM68中保存嵌入指令。数字交换机控制器66同时负责监测 通过数据提取器34的数字媒体信号，其监测数字媒体信号的方式与数据提取 器34相同。数字交换机控制器66在数据流中监测数字媒体信号并在合适的位 置激活交换机72，让其允许图形嵌入到流中。嵌入位置根据存储于MM 68中 的嵌入指令决定。正常模式下，交换72允许数字媒体信号无变化通过。当交 换机72从数字交换机控制器66接收到合适的指令时，交换机72以图形插入 方式运作，即由图形处理器76创建的图形同步插入到视频流中。本发明的优 选实施例中，这个同步交换使用开关逻辑门在交换72中完成。 一个相同的交 换模式是有线或卫星机顶盒向与视频节目信号一起的视频信号中插入程序图 形指引。
在本发明优选实施例中，图形卡74与个人计算机上的图形卡运作方式一 致。图形卡74从数字交换机控制器66接收图形指令，这些图形指令与个人计 算机提供的指令的格式相同或非常相似。
基于数字交换机控制器66发出的图像指示，图形卡74输出图像数据，图 形处理器76则拷贝图像数据到RAM 78。当图形处理器76接收到来自数字交换 机控制器66信号后，就把图像数据嵌入数字媒体信号。数字交换机控制器66 向图像处理器76发出嵌入图像数据的信号，这个信号包括嵌入的数据量和停 止嵌入的时间。图像处理器接收嵌入指示并向数字视频解码器82输出数据， 这个解码器将数据转换成适当的视频格式。例如，显卡74以RGB格式产生图 像信息，数字视频解码器82将数据转换成数字视频亮度/色度(Y/C)格式。 交换72接收到从数字视频解码器82发来的数据，并把数据嵌入数字媒体信号。
图10A描述了由图6实施例产生电视屏幕图像的一个例子。当接收到关于 苹果IPod电视广告200的视频数据流时，数据提取器34在包含文本词组"购买IPod"的视频数据流中检测并拷贝组合信息。根据这个组合信息，图形控制 器38产生一具有相同文本词组的图形展示并嵌入到前面所述的数字媒体信号 中。最后，"购买IPod"的图形展示与电视广告200的元视频信息一起出现在
电视显示设备20上。
在这个例子中，数据提取器34检测组合信息并将信息链接到网页，客户 通过网上链接获取更多信息和购买IPod。组合信息以URL或IP地址形式提供。 在本发明优选实施例中，组合信息被音动拷贝和传送到接口控制器44，从而通 过链接24a向计算机22a提供数据。
如图6所示，通过发射器45 (如蓝牙发射器)选择性或者附加性地无线发 射组合信息，组合信息在发射器45通信范围内被发射到无线通信设备22b，无 线通信设备22b (如移动电话、PDA或者手提电脑)可被用来存取由组合信息 指向的补充信息。
再次参考图IOA，当出现文本图像202，是提示用户有关广告的产品补充 信息可以获取。用户按下遥控器装置46 (图6)的按钮，激活接口控制器44 传送请求信号到计算机22a，补充信息便可获取。为响应请求信号，计算机22a 执行浏览器程序存取URL指示的网页。例如，电视广告计算机系统22b的服务 器存储的网页(图5A)。如图10B所示，网页206被计算机22a的显示设备62 显示(图9)。在另一实施例中，用户可以使用同鼠标、触摸板或者遥控器去定 位光标204，点击文本图像202 (图10A)激活接口控制器44向计算机22a发 送请求信号。
图11描述了本发明一优选实施例，其中元媒体内容是音频节目(如来源 于一个数字音乐文件或数字广播流)..。在此实施例中，媒体数据源12是一个 音频媒体数据源12，如卫星广播服务提供商、通过网络传送的数字音乐文件或 存取CD或硬盘得到的数字音乐文件。本实施例的组合信息接入设备16可能是 卫星广播接收器、个人计算机中的卡的组件，或是CD播放机、MP3播放器或其它的数字音乐播放器的组件。本实施例的元媒体数据展示设备20包括音频 接收器/放大器/喇叭和组合音频发生器(喇叭或耳机)。在图形卡1的实施例
中，第一组合信息接收设备22a包括二个无线移动通信设备(如移动电话、PDA 或笔记本电脑)，无线移动通信设备通过无线连接24与组合信息存取设备16 进行无线通信(如WiFi、蜂窝、蓝牙或红外链接)。图ll的实施例还包括第 二组合信息接收设备22b (如个人计算机)，第二组合信息接收设备22b通过 直接连接30或通信网络28与无线移动通信设备22b通信。
图12描述使用图11中的实施例把音频媒体信息的音频从音频数据源传送 到媒体接收者的方法。在实施例中，该方法包括从音频数据源12 (步骤144 ) 接收音频数据14 (如MPEG或MP3音f员流)。嵌入到音频数据14的URL使用组 合信息接入设备16存取(步骤146)，同时，URL转发到无线移动通信设备22a
(步骤148)。补充信息数据文件的网络地址根据URL确定(步骤152)。补 充信息数据文件(如网页、视频文件或其它音频文件)同时通过指定的地址存 取(154步)，并提供给无线移动通信设备22a。同时，组合信息向媒体接收 者(步骤158)提供或存储于内存中供今后访问。在处理组合信息的同时，元 音频内容(如广播节目、podcast、其它音乐节目)通过音频接收器/放大器/ 喇叭20向媒体接收者提供(步骤156)。与此同时，URL数据可能通过通信连 接30或网络28 (步骤150)从无线移动通信设备22a向个人计算机22b发送。 图13描述了本发明一优选实施例，其中元媒体内容是来源于电影动画展 示的配乐。在此实施例中，媒体数据源12是一音频媒体数据源12，如从存取 电影配乐、其它磁性或光学存储介质得到的数字音频文件。实施例中的组合信 息接入设备16可能是动画配乐处理设备(如杜比数字处理器或数字影院系统
(DTS公司)处理器)的一个组成部分。实施例中的元媒体数据展示设备20 包括一音频接收/放大器和组合音频播放设备，如电影院的扬声器。在具有代 表性实施例图13中，第一组合信息接收设备22a由无线通信设备组成，如无线电话、PDA或笔记本电脑。这个无线通信设备通过无线链接24a (如WiFi、 蜂窝、蓝牙或红外连接)与组合信息存取设备16通信。图13的实施例同时包 括第二组合信息接收设备22b (如个人计算机)，个人计算机通过连接30或网 络28与无线移动通信设备22进行通信。
图12所描述本发明的方法是使用图13实施例所描述的方法传送元电影配 乐音频数据和组合信息的代表性方法。在这个实施例中，该方法包括从电影配 乐12接收音频数据14 (如杜比数字或DTS音频数据)(步骤144 )。嵌入于 音频数据14中的URL使用组合信息存取设备16 (步骤146)存取，然后将URL 发送给无线移动通信设备22a (步骤148)。补充信息数据文件的网络地址根 据URL确定(步骤152)。补充信息数据文件(如网页、视频文件或其它音频 文件)在指定的地址被存取(步骤154)，然后提供给无线移动通信设备22a。 同时，组合信息向媒体接收者(步骤158)提供或存储于内存中供今后访问。 在处理组合信息的同时，电影配乐在电影院(步骤156)通过音频接收器/放大 器/喇叭20向媒体接收者提供。与此同时，URL数据可能通过通信连接30或网 络28 (步骤150)从无线移动通信设备22a向个人计算机22b发送。这一步 处理可能在电影观众回到家才发生，该处理将从无线设备22a向计算机22b下 载组合信息。
图14描述了本发明一优选实施例，其中，元媒体内容是面向大格式视频 显示的视频节目。实施例中的显示屏20可能是应用于体育场馆和公众聚集场 所(像纽约的时代广场)的索尼JumboTronTM屏幕。实施例中的显示屏20还包 括用于其它公共场所(如商场、零售商店、餐厅、体育酒吧等)的显示屏。实 时转播媒体数据12可能来源于计算机硬盘、DVD光盘、数字视频磁带或任何其 它数字视频源。恰到好处，本实施例中的组合信息接入设备16的功能与图6 所描述的设备16的功能相同。然而，在本实施例中，首选的通信连接是无线 的，而首选的组合信息接收装置22a是如具有蓝牙功能的移动电话或PDA等的
24移动通信设备。
图14所述的实施例可以用于实时转播(如体育比赛或音乐会)。此类活动，
商业或其它信息可以显示在活动场所内大格式视频显示20上。在实时转播过 程中，从元视频数据流14中提取的组合信息通过现场或附近的无线发射机45 (见图6)发送到现场观众携带的便携式的无线设备22a。例如，在大学生足 球比赛，主队的视频信息可以在显示设备20上展示。比赛期间，组合信息被 发送到观众携带的便携式的无线设备引导观众获得有关主队或大学的补充信 息。同时，推荐附近餐厅的广告视频将展示，组合信息可以是餐厅指引和食物 或饮料折扣的特别码信息。
组合信息可能是一条发给现场每位移动电话观众的短信，其中，短信包括 特别码，观众通过特别码可以存取信息。例如，组合信息可以是指向只能用特 别码访问的网页URL。在本发明一优选实施例中，发送采用蓝牙传输，只有蓝 牙功能的移动电话、PDA或其它现场或附近的设备才能接收。在实施例中，组 合信息可以通过通信连接30或网络28从无线移动通信设备22a发送至个人计 算机22b。那里的文字信息包括一特殊代码，观众可以用来存取资料。这一步 可能在观众回到家才发生，该处理将从无线设备22a向计算机22b下载组合信 息。
基于本发明另一实施例，图15描述存取与元媒体信息相关组合信息的方 法。尽管这种方法可以应用于多个实施例，但下列的描述直接来源于图5B的 实施例。 一组合信息存取设备(如电视/计算机接口 16)从电视媒体数据源(步 骤160)中接收电视媒体数据14。电视/计算机接口 16向电视显示设备20提 供元电视节目内容，同时，节目向媒体接收者提供(步骤162)。电视/计算机 接口 16从电视媒体流提取或拷贝事件数据字符串(步骤164)。在本优选实施 例中，这个事件数据字符串被包含于前面所述MPEG流的"用户数据"段内。
根据事件数据字符串，电视/计算机接口 16产生一显示于电视显示设备或计算机显示设备上的图形图标、文字或窗口 (步骤166)。这些图形图标或窗口
告知媒体接收者可用的补充信息。当媒体接收者使用控制设备46 (图6)或连 接计算机的鼠标点击图标， 一个请求字符串产生并通过连接24e、通信网络28 和连接24g从电视/计算机接口 16发送到第三方计算机系统22b (如结合了广 告信息的计算机系统X步骤168)。步骤168中的请求字符串同时通过连接24e、 通信网络28和连接24g发送到其它第三方计算机系统22b。请求字符串初始化 与电视节目相关补充信息的请求。其中，电视节目包含事件字符串。请求被计 算机系统22b处理，请求的响应将从计算机系统22b发送到媒体接收者(步骤 170)。在本优选实施例中，响应以电子邮件形式通过通信网络发送到拥有媒体 接收者电子邮件地址的电子邮件服务器(步骤172)。媒体接收者可通过网络 28使用计算机22a条存取电子邮件服务器上的邮件。在本优选实施例中，邮件 包括补充信息和/或组合信息(如引导媒体接收者从网站上获取进一步的补充 信息)。
如图5B所示，本发明的一实施例包括能够与个人计算机22a通过通信网 络28通信的电视网络计算机系统。本实施例中的个人计算机22a可以从电视 网络计算机系统27下载一个存取组合信息的应用程序。在个人计算机22a上 安装和运行应用程序后，应用程序使用存取电视媒体流14得到的触发字符串 提供保存在电视网络计算机系统27中的补充信息。在这种情况下，补充信息 可以包括与网络电视节目相关的计划信息。本实施例展示了一种情况，其中， 组合信息和补充信息源自于公共资源如电视网络。但是，他们直接通过两个不 同的通信频道。元媒体数据通过电视数据源12 (如卫星或有线电视供应商)， 而来源于电视网络计算机系统27的組合信息则通过通信网络28。
图5B中的实施例准确地说是建立跨越电视和因特网之间的桥梁。它允许 电视观众从电视直接跳转到因特网网站。使用这个实施例，广告商能够创建指 向商业广告的因特网链接。同时，实施例使得电视网络产生跨平台的体验，通过因特网中的链接媒体和信息增强电视收视。电视网络可以使用这些链接接收 来自观众关于下次喜欢什么节目以及交互式的投票信息。例如，图5中的实施 例可以用于允许电视观众投票决定他们下次喜欢观看什么节目。比如，电视节 目可以多种方式拍摄，让观众投票是用A或B方式。根据投票结果，电视网络
能够选择显示剪辑A或B。这个实施例也可以让观众通过电子邮件或短信获得
提醒去观看或录制节目。
本实施例中，电子邮件服务器22同时允许收集大量的请求信息，例如， 服务器22保存并集合所有频道上的访问请求数据。这些数据可以生成各种分 析报表，如有多少观众正在收看、收看什么节目、观众对节目的兴趣如何等待。
本发明优选实施例中，上述专利说明的目的是更好地说明和描述本发明。 说明不打算详尽，只是尽可能准确披露。对上述技术明显的修改或更改是可能 的。选择实施例目的是为本发明原理提供最好展示和实际应用，同时使得普通 技术在本发明中发挥作用。通过不同的修改以适应设想中的的应用。为了符合 合理、公正、公平原则，所有这些修改都在附加权利要求的范围内。
权利要求
1、一种把媒体信息从媒体信息源传输到媒体接收者的方法，特征在于该方法包括以下步骤(a)从媒体信息源接受媒体数据流，媒体数据流包括元数据和组合信息，其中元数据包括一元媒体展示且组合信息指向与元媒体展示关联的补充信息；(b)根据元数据向媒体接收者提供元媒体展示；(c)以媒体数据流形式存取组合信息，(d)以组合信息为基础确定补充信息位置；(e)从(d)中确定的位置存取补充信息；以及(f)向媒体接收者展示补充信息。
2、 根据权利要求1所述的方法，其特征在于还包括在步骤(C)后向第一组合 信息接收装置提供组合信息。
3、 根据权利要求2所述的方法，其特征在于还包括把组合信息从第一组合 信息接收装置传送至第二组合信息接收装置。
4、 根据权利要求3所述的方法，其特征在于向第一组合信息接收装置提供 组合信息的步骤包括通过网络向第一计算设备提供组合信息，该第一个计算设 备选自由服务器、个人计算机、笔记本电脑、个人数字助理和无线通信设备组 成的群设备；以及从第一组合信息接收装置向第二组合信息接收装置提供组合信息的步骤 由从第一计算设备向第二计算设备提供组合信息组成，第二个计算设备选自由 服务器、个人计算机、笔记本电脑、个人数字助理和无线通信设备组成的群设 备；以及步骤(d)、 (e)和(f)由第一计算设备或第二计算设备来完成。
5、 根据权利要求2所述的方法，其特征在于向第一组合信息接收装置提供 组合信息的步骤包括由无线移动通信设备传输组合信息组成，并且步骤(d)、(e)和(f)由无线移动通信设备来完成。
6、 根据权利要求1所述的方法，其特征在于步骤(a)包括从电视节目服务 提供商接收媒体数据流；并且步骤(b)包括在电视显示设备上展示电视节目。
7、 根据权利要求1所述的方法，其特征在于步骤(a)包括从广播节目服务 提供商接收媒体数据流；并且步骤(b)包括在音频设备上展示广播节目。
8、 根据权利要求1所述的方法，其特征在于步骤(a)包括从数字媒体播放 设备接收媒体数据流，所述数字媒体播放设备选自由DVD播放器、CD播放器和 数字音乐播放器组成的群设备。
9、 根据权利要求1所述的方法，其特征在于步骤(a)包括从电影播放设备 接收媒体数据流；并且步骤(b)包括在电影院投影设备上展示电影功能。
10、 根据权利要求1所述的方法，其特征在于步骤(a)包括从视频数据源 向实时大格式视频显示设备接收媒体数据流；并且步骤(b)包括由实时大格 式视频显示设备展示视频节目。
11、 根据权利要求1所述的方法，其特征在于步骤(c)包括从媒体数据流 中检测组合信息、解码组合信息和复制经解码的组合信息到存储设备。
12、 根据权利要求1所述的方法，其特征在于 步骤(c)包括从经解码的组合信息中存取一个或多个统一资源定位器(URL) 数据字符串； ..步骤(d)包括从至少根据一个或多个统一资源定位器(URL)数据字符串 确定补充信息的网络地址组成；步骤(e)包括存取经步骤(d)确定的网络地址中包含补充信息的数据文 件的步骤；步骤(f)包括执行包含补充信息的数据文件，从而向媒体接收者展示补充 媒体。
13、 根据权利要求1所述的方法，其特征在于步骤(c)包括存取一个或多个数据标记，所述数据标记指示存放于远程计算机上有效的补充信息中。
14、 一种用于操纵媒体数据流的装置，所述媒体数据流包括元数据和组合信息， 其中的元数据包括一个元媒体展示和相关的数据点，数据点关联元媒体展示相 关的补充信息，特征在于该装置包括 一组合信息存取装置和一用于接收组合 信息、存取由组合信息指明位置的补充信息和展示补充信息的第一组合信息接 收装置，所述组合信息存取装置包括 一用于从媒体数据接收媒体数据流的输 入； 一用于从媒体数据流中存取组合信息的抽取电路； 一向组合信息接收装置 提供组合信息的第一组合信息输出； 一向元媒体展示设备提供元媒体的元媒体 展示输出。
15、 根据权利要求14所述的装置，其特征在于第一组合信息接收装置由向 第二组合信息接收装置提供组合信息的第二组合信息输出组成，第二组合信息 输出选自由无线数据接口设备和有线数据接口设备组成的群设备。
16、 根据权利要求14所述的装置，其特征在于第一组合信息输出包括一将 组合信息传输给组合信息接收装置的无线数据传输发射器，和一包括有无线移 动通信设备的第一次组合信息接收装置。
17、 根据权利要求16所述的装置，其特征在于所述无线移动通信设备包括 一选自由蜂窝电话、具有无线通信能力的个人数字助理和具有无线通信能力的 笔记本电脑组成的群设备。
18、 根据权利要求14所述的装置，其特征在于第一个相关的数据输出包括 一供向通信网络传输组合信息的网络接口 ，并且第一组合信息接收装置包括一 连接至通讯网络的计算设备，所述计算设备选自由个人计算机、服务器、笔记 本电脑和个人数字助理组成的群设备。
19、 根据权利要求14所述的装置，其特征在于所述组合信息存取装置及第 一组合信息接收装置被放置于一单独的遮蔽盒中。
20、 根据权利要求19中的装置，其特征在于所述组合信息存取装置及第一组合信息接收装置为一设备的组成部分，该设备选自由蜂窝电话、数字媒体播放器、数字音乐播放器、DVD播放器、CD播放器、个人数字助理设备、笔记本 电脑、个人计算机、卫星电视接收装置、有线电视接收装置、地面电视接收装 置、卫星广播接收装置和地面无线电接收装置组成的群设备。
21、 根据权利要求14所述的装置，其特征在于所述组合信息存取装置为一 设备的一个组成部分，该设备选自由蜂窝电话、数字媒体播放器、数字音乐播 放器、DVD播放器、CD播放器、个人数字助理设备、笔记本电脑、个人计算机、 卫星电视接收装置、有线电视接收装置、地面电视接收装置、卫星广播接收装 置和地面无线电接收装置组成的群设备。
22、 根据权利要求14所述的装置，其特征在于所述媒体数据流的输入包括 一从电视节目的服务提供商获取电视数据流的电视数据流输入、 一从电视数据 流中存取相关信息的提取电路以及向电视播放设备提供元电视节目的元数据 输出。
23、 根据权利要求14所述的装置，其特征在于第一组合信息接收装置为个 人计算机的组成部分，并且补充信息被提供给与个人计算机组合一起的显示设 备。
24、 根据权利要求14所述的装置，其特征在于媒体数据流输入包括一从广 播节目的服务提供商接收广播数据流的媒体数据流输入、 一从广播数据流中存 取相关信息的提取电路以及向广播设备提供广播节目节目的元数据输出。
25、 根据权利要求14所述的装置，其特征在于媒体数据流的输入包括一从 DVD读写设备获取数据视频的数字视频输入、 一从电视数据流中存取数据视频 的提取电路以及向视频播放器提供数字视频节目的元数据输出。
26、 根据权利要求14所述的装置，其特征在于媒体数据流的输入包括一影 院电影展示设备接收影院电影数据的影院电影数据输入、 一从影院电影数据中 存取组合信息的提取电路以及向影院电影展示设备提供影院电影节目的元数据输出。
27、 根据权利要求26所述的装置，其特征在于影院电影数据包括音频数据。
28、 根据权利要求14所述的装置，其特征在于媒体数据流的输入包括一从视频数据源为大格式的视频数据展示设备获取视频数据的大格式视频数据输 入、 一从视频数据中存取组合信息的提取电路以及向大格式的视频数据展示设 备提供视频节目的元数据输出。
29、 根据权利要求14所述的装置，其特征在于 一用于存取一个或多个统一 资源定位器(URL)在媒体数据流中编码的数据字符串的提取电路、 一用于接 收一个或多个统一资源定位器(URL)数据字符串、依据至少一个或多个统一 资源定位器(URL)数据字符串确定相关信息网络地址的第一组合信息接收装置。
30、 根据权利要求29所述的装置，其特征在于第一组合信息接收装置用于 进一步执行的包含补充信息的数据文件以展示补充媒体。
31 —种把媒体信息从电视媒体信息源传输到电视媒体接收者的方法，该方法包括(a) 从电视媒体信息源接受电视媒体数据流，电视媒体数据流包括元数 据和组合信息，其中的元数据包括一元电视媒体展示和相关的数据点，数据点 关联了元电视媒体展示的补充信息；(b) 在电视播放设备上向媒体接收者展示元电视媒体； (C)以电视媒体数据流形式存取组合信息；(d) 以组合信息为基础，从元电视媒体展示中指示补充信息位置；(e) 发出有关补充信息的请求'，请求发自于结合了电视媒体接收器的电 脑设备，并通过通信网络传送；(f) 确定基于请求并包含补充信息的网络地址；(g) 通过网络发送信息告知发出电视媒体接收者有关可用补充信息网络地址；(h) 通过结合了电视媒体接收器的电脑设备经由网络存存取信息；和(i) 通过结合了电视媒体接收器的电脑设备并经由网络存取补充信息。
32、 根据权利要求31所述的方法，其特征在于步骤(d)包含在电视显示装置上显示一图标。
33、 根据权利要求31所述的方法，其特征在于步骤(f)包含补充信息网络地址的确定，这些网络地址嵌入于电视媒体数 据流的统一资源定位器(URL)数据中；步骤(g)包括发送包含统一资源定位器(URL)数据；和歩骤(i)包括存取由统一资源定位器(URL)数据指定的补充信息。
34、 根据权利要求31所述的方法，其特征在于步骤(g)包含向结合了媒体 接收器的电脑设备存取的电子邮件服务器发送电子邮件。
35、 根据权利要求31所述的方法，其特征在于步骤(i)包含在结合了媒体 接收器的电脑设备中使用游览器存取补充信息。
全文摘要
装置和方法可描述为向正在体验元媒体数据(如电视、广播、电影或实时转播)的媒体接收者分发与元媒体数据相关的组合信息。这些组合信息可以是媒体接收者获取补充信息的直接链接如通过因特网存取的网站，其与元媒体媒体有关。由于组合信息能引导媒体接收者获取补充信息，所以，无需媒体接收者自己搜索。在本发明不同的实施例中，直接链接通过无线发送装置发送给无线通讯设备，再通过无线通讯设备存取补充信息。一般情况下，直接链接从元媒体数据流中抽取或拷贝形成。因此，组合信息可以从一个单向的元媒体数据流中提取和从双向的信息媒体(如因特网或无线通讯网络)中提取。
文档编号H04N7/173GK101606171SQ200780042457
公开日2009年12月16日 申请日期2007年11月15日 优先权日2006年11月15日
发明者克里斯多佛·M·克拉克 申请人:克里斯多佛·M·克拉克