接收增强服务的方法及其显示装置与流程

文档序号:12008613阅读:324来源:国知局
接收增强服务的方法及其显示装置与流程
本公开涉及接收增强服务的方法及其视频显示设备。

背景技术:
随着数字广播为它的广泛传播铺平道路,广播站发送主视听(AV)内容和增强服务数据,增强服务数据可链接到主AV内容以提供信息或服务,或者可单独地提供用于其他目的。然而,在当前广播环境下,各家庭中的视频显示设备可能不能直接通过空中接收广播信号。而是,在多数情况下,各家庭中的视频显示设备连接到广播接收设备,显示广播接收设备提供的未压缩视听内容。另外,广播接收设备从服务器(称为多频道视频节目分发器(MVPD))接收内容。MVPD从广播站接收广播信号,从接收的广播信号提取内容,将提取的内容转换为具有适于发送的格式的信号,将转换后的信号提供给广播接收设备。在这些处理期间,MVPD可排除提取的增强服务数据,或者可添加其他增强服务数据,使得广播站可用于提供AV内容,但是不能提供广播站引发的增强服务。由于广播接收设备从接收自MVPD的信号提取主AV数据并且仅向视频显示设备提供未压缩视听数据,所以仅有从广播接收设备而非视频显示设备提供的增强服务是可用的。此外,广播站不能提供它自己引发的增强服务。另外,即使当广播站通过无线信道提供增强服务时,由于带宽限制,也可能不能提供足够的增强服务。

技术实现要素:
技术问题实施方式提供了一种使广播站能引发增强服务的接收增强服务的方法及其视频显示设备。技术方案在一个实施方式中,一种在播放内容的视频显示设备中接收增强服务的方法,该方法包括:接收视听(AV)内容;从接收的AV内容提取第一特征信息;通过向第一服务器发送提取的第一特征信息从所述第一服务器接收包括与所述第一特征信息对应的内容信息、增强服务信息、增强服务中的至少一种的数据库;将从所述第一服务器接收的数据库存储在存储器中;从接收的AV内容提取第二特征信息;从所述数据库搜索并获得与提取的第二特征信息对应的内容信息、增强服务信息、增强服务中的一种。在另一个实施方式中,一种在播放内容的视频显示设备中接收增强服务的方法,该方法包括:接收AV内容;从接收的AV内容提取第一特征信息;通过向第一服务器发送提取的第一特征信息从所述第一服务器接收对应于所述第一特征信息的内容信息;从接收的AV内容提取第二特征信息;通过向所述第一服务器发送提取的第二特征信息和接收自所述第一服务器的内容信息从所述第一服务器接收对应于所述第二特征信息的内容信息。在另一个实施方式中,一种在播放内容的视频显示设备中接收增强服务的方法,该方法包括:接收AV内容;根据预定优先级选择分别支持不同的识别方法的多个内容识别模块中的一个;通过发送关于利用选择的内容识别模块获得的AV内容的内容标识信息来接收对应于所述内容标识信息的增强服务。在另一个实施方式中,一种在播放内容的视频显示设备中接收增强服务的方法,该方法包括:设置至少一个采样参数,以从AV内容提取一些样本;通过根据设置的参数对AV内容采样获得样本;通过向服务器发送获得的样本从所述服务器接收关于AV内容的内容标识信息。在另一个实施方式中,一种播放内容的视频显示设备,该设备包括:接收单元,所述接收单元接收视听(AV)内容;特征提取单元,所述特征提取单元从接收的AV内容提取第一特征信息;数据发送/接收单元,所述数据发送/接收单元通过向第一服务器发送提取的第一特征信息从所述第一服务器接收包括与所述第一特征信息对应的内容信息、增强服务信息、增强服务中的至少一种的数据库,将从所述第一服务器接收的数据库存储在存储器中;存储器,所述存储器存储从AV内容提取的第二特征信息;其中通过搜索数据库获得与从AV内容提取的第二特征信息对应的内容信息、增强服务信息、增强服务中的一种。在另一个实施方式中,一种播放内容的视频显示设备,该设备包括:接收单元,所述接收单元接收AV内容;特征提取单元,所述特征提取单元从接收的AV内容提取第一特征信息;数据发送/接收单元,所述数据发送/接收单元通过向第一服务器发送提取的第一特征信息从所述第一服务器接收对应于所述第一特征信息的内容信息;其中所述数据发送/接收单元通过除了向所述第一服务器发送从所述第一服务器接收的内容信息之外还发送从AV内容提取的第二特征信息,来从所述第一服务器接收对应于所述第二特征信息的内容信息。在另一个实施方式中,一种播放内容的视频显示设备,该设备包括:接收单元,所述接收单元接收AV内容;多个内容识别模块,所述多个内容识别模块分别支持不同的识别方法;控制单元,所述控制单元根据预定优先级选择所述多个内容识别模块中的一个;数据发送/接收单元,所述数据发送/接收单元通过发送关于利用选择的内容识别模块获得的AV内容的内容标识信息接收对应于所述内容标识信息的增强服务。在另一个实施方式中,一种播放内容的视频显示设备,该设备包括:参数设置单元,所述参数设置单元设置至少一个采样参数,以从AV内容提取一些样本;接收单元,所述接收单元接收AV内容;采样单元,所述采样单元通过根据设置的参数对AV内容采样来获得样本;数据发送/接收单元,所述数据发送/接收单元通过向服务器发送获得的样本接收关于接收的AV内容的内容标识信息。技术效果根据实施方式,广播站引发的服务是可用的。特别地,实施方式提供了另选的广告服务、场景相关信息提供服务、基于评级的内容服务和基于用户属性的服务。根据实施方式,在视频显示设备或数据库中生成包括与当前播放的AV内容有关的内容信息的数据库,使得提高了内容识别速度,并且高效地使用网络带宽。根据实施方式,由于通过根据优先级选择视频显示设备中的多个内容识别模块来识别内容,所以各种内容识别方式可以是可用的。根据实施方式,由于根据预先与服务器协商的采样参数对AV内容采样并且发送到服务器,所以根据各种内容识别方式高效地识别。此外,根据实施方式,与主AV内容有关的信息搜索、聊天、新闻搜索、数字媒体下载、产品目录下载、产品购买在无需使用遥控器输入不方便的文本的情况下可用。另外,根据实施方式,超出无线信道的带宽限制的增强服务变得可用。附图说明图1是例示根据实施方式的网络拓补结构的框图。图2是例示根据实施方式的基于水印的网络拓补结构的框图。图3是例示根据实施方式的基于水印的网络拓补结构中的数据流的梯形图。图4是例示根据实施方式的基于水印的内容识别时序的视图。图5是例示根据实施方式的基于指纹的网络拓补结构的框图。图6是例示根据实施方式的基于指纹的网络拓补结构中的数据流的梯形图。图7是例示根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。图8是例示根据实施方式的基于水印和指纹的网络拓补结构的框图。图9是例示根据实施方式的基于水印和指纹的网络拓补结构中的数据流的梯形图。图10是例示根据实施方式的视频显示设备的框图。图11是根据实施方式的增强服务管理单元的层次图。图12是例示根据实施方式的增强服务管理单元的操作的流程图。图13是根据实施方式的增强服务管理单元的层次图。图14是例示根据实施方式的增强服务管理单元的操作的流程图。图15是根据实施方式的增强服务管理单元的层次图。图16是例示根据实施方式的增强服务管理单元的操作的流程图。图17是根据实施方式的增强服务管理单元的层次图。图18是例示根据实施方式的增强服务管理单元的操作的流程图。图19是例示根据实施方式的使主AV内容的播放时间与增强服务的播放时间同步的方法的流程图。图20是例示根据实施方式的使主AV内容的播放时间与增强服务的播放时间同步的方法的概念图。图21是根据实施方式的运行自动播放应用时的画面。图22是根据实施方式的运行内容提供商应用时的画面。图23是根据实施方式的运行具有改变大小的用户界面的视频显示设备制造商应用时的画面。图24是根据实施方式的运行具有交叠用户界面的视频显示设备制造商应用时的画面。图25是例示根据实施方式的运行视频显示设备制造商应用的方法的流程图。图26是根据实施方式的显示应用选择菜单时的画面。图27是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的全部子菜单时的画面。图28是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的参与子菜单时的画面。图29是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的发现子菜单时的画面。图30是例示根据实施方式的搜索方法的流程图。图31是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的搜索子菜单时的画面。图32是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的搜索子菜单时的另一画面。图33是例示根据实施方式的聊天窗口显示方法的流程图。图34是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的Twitter子菜单时的画面。图35是例示根据实施方式的新闻获得方法的流程图。图36是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的新闻子菜单时的画面。图37是例示根据实施方式的观众列表显示方法的流程图。图38是根据实施方式的选择视频显示设备制造商应用中的社交主菜单的观众列表子菜单时的画面。图39是根据实施方式的视频显示设备获得朋友列表和观看信息时的信号流。图40是根据另一实施方式的视频显示设备获得朋友列表和观看信息时的信号流。图41是例示根据实施方式的喜好显示方法的流程图。图42是根据实施方式的选择视频显示设备制造商应用中的社交主菜单的喜好显示子菜单时的画面。图43是例示根据实施方式的数字媒体下载方法的流程图。图44是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的之前片段子菜单时的画面。图45是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的VOD子菜单时的画面。图46是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的应用子菜单时的画面。图47是例示根据实施方式的目录显示方法的流程图。图48是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的风格子菜单时的画面。图49是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的音乐子菜单时的画面。图50是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的另一子菜单时的画面。图51是根据实施方式的控制ACR功能的用户界面的视图。图52是例示根据实施方式的控制视频显示设备的方法的流程图。图53是例示根据实施方式的接收增强服务的方法的流程图。图54-57是例示根据实施方式的具有内部数据库的视频显示设备的配置的框图。图58是例示根据第二实施方式的接收增强服务的方法的流程图。图59是例示根据第一实施方式的视频显示设备与指纹服务器之间的操作的框图。图60和61是例示根据实施方式的在服务器中生成新数据库的方法的视图。图62是例示根据第二实施方式的视频显示设备与指纹服务器之间的操作的框图。图63是例示根据第三实施方式的视频显示设备与指纹服务器之间的操作的框图。图64和65是例示具有多个内容识别模块的视频显示设备的操作的框图。图66是例示根据第三实施方式的接收增强服务的方法的流程图。图67是例示根据第四实施方式的接收增强服务的方法的流程图。图68和69是例示根据实施方式的视频采样的采样区域的视图。图70是例示根据第一实施方式的设置采样参数的方法的梯形图。图71-74是例示根据实施方式的在参数设置处理期间在视频显示设备与服务器之间交换的参数值的视图。图75是例示根据第二实施方式的设置采样参数的方法的梯形图。图76是例示对AV内容采样的视频显示设备的配置的框图。图77是例示利用从视频显示设备接收的采样标识内容的服务器的配置的框图。图78是例示根据另一实施方式的基于指纹的视频显示设备的结构的框图。图79是例示根据另一实施方式的基于水印的视频显示设备的结构的框图。具体实施方式下文将参照附图更具体地描述与本发明有关的移动终端。针对以下描述中的组件的诸如“引擎”、“模块”、“单元”的名词后缀是考虑便于撰写说明书而给出或混合的。即,名词后缀自身不具有彼此可区分的含义或作用。将根据实施方式参照图1-9描述网络拓补结构。图1是例示根据实施方式的网络拓补结构的框图。如图1所示,网络拓补结构包括内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强服务信息提供服务器40、多个增强服务提供服务器50、广播接收设备60、网络70、视频显示设备100。内容提供服务器10可对应于广播站,广播包括主视听内容的广播信号。广播信号还可包括增强服务。增强服务可或不可涉及主视听内容。增强服务可具有诸如服务信息、元数据、附加数据、编译运行文件、网络应用、超文本标记语言(HTML)文档、XML文档、层叠样式表(CSS)文档、音频文件、视频文件、ATSC2.0内容、地址(例如,统一资源定位符(URL))的格式。可存在至少一个内容提供服务器。内容识别服务提供服务器20提供允许视频显示设备100基于主视听内容识别内容的内容识别服务。内容识别服务提供服务器20可或不可编辑主视听内容。可存在至少一个内容识别服务提供服务器。内容识别服务提供服务器20可以是编辑主视听内容以在主视听内容中插入看起来可能是logo(标志)的可视水印的水印服务器。此水印服务器可在主视听内容中的每帧的左上或右下处插入内容提供商的logo作为水印。另外,内容识别服务提供服务器20可以是编辑主视听内容以在主视听内容中插入内容信息作为不可视水印的水印服务器。另外,内容识别服务提供服务器20可以是从主视听内容的一些帧或一些音频样本提取特征信息并存储该特征信息的指纹服务器。此特征信息称为签名。多频道视频分发服务器30从多个广播站接收广播信号并进行复用,将复用后的广播信号提供给广播接收设备60。特别地,多频道视频分发服务器30对接收的广播信号执行解调和信道解码,以提取主视听内容和增强服务,然后,对提取的主视听内容和增强服务执行信道解码,以生成用于分发的复用信号。在这点,由于多频道视频分发服务器30可排除提取的增强服务或可添加另一增强服务,所以广播站可能不能提供它引发的服务。可存在至少一个多频道视频分发服务器。广播设备60可对用户选择的频道进行调谐,并接收调谐的频道的信号,然后,对接收的信号执行解调和信道解码,以提取主视听内容。广播设备60通过H.264/运动图片专家组-4高级视频编码(MPEG-4AVC)、杜比AC-3或运动图片专家组-2高级音频编码(MPEG-2AAC)算法对提取的主视听内容解码,以生成未压缩主视听(AV)内容。广播接收设备60通过其外部输入端口向视频显示设备100提供生成的未压缩主AV内容。增强服务信息提供服务器40响应于视频显示设备的请求提供关于与主AV内容有关的至少一个可用增强服务的增强服务信息。可存在至少一个增强服务提供服务器。增强服务信息提供服务器40可提供关于多个可用增强服务中具有最高优先级的增强服务的增强服务信息。增强服务提供服务器50响应于视频显示设备的请求提供与主AV内容有关的至少一个可用增强服务。可存在至少一个增强服务提供服务器。视频显示设备100可以是电视、笔记本电脑、手机、智能电话,每个均包括显示单元。视频显示设备100可从广播接收设备60接收未压缩主AV内容,或者从内容提供服务器10或多频道视频分发服务器30接收包括编码的主AV内容的广播信号。视频显示设备100可通过网络70从内容识别服务提供服务器20接收内容识别服务、通过网络70从增强服务信息提供服务器40接收与主AV内容有关的至少一个可用增强服务的地址、从增强服务提供服务器50接收与主AV内容有关的至少一个可用增强服务。内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强服务信息提供服务器40、多个增强服务提供服务器50中的至少两个可组合为一个服务器的形式,并且可由一个提供商操作。图2是例示根据实施方式的基于水印的网络拓补结构的框图。如图2所示,基于水印的网络拓补结构可进一步包括水印服务器21。如图2所示,水印服务器21编辑主AV内容,向其插入内容信息。多频道视频分发服务器30可接收并分发包括修改的主AV内容的广播信号。特别地,水印服务器可使用下述数字水印技术。数字水印是在数字信号中插入几乎不可删除的信息的处理。例如,数字信号可以是音频、图片或视频。如果数字信号被复制,则插入的信息包括在副本中。一个数字信号可同时携带若干不同的水印。在可视水印中,在图片或视频中,插入的信息可以是可辨认的。一般,插入的信息可以是标识媒体所有者的文本或logo。如果电视广播站在视频的角落中添加其logo,则这是可辨认的水印。在不可视水印中,尽管信息作为数字数据添加到音频、图片或视频,但用户可意识到预定信息量而不能识别它。可通过不可视水印传送秘密消息。水印的一种应用是防止非法复制数字媒体的版权保护系统。例如,复制设备在复制数字媒体之前从数字媒体获得水印,基于水印内容确定是否复制。水印的另一种应用是数字媒体的源跟踪。水印在分发路径的各点嵌入在数字媒体中。如果稍后发现这种数字媒体,则可从数字媒体提取水印,并且可从水印内容识别分发源。不可视水印的另一种应用是描述数字媒体。数字媒体的文件格式可包括称为元数据的附加信息,数字水印与元数据的不同在于它作为数字媒体的AV信号自身传送。水印方法可包括扩频、量化和调幅。如果通过附加编辑获得标记信号,则水印方法对应于扩频。尽管已知扩频水印非常强,但不包含很多信息,因为水印干扰嵌入的主信号。如果通过量化获得标记信号,则水印方法对应于量化类型。量化水印较弱,但可包含很多信息。如果通过类似于空间域中的扩频的附加编辑方法获得标记信号,则水印方法对应于调幅。图3是例示根据实施方式的基于水印的网络拓补结构中的数据流的梯形图。首先,在操作S101中,内容提供服务器10发送包括主AV内容和增强服务的广播信号。在操作S103中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容向主AV内容中插入诸如logo的可视水印或水印信息作为不可视水印,并将加水印的主AV内容和增强服务提供给MVPD30。通过不可视水印插入的水印信息可包括水印目的、内容信息、增强服务信息和可用增强服务中的至少一种。水印目的表示防止非法复制、观众收视率和增强服务获取中的一种。内容信息可包括提供主AV内容的内容提供商的标识信息、主AV内容标识信息、内容信息获取时使用的内容间隔的时间信息、广播主AV内容的频道的名称、广播主AV内容的频道的logo、广播主AV内容的频道的描述、使用信息报告时段、使用信息获取的最小使用时间、与主AV内容有关的可用增强服务信息中的至少一种。如果视频显示设备100使用水印获取内容信息,则用于内容信息获取的内容间隔的时间信息可以是使用的水印嵌入的内容间隔的时间信息。如果视频显示设备100使用指纹获取内容信息,则用于内容信息获取的内容间隔的时间信息可以是提取特征信息的内容间隔的时间信息。用于内容信息获取的内容间隔的时间信息可以包括用于内容信息获取的内容间隔的起始时间、用于内容信息获取的内容间隔的持续时长、用于内容信息获取的内容间隔的结束时间中的至少一种。使用信息报告地址可包括主AV内容观看信息报告地址和增强服务使用信息报告地址中的至少一种。使用信息报告时段可包括主AV内容观看信息报告时段和增强服务使用信息报告时段中的至少一种。使用信息获取的最小使用时间可包括主AV内容观看信息获取的最小观看时间和增强服务使用信息提取的最小使用时间中的至少一种。在观看主AV内容长于最小观看时间的基础上,视频显示设备100获取主AV内容的观看信息,并在主AV内容观看信息报告时段中向主AV内容观看信息报告地址报告获取的观看信息。在使用增强服务长于最小使用时间的基础上,视频显示设备100获取增强服务使用信息,并在增强服务使用信息报告时段中向增强服务使用信息报告地址报告获取的使用信息。增强服务信息可包括关于增强服务是否存在的信息、增强服务地址提供服务器地址、各可用增强服务的获取路径、各可用增强服务的地址、各可用增强服务的起始时间、各可用增强服务的结束时间、各可用增强服务的有效期、各可用增强服务的获取模式、各可用增强服务的请求时段、各可用增强服务的优先级信息、各可用增强服务的描述、各可用增强服务的类别、使用信息报告地址、使用信息报告时段、使用信息获取的最小使用时间中的至少一种。可利用IP或先进电视系统委员会-移动/手持(ATSCM/H)表示可用增强服务的获取路径。如果可用增强服务的获取路径是ATSCM/H,则增强服务信息还可包括频率信息和频道信息。各可用增强服务的获取模式可表示Push(推)或Pull(拉)。此外,水印服务器21可向主AV内容的logo插入水印信息作为不可视水印。例如,水印服务器21可在logo的预定位置插入条形码。在此点,logo的预定位置可对应于显示logo的区域底部的第一行。当接收到包括插入有条形码的logo的主AV内容时,视频显示设备100不可显示条形码。例如,水印服务器21可在logo的预定位置插入条形码。在此点,logo可维持其形式。例如,水印服务器21可在M个帧的各logo处插入N-比特水印信息。即,水印服务器21可在M个帧中插入M*N水印信息。在操作S105中,MVPD30接收包括加水印的主AV内容和增强服务的广播信号,生成复用信号以将该复用信号提供给广播接收设备60。在此点,复用信号可排除接收的增强服务,或者可包括新增强服务。在操作S106中,广播接收设备60调谐用户选择的频道,接收调谐的频道的信号,对接收的信号解调,对解调的信号执行信道解码和AV解码以生成未压缩主AV内容,然后,将生成的未压缩主AV内容提供给视频显示设备100。此外,在操作S107中,内容提供服务器10还通过无线信道广播包括主AV内容的广播信号。另外,在操作S108中,MVPD30可不通过广播接收设备60直接向视频显示设备100发送包括主AV内容的广播信号。视频显示设备100可通过广播接收设备60接收未压缩主AV内容。另外,视频显示设备100可通过无线信道接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。另外,视频显示设备100可从MVPD30接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。视频显示设备100从获得的主AV内容的一些帧或一部分音频样本提取水印信息。如果水印信息对应于logo,则视频显示设备100确认对应于从多个logo与多个水印服务器地址之间的对应关系提取的logo的水印服务器地址。当水印信息对应于logo时,视频显示设备100不能仅利用logo标识主AV内容。另外,当水印信息不包括内容信息时,视频显示设备100不能标识主AV内容,但是水印信息可包括内容提供商标识信息或水印服务器地址。当水印信息包括内容提供商标识信息时,视频显示设备100可确认对应于从多个内容提供商标识信息与多个水印服务器地址之间的对应关系提取的内容提供商标识信息的水印服务器地址。以此方式,当视频显示设备100不能仅利用水印信息标识主AV内容时,视频显示设备100在操作S109中访问对应于获得的水印服务器地址的水印服务器21以发送第一查询。在操作S111中,水印服务器21提供对第一查询的第一回复。第一回复可包括内容信息、增强服务信息和可用增强服务中的至少一种。如果水印信息和第一回复不包括增强服务地址,则视频显示设备100不能获得增强服务。然而,水印信息和第一回复可包括增强服务地址提供服务器地址。以此方式,视频显示设备100不通过水印信息和第一回复获得服务地址或增强服务。如果视频显示设备100获得增强服务地址提供服务器地址,则它在操作S119中访问对应于获得的增强服务地址提供服务器地址的增强服务信息提供服务器40,以发送包括内容信息的第二查询。增强服务信息提供服务器40搜索与第二查询的内容信息有关的至少一个可用增强服务。稍后,在操作S121中,增强服务信息提供服务器40向视频显示设备100提供至少一个可用增强服务的增强服务信息作为对第二查询的第二回复。如果视频显示设备100通过水印信息、第一回复或第二回复获得至少一个可用增强服务地址,则它在操作S123中访问至少一个可用增强服务地址以请求增强服务,然后在操作S125中获得增强服务。图4是例示根据实施方式的基于水印的内容识别时序的视图。如图4所示,当打开广播接收设备60、调谐频道、而且视频显示设备100通过外部输入端口111从广播接收设备60接收调谐的频道的主AV内容时,视频显示设备100可从主AV内容的水印感测内容提供商标识符(或广播站标识符)。然后,视频显示设备100可基于感测到的内容提供商标识符从主AV内容的水印感测内容信息。在此点,如图4所示,内容提供商标识符的检测可用时段可不同于内容信息的检测可用时段。特别地,内容提供商标识符的检测可用时段可短于内容信息的检测可用时段。通过这样,视频显示设备100可具有用于仅检测必要信息的高效配置。图5是例示根据实施方式的基于指纹的网络拓补结构的框图。如图5所示,网络拓补结构还可包括指纹服务器22。如图5所示,指纹服务器22不编辑主AV内容,但是从主AV内容的一些帧或一部分音频样本提取特征信息,并存储提取的特征信息。然后,当从视频显示设备100接收到特征信息时,指纹服务器22提供对应于接收到的特征信息的AV内容的标识符和时间信息。图6是例示根据实施方式的基于指纹的网络拓补结构中的数据流的梯形图。首先,在操作S201中,内容提供服务器10发送包括主AV内容和增强服务的广播信号。在操作S203中,指纹服务器22接收内容提供服务器10提供的广播信号,从主AV内容的多个帧间隔或音频间隔提取多个特征信息,并建立对应于多个特征信息的多个查询结果的数据库。查询结果可包括内容信息、增强服务信息和可用增强服务中的至少一种。在操作S205中,MVPD30接收包括主AV内容和增强服务的广播信号,生成复用信号以将该复用信号提供给广播接收设备60。在此点,复用信号可排除接收的增强服务,或者可包括新增强服务。在操作S206中,广播接收设备60调谐用户选择的频道并接收调谐的频道的信号,对接收的信号解调,对解调的信号执行信道解码和AV解码以生成未压缩主AV内容,然后,将生成的未压缩主AV内容提供给视频显示设备100。此外,在操作S207中,内容提供服务器10还通过无线信道广播包括主AV内容的广播信号。另外,MVPD30可不通过广播接收设备60直接向视频显示设备100发送包括主AV内容的广播信号。视频显示设备100可通过广播接收设备60接收未压缩主AV内容。另外,视频显示设备100可通过无线信道接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。另外,视频显示设备100可从MVPD30接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。在操作S213中,视频显示设备100从获得的主AV内容的一些帧或一部分音频样本提取特征信息。在操作S215中,视频显示设备100访问对应于预定指纹服务器地址的指纹服务器22,以发送包括提取的特征信息的第一查询。在操作S217中,指纹服务器22提供查询结果作为对第一查询的第一回复。如果第一回复对应于失败,则视频显示设备100访问对应于另一指纹服务器地址的指纹服务器22,以发送包括提取的特征信息的第一查询。指纹服务器22可提供可扩展标记语言(XML)文档作为查询请求。将参照图7和表1描述包含查询结果的XML文档的示例。图7是例示根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。如图7所示,包含查询结果的ACR-Resulttype包括ResultCode属性和ContentID、NTPTimestamp、SignalingChannelInformation、ServiceInformation元素。例如,如果ResultCode属性具有200,则这可意味着查询结果成功。例如,如果ResultCode属性具有404,则这可意味着查询结果不成功。SignalingChannelInformation元素包括SignalingChannelURL,SignalingChannelURL元素包括UpdateMode和PollingCycle属性。UpdateMode属性可具有Pull值或Push值。ServiceInformation元素包括ServiceName、ServiceLogo、ServiceDescription元素。表1例示包含查询结果的ACR-ResultType的XML架构。表1[表1]作为ContentID元素,可如表2所示使用ATSC内容标识符。表2[表2]如表2所示,ATSC内容标识符具有包括TSID和门牌号的结构。16比特无符号整数TSID携带传输流标识符。5比特无符号整数end_of_day利用广播结束之后content_id值可重用时一天中的小时数设置。9比特无符号整数unique_for利用content_id值不能重用时的天数设置。content_id表示内容标识符。如果unique_for不是0,则视频显示设备100每天在对应end_of_day的时间将unique_for减1,并且假设content_id是唯一的。此外,作为ContentID元素,可如下所述使用ATSC-M/H服务的全球服务标识符。全球服务标识符具有以下形式。-urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是<region>中定义的TSID的十进制数,<xsid>(区域服务)(major>69)是“0”。<serviceid>利用<major>或<minor>定义。<major>表示主信道号,<minor>表示副信道号。全球服务标识符的示例如下。-urn:oma:bcast:iauth:atsc:service:us:1234:5.1-urn:oma:bcast:iauth:atsc:service:us:0:100.200此外,作为ContentID元素,可如下所述使用ATSC内容标识符。ATSC内容标识符具有以下形式。urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是<region>中定义的TSID的十进制数,并且可由“.”<serviceid>跟随。区域服务的<xsid>(major>69)是<serviceid>。<content_id>是表2中定义的content_id字段的base64符号,<unique_for>是表2中定义的unique_for字段的十进制数符号,<end_of_day>是表2中定义的end_of_day字段的十进制数符号。下文再次描述图6。如果查询结果不包括增强服务地址或增强服务,但是包括增强服务地址提供服务器地址,则视频显示设备100在操作S219中访问对应于获得的增强服务地址提供服务器地址的增强服务信息提供服务器40,以发送包括内容信息的第二查询。增强服务信息提供服务器40搜索与第二查询的内容信息有关的至少一个可用增强服务。稍后,在操作S221中,增强服务信息提供服务器40向视频显示设备100提供至少一个可用增强服务的增强服务信息作为对第二查询的第二回复。如果视频显示设备100通过第一回复或第二回复获得至少一个可用增强服务地址,则它在操作S223中访问至少一个可用增强服务地址,以请求增强服务,然后在操作S225中获得增强服务。当UpdateMode属性具有Pull值时,视频显示设备100通过SignalingChannelURL向增强服务提供服务器50发送HTTP请求,并响应于请求从增强服务提供服务器50接收包括PSIP二进制流的HTTP回复。在这种情况下,视频显示设备100可根据指定为PollingCycle属性的轮询时段发送HTTP请求。另外,SignalingChannelURL元素可具有更新时间属性。在这种情况下,视频显示设备100可根据指定为更新时间属性的更新时间发送HTTP请求。如果UpdateMode属性具有Push值,则视频显示设备100可通过XMLHTTPRequestAPI异步地从服务器接收更新。视频显示设备100通过XMLHTTPRequest对象向服务器发送异步请求之后,如果存在信令信息改变,则服务器通过信道提供信令信息作为回复。如果对会话待机时间存在限制,则服务器生成会话超时回复,接收器识别生成的超时回复以再次发送请求,使得接收器与服务器之间的信令信道可永远维持。图8是例示根据实施方式的基于水印和指纹的网络拓补结构的框图。如图8所示,基于水印和指纹的网络拓补结构还可包括水印服务器21和指纹服务器22。如图8所示,水印服务器21在主AV内容中插入内容提供商标识信息。水印服务器21可在主AV内容中插入内容提供商标识信息作为诸如logo的可视水印或不可视水印。指纹服务器22不编辑主AV内容,但是从主AV内容的一些帧或一部分音频样本提取特征信息,并存储提取的特征信息。然后,当从视频显示设备100接收到特征消息时,指纹服务器22提供对应于接收到的特征信息的AV内容的标识符和时间信息。图9是例示根据实施方式的基于水印和指纹的网络拓补结构中的数据流的梯形图。首先,在操作S301中,内容提供服务器10发送包括主AV内容和增强服务的广播信号。在操作S303中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容在主AV内容中插入诸如logo的可视水印或水印信息作为不可视水印,并将加水印的主AV内容和增强服务提供给MVPD30。通过不可视水印插入的水印信息可包括内容信息、增强服务信息、可用增强服务中的至少一种。以上描述了内容信息和增强服务信息。在操作S305中,MVPD30接收包括加水印的主AV内容和增强服务的广播信号,生成复用信号,将该复用信号提供给广播接收设备60。在此点,复用信号可排除接收到的增强服务,或者可包括新增强服务。在操作S306中,广播接收设备60调谐用户选择的频道并接收调谐的频道的信号,对接收的信号解调,对解调的信号执行信道解码和AV解码,以生成未压缩主AV内容,然后,将生成的未压缩主AV内容提供给视频显示设备100。此外,在操作S307中,内容提供服务器10还通过无线信道广播包括主AV内容的广播信号。另外,在操作S308中,MVPD30可不通过广播接收设备60直接向视频显示设备100发送包括主AV内容的广播信号。视频显示设备100可通过广播接收设备60接收未压缩主AV内容。另外,视频显示设备100可通过无线信道接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。另外,视频显示设备100可从MVPD30接收广播信号,然后,可对接收的广播信号解调和解码以获得主AV内容。视频显示设备100从获得的主AV内容的一些帧或一部分音频样本提取水印信息。如果水印信息对应于logo,则视频显示设备100确认对应于从多个logo与多个水印服务器地址之间的对应关系提取的logo的水印服务器地址。当水印信息对应于logo时,视频显示设备100不能仅利用logo标识主AV内容。另外,当水印信息不包括内容信息时,视频显示设备100不能标识主AV内容,但是水印信息可包括内容提供商标识信息或水印服务器地址。当水印信息包括内容提供商标识信息时,视频显示设备100可确认对应于从多个内容提供商标识信息与多个水印服务器地址之间的对应关系提取的内容提供商标识信息的水印服务器地址。以此方式,当视频显示设备100不能仅利用水印信息标识主AV内容时,视频显示设备100在操作S309中访问对应于获得的水印服务器地址的水印服务器21,以发送第一查询。在操作S311中,水印服务器21提供对第一查询的第一回复。第一回复可包括指纹服务器地址、内容信息、增强服务信息和可用增强服务中的至少一种。以上描述了内容信息和增强服务信息。如果水印信息和第一回复包括指纹服务器地址,则视频显示设备100在操作S313中从获得的主AV内容的一些帧或一部分音频样本提取特征信息。在操作S315中,视频显示设备100访问对应于第一回复中的指纹服务器地址的指纹服务器22,以发送包括提取的特征信息的第二查询。在操作S317中,指纹服务器22提供查询结果作为对第二查询的第二回复。如果查询结果不包括增强服务地址或增强服务,但是包括增强服务地址提供服务器地址,则视频显示设备100在操作S319中访问对应于获得的增强服务地址提供服务器地址的增强服务信息提供服务器40,以发送包括内容信息的第三查询。增强服务信息提供服务器40搜索与第三查询的内容信息有关的至少一个可用增强服务。稍后,在操作S321中,增强服务信息提供服务器40向视频显示设备100提供至少一个可用增强服务的增强服务信息作为对第三查询的第三回复。如果视频显示设备100通过第一回复、第二回复或第三回复获得至少一个可用增强服务地址,则它在操作S323中访问至少一个可用增强服务地址以请求增强服务,然后在操作S325中获得增强服务。然后,参照图10和18,将根据实施方式描述视频显示设备100。图10是例示根据实施方式的视频显示设备的框图。如图10所示,视频显示设备100包括广播信号接收单元101、解调单元103、信道解码单元105、解复用单元107、AV解码单元109、外部输入端口111、播放控制单元113、播放设备120、增强服务管理单元130、数据发送/接收单元141、存储器150。广播信号接收单元101从内容提供服务器10或MVPD30接收广播信号。解调单元103对接收的广播信号进行解调,以生成解调信号。信道解码单元105对解调的信号执行信道解码,以生成信道解码的数据。解复用单元107将主AV内容和增强服务与信道解码的数据分离。分离的增强服务存储在增强服务存储单元152中。AV解码单元109对分离的主AV内容执行AV解码,以生成未压缩主AV内容。此外,外部输入端口111从广播接收设备60、数字多功能光盘(DVD)播放器、蓝光光盘播放器等接收未压缩主AV内容。外部输入端口111可包括DSUB端口、高清多媒体接口(HDMI)端口、数字可视接口(DVI)端口、复合端口、分量端口、S-视频端口中的至少一种。播放控制单元113控制播放设备120根据用户选择播放AV解码单元109生成的未压缩主AV内容和从外部输入端口111接收的未压缩主AV内容中的至少一种。播放设备120包括显示单元121和扬声器123。显示单元121可包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFTLCD)、有机发光二极管(OLED)、柔性显示器和3D显示器中的至少一种。增强服务管理单元130获得主AV内容的内容信息并基于获得的内容信息获得可用增强服务。特别地,如上所述,增强服务管理单元130可基于未压缩主AV内容的一些帧或一部分音频样本获得主AV内容的标识信息。在本说明书中这称为自动内容识别(ACR)。数据发送/接收单元141可包括先进电视系统委员会-移动/手持(ATSC-M/H)信道发送/接收单元141a和IP发送/接收单元141b。存储器150可包括诸如闪存类型、硬盘类型、多媒体卡微型的存储介质、诸如SD或XD存储器的卡式存储器、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘中的至少一种类型。视频显示设备100可与在因特网上执行存储器150的存储功能网络存储器链接操作。存储器150可包括内容信息存储单元151、增强服务存储单元152、logo存储单元153、设置信息存储单元154、书签存储单元155、用户信息存储单元156、使用信息存储单元157。内容信息存储单元151存储对应于多个特征信息的多个内容信息。增强服务存储单元152可存储对应于多个特征信息的多个增强服务或对应于多个内容信息的多个增强服务。logo存储单元153存储多个logo。另外,logo存储单元153还可存储对应于多个logo的内容提供商标识符或对应于多个logo的水印服务器地址。设置信息存储单元154存储ACR的设置信息。书签存储单元155存储多个书签。用户信息存储单元156存储用户信息。用户信息可包括至少一个服务的至少一个账户信息、区域信息、家庭成员信息、优选类型信息、视频显示设备信息、使用信息范围中的至少一种。至少一个账户信息可包括使用信息测量服务器的帐户信息以及诸如Twitter和Facebook的社交网络服务的帐户信息。区域信息可包括地址信息和邮政编码。家庭成员信息可包括家庭成员数量、各成员的年龄、各成员的性别、各成员的宗教信仰、各成员的工作。优选类型信息可利用体育、电影、戏剧、教育、新闻、娱乐和其他类型中的至少一种设置。视频显示设备信息可包括视频显示设备的诸如类型、制造商、固件版本、分辨率、型号、OS、浏览器、存储设备可用性、存储设备性能和网络速度的信息。一旦设置了使用信息范围,则视频显示设备100在设置的范围内收集并报告主AV内容观看信息和增强服务使用信息。使用信息范围可在各虚拟信道中设置。另外,使用信息测量容许范围可在整个物理信道上设置。使用信息提供单元157存储视频显示设备100收集的主AV内容观看信息和增强服务使用信息。另外,视频显示设备100基于收集的主AV内容观看信息和增强服务使用信息分析服务使用模式,并且在使用信息存储单元157中存储分析的服务使用模式。增强服务管理单元130可从指纹服务器22或内容信息存储单元151获得主AV内容的内容信息。如果内容信息存储单元151中不存在对应于提取的特征信息的内容信息或足够的内容信息,则增强服务管理单元130可通过数据发送/接收单元141接收附加内容信息。此外,增强服务管理单元130可连续更新内容信息。增强服务管理单元130可从增强服务提供服务器50或增强服务存储单元153获得可用增强服务。如果增强服务存储单元153中不存在增强服务或足够的增强服务,则增强服务管理单元130可通过数据发送/接收单元141更新增强服务。此外,增强服务管理单元130可连续更新增强服务。增强服务管理单元130可从主AV内容提取logo,然后可向logo存储单元155进行查询,以获得对应于提取的logo的内容提供商标识符或水印服务器地址。如果logo存储单元155中不存在对应于提取的logo的logo或足够的logo,则增强服务管理单元130可通过数据发送/接收单元141接收附加logo。此外,增强服务管理单元130可连续更新logo。增强服务管理单元130可通过各种方法将从主AV内容提取的logo与logo存储单元155中的多个logo进行比较。各种方法可降低比较操作的负荷。例如,增强服务管理单元130可基于颜色特性执行比较。即,增强服务管理单元130可将提取的logo的颜色特性与logo存储单元155中的logo的颜色特性进行比较,以确定它们是否相同。此外,增强服务管理单元130可基于字符识别执行比较。即,增强服务管理单元130可将从提取的logo识别的字符与从logo存储单元155中的logo识别的字符进行比较,以确定它们是否相同。此外,增强服务管理单元130可基于logo的轮廓执行比较。即,增强服务管理单元130可将提取的logo的轮廓与logo存储单元155中的logo的轮廓进行比较,以确定它们是否相同。下文,参照图11和18,将根据各种实施方式描述增强服务管理单元130。图11是根据实施方式的增强服务管理单元的层次图。如图11所示,增强服务管理单元130可包括操作系统131a、音频驱动器132a、视频驱动器133a、网络驱动器134a、ACR平台应用程序接口(API)135a、至少一个ACR引擎136a、ACRdaemon(虚拟光驱)137a、ACR中间件138a、至少一个ACR应用139a。当如图11所示使用增强服务管理单元130时,用户不需要必定识别信道或内容,并且可总是执行ACR操作。增强服务管理单元130可通过数据发送/接收单元141访问应用商店,以下载应用。音频驱动器132a可访问用于音频指纹或音频水印的音频缓冲器。视频驱动器133a可访问用于视频指纹或视频水印的视频缓冲器。网络驱动器134a允许ACR引擎136a访问数据发送/接收单元141。平台API135a提供API,允许ACR引擎136a访问音频驱动器132a、视频驱动器133a、网络驱动器134a。由于多个广播站或内容提供商分别使用不同的内容识别服务,所以视频显示设备100可包括多个ACR引擎136a。即,视频显示设备100可包括用于多个视频水印提取算法、多个音频水印提取算法、多个视频签名提取算法、多个音频签名提取算法中的至少一种的ACR引擎。基于水印的ACR引擎136a可提取水印信息,然后可从提取的水印信息获得水印目的、内容信息、增强服务信息、可用增强服务中的至少一种。基于指纹的ACR引擎136a可在主AV内容的一些间隔中提取特征信息,然后可基于提取的特征信息获得内容信息、增强服务信息、可用增强服务中的至少一种。ACRdaemon137a管理至少一个ACR引擎136a。连续运行daemon以处理周期性服务请求。daemon适当地传送收集的请求,以允许另一程序处理这些请求。ACRdaemon137a可管理ACR引擎136a的运行和终止。ACRdaemon137a搜索多个ACR引擎136a中与当前主AV内容匹配的ACR引擎。特别地,如果因为若干个ACR引擎运行而极大地消耗系统资源,则ACRdaemon137a根据特定规则或优先级顺序地一个接一个地运行多个ACR引擎136a,以确认内容识别是否成功。另外,如果多个ACR引擎136a中的一个在内容识别上成功,则ACRdaemon137a获得对应于识别出的内容的增强服务的ACR应用139a并运行。尽管ACR引擎136a成功执行内容识别,但是如果由于信道改变而不再识别出内容,则ACRdaemon137a可终止ACR应用139a。ACR中间件138a用作至少一个ACR应用139a的浏览器。ACR应用139a可向用户提供由ACR增强的用户体验。ACR应用139a可以是从应用商店或因特网下载的应用,或者可以是简单的统一资源定位符(URL)。ACR应用139a可提供内容目标广告、内容提供商门户服务、诸如电子节目指南(EPG)的节目专用服务、或内容提供商专用服务。ACR应用139a通过ACR应用与ACR引擎136a交互时,它从ACR引擎136a接收内容信息或签名,附加地获得对应于内容信息或签名的增强服务,以在播放设备120中播放它们。为此,下表3中示出了ACR应用139a使用的ACR应用接口。表3[表3]图12是例示根据实施方式的增强服务管理单元的操作的流程图。当打开广播接收设备60和视频显示设备100并且选择视频显示设备100的外部输入端口111时,ACRdaemon137a在操作S401中通过至少一个ACR引擎136a获得调谐的频道中广播的主AV内容的内容信息。然后,在操作S403中,ACRdaemon137a获得与内容信息有关的可用增强服务。在操作S405中,ACRdaemon137a在后台运行获得的增强服务。在操作S407中,ACRdaemon137a在显示单元121上显示彩色按钮,通知用户增强服务可用。当ACRdaemon137a接收到增强服务的使用时,它在操作S409中在播放设备120中播放在后台运行的增强服务。如果改变或主AV内容改变,则ACRdaemon137a在操作S411中通过至少一个ACR引擎136a识别改变并且终止增强服务。图13是根据实施方式的增强服务管理单元的层次图。如图13所示,增强服务管理单元130可包括操作系统131b、音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台应用程序接口(API)135b、至少一个ACR引擎136b、ACR引擎管理单元137b、ACR中间件138b、至少一个ACR应用139b。当如图13所示使用增强服务管理单元130时,用户可能需要必定识别信道或内容。然而,由于ACR的查询次数可减少,所以服务器开销可降低。图13的增强服务管理单元130中的音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台API135b、至少一个ACR引擎136b、ACR中间件138b与图11的增强服务管理单元130中的132a、133a、134a、135a、136a、138a相同或类似。因此,将省略它们的详细描述。ACR引擎管理单元137b管理至少一个ACR引擎136b的列表,并且向ACR应用139b提供ACR引擎136b的选择界面。ACR应用139b可向用户提供由ACR增强的用户体验。ACR应用139b可以是从应用商店或因特网下载的应用,或者可以是简单的统一资源定位符(URL)。ACR应用139b可提供内容目标广告、内容提供商门户服务、诸如电子节目指南(EPG)的节目专用服务、或内容提供商专用服务。ACR应用139b通过ACR中间件138b的ACR应用接口与ACR引擎管理单元137b交互时,它可选择要使用的ACR引擎136b。为此,下表4和表5中示出了ACR应用139b使用的ACR应用接口。表4[表4]表5[表5]ACR应用139b通过ACR中间件138b的ACR应用接口与ACR引擎136b交互时,它控制ACR引擎136b,并从ACR引擎136b接收内容信息或签名,以附加地获得对应于内容信息或签名的增强服务。然后,ACR应用139b在播放设备120中播放它们。为此,下表6中示出了ACR应用139b使用的ACR应用接口。表6[表6]因此,表7中示出使用这种ACR应用接口的内容提供商相关应用的指纹样本代码的一个示例。表7[表7]因此,表8中示出使用这种ACR应用接口的内容提供商相关应用的指纹样本代码的一个示例。表8[表8]因此,表9中示出使用这种ACR应用接口的内容提供商相关应用的水印样本代码的一个示例。表9[表9]因此,表10中示出使用这种ACR应用接口的内容提供商相关应用的水印样本代码的一个示例。表10[表10]图14是例示根据实施方式的增强服务管理单元的操作的流程图。尽管打开了广播接收设备60和视频显示设备100并且选择了视频显示设备100的外部输入端口111,但在运行ACR应用139b之前,视频显示设备100不能执行自动内容识别。一旦识别主AV内容的信道的用户运行了对应的信道相关ACR应用139b,ACR应用139b在操作S501中向ACR引擎管理单元137b查询关于它使用的ACR引擎136b的信息,并接收该信息。然后,ACR应用139b在操作S503中启动它使用的ACR引擎136b,在操作S505中通过ACR引擎136b获得内容信息。ACR应用139b在操作S507中通过获得的内容信息获得与主AV内容有关的可用增强服务,在操作S509中在显示单元121上显示彩色按钮,通知用户增强服务可用。当ACR应用139b接收到增强服务的使用时,它在操作S511中在播放设备120中播放增强服务。当ACR中间件138b接收到与ACR应用139b的终止有关的用户输入时,它在操作S513中终止ACR应用139b。图15是根据实施方式的增强服务管理单元的层次图。如图15所示,增强服务管理单元130可包括操作系统131c、音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c、ACR引擎136c、ACR中间件138c、至少一个ACR应用139c。当如图15所示使用增强服务管理单元130时,用户可能需要必定识别信道或内容。然而,由于ACR的查询次数可减少,所以服务器开销可降低。图15的增强服务管理单元130中的音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c、ACR中间件138c与图11的增强服务管理单元130中的132a、133a、134a、135a、138a相同或类似。因此,将省略它们的详细描述。ACR引擎136c从主AV内容的一些帧或一部分音频样本提取特征信息,以向ACR调整服务器(未示出)发送包括提取的特征信息的查询。ACR调整服务器可响应于查询发送指纹服务器地址。另外,ACR调整服务器可与指纹服务器地址一起发送对应于特征信息的内容信息。当从ACR引擎136c接收到指纹服务器地址时,ACR应用139c向对应于指纹服务器地址的指纹服务器直接发送包括ACR引擎136c提取的特征信息的查询。为此,下表11示出ACR应用139c使用的ACR应用接口。表11[表11]因此,表12中示出使用这种ACR应用接口的指纹样本代码的一个示例。表12[表12]图16是例示根据实施方式的增强服务管理单元的操作的流程图。当打开广播接收设备60和视频显示设备100并且选择视频显示设备100的外部输入端口111时,ACR引擎136c在操作S601中从一些帧或一部分音频样本提取特征信息,以向ACR调整服务器(未示出)发送包括提取的特征信息的查询。在操作S603中,ACR引擎136c接收响应于查询的指纹服务器地址。ACR应用139c通过getACRBackend()方法从ACR引擎136c获得指纹服务器地址。在操作S607中,ACR应用139c通过getSignature()方法从ACR引擎136c获得主AV内容的一些视频帧或音频间隔的特征信息。在操作S609中,ACR应用139c向对应于获得的指纹服务器地址的指纹服务器发送包括获得的特征信息的查询。在操作S611中,ACR应用139c接收响应于查询的内容信息。ACR应用139c在操作S613中基于获得的内容信息获得可用增强服务,并且在操作S615中在显示单元121上显示彩色按钮,通知用户增强服务可用。当ACR应用139c接收到增强服务的使用时,它在操作S617中在播放设备120中播放增强服务。当ACR中间件138c接收到与ACR应用139c的终止有关的用户输入时,它在操作S619中终止ACR应用139c。图17是根据实施方式的增强服务管理单元的层次图。如图17所示,增强服务管理单元130可包括操作系统131d、音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d、至少一个ACR引擎136d、ACR引擎管理单元137d、应用管理单元138d、至少一个ACR应用139d。当如图17所示使用增强服务管理单元130时,用户不需要必定识别信道或内容,并且可总是执行ACR操作。图17的增强服务管理单元130中的音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d、多个ACR引擎136d与图11的增强服务管理单元130中的132a、133a、134a、135a、136a相同或类似。因此,将省略它们的详细描述。ACR引擎管理单元137d确认ACR引擎136d与从外部输入端口111接收的主AV内容匹配,并且确认ACR引擎136d与应用139d匹配。在此点,ACR引擎管理单元137d控制多个ACR引擎136d同时或顺序执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。如果多个ACR引擎136d中的一个成功识别主AV内容,则ACR引擎管理单元137d将其余ACR引擎置于睡眠模式,从运行的ACR引擎获得主AV内容的内容信息。应用管理单元138d与ACR引擎管理单元137d交互时,它控制ACR应用的生成、启动、停止、睡眠、终止。ACR应用139d可以是内置应用。ACR应用139d可通过表13所示的函数控制ACR引擎136b。表13[表13]图18是例示根据实施方式的增强服务管理单元的操作的流程图。当打开广播接收设备60和视频显示设备100并且选择视频显示设备100的外部输入端口111时,ACR引擎管理单元137d在操作S701中确认ACR引擎136a与从外部输入端口111接收的主AV内容匹配。在此点,ACR引擎管理单元137d控制多个ACR引擎136d同时或顺序执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。如果多个ACR引擎136d中的一个成功识别主AV内容,则ACR引擎管理单元137d在操作S702中将其余ACR引擎置于睡眠模式,并且在操作S703中从运行的ACR引擎获得主AV内容的内容信息。然后,在操作S704中,ACR引擎管理单元137d确认与内容信息有关的可用应用,并且向应用管理单元138d请求运行确认的应用139d。在操作S705中,应用管理单元138d在后台运行确认的应用139d。在操作S707中,在后台运行的应用139d在显示单元121上显示彩色按钮,通知用户增强服务可用。当在后台运行的应用139d从用户接收到增强服务的使用时,它在操作S709中在播放设备120中播放增强服务。如果在操作S710中信道或主AV内容改变,则在操作S711中,ACR引擎管理单元137d确认ACR引擎136a与应用139d匹配,并且将确认的ACR引擎136a连接到应用139d。在此点,ACR引擎管理单元137d控制多个ACR引擎136d同时或顺序执行水印提取或查询发送。如果应用管理单元138d在操作S712中接收到应用139d的终止的用户输入,则它在操作S713中终止应用139d。然后,参照图19和20,将描述根据实施方式的使主AV内容的播放时间与增强服务的播放时间同步的方法。增强服务信息可包括增强服务的起始时间。在此点,视频显示设备100可能需要在起始时间启动增强服务。然而,由于视频显示设备100接收到不具有时间戳的发送未压缩主AV内容的信号,所以主AV内容的播放时间的基准时间不同于增强服务的起始时间的基准时间。尽管视频显示设备100接收到具有时间信息的主AV内容,但主AV内容的播放时间的基准时间可能不同于增强服务的起始时间的基准时间,例如重播。相应地,视频显示设备100可能需要将主AV内容的基准时间与增强服务的基准时间同步。特别地,视频显示设备100可能需要将主AV内容的播放时间与增强服务的起始时间同步。首先,在操作S801中,增强服务管理单元130提取主AV内容的一些间隔。主AV内容的一些间隔可包括主AV内容的一些视频帧或音频间隔中的至少一种。增强服务管理单元130提取主AV内容的一些间隔的时间指定为Tn。增强服务管理单元130基于提取的间隔获得主AV内容的内容信息。更具体地,增强服务管理单元130在提取的间隔中对用不可视水印编码的信息进行解码,以获得内容信息。另外,增强服务管理单元130可在提取的间隔中提取特征信息,并基于提取的特征信息从指纹服务器22或内容信息存储单元151获得主AV内容的内容信息。增强服务管理单元130获得内容信息的时间指定为Tm。此外,内容信息包括提取的间隔的起始时间Ts。在内容信息获取时间Tm之后,增强服务管理单元130基于Ts、Tm、Tn使主AV内容的播放时间与增强服务的起始时间同步。更具体地,增强服务管理单元130将内容信息获取时间Tm视为通过下式1计算的时间Tp。式1Tp=Ts+(Tm-Tn)另外,增强服务管理单元130将内容信息获取时间之后经过Tx的时间视为Tp+Tx。然后,在操作S807中,增强服务管理单元130基于获得的内容信息获得增强服务及其起始时间Ta。如果同步的主AV内容播放时间与获得的增强服务的起始时间Ta相同,则增强服务管理单元130在操作S809中启动获得的增强服务。更具体地,增强服务管理单元130可在满足下式2时启动增强服务。式2Tp+Tx=Ta图20是例示根据实施方式的使主AV内容的播放时间与增强服务的播放时间同步的方法的概念图。如图20所示,视频显示设备100在系统时间Tn期间提取AV样本。视频显示设备100从提取的AV样本提取特征信息,并且向指纹服务器22发送包括提取的特征信息的查询以接收查询结果。视频显示设备100通过解析查询结果确认提取的AV样本的起始时间Ts是否对应于Tm处的11000ms。相应地,视频显示设备100将当根据式1确认提取的AV样本的起始时间时的时间视为Ts+(Tm-Tn),使得在此之后,主AV内容的播放时间可与增强服务的起始时间同步。接下来,将参照图21-50根据各种实施方式描述ACR应用。ACR应用可包括自动播放应用、内容提供商应用、视频显示设备制造商应用。图21是根据实施方式的运行自动播放应用时的画面。自动播放应用自动播放增强服务,甚至当用户不进行动作时也是如此。在这种意义上,自动播放应用在本说明书中指定为后仰(leanback)应用。自动播放应用在根据主AV内容的播放时间播放主AV内容期间自动播放内容提供商或广播站提供的诸如场景相关信息的增强服务,而无需用户输入。即,内容提供商或广播站完全控制自动播放应用。如图21所示,一旦自动播放应用运行,则画面200可包括播放减小的主AV内容的子画面210和显示附加信息的子画面220。显示附加信息的子画面220可在空间上与播放主AV内容的子画面210分离。此外,当自动播放应用运行时,显示附加信息的区域可以是半透明的。在这种情况下,显示附加信息的区域可以交叠播放主AV内容的区域。图22是根据实施方式的运行内容提供商应用时的画面。在本说明书中,内容提供商应用指定为全交互应用。如图22的(A)所示,视频显示设备100下载并存储多个应用。图22的(A)例示应用的图标230。多个应用中的内容提供商应用是由内容提供商创建和分发的应用,因此可受内容提供商的控制。视频显示设备100的用户可从应用商店下载内容提供商应用并确定是否运行下载的内容提供商应用。图22的(B)是内容提供商应用运行时的画面。如图22的(B)所示,画面200可包括播放减小的主AV内容的子画面210和显示附加信息的子画面220。下文将参照图23-50根据实施方式描述视频显示设备制造商应用。视频显示设备制造商应用由视频显示设备制造商创建并控制,并且可以在制造视频显示设备100时预先存储。即,视频显示设备制造商应用可提供相同的服务和用户接口,而与内容提供商或内容无关。视频显示设备制造商应用可分离地包括显示内容提供商提供的增强服务的区域和显示视频显示设备制造商提供的增强服务的区域。视频显示设备100的用户可确定是否运行视频显示设备制造商应用。视频显示设备制造商应用可具有两种类型。第一种类型的视频显示设备制造商应用具有改变大小的用户界面。具有改变大小的用户界面的视频显示设备制造商应用减小显示主AV内容的区域的大小以在减小的区域中显示所有主AV内容。另外,具有改变大小的用户界面的视频显示设备制造商应用利用L或倒L形结构改变显示应用的区域的形状。第二种类型的视频显示设备制造商应用具有交叠用户界面。具有交叠用户界面的视频显示设备制造商应用维持显示主AV内容的区域的大小,并且在主AV内容上交叠显示应用的区域。由于显示应用的区域交叠主AV内容,所以应用区域可以是半透明的。图23是根据实施方式的运行具有改变大小的用户界面的视频显示设备制造商应用时的画面。如图23所示,具有改变大小的用户界面的视频显示设备制造商应用时的画面300包括显示主AV内容的主内容区域310,显示主菜单的主菜单区域320,显示通知消息的通知区域330,显示控制视频显示设备制造商应用的控制按钮的控制按钮区域340,显示子菜单的子菜单区域350,显示附加信息的附加信息区域360,显示广告的广告区域370。控制按钮区域340包括用于结束视频显示设备制造商应用的结束按钮341,用于隐藏视频显示设备制造商应用的隐藏按钮342,用于返回之前的信息的返回按钮343。在具有改变大小的用户界面的视频显示设备制造商应用中,主AV内容区域310布置在画面300的左上;主菜单区域320和通知区域330布置在主AV内容区域310的下部;控制按钮区域340布置在右上;子菜单区域350布置在控制按钮区域340与附加信息区域360之间;广告区域370布置在右下;附加信息区域360布置在子菜单区域350与广告区域370之间。然而,它们的位置可变化。图24是根据实施方式的运行具有交叠用户界面的视频显示设备制造商应用时的画面。如图24所示,类似具有改变大小的用户界面的视频显示设备制造商应用,运行具有交叠用户界面的视频显示设备制造商应用时的画面300包括显示主AV内容的主内容区域310,显示主菜单的主菜单区域320,显示通知消息的通知区域330,显示控制视频显示设备制造商应用的控制按钮的控制按钮区域340,显示子菜单的子菜单区域350,显示附加信息的附加信息区域360,显示广告的广告区域370。在具有交叠用户界面的视频显示设备制造商应用中,主AV内容区域310布置在画面300的左上;主菜单区域320和通知区域330布置在主AV内容区域310的下部;控制按钮区域340布置在左上;子菜单区域350布置在控制按钮区域340与附加信息区域360之间;广告区域370布置在右下;附加信息区域360布置在子菜单区域350与广告区域370之间。然而,它们的位置可变化。下文将主要描述具有改变大小的用户界面的视频显示设备制造商应用。视频显示设备制造商应用从内置在视频显示设备100中的ACR引擎接收必要信息,根据其特性主要具有两种类型的菜单。第一种类型的菜单用于时间不敏感增强服务。即,当选择与时间不敏感增强服务有关的菜单时,视频显示设备100获得当前在画面上播放的主AV内容的标记符,基于获得的标识符获得增强服务,并且在附加信息区域360上显示获得的增强服务。这种时间不敏感增强服务的示例包括标题、类型、演员、导演、其他人的评价、短片和简短说明。通过此基本信息,视频显示设备100可搜索附加信息,链接到诸如Facebook和Twitter的社交网络服务,或者提供推荐的服务和相关广告。第二种类型的菜单用于时间敏感增强服务。即,当选择与时间敏感增强服务有关的菜单时,视频显示设备100获得当前在画面上播放的主AV内容的标识符和播放时间信息,基于获得的标识符和播放时间信息获得时间敏感增强服务,并且在附加信息区域360上显示获得的增强服务。视频显示设备制造商应用的主菜单包括节目菜单、信息菜单、社交菜单、推荐菜单、目录菜单。这些菜单中,时间不敏感菜单包括信息菜单、社交菜单、推荐菜单、目录菜单,时间敏感菜单包括节目菜单。如果选择时间不敏感菜单,则可调用时间敏感应用。除了这5个主菜单,可添加其他主菜单。如果选择各主菜单,则选择的主菜单的子菜单显示在子菜单区域350上。图25是例示根据实施方式的运行视频显示设备制造商应用的方法的流程图。当在操作S901中在播放主AV内容的同时通过按下遥控器的特定键、在向下方向上晃动运动遥控器、放大画面底部方向上的运动遥控器的光标而接收对应于应用选择菜单显示的用户输入时,视频显示设备100在操作S903中显示图26的应用选择菜单。图26是根据实施方式的显示应用选择菜单时的画面。如图26所示,应用选择菜单380布置在画面300的底部。应用选择菜单380可以是半透明的。应用选择菜单380包括安装在视频显示设备100中的多个应用的运行图标。显示的运行图标中的一个图标对应于视频显示设备制造商应用的运行图标。当在操作S905中通过操纵遥控器中的左右箭头键或者根据运动遥控器的移动而移动光标接收到对应于视频显示设备制造商应用的图标选择的用户输入时,视频显示设备100在操作S907中运行视频显示设备制造商应用。通过这样,用户可在观看主AV内容时他/她希望时立即运行应用而无需访问应用商店。一旦视频显示设备制造商应用运行,其主菜单显示。如果默认选择节目菜单,则其子菜单显示在子菜单区域350上。默认选择节目菜单的子菜单中的全部子菜单。焦点聚集在全部子菜单上。随着时间流逝,自动更新显示在附加信息区域360上的增强服务。<-按钮用于返回之前的菜单,X按钮用于在关闭视频显示设备制造商应用之后返回整个画面。然后,将参照图27-29根据实施方式描述视频显示设备制造商应用。节目主菜单是用于在附加信息区域360上显示与播放的主AV内容时间相关的应用的菜单。可从诸如电视广播公司的内容所有者提供用于显示与主AV内容链接的应用的增强服务信息。视频显示设备100分析增强服务信息,以在正确的时刻在附加信息区域360中显示对应的应用。以下的图中示出画面中的UI。节目菜单包括全部子菜单、参与子菜单、发现子菜单。全部子菜单是用于在附加信息区域360上显示与参与子菜单和发现子菜单有关的所有应用的菜单。参与子菜单是用于显示引起节目中的诸如投票的节目参与的应用的菜单。发现子菜单是用于显示诸如场景相关信息的应用的菜单。节目菜单的子菜单可根据内容所有者希望的应用的内容添加或编辑。图27是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的全部子菜单时的画面。当选择节目主菜单的全部子菜单(即,第一子菜单)时,视频显示设备100在附加信息区域360上显示与参与子菜单和显示子菜单有关的所有应用。当选择全部子菜单时,视频显示设备100在附加信息区域360上显示与特定时间同步的应用或事件。如果不存在与特定时间同步的应用,则视频显示设备100可将附加信息区域350留为空白空间。然而,由于空白空间不能向用户给出附加交互的动力,所以如果不存在与特定时间同步的应用,则视频显示设备100可收集现在之前发生的应用或事件,以显示历史。当用户进入视频显示设备制造商应用时,可以看出用户可具有在观看主AV内容时执行与主AV内容有关的交互应用的意图。在导航若干菜单时,用户不可在特定时间观看事件。特别地,当用户导航时间不敏感增强服务的菜单时,以上情况很可能发生。因此,在进入视频显示设备制造商应用之后,如果在导航期间发生时间敏感事件,则视频显示设备100在通知区域330上显示对于此的通知消息,通知用户在从广播站广播的当前时间存在特殊事件。用户通过视频显示设备制造商应用确认音乐信息或地点信息时,时间链接应用发生,视频显示设备100在通知区域330上显示通知消息。当接收到对应于按下去看看按钮的用户输入时,视频显示设备100进入与发生时间链接的应用有关的子菜单,并且在附加信息区域360上显示发生时间链接的应用。通知消息可以是文本消息。另外,视频显示设备100可显示传送的应用的量作为数字。通知消息可以用Push方法传送到观众。图28是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的参与子菜单时的画面。如图28所示,一旦选择参与子菜单,则视频显示设备100在附加信息区域360上显示引起诸如投票的观众参与的应用。如果发生观众参与应用,则视频显示设备100在附加信息区域360上显示该应用。如果观众参与应用是投票,则视频显示设备100可显示投票问题和投票结果。此外,视频显示设备100显示当前事件,为了用户方便还在当前事件的底部显示观众参与的之前的事件。图29是根据实施方式的选择视频显示设备制造商应用中的节目主菜单的发现子菜单时的画面。如图29所示,一旦选择发现子菜单,则视频显示设备100在附加信息区域360上除了观众参与应用外显示所有时间链接应用。例如,视频显示设备100在主AV内容中示出的产品或地点上显示场景相关信息。视频显示设备100可同时显示当前场景相关信息和之前场景相关信息。此外,视频显示设备100可在子菜单上显示存在时间链接应用或事件的通知消息。例如,如果发生观众参与应用,则视频显示设备100在参与子菜单上显示具有闪烁N的图标以引起观众参与。如果用户在预定时间内不回应通知,则视频显示设备100可移除通知。下文将参照图30-36根据实施方式描述视频显示设备制造商应用的信息主菜单。信息主菜单对应于时间不敏感区域。类似于节目主菜单的UI,信息主菜单不按应用自动显示并且在特定时间消失的UI方式操作。当然,尽管上面提到的时间链接应用可通过此菜单显示,但是当选择节目主菜单之外的主菜单时,可链接诸如搜索服务或Twitter服务的第二服务。信息主菜单包括搜索子菜单、Twitter子菜单、新闻子菜单。然后,将参照图30-32根据实施方式描述视频显示设备制造商应用中的信息主菜单的搜索子菜单。图30是例示根据实施方式的搜索方法的流程图。视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1002中选择了视频显示设备制造商应用中的信息主菜单的搜索子菜单,视频显示设备100在操作S1003中基于获得的内容信息获得包括对应于增强服务的多个搜索项的搜索列表。搜索列表包括类型、演员、导演、地点、产品中的至少一个。在操作S1007中,视频显示设备100在附加信息区域360上显示搜索列表。将参照图30描述搜索列表的显示示例。图31是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的搜索子菜单时的画面。如图31所示,搜索列表包括主AV内容的特性。视频显示设备100可在附加信息区域360上显示搜索项的图片或名称中的至少一个。当在操作S1009中通过遥控器的光标选择多个搜索项中的一个时,视频显示设备100在操作S1011中搜索因特网搜索引擎。此外,视频显示设备100可使用诸如Tribune媒体或IMDb的信息。在操作S1013中,视频显示设备100在附加信息区域360上显示搜索的信息。由于通过服务提供商的诸如OpenAPI的程序自动取得搜索结果,所以可极大节省画面设计时间。将参照图32描述搜索消息的显示示例。图32是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的搜索子菜单时的另一画面。如图32所示,视频显示设备100在附加信息区域360上显示选择的搜索项的搜索结果。此外,视频显示设备在附加信息区域360上放置Twitter按钮和编辑按钮,以关注演员的Twitter或编辑诸如电影或传记的演员简介。与此类似,如果使用根据实施方式的搜索方法,则可通过单击搜索与主AV数据有关的信息,使得可减少输入搜索字的努力。接下来,将参照图33-34根据实施方式描述视频显示设备制造商应用中的信息主菜单的Twitter子菜单。图33是例示根据实施方式的聊天窗口显示方法的流程图。在操作S1101中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1102中选择了视频显示设备制造商应用中的信息主菜单的Twitter子菜单,视频显示设备100在操作S1103中基于获得的内容信息获得对应于增强服务的Twitter聊天列表。视频显示设备100在Twitter的Hashtag上写入节目名称,以加载与节目有关的Twitter聊天列表。该聊天列表链接到Twitter,实时连续更新。在操作S1107中,视频显示设备100通过用户选择或自动在附加信息区域360上显示Twitter聊天列表中的一个聊天窗口。将参照图34描述聊天窗口的显示示例。图34是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的Twitter子菜单时的画面。如图34所示,视频显示设备100在附加信息区域360上显示聊天窗口,以支持观看同一节目的观众之间的聊天。当广播节目时,节目的用户实际上可直接在聊天室中写入消息。如果视频显示设备100具有类似智能电视的登录机制,则视频显示设备100的用户可在进入菜单时在登录状态下立即用他自己的ID开始聊天。如果不方便通过遥控器进行到视频显示设备100的输入,则视频显示设备100可仅显示聊天消息。如果视频显示设备100链接到诸如智能电话或平板电脑的第二设备,则可使用第二设备的输入设备键入消息。尽管Hashtag中的信息基本上是节目名称,但可选择为演员或导演的标签,即,上面提到的另一基本消息,使得用户可选择性地参与对应主题的聊天。接下来,将参照图35-36根据实施方式描述视频显示设备制造商应用中的信息主菜单的新闻子菜单。图35是例示根据实施方式的新闻获得方法的流程图。在操作S1201中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1202中选择了视频显示设备制造商应用中的信息主菜单的新闻子菜单,视频显示设备100在操作S1203中基于获得的内容信息获得对应于增强服务的新闻。在此点,新闻可或可不涉及主AV内容。或者,可从主AV内容的广播公司提供新闻。如果广播公司不通过OpenAPI提供新闻,则视频显示设备100可通过诸如Google或Yahoo的因特网服务的新闻馈送接收新闻。在操作S1207中,视频显示设备100在附加信息区域360上显示获得的新闻。将参照图36描述新闻的显示示例。图36是根据实施方式的选择视频显示设备制造商应用中的信息主菜单的新闻子菜单时的画面。如图36所示,视频显示设备100可在附加信息区域360上显示获得的新闻。下文将参照图37-42根据实施方式描述视频显示设备制造商应用的社交主菜单。社交主菜单对应于时间不敏感区域。类似于节目主菜单的UI,社交主菜单不按自动显示应用并且在特定时间消失的UI方式操作。当然,尽管上面提到的时间链接应用可通过此菜单显示,但是当选择除节目主菜单之外的主菜单时,可链接诸如Facebook的第二服务。社交主菜单包括观众列表子菜单和喜好显示子菜单。然后,将参照图37-40根据实施方式描述视频显示设备制造商应用中的社交主菜单的观众列表子菜单。图37是例示根据实施方式的观众列表显示方法的流程图。在操作S1301中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1302中选择了视频显示设备制造商应用中的社交主菜单的观众列表子菜单,视频显示设备100在操作S1303中基于获得的内容信息获得关于朋友列表和各朋友是否观看主AV内容的信息。视频显示设备100可与诸如Facebook的社交网络服务链接,以获得观看主AV内容的朋友的列表。在操作S1307中,视频显示设备100在附加信息区域360上显示获得的观众列表。将参照图38描述观众列表的显示示例。图38是根据实施方式的选择视频显示设备制造商应用中的社交主菜单的观众列表子菜单时的画面。如图38所示,视频显示设备100可在附加信息区域360上显示对应于获得的观众列表的观众的图片和名称。特别地,视频显示设备100可与各朋友是否观看内容一起显示朋友列表,或者仅显示当前观看内容的朋友的列表。当在操作S1309中从显示的朋友列表选择一个朋友时,视频显示设备100在操作S1311中确认选择的朋友是否观看主AV内容。如果选择的朋友观看主AV内容,则视频显示设备100在操作S1313中在附加信息区域360上显示选择的朋友的聊天窗口。另外,如果选择的朋友未观看主AV内容,则视频显示设备100在操作S1315中向选择的朋友的e-mail或移动电话发送推荐观看主AV内容的消息。即使选择的朋友未观看主AV内容,视频显示设备100也可在附加信息区域360上显示选择的朋友的聊天窗口。对于聊天,用户可使用视频显示设备100的遥控器或连接到视频显示设备100的第二设备的输入设备,并且可通过智能电话的社交网络服务应用与朋友聊天,而与视频显示设备100无关。在任何情况下,社交网络服务的聊天画面可显示在视频显示设备100的画面上。通过评估节目的按钮,用户可向朋友发送他/她的意图。例如,用户可通知朋友他/她当前观看主AV内容并且可通过“好”按钮推荐当前未观看主AV内容的朋友观看主AV内容。与此类似,视频显示设备100通过观众列表子菜单利用ACR技术自动意识到谁在观看哪个节目。为了确认谁在观看哪个节目,用户需要登录。一旦在视频显示设备100中注册了登录账户,则每次视频显示设备100打开时,用户可自动登录。因此,视频显示设备100可意识到谁在观看哪个节目。图39是根据实施方式的视频显示设备获得朋友列表和观看信息时的信号流。如图39所示,如果朋友A的视频显示设备播放主AV内容A,则它在操作S1401中向SNS提供服务器75发送主AV内容A的标识符和朋友A的标识符。另外,如果朋友B的视频显示设备播放主AV内容A,则它在操作S1403中向SNS提供服务器75发送主AV内容A的标识符和朋友B的标识符。如果视频显示设备100播放主AV内容A,则它在操作S1405中向SNS提供服务器75发送主AV内容A的用户ID和标识符。在操作S1407中,SNS提供服务器75基于朋友关系信息和接收的内容标识符确认关于视频显示设备100的朋友列表和各朋友是否观看主AV内容的信息。图40是根据另一实施方式的视频显示设备获得朋友列表和观看信息时的信号流。如图40所示,如果朋友A的视频显示设备播放主AV内容A,则它在操作S1501中向SNS提供服务器75发送朋友A的标识符,在操作S1503中向ACR服务器发送主AV内容A。ACR服务器77可以是水印服务器21、指纹服务22、增强服务信息提供服务器40、增强服务提供服务器50中的一个。另外,如果朋友B的视频显示设备播放主AV内容A,则它在操作S1505中向SNS提供服务器75发送朋友B的标识符,在操作S1507中向ACR服务器77发送主AV内容A。在操作1509中,视频显示设备100向SNS提供服务器75发送用户ID。然后,SNS提供服务器75在操作S1511中向ACR服务器75提供对应于用户ID的朋友列表。此外,如果视频显示设备100播放主AV内容A,则它在操作S1513中向ACR服务器75发送主AV内容A的用户ID和标识符。在操作S1515中,ACR服务器75基于对应于用户ID和内容标识符的朋友列表确认关于视频显示设备100的朋友列表和各朋友是否观看主AV内容的信息,然后,向视频显示设备100提供确认的信息。然后,将参照图41-42根据实施方式描述视频显示设备制造商应用中的社交主菜单的喜好显示子菜单。图41是例示根据实施方式的喜好显示方法的流程图。在操作S1601中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1602中选择视频显示设备制造商应用中的社交主菜单的喜好显示子菜单,视频显示设备100在操作S1603中基于获得的内容信息获得包括多个喜好显示项的喜好显示列表。这里,喜好显示项可包括预览或预览地址。预览可以是图像或短视频。预览可以通过OpenAPI直接从广播公司提供,或者可通过因特网服务的搜索引擎获得,或者通过从广播公司的因特网服务仅提取必要部分获得。可提供对应于几分钟的时间间隔中的核心场景的图像,或者可提供对于一个节目的一个图像。在操作S1607中,视频显示设备100在附加信息区域360上显示获得的喜好显示列表。将参照图42描述观众列表的显示示例。图42是根据实施方式的选择视频显示设备制造商应用中的社交主菜单的喜好显示子菜单时的画面。如图42所示,视频显示设备100可在附加信息区域360上显示喜好显示列表中的预览和用于喜好显示的“喜欢它”按钮。一旦在操作S1609中选择对应于一个喜好显示项的“喜欢它”按钮,视频显示设备100在操作S1611中在诸如Facebook的SNS上发布预览和对应于选择的喜好显示项的简单文本。这里,简单文本可自动生成,或者可通过遥控器或第二设备的输入设备输入。下文,将参照图43-46根据实施方式描述视频显示设备制造商应用的推荐主菜单。推荐主菜单对应于时间不敏感区域。类似于节目主菜单的UI,推荐主菜单不按应用自动显示并且在特定时间消失的UI方式操作。当然,通过此菜单,上面提到的时间链接应用可显示,但是如果选择推荐菜单,则可链接另一服务。推荐主菜单可包括之前片段子菜单、VOD子菜单、应用子菜单。图43是例示根据实施方式的数字媒体下载方法的流程图。在操作S1701中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1702中选择了视频显示设备制造商应用的推荐主菜单,视频显示设备制造商应用在操作S1703中基于获得的内容信息获得数字媒体列表。如果选择了之前片段子菜单,则视频显示设备100获得之前片段列表。如果选择了VOD子菜单,则视频显示设备100获得与主AV内容或者主AV内容推荐的提供商有关的VOD列表。如果选择了应用子菜单,则视频显示设备100获得与主AV内容或者主AV内容推荐的提供商有关的VOD列表。这里,数字媒体列表可包括预览、预览地址、图标相关图像。在操作S1707中,视频显示设备制造商应用在附加信息区域360上显示获得的数字媒体列表。参照图44描述之前片段列表的示例。图44是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的之前片段子菜单时的画面。如图44所示,视频显示设备100在附加信息区域360上显示之前片段列表的预览和标题。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示之前片段。将参照图45描述VOD列表的显示示例。图45是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的VOD子菜单时的画面。如图45所示,视频显示设备100在附加信息区域360上显示VOD列表的预览和标题。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示与主AV内容有关的VOD。将参照图46描述应用列表的显示示例。图46是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的应用子菜单时的画面。如图46所示,视频显示设备100在附加信息区域360上显示应用列表的图标和应用名称。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示与主AV内容有关的应用。一旦在操作S1709中从数字媒体列表选择了一个项,视频显示设备制造商应用在操作S1711中下载对应于选择的项的数字媒体。在此点,视频显示设备100可在支付之后下载数字媒体。如果选择的项是之前片段或VOD,则视频显示设备100可播放下载的数字媒体。如果选择的项是应用,则视频显示设备可自动播放下载的应用或可通过用户选择播放下载的应用。与此类似,根据实施方式,视频显示设备可通过简单操纵下载数字媒体。下文,参照图47-50根据实施方式描述视频显示设备制造商应用的目录主菜单。目录主菜单对应于时间不敏感区域。类似于节目主菜单的UI,目录主菜单不按应用自动播放并且在特定时间消失的UI方式操作。当然,通过此菜单,上面提到的时间链接应用可显示,但是如果选择了目录菜单,则可链接另一服务。目录主菜单可包括风格子菜单、音乐子菜单、另一子菜单。图47是例示根据实施方式的目录显示方法的流程图。在操作S1801中,视频显示设备100提取主AV内容的一些间隔,基于提取的间隔获得内容信息。一旦在操作S1802中选择了视频显示设备制造商应用中的目录主菜单的子菜单,视频显示设备制造商应用在操作S1803中基于获得的内容信息获得目录列表。如果选择了风格子菜单,则视频显示设备100获得与主AV内容或主AV内容推荐的提供商有关的衣服目录列表。如果选择了音乐子菜单,则视频显示设备100获得与主AV内容或者主AV内容推荐的提供商有关的音乐目录列表。如果选择了另一子菜单,则视频显示设备100获得与主AV内容或者主AV内容推荐的提供商有关的产品或地点目录列表。这里,数字媒体列表可包括相关图像、价格信息、描述、优惠券。优惠券可以是数字或QR码。视频显示设备100可仅当用户观看主AV内容时显示优惠券,或者可在将优惠券存储在存储器150上之后的可用时段期间允许用户使用优惠券。在操作S1807中,视频显示设备制造商应用在附加信息区域360上显示获得的目录列表。将参照图48描述衣服目录列表的显示示例。图48是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的风格子菜单时的画面。如图48所示,视频显示设备100在附加信息区域360上显示与主AV内容有关的衣服的制造者信息、价格信息、描述信息。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示与主AV内容有关的衣服目录。参照图49描述音乐目录列表的示例。图49是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的音乐子菜单时的画面。如图49所示,视频显示设备100在附加信息区域360上显示与主AV内容有关的音乐的歌手信息、价格信息、描述信息。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示与主AV内容有关的音乐目录。将参照图50描述另一目录列表的显示示例。图50是根据实施方式的选择视频显示设备制造商应用中的推荐主菜单的另一子菜单时的画面。如图50所示,视频显示设备100在附加信息区域360上显示与主AV内容有关的产品和地点的价格信息、描述信息。与此类似,根据实施方式,视频显示设备100可无需用户操纵而自动搜索和显示与主AV内容有关的产品或地点目录。一旦在操作S1809中从目录列表选择了一个项,视频显示设备制造商应用在操作S1811显示对应于选择的项的购买项。与此类似,根据实施方式,用户可通过简单操纵购买产品。发布购买评论按钮和书签按钮可布置在目录列表中的各项。一旦选择了发布购买评论按钮,视频显示设备100可在附加信息区域360上显示产品的发布使用评论。另外,用户可写下发布购买评论。另外,通过书签按钮对特定项加书签之后,用户可通过社交主菜单的观众列表子菜单推荐加书签的项。在这种情况下,视频显示设备100可向ACR服务器77或SNS提供服务器75提供书签项信息。然后,接收推荐的用户的视频显示设备100基于从主AV内容提取的间隔获得内容信息,并且如果主AV内容对应于基于获得的内容信息的推荐项的广告,则可显示诸如“该产品由朋友U推荐”的推荐消息。另外,可显示短视频,而不是推荐消息。然后,将参照图51和52根据实施方式描述ACR功能的开/关控制。图51是根据实施方式的控制ACR功能的用户界面的视图。如图51所示,播放控制单元113显示ACR功能设置窗口。用户可通过ACR功能设置窗口激活或禁用ACR功能。当激活ACR功能时,用户可选择ACR模式。ACR模式可利用自动播放应用模式、内容提供商应用模式、视频显示设备制造商应用模式中的一种设置。当以上述方式设置ACR功能模式时,播放控制单元113在设置信息存储单元154上存储设置信息。图52是例示根据实施方式的控制视频显示设备的方法的流程图。在操作S1901中,增强服务管理单元130确认ACR功能是否开启。如果ACR功能禁用,则增强服务管理单元130不再执行内容信息获得过程。如果ACR功能激活,则增强服务管理单元130在操作S1902中提取主AV内容的一些间隔。在操作S1903中,增强服务管理单元130基于提取的间隔获得主AV内容的内容信息。在操作S1905中,增强服务管理单元130将主AV内容的基准时间与另选广告的基准时间同步。在操作S1907中,增强服务管理单元130基于获得的内容信息获得增强服务。增强服务管理单元130基于内容信息获得增强服务信息,然后基于增强服务信息获得增强服务。然后,增强服务管理单元130在操作S1909中确认ACR模式。增强服务管理单元130在操作S1911中根据ACR模式播放增强服务。更具体地,如果ACR模式是自动播放应用模式,则增强服务管理单元130运行自动播放应用,提取的自动播放应用播放获得的增强服务。如果ACR模式是内容提供商应用模式,则增强服务管理单元130在后台运行对应于获得的内容信息的内容提供商应用。增强服务管理单元130在接收到对应于增强服务使用的用户输入时显示内容提供商应用。该内容提供商应用可播放获得的增强服务。可由用户输入运行内容提供商应用,而不是在后台自动运行。如果ACR模式是视频显示设备制造商应用模式,则增强服务管理单元130在后台运行它的视频显示设备制造商应用。增强服务管理单元130在接收到对应于增强服务使用的用户输入时显示视频显示设备制造商应用。该视频显示设备制造商应用可播放获得的增强服务。可由用户输入运行视频显示设备制造商应用,而不是在后台自动运行。下文,将参照图53-77描述接收增强服务的方法及其视频显示设备的方法。为了简洁,将省略与图1-52有关的重复描述。图53是例示根据第一实施方式的接收增强服务的方法的流程图。参照图53,视频显示设备100在操作S2001中接收AV内容,在操作S2002中从接收的AV内容提取第一特征信息。更具体地,视频显示设备100可从接收的AV内容的一些视频帧或一部分音频样本提取诸如签名的特征信息。然后,视频显示设备100在操作S2003中向第一服务器发送提取的第一特征信息,并在操作S2004中从第一服务器接收包括与第一特征信息有关的内容信息、增强服务信息、增强服务中的至少一种的数据库(DB)。更具体地,视频显示设备100访问对应于预定指纹服务器地址的指纹服务器22,以发送包括提取的第一特征信息的查询,指纹服务器22可在对查询的回复中顺序发送与第一特征信息有关的内容数据库。指纹服务器22利用从视频显示设备100接收的第一特征信息标识视频显示设备100中播放的AV内容(例如,用户当前观看的节目),然后从对应于特征信息的信息开始将与AV内容有关的所有内容信息或增强服务信息顺序发送到视频显示设备100。从指纹服务器22顺序发送的内容信息可具有参照图7描述的格式,可包括内容标识信息(内容ID)和时间信息(时间戳)。另外,从指纹服务器22顺序发送的增强服务可包括用于访问提供增强服务的增强服务提供服务器50的增强服务地址信息或者用于访问提供增强服务提供服务器50的地址的增强服务信息提供服务器40的增强服务信息提供服务器地址信息。在以上情况下,从指纹服务器22顺序发送的内容数据库可包括具有图7的格式的多个信息。另外,指纹服务器22利用从视频显示设备100接收的第一特征信息标识视频显示设备100中播放的AV内容(例如,用户当前观看的节目),然后将与AV内容有关的所有增强服务顺序发送到视频显示设备100。从指纹服务器22顺序发送的各增强服务可包括可用增强服务文件。即,指纹服务器22不向视频显示设备100提供对应于从视频显示设备100接收的第一特征信息的内容信息、增强服务信息、增强服务中的仅一种,而是向视频显示设备100提供内部数据库中的与接收的AV内容有关的所有数据库。然后,视频显示设备100在操作S2005中将从第一服务器接收的数据库存储在存储器中。从指纹服务器22接收与AV内容有关的所有数据库然后存储在视频显示设备100的内部存储器中之后,从接收的AV内容提取的特征信息不发送到指纹服务器22,并且首先在视频显示设备100的内部存储器中存储的数据库中搜索。此外,为了提高稍后使用特征信息搜索数据库时的搜索效率,从指纹服务器22发送的数据库可按发送次序存储在存储器中。利用特征信息或内容标识信息(内容ID)作为关键元素的线性搜索方法可以是可用的。另外,视频显示设备100可利用图7所示的查询结果格式中的信令信道信息的UpdateMode和PollingCycle字段值获得从指纹服务器22发送的数据的发送时段。接收到数据库之后,视频显示设备100在操作S2006中从当前接收的AV内容提取第二特征信息,在操作S2007中从数据库搜索并获得对应于提取的第二特征信息的内容信息、增强服务信息、增强服务中的一种。此外,如果对应于提取的第二特征信息的内容信息、增强服务信息、增强服务不在视频显示设备100的内部存储器中存储的数据库中,则视频显示设备100向指纹服务器22发送包括第二提取信息的查询,以接收与第二提取信息有关的数据库并将其存储在存储器中。下文,参照图54-57,将根据实施方式描述利用存储在视频显示设备100的内部存储器中的数据库接收增强服务的方法。参照图54,视频显示设备100可包括接收单元161、特征提取单元162、DB搜索单元163、数据库164、数据发送/接收单元165。接收单元161接收AV内容,特征提取单元162从接收的AV内容提取特征信息。另外,数据发送/接收单元165将提取的特征信息发送到指纹服务器22,然后从数据库指纹服务器22接收与特征信息有关的数据库。此外,接收的数据库164可存储在视频显示设备100的内部存储器中。例如,当视频显示设备100中生成的数据库164包括多个特征信息和分别与其对应的多个内容标识信息(内容ID)时,DB搜索单元163从特征提取单元162接收当前接收的AV内容的特征信息,然后从数据库164搜索对应于特征信息的内容标识信息。此外,数据发送/接收单元165向指纹服务器22发送通过DB搜索单元163获得的内容标识信息(内容ID),以便获得增强服务信息提供服务器40的地址。然后,数据发送/接收单元165利用获得的地址访问增强服务信息提供服务器40,以获得增强服务提供服务器50的地址,然后访问增强服务提供服务器50以接收增强服务。根据另一实施方式,当视频显示设备100中生成的数据库164包括多个特征信息和与其对应的增强服务信息提供服务器40的地址时,DB搜索单元163可利用从特征提取单元162输入的特征信息从数据库164搜索增强服务信息提供服务器40的地址。在这种情况下,在通过利用搜索的地址访问增强服务信息提供服务器40获得增强服务提供服务器50的地址之后,可通过访问增强服务提供服务器50接收增强服务。参照图55,当视频显示设备100中生成的数据库164包括多个特征信息和分别与其对应的增强服务访问信息(即,增强服务提供服务器50的地址)时,DB搜索单元163可利用从特征提取单元162输入的特征信息从数据库164搜索增强服务信息提供服务器40的地址。在这种情况下,DB搜索单元163利用搜索的地址访问增强服务提供服务器50以接收增强服务。参照图56,当视频显示设备100中生成的数据库164包括多个特征信息和分别与其对应的增强服务文件时,DB搜索单元163可利用从特征提取单元162输入的特征信息搜索数据库,以获得对应于提取的信息的增强服务。此外,当接收AV内容的频道改变时,在从频道改变开始经过预定时间之后,可删除存储在视频显示设备100的内部存储器中的数据库164。例如,频道改变之后不立即删除数据库164,可基于频道改变时刻的时间信息(NTPtimStamp)在经过最大30分钟之后删除。另外,当频道改变之后改变的频道返回之前的频道时,如果首先搜索存储在存储器中的数据库164之后不存在对应于特征信息的信息,则视频显示设备100可向指纹服务器22发送包括特征信息的查询。参照图53-56描述了利用视频显示设备100中的数据库接收增强服务的方法,作为基于指纹的内容识别方式,但是本发明不限于此。即,该方法也可适用于参照图2和3描述的基于水印的内容识别方式。参照图57,视频显示设备100的水印提取单元166提取插入在接收的AV内容中的水印信息。DB搜索单元163可利用提取的水印信息搜索数据库164,并且可利用通过搜索数据库164获得的内容信息或增强服务信息接收增强服务。例如,DB搜索单元163利用关于水印提取单元166提取的AC内容的内容标识信息(内容ID)搜索数据库164,以获得增强服务访问信息(即,增强服务提供服务器50的地址),数据发送/接收单元165可利用获得的访问信息访问增强服务提供服务器50,以接收增强服务。图58是例示根据第二实施方式的接收增强服务的方法的流程图。参照图58,视频显示设备100在操作S2101中接收AV内容,在操作S2102中从接收的AV内容提取第一特征信息。然后,视频显示设备100在操作S2103中向第一服务器发送提取的第一特征信息,并且在操作S2104中从第一服务器接收对应于第一特征信息的内容信息。例如,第一服务器可以是指纹服务器22,在操作S2104中接收的信息可以具有参照图7描述的查询结果格式。在这种情况下,视频显示设备100可从接收自指纹服务器22的查询结果提取内容标识信息(内容ID)和时间信息(时间戳),然后,可在其中存储它们。然后,视频显示设备100在操作S2105中提取接收的AV内容的第二特征信息,在操作S2106中除了之前从第一服务器接收的内容信息之前还向第一服务器发送提取的第二特征信息,然后,在操作S2017中从第一服务器接收对应于第二特征信息的内容信息。参照图59,视频显示设备100在操作S2106中不向指纹服务器22仅发送提取的第二特征信息。即,视频显示设备100根据第一特征信息向指纹服务器22发送包括第二特征信息和之前在操作S2104中接收的内容信息(例如,内容标识信息(内容ID)和时间信息(时间戳))的查询。此外,指纹服务器22利用从视频显示设备100接收的特征信息(例如,第二特征信息)、内容标识信息(内容ID)和时间信息(时间戳)搜索内部数据库,然后,向视频显示设备100发送与之对应的查询结果。根据实施方式,为了提高指纹服务器22中的数据库搜索速度和效率,可生成包括仅与首先从视频显示设备100接收的特征信息(例如,第一特征信息)有关的内容信息的新搜索数据库。参照图60,指纹服务器22可包括数据库,数据库包括多个特征信息、分别与其对应的内容信息(例如,内容标识信息(内容ID),时间信息(起始时间和结束时间),诸如表演名称、片段名称和广播公司的内容相关命名信息)。在这种情况下,从视频显示设备100接收第一特征信息之后,指纹服务器22可生成仅包括关于包括与第一特征信息对应的内容标识信息(内容ID)的特征信息的内容信息的新搜索数据库。例如,当从视频显示设备100接收的第一特征信息是“xyzACB123”并且对应于第一特征信息的内容标识信息(内容ID)是“Content1234”时,可在指纹服务器22中生成如图61所示的仅包括关于具有“Content1234”的内容标识信息(内容ID)的内容信息的新搜索数据库。然后,针对从视频显示设备100接收的下一特征信息(例如,第二特征信息),指纹服务器22可利用新生成的搜索数据库执行搜索。以上描述了视频显示设备100向指纹服务器22发送特征信息以及之前接收的标识信息(内容ID)和时间信息(时间戳)的情况,但是本发明不限于此。参照图62,视频显示设备100向指纹服务器22发送包括从当前接收的AV内容提取的特征信息(例如,第二特征信息)和之前接收的内容标识信息(内容ID)的查询,利用接收的特征信息和内容标识信息(内容ID)搜索图61的新生成的搜索数据库。另外,如图63所示,视频显示设备100向指纹服务器22发送仅包括从当前接收的AV内容提取的特征信息(例如,第二特征信息)的查询,指纹服务器22利用接收的特征信息搜索图61的新生成的搜索数据库。在这种情况下,指纹服务器22在其中缓存对应于首先接收的特征信息(例如,第一特征信息)的查询结果,利用接收的特征信息(例如,第二特征信息)和其中缓存的查询结果搜索新生成的搜索数据库。例如,指纹服务器22中缓存的查询结果可包括对应于第一特征信息的内容标识信息(内容ID)和时间信息(时间戳)。参照图58-63描述了利用指纹服务器22中的新生成的数据库执行搜索的方法,作为基于指纹的内容识别方式,但是本发明不限于此。即,该方法还可适用于参照图2和3描述的基于水印的内容识别方式。此外,广播公司(即,内容提供商)可在与多个自动内容识别(ACR)服务提供商中的至少一个签订协议之后提供内容信息,ACR服务提供商可使用分别不同的识别方法。根据分别不同的内容识别方法生成的AV内容需要由支持各对应识别方法的ACR模块处理。相应地,各ACR服务提供商向视频显示设备100提供支持它使用的内容识别方法的ACR模块,视频显示设备100向对应的ACR模块输入与ACR服务提供商有关的AV内容,以获得内容信息。例如,在基于指纹的内容识别方式的情况下,视频显示设备100在预定时间内对接收的未压缩AV内容采样,以提取视频区域的特征信息(例如,签名)或音频区域的模式。可根据特定内容识别方式不同地提取特征信息。即,多样地开发内容识别技术的解决方案。由于内容识别技术通过分别不同的算法从未压缩AV内容提取模式(即,特征信息),所以提取的模式可根据各算法变化。根据实施方式,视频显示设备100可包括支持分别不同的识别方式的多个ACR模块,并且可从多个ACR模块选择对应于接收的AV内容的一个,以获得关于AV内容的内容标识信息。参照图64,多个广播站11、12、13可向多个ACR服务提供商23、24、25中的至少一个提供内容信息,ACR服务提供商23、24、25可根据分别不同的内容识别方式向视频显示设备100提供内容识别服务。视频显示设备100可包括支持每个ACR服务提供商23、24、25使用的内容识别方式的多个ACR模块171、172、173。例如,第一广播站11提供关于它向第一ACR服务提供商11和第二ACR服务提供商24发送的AV内容的信息,相应地,对应于各第一ACR服务提供商23和第二ACR服务提供商24的第一ACR模块171和第二ACR模块172下载到视频显示设备100。在这种情况下,可通过视频显示设备100中的第一ACR模块171和第二ACR模块172中的一个识别从第一广播站11接收的AV内容。另外,第二广播站12向第二ACR服务提供商24和第三ACR服务提供商25提供内容信息,相应地,对应于各第二ACR服务提供商24和第三ACR服务提供商25的第二ACR模块172和第三ACR模块173下载到视频显示设备100。在这种情况下,可通过视频显示设备100中的第二ACR模块172和第三ACR模块173中的一个识别从第二广播站12接收的AV内容。此外,可通过视频显示设备100中的第三ACR模块173识别从第三广播站13接收的AV内容。为此,视频显示设备100包括用于存储多个ACR模块171、172、173的内存存储器,通过预存储的因特网地址识别对应设备可接收的ACR模块的数量和种类。与此不同,视频显示设备100可预先存储各广播站的因特网地址,并且可通过对应的广播站的因特网地址识别对应设备可接收的ACR模块的数量和种类。此外,ACR模块可提供通过各对应模块提供的内容信息的广播公司列表,可通过视频显示设备100的制造商、广播公司、ACR服务提供商中的一个将ACR模块下载在视频显示设备100中。例如,如果视频显示设备100的制造商提供ACR模块,则视频显示设备100可在通电时通过预定因特网地址接收可安装ACR模块的列表。接收的列表包括各模块的版本信息。当对应的模块已安装在视频显示设备100中时,在将安装的ACR模块与列表中的模块的版本信息比较之后确定是否进行更新。此外,当对应的模块未安装在视频显示设备100中时,下载并安装新的ACR模块。另外,当不在接收列表中的ACR模块安装在视频显示设备100中时,意味着对应的模块不再是必要的,使得可从视频显示设备100删除该模块。此外,当广播公司提供ACR模块时,视频显示设备100在通电时通过预定广播公司因特网地址接收支持对应的广播公司的ACR模块的列表。接收针对各广播公司的ACR模块列表之后,视频显示设备100可包括用于处理广播公司的内容的最少的ACR模块的列表。然后,视频显示设备10根据列表下载ACR模块。参照图65,通过视频显示设备100的外部接口174接收的作为外部输入的AV内容的视频可包括从视频处理单元175提供的具有多个像素单位的视频帧的数据块。此外,接收的AV内容的音频可包括从音频处理单元176的脉冲编码调制(PCM)提供的具有数字化声音音调的数据块。如上所提到的,当统一并且标准化接收的AV内容的视频和音频格式时,由于输入到多个ACR模块171、172、173的内容具有相同格式,所以视频显示设备100可容易开发。此外,ACR模块171根据特定算法识别从视频处理单元175或音频处理单元176输入的数据块,从而输出关于AV内容的信息,例如,内容标识信息(内容ID)。此外,从ACR模块171输出的内容信息可通过输出处理单元177转换为标准化格式。图66是例示根据第三实施方式的接收增强服务的方法的流程图。参照图66,视频显示设备100在操作S2201中接收AV内容,在操作S2202中根据预定优先级选择支持分别不同的识别方式的多个ACR模块。例如,视频显示设备100询问其中的ACR模块171、172、173的列表,然后将接收的AV内容(更具体地,从视频处理单元175或音频处理单元176输入的数据块)顺序输入ACR模块171、172、173。此外,输入的AV内容的次序可遵循预定优先级,优先级可根据频道观看时间、频道喜好、频带数量中的一种确定。例如,AV内容输入到ACR模块171、172、173中的用于提供关于最近观看频道的内容信息的ACR模块,然后,根据观看时间的快速次序顺序输入AV内容。另外,AV内容输入到ACR模块171、172、173中的用于提供关于观看最多的频道的内容信息的ACR模块,然后,根据观看次数顺序输入AV内容。另外,AV内容输入到ACR模块171、172、173中的用于提供关于观看最多的频道的内容信息的ACR模块,然后,根据观看次数从最多的开始顺序输入AV内容。此外,视频显示设备100中的控制单元(未示出)可根据AV内容的输入次序顺序确认ACR模块171、172、173中的哪一个识别AV内容。根据确认结果,如果ACR模块171、172、173中的一个识别AV内容,即,如果从ACR模块输出关于AV内容的内容标识信息(例如,内容ID),控制单元可选择ACR模块171、172、173中的对应的ACR模块。然后,关于利用选择的ACR模块获得的AV内容的内容标识信息在操作S2204中发送到服务器,在操作S2205中接收对应于内容标识信息的增强服务。由于操作S2205中的接收对应于内容标识信息的增强服务的方法与参照图1-9描述的方法相同,所以将省略其详细描述。如上所提到的,根据实施方式,视频显示设备100包括3个ACR模块,但是本发明不限于此。即,视频显示设备可包括2个或多于4个ACR模块。此外,如图64所示,多个ACR模块可具有类似功能。由于需要自动执行内容识别,所以可能需要在视频显示设备100的后台运行ACR模块。根据另一实施方式,视频显示设备100可不包括多个ACR模块,可包括用于多个内容识别方式的一个公共模块。参照图67,视频显示设备100在操作S2301中设置用于从AV内容提取一些样本的至少一个采样参数,然后在操作S2302通过根据设置的参数对AV内容采样获得样本。然后,视频显示设备100在操作S2303中向服务器发送获得的样本,并且在操作S2304中从服务器接收关于AV内容的内容标识信息。例如,视频显示设备100可向服务器发送用于提取诸如特征信息的实际比特模式的AV内容的原数据,以便降低多个ACR模块的负荷。相应地,视频显示设备100可仅包括用于从接收的AV内容获得要发送到服务器的原数据的模块,而与内容识别方式无关。此外,服务器处理从视频显示设备100接收的原数据,然后向视频显示设备100提供包括关于AV内容的内容识别信息的查询结果。在这种情况下,由于必要数据的模式可根据内容识别方式变化,所以视频显示设备100和服务器可预先协商并且确定发送/接收的原数据的模式。更具体地,视频显示设备100可对接收的作为原数据的AV内容采样,然后将获得的视频样本或音频样本原样发送到服务器。在这种情况下,视频显示设备100可与服务器协商,并且设置用于从AV内容提取样本的至少一个采样参数,采样参数可包括具有关于对AV内容采样多长时间以获得样本的信息的采样时间。即,如果采样时间不够长,则在服务器中处理的内容匹配结果可能不精确,如果过于长,则服务器中的网络发送时间和处理时间可能不必要地增加。另外,采样参数可包括关于从视频显示设备100发送的视频或音频样本的属性信息。例如,在视频样本的情况下,采样参数可包括采样区域的宽高比和位置、每秒帧数、压缩格式、采样时间。参照图68,视频样本可通过对AV内容的画面181的整个区域(例如,在HD视频的情况下,1920x1080)或画面181的一部分进行采样来获得。例如,采样区域可以位于对应内容的标题频繁出现的右上处,可使用画面181的特定点的坐标布置采样区域的位置。另外,当对画面181的整个区域采样时,采样的视频样本的大小改变为更小,然后发送到服务器。此外,如图69所示,视频样本可通过对画面181中的多个区域(例如,4个方向边缘182、183、184、185处的区域)采样来获得。此外,视频样本的每秒帧数可以是24、30或60,基于内容识别时时间是否敏感来确定。此外,视频显示设备100可在不利用或利用压缩的情况下向服务器发送视频样本,当利用压缩发送视频样本时,关于压缩文件格式的信息(例如,h.264,mpeg2-ts,wmv)与服务器协商确定。此外,当不利用压缩发送视频样本时,可获取关于RGB比特模式或YPbPr比特模式的信息。确定采样参数可受视频显示设备100的硬件性能和服务器的处理性能影响,发送数据量可根据视频显示设备100的CPU性能和存储器性能调整。此外,在音频样本的情况下,采样参数可包括每样本的比特数量、采样频率和频带、声道数量、采样时间、压缩格式。例如,每样本的比特数量是应用于一个音频样本的比特数量(例如16比特或32比特),采样频率可以是4,4100Hz、4,800Hz或14,000Hz,作为当对音频样本采样时的频率。另外,音频声道数量是单1声道、立体2声道或5.1声道。采样频带是用于提取音频样本的频率区域,可包括低频区域(大约20Hz至大约1000Hz)、人类语音区域(大约200至大约2000Hz)、大约10000Hz的中间频带、大约20000Hz的高频区域。更具体地,根据内容识别方式使用的频带可变化。即,可使用整个频带或一些频带,并且可一起使用各种频带。此外,视频显示设备100可在不利用或利用压缩的情况下向服务器发送音频样本,当利用压缩发送音频样本时,关于压缩文件格式的信息(例如,mp3,mpeg2-ts,wmv)与服务器协商确定。下文,参照图70-75,将根据实施方式描述视频显示设备100与服务器协商时确认采样参数的方法。参照图70,在操作S2401中,视频显示设备100向ACR服务器27发送视频显示设备100支持的多个采样参数值。例如,视频显示设备100可向ACR服务器27发送包括它可支持各采样参数的至少一个值的查询,如同参照图67-69描述的。参照图71,在未压缩音频样本的情况下,视频显示设备100可向ACR服务器27发送关于它支持的每采样的比特数量的信息(例如16比特和32比特),可支持的采样频率(例如44100Hz和48000Hz),可支持的声道数量(例如单声道和立体声)。此外,ACR服务器27在操作S2402中根据其硬件性能从视频显示设备100选择参数值中的一个,在操作S2403中向视频显示设备100发送选择的参数值。当从视频显示设备100接收到图71中的查询时,ACR服务器27选择图72所示的视频显示设备100支持的参数值中的一个,然后除了采样时间信息之外发送选择的一个参数值作为对视频显示设备100的回复。根据操作S2401至操作S2403的协商处理,视频显示设备100利用ACR服务器27选择的值设置采样参数。然后,视频显示设备100通过根据设置的采样参数对AV内容采样生成样本,并且在操作S2404和操作S2406中向ACR服务器27发送生成的样本。ACR服务器27在操作S2405和操作S2407中利用发送的样本向视频显示设备100发送关于AV内容的内容标识信息。例如,ACR服务器27从发送自视频显示设备100的样本提取特征信息(签名)的模式,并且向视频显示设备100发送与模式匹配的结果。此外,ACR服务器27中的匹配结果可以是如图7所示的查询结果,例如,可包括内容标识信息(内容ID)和时间信息(时间戳)。在压缩的视频样本的情况下,视频显示设备100向ACR服务器27发送包括图73所示的信息的查询,然后从ACR服务器27接收包括图74所示的信息的回复,以设置采样参数。此外,参照图75,在视频显示设备与ACR服务器27之间的协商处理期间,当视频显示设备100在操作S2501中请求到ACR服务器27的ACR会话连接时,ACR服务器27在操作S2502中向视频显示设备发送可支持的参数值。视频显示设备100可在操作S2503中选择ACR服务器27支持的值中的一个。图76是例示根据设置的参数对AV内容采样的视频显示设备100的配置的框图。视频显示设备100包括接收单元191、采样单元192、参数设置单元193、数据发送/接收单元194。参照图76,参数设置单元193可利用参照图67-75描述的方法设置用于从AV内容提取一些样本的至少一个采样参数。此外,采样单元192可根据设置参数对从接收单元191接收的AV内容采样,然后获得样本。另外,数据发送/接收单元194将获得的样本发送到ACR服务器27,然后从ACR服务器27接收关于接收的AV内容的内容标识信息。图77是例示利用从视频显示设备接收的采样标识内容的ACR服务器27的配置的框图。ACR服务器27包括数据发送/接收单元301、模式提取单元302、模式匹配单元303、数据库304。参照图77,根据设置的采样参数,模式提取单元302可从通过数据发送/接收单元301接收自视频显示设备100的样本提取特征信息的模式(例如,比特模式的签名)。此外,模式匹配单元303可利用提取的模式搜索数据库304,并且可获得包括诸如内容标识信息(内容ID)和时间信息(时间戳)的匹配结果的查询结果。将参照图78和图79描述根据本发明的各种实施方式的视频显示设备的结构。图78是例示根据另一实施方式的基于指纹的视频显示设备的结构的框图。如图78所示,调谐器501从通过空中信道发送的8-VSBRF信号提取符号。8-VSB解调器503对调谐器501提取的8-VSB符号解调,并且恢复有意义的数字数据。VSB解码器505对8-VSB解调器503解调的数字数据解码,以恢复ATSC主服务和ATSCM/H服务。MPEG-2TP解复用器507从通过8-VSB信号发送的MPEG-2传输分组或存储在PVR存储器中的MPEG-2传输分组过滤视频显示设备100要处理的传输分组,以将过滤的传输分组中继到处理模块。PES解码器539缓冲并恢复通过MPEG-2传输流发送的分组基本流。PSI/PSIP解码器541缓冲并分析通过MPEG-2传输流发送的PSI/PSIP部分数据。分析的PSI/PSIP数据由服务管理器(未示出)收集,然后以服务图和指南数据的形式存储在DB中。DSMCC部分缓冲器/处理器511缓冲并处理用于通过MPEG-2TP和IP数据报封装的文件发送的DSMCC部分数据。IP/UDP数据报缓冲器/报头解析器513缓冲并恢复通过DSMCC可寻址部分封装并且通过MPEG-2TP发送的IP数据报,以分析各数据报的报头。另外,IP/UDP数据报缓冲器/报头解析器513缓冲并恢复通过IP数据报发送的UDP数据报,然后分析并处理恢复的UDP报头。流分量缓冲器557可包括ES缓冲器/处理器,PCR处理器,STC模块,解扰器,CA流缓冲器/处理器,服务信令部分缓冲器/处理器。ES缓冲器/处理器缓冲并恢复以PES形式发送的诸如视频和音频的基本流,以将其传送到合适的A/V解码器。PCR处理器处理用于音频和视频流的时间同步的节目时钟基准(PCR)数据。STC模块利用通过PCR处理器接收的基准时钟值校正A/V解码器的时钟值,以执行时间同步。当向接收的IP数据报应用加扰时,解扰器利用从CA流处理器传送的加密密钥恢复净荷的数据。CA流缓冲器/处理器缓冲并处理用于解扰通过MPEG-2TP或IP流发送用于条件访问功能的EMM和ECM的诸如密钥值的数据。CA流缓冲器/处理器的输出传送到解扰器,然后解扰器解扰携带A/V数据和文件数据的MPEG-2TP或IP数据报。服务信令部分缓冲器/处理器缓冲、恢复、分析以IP数据报形式发送的NRT服务信令信道部分数据。服务管理器(未示出)收集分析的NRT服务信令信道部分数据,并将它们以服务图和指南数据的形式存储在DB中。A/V解码器561对通过ES处理器接收的音频/视频数据解码,以将它们呈现给用户。MPEG-2服务解复用器(未示出)可包括MPEG-2TP缓冲器/解析器、解扰器、PVR存储模块。MPEG-2TP缓冲器/解析器(未示出)缓冲并恢复通过8-VSB信号发送的MPEG-2传输分组,还检测和处理传输分组报头。解扰器利用从CA流处理器传送的加密密钥对MPEG-2TP中的应用加扰的分组净荷恢复净荷的数据。PVR存储模块根据用户请求存储通过8-VSB信号接收的MPEG-2TP并且根据用户请求输出MPEG-2TP。PVR存储模块可由PVR管理器(未示出)控制。文件处理器551可包括ALC/LCT缓冲器/解析器、FDT处理器、XML解析器、文件重构缓冲器、解压缩器、文件解码器、文件存储器。ALC/LCT缓冲器/解析器缓冲并恢复通过UDP/IP流发送的ALC/LCT数据,并且分析ALC/LCT的报头和报头扩展。ALC/LCT缓冲器/解析器可由NRT服务管理器(未示出)控制。FDT处理器分析并处理通过ALC/LCT会话发送的FLUTE协议的文件描述表。FDT处理器可由NRT服务器管理器(未示出)控制。XML解析器分析通过ALC/LCT会话发送的XML文档,然后将分析的数据传送到诸如FDT处理器和SG处理器的合适模块。文件重构缓冲器恢复通过ALC/LCT、FLUTE会话发送的文件。如果通过ALC/LCT和FLUTE会话发送的文件被压缩,则解压缩器执行解压缩文件的处理。文件解码器对文件重构缓冲器中恢复的文件、解压缩器中解压缩的文件、或从文件存储器提取的文件解码。文件存储器在必要时存储或提取恢复的文件。M/W引擎(未示出)处理诸如文件的数据,其不是通过DSMCC部分和IP数据报发送的A/V流。M/W引擎将处理的数据传送到呈现管理器模块。SG处理器(未示出)收集和分析以XML文档形式发送的服务指南数据,然后将它们传送到EPG管理器。服务管理器(未示出)收集和分析通过MPEG-2传输流发送的PSI/PSIP数据和通过IP流发送的服务信令部分数据,以产生服务图。服务管理器(未示出)在服务图和指南数据库中存储产生的服务图,控制到用户希望的服务的访问。服务管理器由操作控制器(未示出)控制,并且控制调谐器501、MPEG-2TP解复用器507、IP数据报缓冲器/处理器513。NRT服务管理器(未示出)对通过FLUTE会话以对象/文件形式发送的NRT服务执行总体管理。NRT服务管理器(未示出)可控制FDT处理器和文件存储器。应用管理器(未示出)对以对象和文件形式发送的应用数据执行总体管理。UI管理器(未示出)通过用户接口向操作控制器传送用户输入,开始用户请求的服务的处理。操作控制器(未示出)处理通过UI管理器接收的用户命令,并且允许必要模块的管理器执行对应的动作。指纹提取器565从AV流提取指纹特征信息。指纹比较器567将指纹提取器提取的特征信息与基准指纹进行比较,以找到相同内容。指纹比较器567可使用存储在本地的基准指纹DB,并且可在因特网上查询指纹查询服务器以接收结果。通过比较结果获得的匹配的结果数据可传送到应用并使用。作为ACR功能管理模块或基于ACR提供增强服务的应用模块,应用569识别观看的广播内容以提供与其相关的增强服务。图79是例示根据另一实施方式的基于水印的视频显示设备的结构的框图。尽管图79的基于水印的视频显示设备类似于图78的基于指纹的视频显示设备,但是基于指纹的视频显示设备不包括指纹提取器565和指纹比较器567,而是还包括水印提取器566。水印提取器566从音频/视频流提取以水印形式插入的数据。提取的数据可传送至应用并可使用。此外,本发明的以上方法还能实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光数据存储设备、载波(例如通过因特网的数据传输)。以上实施方式的配置和方法没有任何限制地应用于视频显示设备,所有或一些实施方式可选择性地组合以具有各种变型。
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1