缩略图服务方法

专利名称：缩略图服务方法
技术领域：
本发明涉及到数字广播用于提供节目的有效简要信息的广播服务方法，特别是关于以下的缩略图服务方法，即对于所广播的节目，在电视台或第3方服务提供商对该节目按场面单位生成缩略图后，以运用数字广播或专用线路的传送方法向用户提供缩略图。
背景技术：
缩略(thumbnail)图像以对当前接收的或所储存的广播节目进行缩略、浏览(browsing)或搜索(searching)等为目的，将录像的特定帧比原有大小缩小显示，以非录像的，静止图像的形式向用户提供关联信息。这种缩略图是在数字TV或在数字TV中装有硬盘的个人视频录像机(PVR)等装置中，将接收或录制的图像内容缩略为几个小的图像，或者生成用于图像索引的关键帧，或者在节目指南中生成以对节目进行预览或内容缩略等为目的的代表图像等，其应用领域多种多样。
在现有的广播方法中，对能够简略地展示相关节目场面的缩略图进行传送的具体方法是不存在的。因此，为了在一体化的DTV或DTV机顶盒或PVR等装置中提供有关广播节目的关联信息，而使用以当前储存或接收的图像信号为基础生成缩略图的方法。为此，在DTV或PVR装置内存在用于抽取缩略图的其它装置。
此种形式的缩略图生成装置主要使用在所输入的图像帧中，对易于抽取缩略图的I图像(picture)生成缩略图的方法。此时，通过仅利用I图像的DC值，使生成缩略图所必需的硬件达到最小化。

发明内容
但是，实际的在一个节目中所使用的缩略图的个数是受到限制的。因而，用于判断缩略图是否被抽取的硬件或软件方面的方法则是必要的。为此，就存在要求实现场面转换判断及空白图像检测之类的各种各样的算法的问题。详细地说，就是为了生成用户能够明确地理解节目内容的有意义的缩略图，在硬件及软件方面存在追加性的负担，其实现要求高度的复杂性和效率性。结果，在能够向用户提供优质的服务的同时，却存在以下问题通过增加DTV或PVR装置之类的广播接收装置的复杂程度，装置的价格增加了，结果增加了用户的负担。
本发明是用于解决上述问题的，本发明的目的在于提供在电视台或第3方服务提供商对广播节目制作缩略图后，再将其传送给用户的缩略图服务方法。
本发明的其它目的在于提供对电视台或第3方服务提供商传送的缩略图进行处理并显示的缩略图服务方法。
通过上述做法，在将相关节目的简要信息向用户传送的同时，能够在其它应用领域中，就实现与图像数据的关键帧的抽取、图像索引及搜索有关的功能而言，向用户提供方便。
为实现上述目的，依据本发明设计的缩略图服务方法，就包含如果从电视台或服务提供商处传送广播节目或内容，则对其进行解调并在屏幕上进行显示或储存到存储媒介中的广播接收装置的缩略图服务方法而言，包括如下阶段对于电视台或服务提供商中至少一家广播的特定节目，按场面单位生成缩略图的缩略图生成阶段；将在上述阶段中生成的缩略图，通过传送线路向广播接收装置传送的缩略图传送阶段；对在上述阶段中所传送的缩略图进行解调并在屏幕上进行显示或储存到存储媒介中的缩略图接收阶段。
在由电视台生成缩略图时，缩略图生成阶段以在将缩略图编码成一个独立的缩微流信息包之后，将其在传送流中进行多路传输为特征。
在由电视台生成缩略图的时，对缩微流信息包进行多路传输的传送流以通过地波、卫星和有线中的某一个传送线路进行传送为特征。
生成缩略图的各个场面以由许多张图像帧和相关区间的音频、缩略图及附加数据流构成为特征。
一个缩微流信息包以由以下构成为特征具有唯一的值，使其能够在传送流中分离缩微流的缩略图开始编码字段；表示当前所传送的缩微流包含什么样的广播节目的节目标识字段；表示相当于节目标识的、在当前节目中所传送的缩略图包含在哪个场面中的场面标识字段；包含由电视台生成的缩略图的数据字段。
在缩略图被分离成许多个缩微流信息包进行传送时，在包含相当于缩略图的开始部分数据的信息包中，以告知相关数据是对缩略图首次传送的数据的图像开始编码和包含缩略图的信息的图像头信息一起传送为特征。
在服务提供商生成缩略图时，缩略图生成阶段以如下为特征在从电视台接收相关节目和场面信息并生成缩略图后，以缩微流信息包的形式通过英特网或专用线路向广播接收装置传送；此时，为了电视台传送的广播节目与服务提供商传送的缩略图相匹配，电视台将缩略图的匹配信息向广播接收装置传送。
在服务提供商生成缩略图的情况下，在缩略图匹配信息中包含场面识别信息，这种缩略图匹配信息以如下为特征作为缩微流或数据流进行传送，在每当广播节目中发生新的场面时进行传送。
在服务提供商生成缩略图时，缩略图接收阶段由如下阶段构成将服务提供商传送的缩微流信息包中所包含的节目标识与电视台传送的节目标识进行比较，并对所传送的缩略图相当于哪个节目进行匹配的阶段；将缩微流信息包中所包含的场面标识与电视台传送的匹配信息中的场面识别信息进行匹配的阶段；对在上述阶段中达成匹配的特定节目的缩略图进行解调，并在屏幕上进行显示或储存到存储媒介中的阶段。
电视台和服务提供商对于同一节目及同一场面，以使用一致的节目标识和场面标识为特征。
如上所述，依据本发明设计的缩略图服务方法，使电视台或第3方服务提供商能够对广播节目制作缩略图并进行传送；藉此，具有以下效果可以使DTV或PVR装置对用户接收或储存的广播节目实现多种多样的应用服务，并且可在DTV或PVR装置中减少为抽取缩略图而必需的软件及硬件上的负担。同时，还有在提供优质服务的同时减少DTV及PVR的价格负担的效果。


图1a是表示电视台生成缩略图并进行传送的例子的本发明概念图。
图1b是表示第3方服务提供商生成缩略图并通过专用线路进行传送的例子的本发明概念图。
图2是表示用于依据本发明设计的缩略图广播服务的DTV或PVR中的解码器装置的一个实施例的构成模块图。
图3的(a)～(c)是表示用于依据本发明设计的广播服务及与之相应的解码器装置的广播节目的数据构造的示意图。
图4的(a)、(b)是表示根据本发明设计的广播服务及相应的解码器装置的缩微流信息包的构造示意图。
图5表示在根据本发明设计的缩略图广播服务方法中，利用第3方服务提供商生成的缩略图和电视台传送的场面信息的数据同步过程的概念图。
附图主要部分符号说明110电视台 120DTV或PVR系统130缩略图服务提供商 200解码装置201系统解码器 202视频解码器203音频解码器 204数据解码器具体实施方式
本发明的其它目的、特征及优点，将通过参照附图对实施例进行详细的说明。
以下，参照附图对本发明的实施例的构成和作用进行说明。示意图中所示的或据此进行说明的本发明的构成和作用仅仅作为一个实施例来进行说明，上述的本发明的技术思想和核心构成及作用并不由此受到限制。
如果说电视台或服务提供商直接提供缩略图，则在内容上会更有意义并可真实地代表节目的内容，在画质方面也能够提供提高了品质的优质的缩略图。即，可以提供比在PVR装置中抽取的缩略图大幅提高了品质的缩略图。因而，本发明在电视台或第3方服务提供商(即内容提供商)对广播节目制作缩略图后，将其通过地波、卫星、有线或专用线路向用户传送。
图1是表示用于对依据本发明设计的缩略图进行服务的实施例的模块图。缩略图服务方法大致可以通过由电视台生成缩略图并向用户传送的方法和由第3方服务提供商生成缩略图并向用户传送这两种方式来实现。
图1a是上述的前一方法，是由电视台直接生成缩略图并向用户传送的。在此情况下，在对相关节目决定一定个数的代表图像后，生成比实际图像数据的清晰度低的静止图像。静止图像则成为缩略图。如此生成的缩略图在编码成一个独立的流之后，在传送流中被进行多路传输(multiplex)。实际的缩略图，由于其清晰度与原来的图像相比，是相当低的；因此，结果数据的量很少。并且，由于对一个节目生成相当受限制的个数的缩略图，因此即使将缩略图处理成独立的流并进行传送，与现有的广播流传送方式相比，也不会在带宽上产生有意义的增加。
另一方面，图1b是前述的后一方法，是对于由电视台提供的节目，由第3方服务提供商生成与之相应的缩略图并向用户传送。此时，假设在用户与服务提供商之间，利用英特网或专用线路之类的联接方法进行通信。在实现此种形式的服务时，电视台提供的广播节目和第3方服务提供商传送的缩略图间的匹配的必需的，为此由电视台提供用于缩略图匹配的基本的数据，第3方服务提供商则提供缩略图。具体的实现方法参照以下的其它附图予以说明。
图2是表示在适用依据本发明设计的广播服务方式的DTV中，装有HDD的PVR系统的解码器装置的一个实施例的模块图。
解码器装置由以下构成对所接收的广播流，即缩略图被多路传输的传送流进行反多路转换(demultiplex)，并分离成视频、缩略图、音频、附加数据流的系统解码器201；对所分离的视频、缩微流进行解码的视频解码器202；对所分离的音频流进行解码的音频解码器203；对所分离的附加数据流进行解码的数据解码器204。即，视频解码器202必须能够对所分离的缩微流进行解码并对缩略图进行解码。据其它实施例，将缩略图在软件而非硬件中进行解码的方法也是可行的。
同时，PVR系统可利用所传送的缩略图自由地构成OSD(On ScreenDisplay)，在电视台或服务提供商将相关节目的文本数据作为数据流进行传送时，也可构成由缩略图和文本恰当结合的形式的OSD。即，在进行显示和实现相关功能时，缩略图在屏幕上的位置信息电视台也能够提供，如果不提供与之相关的信息，则也可以视频解码器202任意地将缩略图安排在屏幕上的方式构成OSD。
图3的(a)～(c)是表示用于依据本发明设计的广播服务及与之相应的解码器装置的广播节目的数据构造的概念图，图3(a)中的各个节目(program)与图3(b)一样，在内容上以有意义的分割单位-场面(scene)进行划分。
例如，就上述场面是戏剧的情况而言，则根据场所的变化、内容上进展的变化等进行区分，一般一个小时长度的戏剧则平均由40～60个场面构成。此时，各个场面如图3(c)所示，由许多张的图像帧、相关区间的音频数据和缩略图及其它数据构成。其它数据包含在当前传送的传送流中，由EPG(Electronic Program Guide)或与节目有关的附加信息等构成。
此时，缩略图按场面单位生成。即，电视台或服务提供商按每个场面生成一个缩略图并进行传送。
在其它的实施例中，也可以按每个场面组(scene group)生成一个缩略图并进行传送。上述场面组是将内容上性质相似的场面集合成一个组的单位，也是为生成缩略图而依据提供缩略图的主题构成的单位。即，场面组最少由一个以上的场面构成，各个场面组包含一个以上的缩略图。此时，整个节目也可以由一个场面组构成。即，为了广播和缩略图的匹配或同步(synchronization)，场面信息是必需的，但是场面组是生成缩略图的主题进行参考的信息。同时，场面信息在广播节目中发生新的场面时一定会传送，以使DTV或PVR系统能够了解当前区间包含哪个场面。上述场面信息通过缩微流或数据流进行传送。
图4的(a)、(b)表示用于依据本发明设计的缩微广播服务及与之相应的解码器装置的缩微流信息包的构造。一个缩微流信息包如图4(a)所示，由包含缩略图开始编码(thumbnail start code)、节目标识(program ID)、场面标识(scene ID)和实际缩略图的数据部分构成。
此时，各个字段由固定的长度，也就是说由固定的个数的字节构成，结果可以使用于对缩微流进行解码的电路的复杂程度最小化。
缩略图开始编码具有唯一的值，以能够在传送流中分离缩微流。例如，可由23个连续的0构成的比特、具有1的值的比特和相当于8比特大小的缩微流识别编码构成。
节目标识表示当前传送的缩微流包含在什么样的广播节目中。为此，则使节目标识具有与由数据广播传送的节目识别信息一致的值。即，利用节目标识使从数据广播获得的节目的附加信息与缩略图一致。
场面标识表示在相当于节目标识的节目中，当前传送的缩略图包含在哪个场面中。因而，场面标识可以间接地表示缩略图的显示或解码结束的时间点。即，在相关场面结束之前，必须做好准备，以使缩略图能够在DTV或PVR系统中使用。
而且，缩微流信息包的最后字段作为实际的包含缩略图的部分，在电视台直接制作缩略图并进行传送的情况下，相关缩略图包含在上述字段中。缩略图可根据情况分成许多个缩微流信息包进行传送。因而，在包含相当于缩略图的开始部分的数据的信息包中，如图4(b)所示，必须包含开始编码(image star tcode)，来告知相关数据是对缩略图开始传送的数据。此时，也必须传送图像头信息(image header)。
结果，对于各个缩略图，开始编码(image start code)和头信息(image header)只传送一次，并使在包含缩略图的第一个信息包中包含相关信息。图像头信息(image header)包含缩略图的清晰度和图像编码方法等的基本信息。
在缩略图被分成许多个信息包进行传送时，从第二个信息包开始，不包含图像的开始编码(image start code)和头信息(image header)。并且，图像数据区(image data)包含实际经编码的缩略图信息。
此时，图4(a)的缩略图数据(thumbnail image data)字段具有固定的字节数，所以在最后信息包中，经编码的图像数据的最后字节发生以后，可以存在剩余空间。这种剩余空间以零(null)值进行增补。图4中以*表示的部分表示能够根据情况进行省略。
图5表示在依据本发明设计的缩略图广播服务方法中，在第3方服务提供商生成缩略图并进行传送的情况下，将相关缩略图与从电视台接收的节目成为一致的过程。为使缩略图一致，电视台必须对相关节目传送用于进行场面识别的信息。
用于传送场面信息的基本的数据构造如图4所示，由于此时不传送缩略图，所以也可将场面识别信息包含在数据流中进行传送。
第3方服务提供商与DTV、PVR、英特网或调制解调器之类的装置相联接，并通过其传送缩略图。第3方服务提供商传送的缩微流也可参照图4的构成。
结果，DTV或PVR系统对第3方服务提供商传送的缩微流中所包含的节目标识(program ID)和相当于电视台传送或已经录制的节目的数据广播流进行匹配，并对所传送的缩略图相当于哪个节目进行匹配。
在下一阶段中，对缩微流的场面标识和电视台提供的场面标识信息进行匹配。结果，通过使从第3方服务提供商获得的缩略图和从电视台获得的节目形成一致，可实现利用缩略图的附加功能。
就本发明的缩略图广播服务过程而言，电视台和第3方服务提供商必须使用一致的节目标识和场面标识。为此，可使用以下方法在第3方服务提供商生成缩略图之前，在从电视台接收节目及场面信息后，将其作为标准生成缩略图。即，为了生成缩略图，可在从电视台获得相关节目的过程中，自然地获得节目及场面识别信息。
因而，缩略图广播服务的用户界面也可由如下阶段构成1)用户和第3服务提供商之间实现联接；2)服务提供商提供准备了缩略图的所有节目的目录；3)用户在从服务提供商提供的节目目录中选择想要的节目后，下载相关的缩微流；4)在系统内使节目和缩微流一致；5)以后，在构成OSD或其它节目说明界面时，可使用所下载的缩略图。
即，服务提供商传送缩微流，电视台则在数据广播中附加上场面识别信息进行传送或传送不包含缩略图的缩微流。此时，DTV或PVR系统如图5所示，使用节目标识和场面标识信息使缩略图和实际的广播节目一致。结果，DTV或PVR系统用户可从电视台或第3方服务提供商处获得缩略图，从而获得对相关节目的更为多元化的服务，并且可以获得对相关节目的简约信息。
因而，本发明适用于与要求对在数字TV及PVR之类的广播接收及录像装置中接收及储存的广播节目或多媒体流，进行内容缩略、执行预览功能、生成节目的代表图像及传送多媒体数据的关联信息的广播服务及与之相应的装置有关的应用领域等，可向用户有效地提供缩略图。
通过以上说明的内容，该领域的专业技术人员应认识到，可以在不脱离本发明的技术思想的范围之内进行多种多样的变动及修改。
本发明的技术范围并不限于实施例中所记录的内容，而由专利申请范围来确定。
权利要求
1.一种缩略图服务方法，包含当电视台或服务提供商处传送广播节目或内容，对其进行解调并在屏幕上进行显示或储存到存储媒介中的广播接收装置，其特征为对于电视台或服务提供商中至少一家广播的特定节目，按场面单位生成缩略图的缩略图生成阶段；将在上述阶段中生成的缩略图，通过传送线路向广播接收装置传送的缩略图传送阶段；对在上述阶段中所传送的缩略图进行解调并在屏幕上进行显示或储存到存储媒介中的缩略图接收阶段。
2.如权利要求1所述的缩略图服务方法，其特征为，在由上述电视台生成缩略图时，上述缩略图生成阶段在将缩略图编码成一个独立的缩微流信息包之后，将其在传送流中进行多路传输。
3.如权利要求2述的缩略图服务方法，其特征为，生成上述缩略图的各个场面由许多张图像帧和相关区间的音频、缩略图及附加数据流构成。
4.如权利要求2述的缩略图服务方法，其特征为，上述一个缩微流信息包包括具有唯一的值，使其能够在上述传送流中分离缩微流的缩略图开始编码字段；表示当前所传送的缩微流包含广播节目的节目标识字段；相当于上述节目标识的当前节目中、表示所传送的缩略图包含在哪个场面中的场面标识字段；包含由电视台生成的缩略图的数据字段。
全文摘要
本发明涉及到数字广播中，关于用于提供节目的有效简要信息的广播服务方法。特别是对于所广播的节目，在电视台或第3方服务提供商对该节目按场面单位生成缩略图后，以运用数字广播或专用线路的传送方法将缩略图向DTV或PVR之类的广播接收装置传送，具有以下效果可以使DTV或PVR装置对用户接收或储存的广播节目实现多种多样的应用服务，并且可在DTV或PVR装置中减少为抽取缩略图而所需的软件及硬件上的负担。同时，在提供优质服务的同时减少DTV及PVR的价格负担。
文档编号H04N7/08GK1744700SQ20041005424
公开日2006年3月8日 申请日期2004年9月2日 优先权日2004年9月2日
发明者徐琮烈 申请人:上海乐金广电电子有限公司