专利名称：视频信号处理装置、再现装置及记录装置的制作方法
技术领域：
本发明涉及视频信号处理装置、视频信号再现装置及视频信号记录装置，尤其有关可适当管理记录在信息记录媒体上的视频信号的保密信息的视频信号处理装置、视频信号再现装置及视频信号记录装置。
背景技术：
近年来，作为可从记录再现装置中拆卸的磁盘型信息记录媒体，已连续提出了各种光盘。这些可记录光盘被提案为几G字节的大容量媒体，故作为记录数字视频(动态图像)信号的媒体的期望很高。
数字压缩数字视频信号的编码方式的其中之一是MPEG(MovingPicture Experts Group(运动图像专家组))2方式。MPEG2也应用在将数字视频信号记录到信息记录媒体的情况。例如，在将模拟视频信号记录到信息记录媒体的情况下，视频信号被编码为MPEG2方式，并被记录到信息记录媒体上来作为编码比特流。另外，在近年来开始的数字方式的TV(电视)广播中，以MPEG2方式编码的视频节目由被称为传输流的格式进行传送。在将数字广播的AV信号记录到信息记录媒体上的情况下，使用数字信号的原样记录方式，而不将传输流进行解码或重新编码。
当以数字信号格式记录在信息记录媒体上时，视频信号可以复制到其他信息记录媒体(记录媒体)上，而不使其视频信号全部恶化。但是，这对该视频内容的著作权者来说成为大问题。
从该观点来看，为限制视频信号的复制，可对视频信号添加表示复制世代管理信息(Copy generation mangement information)的CCI(Copy Control Information)，该复制世代管理信息为“Copy Free(可复制)”，“Copy Once(只可复制一世代)”，“No More Copy(该世代以上不可复制)”，“Copy Prohibited(禁止复制)”。作为这样的信号，例如，存在CGMS(Copy Generation Mangement System)信号。将用于模拟接口的该信号称为CGMS-A，用于数字接口的该信号称为CGMS-D。模拟用的CGMS-A，由于将ID叠加到视频信号的VBI(垂直消隐期间)，故也称为VBID。将VBID标准化为EIAJ CP-1204。
另外，为了在传输流中嵌入CCI进行传送，已知编码具有该信息描述符的方法。作为该类型的描述符，存在DTLA(DigitalTransmission Licensing Administrator)规定的DTCP描述符和ARIB规定的在日本的BS数字广播中使用的digital_copy_control_descriptor。最近，为进一步强制地施加复制控制，也正在研究将作为水印的复制世代管理信息嵌入到基带视频信号和MPEG视频流的方法。现在，水印的标准化活动正在推进，已提出千年方式和星系方式。
在将视频信号记录到信息记录媒体的情况下，要求根据输入信号的CCI施加正确的记录限制。一般，只在输入信号的CCI是“Copy Free(可自由复制)”或“Copy Once(只可复制一世代)”的其中之一情况下，用户才可将视频信号记录到信息记录媒体上。在输入信号的CCI是“Copy Once(只可复制一世代)”的情况下，信息记录媒体上的视频信号的CCI必须更新为“No More Copy(该世代以上不可复制)”。
但是，为了可容易地理解记录在信息记录媒体上的视频信号内容，代表其内容的静止图像或抽出其内容的特定场景作为静止图像的图像与视频信号分开记录。这些静止图像被称为小型图(thumbnail)图像。例如，可在从记录在信息记录媒体上的视频信号中用户选择开始再现位置用的菜单屏幕上，以显示小型像一览表的形式，以用户容易理解的形式提供接口。小型像可以是从所记录的视频信号中选出的图像，或者，也可以是从个人计算机或数字静态相机取到信息记录媒体上的图像。
从前，在从记录视频信号和其小型像的信息记录媒体上将预定的视频信号复制到其他信息记录媒体的情况下，多数只可复制视频信号。但是，在这种复制情况下，其小型像也可和视频信号一起复制，这对用户来说很方便。这是因为，由此，不需要用户重新将小型像添加到复制后的视频信号的程序。
这时的问题是小型像著作权的管理。例如，考虑流行电影或电视的特征图像多数具有著作权的情况。对于著作权者而言，不正当复制这些图像是不好的。但是，从前，由于没有考虑小型像的复制限制，所以，当创建上述这样的与视频信号一起复制其小型像的应用时，不能判断是否可复制小型像，故存在不能防止小型像的不正当复制的课题。
发明内容
鉴于这样的状况，本发明的目的是，适当地管理记录在信息记录媒体上的小型像的内容保护信息(Content ProtectionInformation，例如CCI)来简单且可靠地防止小型像的不正当复制。
本发明的第1视频信号处理装置，其特征在于，具备生成单元，生成对应于输入视频信号的小型像；第1控制单元，生成对应于通过生成单元生成的小型像的内容保护信息；记录单元，在记录通过生成单元生成的小型像、及通过第1控制单元生成的内容保护信息的同时，将视频信号记录到信息记录媒体上。
所述内容保护信息可包含复制世代管理信息。
所述内容保护信息可包含模拟复制保护控制信息。
所述生成单元可使用视频信号中的图像生成小型像，第1控制单元可根据包含在视频信号中的图像内容保护信息，生成小型像的内容保护信息。
所述生成单元可使用视频信号中的图像生成小型像，第1控制单元可生成包含表示是否需要参照视频信号的内容保护信息的识别符的内容保护信息。
所述记录单元可以预定大小的块单位来记录小型像和内容保护信息。
所述记录单元可将小型像和对应于该小型像的内容保护信息设为一对块化后进行记录。
所述记录单元可以JPEG方式压缩小型像后进行记录。
上述视频信号处理装置可进一步具备再现单元，再现记录在所述信息记录媒体上的信号；分离单元，从通过再现单元再现的信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；第2控制单元，根据通过分离单元分离出的内容保护信息，限制小型像的输出。
所述内容保护信息可包含模拟复制保护控制信号，第2控制单元可根据模拟复制保护控制信号进行控制，使得复制保护信号叠加到输出信号上。
所述第2控制单元还可根据视频信号的内容保护信息限制小型像的再现。
在将小型像复制到其他信息记录媒体的情况下，所述第2控制单元可根据添加到小型像后进行记录的内容保护信息，限制小型像的复制。
所述内容保护信息可包含复制世代管理信息，第2控制单元可限制小型像的复制，从而保护小型像的复制世代管理信息的限制。
所述第2控制单元还可根据视频信号的内容保护信息，限制小型像的复制。
本发明的第1视频信号处理方法，其特征在于，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过生成步骤的处理生成的小型像的内容保护信息；记录步骤，在记录通过生成步骤的处理生成的小型像、及通过控制步骤的处理生成的内容保护信息的同时，将视频信号记录到信息记录媒体上。
本发明的第1记录媒体程序，其特征在于，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过生成步骤的处理生成的小型像的内容保护信息；记录步骤，在记录通过生成步骤的处理生成的小型像、及通过控制步骤的处理生成的内容保护信息的同时，将视频信号记录到信息记录媒体上。
本发明的第1程序由计算机执行，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过生成步骤的处理生成的小型像的内容保护信息；记录步骤，在记录通过生成步骤的处理生成的小型像、及通过控制步骤的处理生成的内容保护信息的同时，将视频信号记录到信息记录媒体上。
本发明的第2视频信号处理装置，其特征在于，具备再现单元，再现记录在信息记录媒体上的信号；分离单元，从通过再现单元再现的信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制单元，根据通过分离单元分离出的内容保护信息，控制小型像的输出。
所述内容保护信息可包含模拟复制保护控制信号，控制单元可根据模拟复制保护控制信号进行控制，使得复制保护信号叠加到输出信号上。
所述控制单元还可根据视频信号的内容保护信息，限制小型像的再现。
在将小型像复制到其他信息记录媒体的情况下，所述控制单元可根据添加到小型像后进行记录的内容保护信息，限制小型像的复制。
所述内容保护信息可包含复制世代管理信息，控制单元可限制小型像的复制，从而保护小型像的复制世代管理信息的限制。
所述控制单元还可根据视频信号的内容保护信息，限制小型像的复制。
本发明的第2视频信号处理方法，其特征在于，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过再现步骤的处理再现的信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过分离步骤的处理分离出的内容保护信息，控制小型像的输出。
本发明的第2记录媒体的程序，其特征在于，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过再现步骤的处理再现的信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过分离步骤的处理分离出的内容保护信息，控制小型像的输出。
本发明的第2程序由计算机执行，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过再现步骤的处理再现的信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过分离步骤的处理分离出的内容保护信息，控制小型像的输出。
可记录视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息。
所述内容保护信息可包含复制世代管理信息。
所述内容保护信息可包含模拟复制保护控制信号。
可以预定大小的块单位来记录所述小型像和内容保护信息。
可将小型像和对应于该小型像的内容保护信息设为一对块化后进行记录。
可以JPEG方式压缩所述小型像后进行记录。
在本发明的第1视频信号处理装置及方法、记录媒体和程序中，生成对应于所取得的视频信号的小型像，并进一步生成对应于所生成的小型像的内容保护信息。小型像添加内容保护信息后记录到信息记录媒体上。
在本发明的第2视频信息处理装置及方法、记录媒体和程序中，从从信息记录媒体再现的信号中，抽出视频信号、对应于视频信号的小型像、及添加到小型像的内容保护信息，根据抽出的内容保护信息，限制小型像的输出。
在本发明的信息记录媒体中，记录视频信号、对应于视频信号的小型像及对应于小型像的内容保护信息。
本发明的视频信号记录装置，其特征在于，具备检测部，从输入视频信号中检测出内容保护信息；编码部，生成对应于视频信号的小型像信号；生成部，根据通过检测部检测出的内容保护信息，生成通过编码部生成的小型像信号的复制控制信息；记录部，将视频信号、通过编码部生成的小型像信号、及通过生成部生成的复制控制信息记录到信息记录媒体上。
上述视频信号记录装置可进一步具备加密部，加密小型像信号，在所述记录部中，可使由加密部加密后的小型像信号记录到信息记录媒体上。
在所述加密部中还可加密复制控制信息，在所述记录部中，可使通过加密部加密的复制控制信息记录到信息记录媒体上。
本发明的视频信号记录方法，其特征在于从输入的视频信号中检测出内容保护信息；生成对应于视频信号的小型像信号；根据检测出的内容保护信息，生成小型像信号的复制控制信息；将视频信号、小型像信号及复制控制信息记录到信息记录媒体上。
记录在本发明的第3记录媒体上的程序，其特征在于，包含检测步骤，从输入视频信号中检测出内容保护信息；第1生成步骤，生成对应于视频信号的小型像信号；第2生成步骤，根据通过检测步骤的处理检测出的内容保护信息，生成小型像信号的复制控制信息；记录控制步骤，控制视频信号、通过第1生成步骤的处理生成的小型像信号、及通过第2生成步骤的处理生成的复制控制信息记录到信息记录媒体上。
本发明的第3程序，其特征在于，包含检测步骤，从输入视频信号中检测出内容保护信息；第1生成步骤，生成对应于视频信号的小型像信号；第2生成步骤，根据通过检测步骤的处理检测出的内容保护信息，生成小型像信号的复制控制信息；记录控制步骤，控制视频信号、通过第1生成步骤的处理生成的小型像信号、及通过第2生成步骤的处理生成的复制控制信息记录到信息记录媒体上。
本发明的视频再现装置，其特征在于，具备再现部，从信息记录媒体再现视频信号、对应于视频信号的小型像信号及小型像信号的复制控制信息；输出部，根据通过再现部再现的复制控制信息，将复制控制信号添加到小型像信号后输出。
上述视频再现装置可进一步具备加密解码部，解码加密后的小型像信号；并可加密通过所述再现部再现的小型像信号。
可加密通过所述再现部再现的复制控制信息，在所述加密解码部中可进一步解码加密后的复制控制信息。
本发明的视频信号再现方法，其特征在于从信息记录媒体再现视频信号、对应于视频信号的小型像信号、及小型像信号的复制控制信息；根据再现的复制控制信息，将复制控制信号添加到小型像信号后输出。
记录在本发明的第4记录媒体的程序，其特征在于，包含再现控制步骤，控制从信息记录媒体再现视频信号、对应于视频信号的小型像信号、及小型像信号的复制控制信息；输出控制步骤，根据通过再现控制步骤的处理控制再现的复制控制信息，控制将复制控制信号添加到小型像信号后的信息的输出。
本发明的第4程序，其特征在于，包含再现控制步骤，控制从信息记录媒体再现视频信号、对应于视频信号的小型像信号、及小型像信号的复制控制信息；输出控制步骤，根据通过再现控制步骤的处理控制再现的复制控制信息，控制将复制控制信号添加到小型像信号后的信息的输出。
在本发明的视频记录装置及方法与第3程序中，从输入视频信号中检测出内容保护信息，并生成对应于视频信号的小型像信号，根据所检测出的内容保护信息，生成小型像信号的复制控制信息，将视频信号、小型像信号及复制控制信息记录到信息记录媒体上。
在本发明的视频再现装置及方法与第4程序中，从信息记录媒体再现视频信号、对应于视频信号的小型像信号及小型像信号的复制控制信息，根据再现的复制控制信息，将复制控制信号添加到小型像信号后输出。
图1是说明应用格式结构的图；图2是说明播放列表(PlayList)上的标记和剪辑(Clip)上的标记的图；图3是说明菜单小型图和标记小型图的图；图4是说明代表磁盘内容的小型图的图；图5是说明添加到播放列表上的标记的图；图6是说明存储小型图的文件的图；图7是说明添加到剪辑上的标记的图；图8是说明添加到磁盘的目录结构的图；图9是说明DVR MPEG2传输流结构的图；图10是表示UIAppInfpoDVR句法的图；图11是表示PlayListMark句法的图；图12是表示ClipMark句法的图；图13是表示小型图信息文件句法的图；图14是表示小型像文件句法的图；图15是说明将小型像数据存储到tn_block()上的方法的图；图16是表示tn_block句法的图；图17是表示CP_Info_thumbnail()句法的图；图18是说明CCI_thumbnail的图；图19是说明APS_thumbnail的图；图20是说明flag_need_AVstreamInfo的图；图21是表示其他小型图信息文件句法的图；
图22是表示记录装置结构的框图；图23是说明复制控制处理的图；图24是说明其他复制控制处理的图；图25是说明AV流标记点图像的小型图的生成处理流程图；图26是表示记录装置的其他结构例子的框图；图27是说明由用户指定的图像的小型图的生成处理流程图；图28是表示再现装置的结构例子的框图；图29是说明再现AV流的代表图像或特征点图像的小型图的处理流程图；图30是表示在将数据库文件从再现装置复制到记录装置的情况下的结构框图；图31是说明小型图文件的复制源处理流程图。
具体实施例方式
图1是表示在适用本发明的信息记录再现系统上使用的信息记录媒体上的应用格式的简单结构。为管理AV(视听)流，该格式具有PlayList(播放列表)和Clip(剪辑)两层。并且，Volume Information(卷信息)管理磁盘内的全部Clip和PlayList。
将一个AV流和其附属信息对认为是一个对象，将其称为Clip。AV流文件被称为Clip AV流文件，其附属信息被称为Clip Informationfile(剪辑信息文件)。
一个Clip AV流文件存储将MPEG2传输流配置到由DVR(DigitalVideo Recorder)应用格式规定的结构中的数据。
一般，在计算机等上所用的数据文件，虽然被处理为字节列，但Clip AV流文件的内容在时间轴上被展开，PlayList主要由时间戳来指定Clip中的访问点。当PlayList由时间戳来指示到Clip中的访问点时，由于Clip Information file在Clip AV流文件中找出了应该开始流解码的地址信息，所以是有用的。
导入PlayList，其目的是从Clip中选择用户想要观看的再现区间并可简单地进行编辑。一个PlayList是Clip中的再现区间的集合。某个Clip中的一个再现区间被称为PlayItem，将其用时间轴上的IN点和OUT点对表示。因而，PlayList是PlayItem的集合。
在PlayList中存在两种类型。一种是Real PlayList(实播放列表)，另一种是Virtual PlayList(虚播放列表)。
RealPlayList被认为是共享其参照的Clip流部分。即RealPlayList在磁盘中占有相当于其参照的Clip流部分的数据量。在AV流被记录为新Clip的情况下，自动生成参照可再现其Clip全部范围的Real PlayList。在删去一部分Real PlayList再现范围的情况下，也删去其参照的部分Clip流的数据。
Virtual PlayList被认为不共享Clip的数据。即使变更或删去Virtual PlayList，Clip也不发生任何变化。
在下面的说明中，总称Real PlayList和Virtual PlayList而将其单称为PlayList。
图2是说明PlayList上的标记和Clip上的标记的图。标记用于指定Clip及PlayList中的高亮区和特征时间。
(1)添加到Clip的标记指定来源于AV流内容的特征场景。该标记，例如，由场景变换点(场景起始点)等构成。当再现PlayList时，可参照该PlayList所参照的Clip的标记后使用。
(2)添加到PlayList的标记主要由用户设置。该标记，例如，由通过用户在任意点所指定的预定标记和表示上次再现终止点的重新开始标记等构成。
(3)通过将表示标记时间的时间戳追加到标记列表上来将标记设置到Clip或PlayList上。另外，删除标记就是从标记列表中去除该标记的时间戳。因此，标记的设置和删除，也不会使AV流发生任何变化。
小型图是添加在Volume(磁盘)、PlayList或Clip上的静止图像。对于小型图而言，具有如图3所示的两种类型。一种是作为表示内容的代表图像的小型图(菜单小型图)。它主要在用户通过操作鼠标选择想要观看的内容用的菜单屏幕上使用。另一种是表示标记指示的场景的图像(标记小型图)。
Volume和各PlayList可具有代表图像。当作为信息记录媒体的磁盘插入播放器时，在最初显示表示磁盘内容的静止图像等情况下，使用Volume代表图像(参照图4的Menu Thumbnail)。所谓PlayList的代表图像被设定为在选择PlayList的菜单屏幕中，被使用为表示PlayList的内容用的静止图像(参照图5的Menu Thumbnail)。虽然PlayList的代表图像的最简单的实现方法是将PlayList的最初图像设定为小型图，但是再现时间0的前端图像在表示内容上不一定是最佳图像。这是可将任意图像确定为PlayList的小型图的目的的原因。
虽然将上面两种类型的小型图称为菜单小型图，但是，由于要频繁显示菜单小型图，故要求可从磁盘快速读出菜单小型图。为满足该要求，将全部菜单小型图存储到一个文件中是有效的(参照图6的MenuThumbnail file)。菜单小型图可以是从个人计算机(PC)或数字静态相机(DSC)等中取得的图像(图4和图5)，而不必只是从卷内的动态图像抽出的图像。
另一方面，必需Clip和PlayList将多个标记添加到任意位置上，以便可从标记点图像容易看到标记位置的内容。将表示这样的标记点的图像称作标记小型图(Mark Thumbnail)(参照图5的Mark Thumbnail及图7的Mark Thumbnail)。因此，在这种情况下，虽然小型图源可为从外部取得的图像，但主要是从这抽出的标记点图像。不同于菜单小型图，由于标记小型图在表示PlayList的细节时使用的子菜单等上被使用，所以不要求短的访问时间。因此，每次需要小型图时，即使播放器打开文件、读取一部分文件需要花费一点时间，但也不存在问题。另外，为减少存在于卷内的文件数，象卷小型图和PlayList的菜单小型图被存储到一个菜单小型图文件上一样，也可将全部标记小型图存储到一个文件(标记小型图)上(参照图6的Mark Thumbnailfile)。虽然PlayList可具有一个菜单小型图和多个标记小型图，但是由于Clip不需要用户直接进行选择(通常，经PlayList路径指定)，故不具有菜单小型图。
DVR磁盘上所需的目录如下包含“DVR”目录的root目录。包含“PLAYLIST”目录、“CLIPINF”目录、“STREAM”目录及“DATA”目录的“DVR”目录。图8表示DVR磁盘上的目录结构的例子。
root目录包含一个目录。
“DVR”—由DVR应用格式规定的全部文件和目录必须存储到该目录下。
“DVR”目录存储下面所示文件。
“info.dvr”—存储在DVR目录下生成的应用层的全部信息的文件。在DVR目录下必须只有一个info.dvr。将文件名固定为info.dvr。
“menu.tidx”和“menu.tdat”—这两个文件存储与菜单小型像相关的信息。menu.tidx是存储菜单小型像头信息的“小型图信息文件”。menu.tdat是存储菜单小型像的图像数据的“小型像文件”。
“mark.tidx”和“mark.tdat”—这两个文件存储与标记小型像有关的信息。mark.tidx是存储标记小型像头信息的“小型图信息文件”。mark.tdat是存储标记小型像的图像数据的“小型像文件”。
“DVR”目录包含3个目录。
“PLAYLIST”—Real PlayList和Virtual PlayList(图1)的数据库文件必须被放置到该目录下。
“CLIPINF”—Clip(图1)的数据库必须被放置到该目录下。
“STREAM”—AV流文件(图1)必须被放置到该目录下。
“PLAYLIST”目录存储两种类型的PlayList文件，它们是RealPlayList和Virtual PlayList。
“xxxxx.rpls”—该文件存储与一个Real PlayList相关的信息。对每个Real PlayList生成一个文件。文件名为“xxxxx.rpls”。这里，“xxxxx”是5个从0到9的数字。文件扩展名必须为“rpls”。
“yyyyy.vpls”—该文件存储与一个Virtual PlayList相关的信息。对每个Virtual PlayList生成一个文件。文件名为“yyyyy.vpls”。这里，“yyyyy”是5个从0到9的数字。文件扩展名必须为“vpls”。
“CLIPINF”目录对应于各个AV流文件来存储一个文件。
“zzzzz.clpi”—该文件是对应于一个AV流文件(Clip AV流文件或Bridge-Clip AV流文件)的Clip Information file。文件名是“zzzzz.clpi”，这里，“zzzzz”是5个从0到9的数字。文件扩展名必须为“clpi”。
“STREAM”目录存储AV流文件。
“zzzzz.m2ts”—该文件是通过DVR系统处理的AV流文件。它为Clip AV流文件或Bridge-Clip AV流文件。文件名是“zzzzz.m2ts”，这里，“zzzzz”是5个从0到9的数字。文件扩展名必须为“m2ts”。
一个AV流文件和其对应的Clip information file必须使用相同的5个数字“zzzzz”。
说明AV流文件的结构。AV流文件必须具有图9所示的DVR MPEG2传输流结构。DVR MPEG2传输流具有下述特征。
(1)DVR MPEG2传输流由整数个Aligned unit构成。
(2)Aligned unit的大小为6144字节(2048×3字节)。
(3)Aligned unit从源分组的第1字节开始。
(4)源分组长度为192字节。一个源分组由TP_extra_header和传输分组组成。TP_extra_header长度为4字节，传输分组长度为188字节。
(5)一个Aligned unit由32个源分组构成。
(6)DVR MPEG2传输流中的最后Aligned unit也由32个源分组构成。
(7)最后的Aligned unit在未由输入传输流的传输分组完全充满的情况下，必须用具有空分组(PID＝0×1FFF的传输分组)的源分组充满剩余的字节区域。
TP_extra_header包含传输分组净荷的复制限制信息和表示传输分组到达解码器的时间的到达时间戳。
下面，说明管理AV流文件的再现信息数据库格式。
图10是表示作为存储到info.dvr中的一部分数据的UIAppInfpoDVR的句法。ref_to_menu_thumbnail_index表示代表Volume的小型像信息。在ref_to_menu_thumbnail_index不为0xFFFF值的情况下，将小型像添加到Volume上，该小型像被存储到menu.tdat文件中。用在menu.tidx文件中的thumbnail_index值来参照该图像(参照图13在后叙述)。在ref_to_menu_thumbnail_index字段为0Xffff的情况下，表示不将小型像添加到Volume上。
图11表示作为存储到PlayList文件上的一部分数据的PlayLisrMark的句法。PlayLisrMark存储添加到PlayList的标记信息。进而，PlayList的代表图像信息也包含在PlayLisrMark上。
number_of_PlayList_marks表示存储在PlayLisrMark中的标记的条目数。
mark_type表示标记的类型。
ref_to_PlayItem_id表示指定放置标记的PlayItem的位置的PlayItem_id值。
mark_time_stamp存储表示指定该标记的点的时间戳。
ref_to_menu_thumbnail_index表示示出PlayList代表图像的小型像信息。在ref_to_menu_thumbnail_index字段不为0xFFFF值的情况下，存在表示PlayList代表图像的小型像，并且该小型像被存储到menu.tdat文件中。用menu.tidx文件中的thumbnail_index值参照该图像(参照图13在后叙述)。在ref_to_menu_thumbnail_index字段为0xFFFF的情况下表示表示PlayList代表图像的小型像不存在。
ref_to_mark_thumbnail_index表示添加到标记的小型像的信息。在ref_to_mark_thumbnail_index字段不为0xFFFF值的情况下，将小型像添加到该标记中，并将该小型像存储到mark.tdat文件中。用mark.tidx文件中的thumbnail_index值参照该图像(参照图13在后叙述)。在ref_to_mark_thumbnail_index字段为0xFFFF的情况下表示不将小型像添加到该标记中。
图12是表示作为存储到Clip Information文件上的一部分数据的ClipMark的句法。ClipMark存储添加到Clip的标记信息。
number_of_Clip_marks表示存储在ClipMark中的标记的条目数。
mark_type表示标记类型。
ref_to_STC_id是指定放置mark_time_stamp的Clip的系统时间基准的时间轴信息。
mark_time_stamp将放映时间戳作为基准来表示指定Clip AV流中标记的点。
ref_to_mark_thumbnail_index表示添加到标记的小型像信息。在ref_to_mark_thumbnail_index字段不为0xFFFF值的情况下，将小型像添加到该标记中，并将该小型像存储到mark.tdat文件中。用mark.tidx文件中的thumbnail_index值参照该图像(参照图13在后叙述)。在ref_to_mark_thumbnail_index字段为0xFFFF的情况下表示不将小型像添加到该标记中。
下面，说明存储有关小型图的信息文件内容。
“menu.tidx”和“menu.tdat”(图8)存储菜单小型图，即代表Volume的一个图像及代表每个PlayList的一个图像的信息。全部菜单小型图的头信息集中到一个menu.tidx上管理。全部菜单小型图的图像数据集中到一个menu.tdat上管理。
“mark.tidx”和“mark.tdat”(图8)存储标记小型图，即与由标记点所指定的图像有关的信息。添加到Volume中的全部Clip及PlayList上的全部标记小型图的头信息集中到一个mark.tidx上管理。全部标记小型图的图像数据集中到一个mark.tdat上管理。
小型图的图像数据，例如，是将图像以JPEG进行编码后的数据。
说明这4个文件的句法和语义。
“menu.tidx”和“menu.tdat”具有相同的句法结构。图13表示“menu.tidx”和“mark.tidx”的句法结构。
number_of_thumbnails在menu.tidx情况下是存储到menu.tdat的小型像数，在mark.tidx的情况下是存储到mark.tdat的小型像数。
tn_block_size在menu.tidx情况下表示menu.tdat中一个tn_block大小，在mark.tidx情况下表示mark.tdat中一个tn_block大小。该大小以1024字节为单位。例如tn_block_size＝16表示一个tn_block的大小是16×1024字节。一个小型像必须存储在一个tn_block中。
number_of_tn_blocks在menu.tidx情况下表示位于menu.tdat中的tn_block数，在mark.tidx情况下表示位于mark.tdat中的tn_block数。
thumbnail_index表示跟随该thumbnail_index字段的小型图信息的索引号。作为thumbnail_index，不能使用0xFFFF值。在menu.tidx的情况下，根据UIAppInfoVolume()，PlayListMark()中的ref_to_menu_thumbnail_index参照thumbnail_index。在mark.tidx的情况下，根据PlayListMark()及ClipMark()中的ref_to_mark_thumbnail_index参照thumbnail_index。
ref_to_tn_block_id参照menu.tdat/mark.tdat句法中的tn_block_id值。在menu.tidx的情况下，ref_to_tn_block_id表示menu.tdat中的一个tn_block，该tn_block存储由thumbnail_index指定的小型像。在mark.tidx的情况下，ref_to_tn_block_id表示mark.tdat中的一个tn_block，该tn_block存储由thumbnail_index指定的小型像。
picture_byte_size[ref_to_tn_block_id]以字节单位来表示具有thumbnail_index的索引号的小型像的数据长度。picture_byte_size必须在(1024×tn_block_size-N1)字节以下(对N1，将参照图16在后叙述)。即记录装置必须编码，使得将一个编码小型像的数据长度变为(1024×tn_block_size-N1)字节以下。
horizontal_picture_size[ref_to_tn_block_id]表示具有thumbna il_index索引号的小型像的水平方向的象素数。
vertical_picture_size[ref_to_tn_block_id]表示具有thumbnail_index索引号的小型像的垂直方向的象素数。
图14表示“menu.tdat”和“mark.tdat”的句法结构。“menu.tdat”和“mark.tdat”具有该图的句法结构。
tn_block(tn_block_id)表示由在tn_block排列中的tn_block_id变量指示的一个tn_block。在menu.tdat的情况下，根据menu.tidx中的ref_to_tn_block_id参照tn_block_id值。在mark.tdat的情况下，根据mark.tidx中的ref_to_tn_block_id参照tn_block_id值。
在menu.tdat的情况下，一个tn_block的大小由menu.tdat中的tn_block_size表示。mark.tdat的情况下，一个tn_block的大小由ma rk.tda t中的tn_block_size表示。
图15表示tn_block的使用方法的例子。由于频繁地追加、删除小型图，所以必须快速容易地执行追加操作和部分删除的操作。因为该原因，menu.tdat和mark.tdat具有块结构。一个小型像被存储到一个tn_block中。在图15的例子中，小型像a、b、c分别被存储到tn_block_id＝0，1，3的tn_block中。
在menu.tdat和mark.tdat的tn_block列中，也可以存在没有使用的tn_block(在图15的例子中，tn_block_id＝2的tn_block)。例如，在删除某一小型图的情况下，删除登记在小型图信息文件中的thumbail_index，而小型像文件不发生任何变更时，在tn_block列中，可具有没有使用的tn_block。
图16表示tn_block(tn_block_id)的句法。
thumbnail_picture[tn_block_id]是存储通过tn_block_id值指定的一个小型像区域。
在menu.tdat的情况下，根据menu.tidx中的ref_to_tn_block_id参照tn_block_id值。在mark.tdat的情况下，根据mark.tidx中的ref_to_tn_block_id参照tn_block_id值。
小型像的第1字节必须与thumbnail_picture[tn_block_id]的第1字节一致。小型像的编码字节大小等于pictute_byte_size[tn_block_id]。
CP_Info_thumbnail()是表示存储在thumbnail_picture[tn_block_id]中的小型像的内容保护信息的N1字节信息。关于内容保护信息，与图22的记录装置的处理有关，将在后叙述。
padding_byte是具有任意值的1字节值。计算NP值，使其满足下面的算式。
NP＝tn_block_size×1024-picture_byte_size[tn_block_id]-N1图17表示CP_Info_thumbnail()的句法。
CCI_thumbnail表示小型像的复制世代管理信息(copygeneration management information)。值的意义示于图18。“00”表示copy free、“01”表示no more copy、“10”表示copy once、“11”表示copy prohibited。
APS_thumbnail表示模拟视频输出小型像时的模拟复制保护信息。值的意义示于图19。“00”至“11”的各个APS定义记载在DefaultSettings of Macrovision Anti-taping Process for DVD Products，Revision 1.0，1997.7.5。2L/4L色条只可适用于NTSC的模拟输出情况。
在由Clip AV流中的图像生成小型像情况下，作为该小型像的内容保护信息，flag_need_AVstreamInfo表示是否需要参照Clip AV流中的内容保护信息。该值的意义示于图20。分别为“1”表示“有必要”、“0”表示“没有必要”。
作为除CCI_thumbnail，APS_thumbnail之外的内容保护信息的具体例子，将来，用DTLA将信息追加到DTCP_descriptor上。在2001年7月的现在，虽然DTCP_descriptor只具有CCI和APS信息，但是，将来在DTLA将新的内容保护信息导入到视频信号的情况下，即使对使用包含在该视频信号中的图像而生成的小型像，也可能需要适用该新的内容保护信息。在这样的情况下，将该flag_need_AvstreamInfo设为1。值为1时，需要将对与该小型像关联的标记的mark_time_stamp指示的Clip AV流中的图像内容保护信息(DTCP descriptor等)参照为该小型图的内容保护信息。
所谓除CCI、APS之外的内容保护信息是诸如模拟再现视频内容的情况下的分辨率限制信息、可复制视频内容的期限信息等。
Integrity_Check_Vaule是表示不能窜改CP_Info_thumbnail()内容的符号。这是将从CP_Info_thumbnail()的第1字节开始到Intergrity_Check_Vaule的前一字节的数据作为输入，以预定的加密算法进行计算的符号。该加密算法可以使用诸如记载在ISO/IEC9797(Information technology-Security techniques-Data integritymechanism using a cryptographic check function employing a blockcipher algorithm)的算法。
如即使由怀有恶意的用户窜改CP_Info_thumbnail()内容，记录装置也可通过检查Integrity_Check_Vaule值，检测出窜改了CP_Info_thumbnail()。如果检测出窜改了CP_Info_thumbnail()，由于CP_Info_thumbnail()已经不正确，所以记录装置不能再现具有CP_Info_thumbnail()的小型图。或者，为了不窜改CP_Info_thumbnail()内容，也可以将menu.tdat文件及mark.tdat文件全部加扰。
如图15所示，tn_block()的句法说明CP_Info_thumbnail()变为连接到thumbnail_picture[tn_block_id]后形式的理由。用这种形式这是因为可以随机化在小型像文件(menu.tdat/mark.tdat)中CP_Info_thumbnail()的起始位置。如果将CP_Info_thumbnail()配置到thumbnail_picture[tn_block_id]前时，CP_Info_thumbnail()将在小型像文件中以tn_block_size单位有规则出现。如果CP_Info_thumbnail()被配置到thumbnail_picture[tn_block_id]后，由于thumbnail_picture[tn_block_id]的大小随小型像的大小变化，故可随机化CP_Info_thumbnail()的起始位置。这达到了很难从小型图象文件中取出CP_Info_thumbnail()内容的效果。
另外，如图21所示，也可以将CP_Info_thumbnail()存储到menu.tidx/mark.tidx文件中。
下面，图22表示在记录AV流的同时，将该AV流的代表图像和标记点图像编码为小型图后进行记录的记录装置框图。
最先说明记录自编码来自端子12、10的视频、音频输入的AV流的情况。微显示(マクロビジョンゲ)(商标)检测部13以预定的方法检测出输入视频的模拟复制保护信号(APS)后进行视频信号的记录限制。只在输入视频信号中不包含APS的情况下，可记录该视频信号。因此，在可记录视频信号的情况下，其APS是自由复制(00)。
在输入视频信号不包含APS的情况下，微显示检测部13将输入视频提供给CGMS检测.更新部14。CGMS检测.更新部14通过预定方法分析出输入视频的CGMS(CGMS-A或CGMS-D)后将记录AV流的CCI(在图中以CCI_o表示)提供给控制器21。另外，CGMS检测.更新部14将输入视频提供给WM(Water Mark)检测.更新部15。
WM检测.更新部15通过预定方法检测并分析输入视频的WaterMark(水印)后将记录的AV流的WM(在图中以WM_o表示)提供给控制器21。另外，WM检测.更新部15将输入视频提供给MPEG2 AV编码器16及视频分析部18。
MPEG2 AV编码器16将输入视频，音频信号编码后将视频流和音频流提供给多路复用.源分组化部17。
控制器21根据输入的CCI_o及WM_o由预定方法决定在到多路复用.源分组化部17的多路复用流中编码的E_CCI(Embedded CCI)值。多路复用.源分组化部17多路复用视频流和音频流后将AV流提供给加扰部(加密部)22和流分析部20。
加扰部(加密部)22以预定方法加密输入的AV流后提供给ECC编码部23。AV流在经过ECC编码部23、调制部24、驱动25的处理后，在信息记录媒体26上记录为AV流文件。
本记录装置，在记录AV流文件的同时，还记录与该文件有关的应用数据库信息(info.dvr，PlayList，Clip Information，小型图信息文件，小型像文件)。应用数据库信息通过控制器21生成。输入到控制器21的信息为来自视频分析部18的视频信号的特征信息，来自流分析部20的AV流特征信息及从端子11输入的用户指示信息。
来自视频分析部18的视频信号特征信息是记录装置自动生成的。视频分析部18分析输入视频信号的内容来生成与输入视频信号中的特征标记点图像有关的信息。例如，为输入视频信号的节目起始点、场景变换点、CM起始.结束点等标记点的图像指示信息。另外，也可将输入视频信号中的最初标记点图像作为其视频信号的代表图像(PlayList的代表图像)。
视频分析部18将指示视频信号中的标记点的图像的时间戳(标记位置)输入到控制器21。小型图编码器19将标记点图像编码为小型像后将这些小型像提供给控制器21。控制器21将标记点的时间戳、对应于标记点图像的CCI_o和WM_o及标记点图像的小型像取得关连后进行存储。另外，控制器21根据对应于标记点图像的CCI_o和WM_o，由预定方法决定上述CP_Info_thumbnail()的CCI_thumbnail值。
另外，流分析部20检测出对标记点时间戳指示的AV流中图像的内容保护信息(DCTP descriptor等)。并且，分析在内容保护信息(DCTPdescriptor等)中是否存在除CCI，APS以外的内容保护信息。在存在除CCI，APS以外的内容保护信息的情况下，设对标记点的小型像的CP_Info_thumbnail()(图17)的flag_need_AvstreamInfo＝1。或者，在上述内容保护信息中不存在除CCI，APS以外的内容保护信息的情况下，设flag_need_AvstreamInfo＝0。
图23表示在记录自编码输入视频信号的AV流的情况下，将复制控制处理进行归纳后的图。
在输入信号的CGMS或WM为“01”或“101”(no more copy)及“11”(copy prohibited)的情况下，设为不可记录输入视频信号，在“10”(copy once)的情况下，在记录输入视频信号的同时，CGMS或WM重写为“01”或“101”(no more copy)。在输入视频信号的CGMS或WM为“00”(copy free)的情况下，在记录输入视频信号的同时，CGMS或WM仍设为其原值(“00”(copy free))。
控制器21生成与存储在应用数据库信息(info.dvr，PlayListfile，Clip Information file，小型图信息文件，小型像文件)的小型图有关的信息。控制器21将应用数据库信息提供给加扰部22。加扰部22以预定方法加密输入的应用数据库信息后提供给ECC编码部23。应用数据库信息在经过ECC编码部23、调制部24、驱动25的处理后，在信息记录媒体26上记录为应用数据库文件。
下面，说明记录来自端子27的传输流(TS)输入的情况。E_CCI(Embedded CCI)分析.更新部28根据预定方法分析输入TS中编码的E_CCI(Embedded CCI)后将记录AV流的CCI(在图中以CCI_o表示)提供给控制器21。另外，E_CCI分析.更新部28将输入TS提供给WM检测.更新部29。
WM检测.更新部29通过预定方法分析输入视频的Water Mark后将记录AV流的WM(在图中以WM_o所示)提供给控制器21。另外，WM检测.更新部29将输入TS提供给多路复用.源分组化部17。多路复用.源分组化部17将输入TS变换为源分组列的流后将其提供给流分析部20和加扰部22。
加扰部(加密部)22以预定方法加扰(加密)输入AV流后提供给ECC编码部23。AV流在经过ECC编码部23、调制部24、驱动25的处理后，在信息记录媒体26上记录为AV流文件。
另外，来自端子27的输入TS输入到解码器30。解码器30解码输入TS的视频流后将视频信号提供给视频分析部18。视频分析部18、小型图编码器19的处理与上述的将来自端子12的输入视频自编码的处理情况相同。
流分析部20分析输入流中的内容保护信息(DTCP descriptor等)，并且，取出模拟复制保护信息(APS)后将其提供给控制器21。并且，将对应于输入流的标记点图像的APS和这些图像的小型像的APS_thumbnail设为同一值。
CCI_thumbnail和flag_need_AvstreamInfo的值与将上述输入视频自编码记录的情况相同，由流分析部20来决定。
图24表示记录输入TS的情况下，复制控制处理的归纳图。其内容实质上与图23所示的情况相同。
控制器21将应用数据库信息提供给加扰部22。加扰部22以预定方法加密所输入的应用数据库信息后提供给ECC编码部23。应用数据库信息在经过ECC编码部23、调制部24、驱动25的处理后，在信息记录媒体26上记录为应用数据库文件。
图25表示在记录AV流的同时，将该AV流的代表图像和特征点图像编码为小型图后进行记录处理的流程图。
在步骤S101中，微显示检测部13、CGMS检测更新部14、WM检测更新部15、E_CCI分析更新部28、及WM检测更新部29分析输入信号(视频信号或TS)的CCI。
在步骤S102中，MPEG2 AV编码器16及多路复用流源分组化部17将输入信号编码为AV流。
在步骤S103中，视频分析部18分析视频信号来检测标记点的图像(代表图像及特征点图像)。
在步骤S104中，控制器21取得标记点图像。
在步骤S105中，小型图编码器19将标记点图像编码为小型像。
在步骤S106中，控制器21分析位于标记点时间戳指示的AV流上的位置的内容保护信息(DTCP descriptor等)。
在步骤S107中，控制器21生成小型像的CP_Info_thumbnail()。具体的如上所述，控制器21决定CCI_thumbnail，APS_thumbnail，flag_need_AvstreamInfo值。
在步骤S108中，控制器21生成与存储在应用数据库信息中的小型图有关的信息。
在步骤S109中，加扰部22、ECC编码部23、调制部24、及驱动25将AV流和应用数据库信息记录到信息记录媒体26上。
下面，图26表示对记录AV流，添加由用户指定的图像小型图后进行记录的记录装置的框图。
通过驱动器74从信息记录媒体75读出的应用数据库经过解调部73、ECC解码部72、解扰部71的处理后输入到控制器69。控制器69生成说明信息记录媒体75记录内容的菜单屏幕后将其输出到监视器(图中未示)显示。用户通过端子61的UI输入选择想要再现的PlayList。控制器69为了再现由用户指定的PlayList，进行指示，使得将所需的AV流从信息记录媒体75读出。
通过驱动器74从信息记录媒体75读出的AV流文件经过解调部73、ECC解码部72、解扰部71的处理后输入到源解分组化.分离部66。由源解分组化.分离部66分离的视频流由MPEG2 AV解码器65解码后输出视频信号。视频信号由CGMS插入部64、微显示插入部63进行预定处理，从端子62输出视频信号后输出到监视器上进行显示。音频信号从端子70输出到扬声器(图中未示)。
用户从再现图像的视频中将想要标记的场景(例如，最喜欢的场景)通过端子61的UI输入指示给控制器69。
也可以从标记点图像生成添加到标记点后进行记录的小型像，或者也可以经过外部输入从个人计算机和数字静态相机读出到记录装置的图像生成。
在从标记点图像生成小型像的情况下，控制器69取得用户标记的图像时间戳。并且，控制器69从MPEG2 AV解码器65取得标记点图像并将该图像输入到小型图编码器67。小型图编码器67编码小型像后将其输入到控制器69。另外，源解分组化.分离部66取出位于标记点时间戳指示的AV流上的位置的内容保护信息(DTCPdescriptor等)后输入到控制器69。
控制器69分析其内容保护信息(DTCP descriptor等)后取出CCI和模拟复制保护信息(APS)。并且，将对标记点图像的小型像的CP_Info_thumbnail()的CCI_thumbnail和APS_thumbnail值分别设为与上述的CCI和APS相同的值。另外，控制器69分析在上述内容保护信息中是否存在除CCI、APS以外的内容保护信息。在存在除CCI，APS以外的内容保护信息的情况下，控制器69设对标记点小型像的CP_Info_thumbnail()的flag_need_AvstreamInfo＝1。在上述内容保护信息中不存在除CCI，APS以外的内容保护信息的情况下，控制器69设flag_need_AvstreamInfo＝0。
下面，说明由经过个人计算机或数字静态相机等外部输入路径读取到记录装置的静止图像生成添加到标记点后进行记录的小型像情况的操作。控制器69，从外部输入端子85取得静止图像。并且，内容保护信息检测部86取出输入图像的内容保护信息(CGMS，APS，DTCP descriptor等)后输入到控制器69。控制器69分析其内容保护信息，取出CCI和模拟复制保护信息(APS)。并且，控制器69将对小型像的CP_Info_thumbnail()的CCI_thumbnail，APS_thumbnail值分别设为与上述的CCI和APS相同的值。控制器69将flag_need_AvstreamInfo设为零。并且，将上述静止图像输入到小型图编码器67。小型图编码器67编码小型像后将其输入到控制器69。
下面，当可生成小型像和其内容保护信息时，控制器69生成与存储在应用数据库信息(info.dvr，PlayListfile，ClipInformation file，小型图信息文件，小型像文件)的小型图有关的信息。控制器69将应用数据库信息提供给加扰部76。加扰部76以预定方法加扰(加密)输入的应用数据库信息后提供给ECC编码部77。应用数据库信息在经过ECC编码部77、调制部78、驱动器74的处理后，记录到信息记录媒体75上来作为应用数据库文件。
图27表示对所记录的AV流，添加由用户指定的图像的小型图后进行记录的处理流程图。
在步骤S201中，当由用户指定再现PlayList时，控制器69输入该指定。
在步骤S202中，控制器69控制驱动器74从信息记录媒体75中再现所指定的PlayList的视频信号。再现信号经过解调部73、ECC解码部72、解扰部71、源解分组化分离部66、MEPG2AV解码部65、CGMS插入部64、及微显示插入部63的处理后，从端子62(视频信号)和端子70(音频信号)输出。
在步骤S203中，用户搜索想要标记的场景，在再现或暂停过程中按压标记按钮。对应于该操作的信号从端子61输入到控制器69。
在步骤8204中，控制器69在步骤S203的处理中所取出的定时点中将输出显示位置决定为标记位置。
在步骤S205中，控制器69从端子62输出信息，并对用户要求选择是将标记位置图像使用为小型图或从端子85取得使用为小型图的静止图像。用户根据该要求从端子61输入选择。在步骤S205中，控制器69根据该选择判断是否将标记位置图像使用为小型图。
在将标记位置图像使用为小型图的情况下，进入到步骤S206，控制器69从MPEG2 AV解码器65的输出取得对应于标记位置的图像后提供给小型图编码器67。
在步骤S207中，控制器69从源解分组化分离部66的输出取得标记位置AV流的内容保护信息。
另一方面，在步骤S205中，在判定为不将标记位置图像使用为小型图的情况下，控制器69进入到步骤S208，从端子85取得使用为小型图的静止图像。并且，在步骤S209中，控制器69从内容保护信息检测部86的输出取得其静止图像的内容保护信息。
经过步骤8207或步骤S209的处理后，进入到步骤S210。控制器69使小型图编码器67编码小型像。
在步骤S211中，控制器69生成小型像的CP_Info_thumbnail()。具体的，如上所述，控制器69决定CCI_thumbnail，APS_thumbnail，flag_need_AvstreamInfo值。
在步骤S212中，控制器69生成与存储在应用数据库信息中的小型图有关的信息。
在步骤S213中，与上述情况相同，控制器69将应用数据库信息记录到信息记录媒体75上。
下面，图28表示在再现AV流的同时，再现其AV流的代表图像和特征点图像的小型图的再现装置的框图。
通过驱动器74从信息记录媒体75读出的应用数据库经过解调部73、ECC解码部72、解扰部71的处理后输入到控制器69。
控制器69决定显示到视频输出的小型像。例如，决定显示某一PlayList的代表图像的小型图。
控制器69取得对再现的小型像的CP_Info_thumbnail()。在其flag_need_AvstreamInfo是1的情况下，需要从信息记录媒体75读出对与该小型像取得关连的标记的mark_time_stamp指示的Clip AV流中的图像的内容保护信息(DTCP descriptor等)。
控制器69将该小型像输入到小型图解码器80后将解码图像输入到图形图像处理部81。这里，在对该小型像的flag_need_AvstreamInfo是1的情况下，需要根据上述读出的内容保护信息，限制小型图的再现。例如，在内容保护信息具有模拟再现视频内容情况的分辨率限制信息的情况下，必须根据该信息来限制小型图的再现。来自图形图像处理部81的输出图像由图像混合部82处理后输入到CGMS插入部64。
CGMS插入部64将表示与对该小型像的CP_Info_thumbnail()的CCI_thumbnail具有同一意义的CGMS信号插入到输出图像。下面，微显示插入部63将具有表示CP_Info_thumbnail()的APS_thumbnail同一意义的模拟复制保护信号插入到输出图像中。并且，从端子62再现视频。
图29表示再现AV流的代表图像或特征点图像的小型图的再现操作流程图。
在步骤S301中，控制器69读出应用数据库信息文件。即，通过驱动器74从信息记录媒体75读出的数据经过解调部73、ECC解码部72的处理后被提供给解扰部71进行解扰。控制器69从解扰部71的输出取得应用数据库信息文件。
另外，从解扰部71输出的数据经过源解分组化分离部66、MPEG2AV解码器65、图像混合处理部82、CGMS插入部64、及微显示插入部63的处理后，从端子62和端子70输出。
在步骤S302中，控制器69根据来自端子61的用户指令，决定再现的小型像。
在步骤S303中，控制器69取得再现的小型像的CP_Info_thumbnail()。
在步骤S304中，控制器69判定flag_need_AvstreamInfo是否为1，在为1的情况下，读出标记位置的AV流的内容保护信息。
在步骤S305中，解扰部71解码(解扰)小型图。
在步骤S306中，在flag_need_AvstreamInfo为1的情况下，控制器69根据由步骤S304的处理读出的内容保护信息限制小型图的再现。例如，在内容保护信息规定限制模拟再现视频内容情况的分辨率的情况下，控制器69控制图形图像处理部81，限制小型图的分辨率。或者，图形图像处理部81根据控制器69的控制，缩小小型图的图像帧。
在步骤S307中，控制器69控制CGMS插入部64和微显示插入部63，根据CP_Info_thumbnail()，使CGMS和微显示(模拟复制保护信号(CAPS))添加到小型图的显示图像上。该添加处理也为一种限制。
在步骤S308中，控制器69使小型图的显示图像从端子62视频输出。
图30是表示经过数字总线103将DVR的AV流文件和与其有关的数据库文件从复制源(输出侧)的再现装置101复制到复制目的地(输入侧)的记录装置102的情况的结构框图。
首先，指示将记录在再现装置101的信息记录媒体201上的所希望的PlayList复制到记录装置102的信息记录媒体310的信息通过图中未示出的用户接口，装载到复制控制命令后输入到再现装置101。该命令经过数字总线接口205、总线控制器207输入到控制部208。
控制部208决定在上述PlayList再现中所需的AV流的部分流，将指示输出到驱动器202，使得从信息记录媒体201读出该AV流数据。另外，控制部208将指示输出到驱动器202，使得与上述PlayList有关的数据库文件(PlayList文件、Clip Information file和小型图文件)从信息记录媒体201读出。
控制部208指示将经过解调部203、ECC解码部204的处理后读出的上述AV流数据提供给数字总线接口205来作为AV流文件。
另一方面，对应于从信息记录媒体201读出的AV流数据对应的数据库文件经过解调部203、ECC解码部204后输入到存储器206。控制部208根据位于存储器206的数据，生成再现从数字总线接口205输出的上述AV流文件所需的数据库(Clip Information文件、PlayList文件)。另外，控制器28生成对应于上述AV流文件的Clip和复制的PlayList文件使用的小型图文件。
并且，控制器208指示将上述新生成的数据库文件(ClipInformation文件、PlayList文件和小型图文件)从存储器206提供给数字总线接口205。
总线控制器207控制从数字接口205的文件输出。控制部208指示从数字总线接口205向总线控制器207输出AV流文件和数据库文件。
上述AV流文件和上述数据库文件经过数字总线103后输入到复制目的地的记录装置102。
复制目的地的记录装置102的总线控制器302控制来自数字总线接口301的文件输入。另外，总线控制器302和总线控制器207交换文件的复制控制命令来控制数据传送/接收的定时。
记录装置102的控制部308指示将输入到数字总线接口301的AV流文件经过ECC编码部304、调制部305、驱动309的处理后记录到信息记录媒体310上。
控制部308指示将输入到数字总线接口301的数据库文件写入到存储器303中。
另外，控制部308指示将记录在信息记录媒体310上的数据库文件(Info.dvr文件和小型图文件)在经过驱动309、解调部307、ECC解码部306的处理后读出到存储器303。
并且，控制部308更新位于存储器303上的Info.dvr文件和小型图文件。具体的，在位于复制目的地的Info.dvr文件的TableOfPlayList上追加新记录的PlayList文件名，另外，在位于复制目的地的小型图文件上追加新记录的小型图。
控制部308指示读出位于存储器303的数据库文件，经过ECC编码部304、调制部305、驱动309的处理后记录到信息记录媒体310上。
图31是说明将小型像从复制源(输出侧)的再现装置101复制到复制目的地(输入侧)的记录装置102的情况的复制源处理流程图。
在步骤S701中，控制部208读出应用数据库信息文件(图13)。即，控制部208控制驱动器202来指令从信息记录媒体201读出应用数据库信息文件。从信息记录媒体201读出的应用数据库信息文件经过解调部203、ECC解码部204的处理后提供给存储器206进行存储。控制部208读取存储到存储器206的应用数据库信息文件。
在步骤S702中，控制部208根据来自用户的指示，选择传送到复制目的地的小型像。
在步骤S703中，控制部208从存储在存储器206的应用数据库信息文件(menu.tidx/mark.tidx)取得由步骤S702选择的上述小型像的CP_Info_thumbnail()(图16和图17)。
在步骤S704中，控制部208判定flag_need_AvstreamInfo(图17)是否为1，在为1的情况下，读出标记位置的AV流内容保护信息。
在步骤S705中，控制器208判定flag_need_AvstreamInfo(图17)是否为1，在为1的情况下，根据上述内容保护信息，限制小型图的复制。例如，在内容保护信息具有可复制期限信息的情况下，控制器208基于该信息限制小型图的复制。
在步骤S706中，在CP_Info_thumbnail()的CCI_thumbnail(图17)不是Copy free的情况下，控制部208禁止其小型图的复制。
在步骤S707中，控制部208生成与可复制小型像有关的小型像文件(menu.tdat/mark.tdat)和小型图信息文件(menu.tidx/mark.tidx)。
在步骤S708中，控制部208将小型像文件和小型像信息文件传送到复制目的地。
如上所述，在本发明中，在记录AV流的同时，记录表示其AV流的代表图像和特征点的小型像的情况下，可将其内容保护信号添加到小型像上后进行记录。
该内容保护信息至少包含复制世代管理信息(CCI)和模拟复制保护信息(APS)的其中一个。
例如，在使用AV流中的特征点图像而生成小型像的情况下，根据对Ay流中上述特征点的图像的内容保护信息，生成小型像的内容保护信息。
另外，该小型像的内容保护信息包含表示在从AV流中的图像生成小型像的情况下是否需要参照AV流中的内容保护信息的识别符(flag_need_AvstreamInfo)。由此也可对应于需要除CCI和APS之外的信息来作为小型像的内容保护信息的情况。
由此，由于将其内容保护信息添加到小型像上后进行记录，所有可保护小型像的著作权后进行记录。
以预定大小的块(tn_block)单位记录小型像和其内容保护信息。由此，可快速容易地执行小型图的追加操作和部分删除操作。
另外，在以在小型像之后存储其内容保护信息的形式进行记录的情况下，由此，由于可改变小型像的大小，故可随机化内容保护信息在上述块中的起始位置。这达到了增加从小型像文件中取出内容保护信息内容难度的效果。
小型像的格式采用JPEG。由于JPEG广泛使用为实际(defacto)标准，所以应用比较容易，兼容性高。此外，小型像的格式不限于JPEG，也可使用MPEG的I-picture和PNG，GIF，TIFF等。
在本发明中，在从记录AV流的同时，记录表示其Ay流的代表图像和特征点的小型像的信息记录媒体再现小型像的情况中，根据添加到小型像后进行记录的内容保护信息，限制小型像的再现。即，将复制世代管理信号或模拟复制保护信号添加到再现信号上后进行再现。进而，根据AV流中的内容保护信息，限制小型像的再现。这样，可防止其小型像的不正当复制。
在本发明中，在将AV流和其小型像从信息记录媒体的再现装置复制到其它信息记录媒体的情况下，该信息记录媒体在记录AV流的同时，记录表示其AV流的代表图像和特征点的小型像，根据添加到小型像后进行记录的内容保护信息，限制小型像的再现。即，判断是否复制小型像，使得保护小型像的复制世代管理信息(CCI)的限制。进而，根据AV流中的内容保护信息，限制小型像的复制。
由此，在保护小型像的著作权的同时，可实现复制视频信号的同时复制其小型像的应用。与只可复制AV流的情况相比，由于不需要用户将新的小型像添加到复制的AV流的程序，所以是有效的。
虽然上述一系列处理可由硬件执行，但也可由软件执行。
在由软件执行一系列处理的情况下，从网络或记录媒体将构成其软件的程序安装到嵌入专用硬件的计算机或由安装的各种程序可执行各种功能的例如通用个人计算机等上。
为对用户提供程序，该记录媒体被配置为与装置主体分开，不仅可由分组媒体构成，而且可由以事先装载在装置主体状态而提供给用户的存储程序的ROM、硬盘等构成。上述分组媒体由存储程序的磁盘(包含软盘)、光盘(CD-ROM(Compact Disk-Read Only Memory))，DVD(包含(Digital Versatile Disk))、磁光盘(包含MD(Mini-Disk)(商标))、或半导体存储器等构成。
在本说明书中，记述存储到记录媒体上的程序的步骤当然包含根据所含顺序按时间序列进行的处理，也包含即使未必按时间序列进行处理而并行或单个执行的处理。
根据本发明的第1视频信号处理装置及方法、记录媒体和程序，生成对应于所取得的视频信号的小型像，进而生成对应于所生成的小型像的内容保护信息。小型像在添加内容保护信息后记录到信息记录媒体上。
因此，可保护小型像的著作权。
根据本发明的第2视频信号处理装置及方法、记录媒体和程序，从从信息记录媒体再现的信号中抽出视频信号、对应于视频信号的小型像、及添加到小型像的内容保护信息，根据所抽出的内容保护信息，限制小型像的输出。
因此，可防止小型像的不正当复制。
根据本发明的信息记录媒体，记录视频信号、对应于视频信号的小型像、及对应于小型像的内容保护信息。因此，可提供可以防止小型像的不正当复制的信息记录媒体。
根据本发明的视频记录装置及方法、和第3程序，从所输入的视频信号中检测出内容保护信息，生成对应于视频信号的小型像信号，根据检测出的内容保护信息，生成小型像信息的复制控制信息后，将视频信号、小型像信号及复制控制信息记录到信息记录媒体上。
因此，可将信息记录到信息记录媒体上，从而可防止小型像的不正当复制。
根据本发明的视频再现装置及方法，和第4程序，从信息记录媒体中再现视频信号、对应于视频信号的小型像信号、及小型像信号的复制控制信息，根据所再现的复制控制信息，将复制控制信号添加到小型像信号后输出。
因此，可从记录可防止小型像的不正当复制信息的信息记录媒体再现信息。
权利要求
1.一种视频信号处理装置，其特征在于，具备生成单元，生成对应于输入视频信号的小型像；第1控制单元，生成对应于通过所述生成单元生成的所述小型像的内容保护信息；记录单元，在记录通过所述生成单元生成的所述小型像及通过所述第1控制单元生成的所述内容保护信息的同时，将所述视频信号记录到信息记录媒体上。
2.根据权利要求1的装置，其特征在于所述内容保护信息包含复制世代管理信息。
3.根据权利要求1的装置，其特征在于所述内容保护信息包含模拟复制保护控制信息。
4.根据权利要求1的装置，其特征在于所述生成单元，使用所述视频信号中的图像生成所述小型像，所述第1控制单元，根据包含在所述视频信号中的图像的内容保护信息，生成所述小型像的内容保护信息。
5.根据权利要求1的装置，其特征在于所述生成单元，使用所述视频信号中的图像生成所述小型像；所述第1控制单元，生成包含表示是否需要参照所述视频信号的内容保护信息的识别符的所述内容保护信息。
6.根据权利要求1的装置，其特征在于所述记录单元以预定大小的块单位来记录所述小型像和所述内容保护信息。
7.根据权利要求1的装置，其特征在于所述记录单元将所述小型像和对应于该小型像的所述内容保护信息设为一对块化后进行记录。
8.根据权利要求1的装置，其特征在于所述记录单元以JPEG方式压缩所述小型像后进行记录。
9.根据权利要求1的装置，其特征在于，还具备再现单元，再现记录在所述信息记录媒体上的信号；分离单元，从通过所述再现单元再现的所述信号中分离出所述视频信号、对应于该视频信号的所述小型像、及对应于该小型像的所述内容保护信息；第2控制单元，根据通过所述分离单元分离出的所述内容保护信息，限制所述小型像的输出。
10.根据权利要求9的装置，其特征在于所述内容保护信息包含模拟复制保护控制信号，所述第2控制单元根据所述模拟复制保护控制信号进行控制，使得复制保护信号叠加到输出信号上。
11.根据权利要求9的装置，其特征在于所述第2控制单元还根据所述视频信号的所述内容保护信息限制所述小型像的再现。
12.根据权利要求9的装置，其特征在于在将所述小型像复制到其他信息记录媒体的情况下，所述第2控制单元根据添加到所述小型像后进行记录的所述内容保护信息，限制所述小型像的复制。
13.根据权利要求12的装置，其特征在于所述内容保护信息包含复制世代管理信息，所述第2控制单元限制所述小型像的复制，从而保护所述小型像的复制世代管理信息的限制。
14.根据权利要求12的装置，其特征在于所述第2控制单元还根据所述视频信号的所述内容保护信息，限制所述小型像的复制。
15.一种视频信号处理方法，其特征在于，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过所述生成步骤的处理生成的所述小型像的内容保护信息；记录步骤，在记录通过所述生成步骤的处理生成的所述小型像、及通过所述控制步骤的处理生成的所述内容保护信息的同时，将所述视频信号记录到信息记录媒体上。
16.一种记录媒体，记录计算机可读取的程序，其特征在于，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过所述生成步骤的处理生成的所述小型像的内容保护信息；记录步骤，在记录通过所述生成步骤的处理生成的所述小型像、及通过所述控制步骤的处理生成的所述内容保护信息的同时，将所述视频信号记录到信息记录媒体上。
17.一种由计算机执行的程序，其特征在于，包含生成步骤，生成对应于输入视频信号的小型像；控制步骤，生成对应于通过所述生成步骤的处理生成的所述小型像的内容保护信息；记录步骤，在记录通过所述生成步骤的处理生成的所述小型像、及通过所述控制步骤的处理生成的所述内容保护信息的同时，将所述视频信号记录到信息记录媒体上。
18.一种视频信号处理装置，其特征在于，具备再现单元，再现记录在信息记录媒体上的信号；分离单元，从通过所述再现单元再现的所述信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制单元，根据通过所述分离单元分离出的所述内容保护信息，控制所述小型像的输出。
19.根据权利要求18的装置，其特征在于所述内容保护信息包含模拟复制保护控制信号；所述控制单元根据所述模拟复制保扩控制信号进行控制，使得复制保护信号叠加到输出信号上。
20.根据权利要求18的装置，其特征在于所述控制单元还根据所述视频信号的所述内容保护信息，限制所述小型像的再现。
21.根据权利要求18的装置，其特征在于所述控制单元在所述小型像被复制到其他信息记录媒体的情况下，根据添加到所述小型像后进行记录的所述内容保护信息，限制所述小型像的复制。
22.根据权利要求21的装置，其特征在于所述内容保护信息包含复制世代管理信息；所述控制单元限制所述小型像的复制，从而保护所述小型像的复制世代管理信息的限制。
23.根据权利要求21的装置，其特征在于所述控制单元还根据所述视频信号的所述内容保护信息，限制所述小型像的复制。
24.一种视频信号处理方法，其特征在于，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过所述再现步骤的处理再现的所述信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过所述分离步骤的处理分离出的所述内容保护信息，控制所述小型像的输出。
25.一种记录媒体，记录计算机可读取的程序，其特征在于，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过所述再现步骤的处理再现的所述信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过所述分离步骤的处理分离出的所述内容保护信息，控制所述小型像的输出。
26.一种由计算机执行的程序，其特征在于，包含再现步骤，再现记录在信息记录媒体上的信号；分离步骤，从通过所述再现步骤的处理再现的所述信号中分离出视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息；控制步骤，根据通过所述分离步骤的处理分离出的所述内容保护信息，控制所述小型像的输出。
27.一种信息记录媒体，其特征在于记录视频信号、对应于该视频信号的小型像、及对应于该小型像的内容保护信息。
28.根据权利要求27的媒体，其特征在于所述内容保护信息包含复制世代管理信息。
29.根据权利要求27的媒体，其特征在于所述内容保护信息包含模拟复制保护控制信号。
30.根据权利要求27的媒体，其特征在于以预定大小的块单位来记录所述小型像和所述内容保护信息。
31.根据权利要求27的媒体，其特征在于将所述小型像和对应于该小型像的所述内容保护信息设为一对块化后进行记录。
32.根据权利要求27的媒体，其特征在于以JPEG方式压缩所述小型像后进行记录。
33.一种视频信号记录装置，其特征在于，具备检测部，从输入视频信号中检测出内容保护信息；编码部，生成对应于所述视频信号的小型像信号；生成部，根据通过所述检测部检测出的所述内容保护信息，生成通过所述编码部生成的所述小型像信号的复制控制信息；记录部，将所述视频信号、通过所述编码部生成的所述小型像信号、及通过所述生成部生成的复制控制信息记录到信息记录媒体上。
34.根据权利要求33的装置，其特征在于还具备加密部，加密所述小型像信号；所述记录部将通过所述加密部加密后的所述小型像信号记录到所述信息记录媒体上。
35.根据权利要求34的装置，其特征在于所述加密部还加密所述复制控制信息；所述记录部将通过所述加密部加密后的所述复制控制信息记录到所述信息记录媒体上。
36.一种视频信号记录方法，其特征在于从输入视频信号中检测出内容保护信息；生成对应于所述视频信号的小型像信号；根据检测出的所述内容保护信息，生成所述小型像信号的复制控制信息；将所述视频信号、所述小型像信号、及所述复制控制信息记录到所述信息记录媒体上。
37.一种记录媒体，记载计算机可读取的程序，由计算机进行视频信号的记录，其特征在于，包含检测步骤，从输入视频信号中检测出内容保护信息；第1生成步骤，生成对应于所述视频信号的小型像信号；第2生成步骤，根据通过所述检测步骤的处理检测出的所述内容保护信息，生成所述小型像信号的复制控制信息；记录控制步骤，控制所述视频信号、通过所述第1生成步骤的处理生成的所述小型像信号、及通过所述第2生成步骤的处理生成的所述复制控制信息记录到所述信息记录媒体上。
38.一种程序，由计算机进行视频信号的记录，其特征在于，包含检测步骤，从输入视频信号中检测出内容保护信息；第1生成步骤，生成对应于所述视频信号的小型像信号；第2生成步骤，根据通过所述检测步骤的处理检测出的所述内容保护信息，生成所述小型像信号的复制控制信息；记录控制步骤，控制所述视频信号、通过所述第1生成步骤的处理生成的所述小型像信号、及通过所述第2生成步骤的处理生成的所述复制控制信息记录到所述信息记录媒体上。
39.一种视频信号再现装置，其特征在于，具备再现部，从信息记录媒体中再现视频信号、对应于该视频信号的小型像信号、及该小型像信号的复制控制信息；输出部，根据通过所述再现部再现的所述复制控制信息，将复制控制信号添加到所述小型像信号后输出。
40.根据权利要求39的装置，其特征在于，还具备加密解码部，解码加密的所述小型像信号；加密通过所述再现部再现的所述小型像信号。
41.根据权利要求40的装置，其特征在于加密通过所述再现部再现的所述复制控制信息，所述加密解码部还解码加密后的所述复制控制信息。
42.一种视频信号再现方法，其特征在于从信息记录媒体再现视频信号、对应于该视频信号的小型像信号、及该小型像信号的复制控制信息；根据再现的所述复制控制信息，将复制控制信号添加到所述小型像信号后输出。
43.一种记录媒体，记载计算机可读取的程序，由计算机进行视频信号的再现，其特征在于，包含再现控制步骤，控制从信息记录媒体再现视频信号、对应于该视频信号的小型像信号、及该小型像信号的复制控制信息；输出控制步骤，根据通过所述再现控制步骤的处理控制再现的所述复制控制信息，控制将复制控制信号添加到所述小型像信号的信息的输出。
44.一种程序，由计算机进行视频信号的再现，其特征在于，包含再现控制步骤，控制从信息记录媒体再现视频信号、对应于该视频信号的小型像信号、及该小型像信号的复制控制信息；输出控制步骤，根据通过所述再现控制步骤的处理控制再现的所述复制控制信息，控制将复制控制信号添加到所述小型像信号的信息的输出。
全文摘要
本发明涉及可防止不正当复制小型像的视频信号处理装置、视频信号再现装置、及视频信号记录装置。小型像编码器19生成从端子12输入的视频信号的小型像。微显示检测部13、CGMS检测更新部14、WM(水印)检测更新部15分别检测出从端子12输入的视频信号的模拟复制保护信号(APS)、作为复制世代管理信息的CGMS信号或水印后输出到控制器21。控制器21根据这些复制限制信息，生成小型像的复制限制信息。将小型像和其复制限制信息记录到信息记录媒体26上。本发明可适用于将数据记录到信息记录媒体的记录装置、及再现记录到信息记录媒体上的数据的再现装置。
文档编号G11B27/034GK1479996SQ02803218
公开日2004年3月3日 申请日期2002年9月17日 优先权日2001年9月18日
发明者加藤元树, 中村政信, 村松克美, 信, 美 申请人:索尼公司