数据处理设备、数据处理方法和程序的制作方法

专利名称：数据处理设备、数据处理方法和程序的制作方法
技术领域：
本发明涉及一种数据处理设备、数据处理方法^Hi^，尤其涉及例如一种 设备、数据处理方法辆沐 背景技术^年，作为处^it动图像的图像数提的AV设备，例如录^tM^聂像K 已为广播ik^消费者用途实现了可以处理HD(高清晰度)图像数提的AV设备。例如，^il种AV设备中，通过MPEG(运动图像专家组)2系统、MPEG EVK50系统等，以长GOP (图片组)(HDLONGGOP)为4^HD图4綠据进4彌码。作为编码结果所获得的编石^t粉i絲诸如磁带、石纽以;5UeJt之类的记录介质中。W卜，在AV设备中，对记絲记录介质中的编^5^t据进 行MPEG解码，并辦为MPEG解码的结果而获得的图^^据(对应于该图《^:据的图^象)输出到显示器并ilii行显示。长GOP例如是将15个或更多图片作为一个GOP的GOP。 MPEG EMX50 系^j艮大比特率为50Mbps并符合MPEG2 4:2:2P@ML的编码系统。MPEG 固X50系统的格式由SMPTE (Society of Motion Picture and Television Engineers电影与电^LX^呈师学会)批准，并在SMPTE365M中射己为D-10格 式。在MPEGIMX50系统中，所有图片被编码成I图片。作为AV设备，除了录^^^^聂^^几，还有编辑运动图像的编辑设备(包 括由计^4^t使计^^充当编辑设备的禾^ (软件))。编辑运动图像的编辑设备通常具有允许用户(编辑者)检R动图像内容
并搜索称为编辑点(起泉和结束泉)的4^文功能(scrubfunction),^fc^M"再翻户所指定的图片的帧或区域。例如，用户通iti^ff^如 移动用作GUI (图形用户界面)的拨块之类的l^t来指定图片。在具有 功能的编辑设备中，例如，##拨块的位置来指定帧，并再现 该帧。因此，当用户^^^慢移动拨块的IMt时，由于通过拨块(的位置)指 定的帧緩慢地改变，因itl^f亍了所谓的'ltit再现。当用户^^亍lfe4移动拨块的 辦时，由于通过拨块指定的帧'fe^改变，因jH^f亍了所谓的高速再现。而 且，当用户不移动拨块时，由于拨:^斤指定的帧没有改变，因;tb^f亍了所谓的 静止再现(编辑设M于暂停状态)。因此，可以im^ l—种可变速的(特别 的)再现。在JP-A-11-331754所提出的技术中，高緒率的图像记絲可随才;u4取的 第一i己录介质中，与第-^己录介质中记录的图傢对应的低^率图像记恭在第 二记录介质中，记絲笫二记录介质中的低^f率图像以普逸的再现方式进行 显示，而记絲第-S己录介质中的高緒率图^^暂停时显示。发明内容须查^^上由拨块指定的帧的编>^:据戶/^皮记录的位置，'从盘中读出编^据，解码作为图傢^t据的编码lt据，以M显示器上显示图傢数据(所对应的 图像)。因此，当拨块指定了帧^扭示器Ji^5H亥帧耗费了一些时间。因此， 当记^_盘中的编>5^:^^如是通断HD图^lt据以长GOP为>^^彌 码而获得的具有高比特率的数据时，絲于编辑设备(^ft^^I^的计^^) 的性能，诸如解石^t类的处理会^i^示。錄拨块当前所指定的帧与显示器 Ji^示的帧之间引起很;tJjf巨。结果，用户可能感到不协调(压力)。另一方面，由于当前通常iMJ所谓的非线4锡辑，作为^^k^r扭动图 像的内^v乂及确定编辑点的手段的4^:功能变得日益重要。需^-种允许用户 更详细并且更流畅地查看运动图像的内容的4^i:功能。在实!5it种4yt功能时， 用户界面是4艮重要的。因此，希望在变速再现，如M中，提^-"种合适的用户界面。
，本发明的一个实施例，提^""种用于处Sil动图像的图^lii:振的数据 处理设备。该数据处理设备包括显示类型确定^置，用于才娥变化量以图片 为#来确^4示显示图片时的显示方法的显示类型，所述变化量表示图#^ 据中的变^^I^;以M示控制装置，用于使显示器 示表示图片显示类型 的类型信息和表示由被操作为指定^f皮显示的图片的图片指定,装置指定的 图片的位置的位置信息。才娥本发明的该实施例，提^-种用于处^:动图像的图^lt据的数据处 理方法，或一种使计#4 14^豫动图像的图^^:据处理的禾1^。该数据处理方 法或禾1^包旨骤根悟图片中的变化量以图片为#来确^示显示图片时 的显示方法的显示类型，所述变化量表示图像数据的变^^呈度；以及使显示器 显示表示图片显示类型的类型信息和表示由被操作为指定^f皮显示的图片的图 片指定,装置指定的图片的位置的位置信息。拟緣本实施例的数据处^^置、数据处理方法或禾踏中，#^表示图像 ^t据变^^呈度的、以图片为#的变化量，以图片为卑Hi确^示显示图片时 的显示方法的显示类型。显示表示图片显示类型的类型信息和表示由被操怍为 指定^l皮显示的图片的图片指定,装置指定的图片的位置的位置信息。才娥本发明的另一个实施例，提^-种用于处舰动图像的图^lt据的数 据处理设备。该数据处理设备包括显示控制装置，用于4tt示器;^示以图片 为#^4示图片显示类型的类型信息和表示由被操怍为指定J^皮显示的图片的 图片指定辨装置指定的图片的位置的位置信息，该显示类型是才緣以图片为 ^的变化量确定的，其表示显示图片时的显示方法，所述变化量表示图像数 据中的变^^JL##本发明的该实施例，提^-"种用于处^it动图像的图^lt据的数据处 理方法，或一种使计W^fW动图像的图像数据处理的程序。该数据处理方 法或禾I^包^it样的步骤4吏显示器来显示以图片为岸^i4示图片显示类型的 类型信息和表示由被操作为指定要被显示的图片的图片指定,装置指定的图 片的位置的位置信息，所組示类型是#^表示图^^据变^^呈度的、以图片 为^的变化量来确定的，所ii^示类型^^显示图片时的显示方法。拟鹏本实施例的数据处理设备、彩:据处理方法或禾I^中，显示以图片为 #^4示图片显示类型的类型信息以M示由被操怍为指定J^皮显示的图片的
图片指定IMt装置指定的图片的位置的位置信息。显示类型是##表示图像数 据变^^l变的、以图片为^H立的变化量来确定的，所皿示类型表示显示图片 时的显示方法才緣本发明的又一个实施例，提^(^"种用于处舰动图像的图^lt据的数据处理设备。该lt据处理i殳备包括获#置，用于获*示图^^据变>^呈 度的、以一个或多个图片为#的变化量；显示类型确^^置，用于才娥变化 量以多个图片为#来确^示显示图片时的显示方法的显示类型；以及显示控制装置，用于使显示器^示表示图片显示类型的类型信息和表示由被， 为指定要被显示的图片的图片指定,装置指定的图片的位置的位置信息。拟^t本实施例的数据处理设备中，获:^示图4^:据变^^H的、以一 个或多个图片为^i的变化量。##变化量以多个图片为#来确^示显示 图片时的显示方法的显示类型。显示表示图片显示类型的类型信息和表示由被 ,为指定要净《示的图片的图片指定操作装置指定的图片的位置的位置信 息。同样##本发明的再一个实施例，提^-种用于处^动图像的图^^据 的数据处理设备。该数据处理设备包括获:^置，用于以多个图片为^i^ ^^示显示图片时的显示方法的显示类型，所逸显示类型是#^表示图傢数据 变4M级的、以一个或多个图片为扭的变化量来确定的；以M示控制装置， 用于^^示器M示表示图片显示类型的类型信息和表示由被,为指定要被 显示的图片的图片指定，装置指定的图片的位置的位置信息。拟娥本实施例的数据处理设备中，获^^示显示图片时的显示方法的以 多个图片为#的显示类型，所i^示类型是^^表示图^^:据变^^呈度的、 以一个或多个图片为^的变化量来确定的。显示表示图片显示类型的类型信 息和表示由净皮操怍为指定J^皮显示的图片的图片指定IMt装置指定的图片的位 置的位置信息。可以在记录介质中记录该禾i^。才娘本发明的实施例，可在刺。4fe^:之类的变速再现中提供适当的用户界面。


图1是示出了才娥本发明实施例的数据处理系统的结构示例的框图；图2是示出了 PC 1的石更件配置的示例的框图；图3是示出了取J"器51的显示的示例的图；图4是示出了照相机6的结构的示例的框图；图5是示出了 AV文件创建单元75的结构的示例的才匡图；图6是示出了 F>文^H，J建单元76的结构的示例的冲匡图；图7A^1于说明数据减少单元91的处理的图；图8 于说明Fy文^H，j建处理的;;^呈图；图9 3_示出了变化Jri十M元92的结构的示例的才匡图；图10 ^J于说明运动信息计^元101中计算的以帧为^的运动信息图11是示出了运动信息计料元101的结构的示例的框图；图12A^iS兌明运动信息计^^元101的处理的图；图13是示出了运动4言息计，元101的结构的另一示例的才匡图；图14 ^于说明运动信息计#元101的处理的图；图15是示出了细度信息计^f元102的结构的示例的才匡图；图16^于说明细度信息计##元102的处理的图；图17是示出了细;l信息计，元102的结构的另一示例的4匡图；图18^)于说明平均值计^元141的处理的图；图19 K化J^十，元92所计算的帧的变化量的曲线图；图20 ^!于i兌明显示类型的示例的图；图21 A^IiS兑明由显示类型确定单元93以帧为单^i确定的显示类型的曲图22是示出了显示类型确定单元93的结构的示例的框图；图23 ;UlIiS兌明显示类型确^h理的流程图；图24^于说明显示类型确^t理的流程图；图25是以帧为JN^的变化量的曲线图；图26是示出了 Fy文件的示例的图；图27^于说明显示类型的示例的图；图28是以帧为#的运动信息和显示类型的曲线图29;UU于说明显示类型确^h理的流程图； 图30^亍说明显示类型确^t理的流程图； 图31 ^J于i兑明显示类型的示例的图； 图32是以帧为^的细度信息显示类型的曲线图； 图33 ^!于i兌明显示类型确^t理的流程图； 图34^I于说明显示类型确狄理的^^呈图； 图35是示出了Fy文件的示例的图； 图36是示出了 Fy文件的示例的图； 图37是示出了 Fy文件的示例的图； 图38;l^l于i兌明显示类型的示例的图； 图39是运动信息和细度信息以M示类型的曲线图； 图40^1于说明显示类型确^t理的沐程图； 图41是示出了 F>文件的示例的图； 图42是示出了驱动器5的结构的示例的才匡图； 图43 ;i示出了作为编辑系统的PC 1的功能结构的示例的框图； 图44是示出了 Fy文件管理单元214和显示类型获#元215的结构的示 例的框图；图45^Jf]于说明拖放拨块54的位置和由该位置指定的帧之间的关系的框图；图46了^it类型V2和高显示速率/#^#率类型V3的帧的拖放时 的显示方法；图47;UUiS兌明显示类型为静态图像类型VI的帧的显示的图；图48 于说明换3狄理的流程图；图49是示出了编辑窗口 301的显示的示例的图；图50 ;M亍沈明GUI显示处理的流-呈图；图51是示出了 Fy文件显示部311中的显示的示例的图；图52是示出了才娥阈值H或L的 而再 示的类型信息；图53 A^J iS兌明GUI显示处理的沐牙呈图；图54是示出了 Fy文件显示部311的显示的示例的图；图55是示出了 Fy文件显示部311的显示的示例的图56 于说明GUI显示处理的流程图； 图57是示出了对指定区间的区间"j^l进^^权的权重的示例的图； 图58是示出了^"指定区间的区间^liiO权的权重的示例的图； 图59是示出了不对区间^^进^f沐权时和对区间"j^l进^^权时的指定 区间的图；图60^I于说明对区间"^l进行的处理的^^呈图；图61是示出了 Fy文件显示部311的显示的示例的图；图62^J于说明分配范围该^t理的流程图；图63是示出了取景器51的显示的示例的图；图64 ^于说明显示处理的流程图；图65是形成一个GOP的每个帧中的变化量的曲线图；图66^于说明为形成一个GOP的每个帧确 _示类型的方法的图。M实施方式以下将参照附图，说明本发明的各实施例。图1是示出了^^本发明实施例的数据处理系统(系统^^指多个设备的逻 辑^，而不论*结构的设备是否《 在同一#装中)的结构的示例的图。 PC(个人计^^)l扭行^t^NUi行^t不同的处理。作为程序，PC1中至少安MOS (操怍系统)和用作"i^豫动图像编辑的软件的编辑程序。 PCl在OS的控制下^^彌辑禾I^^到编辑系统(编辑设备)的作用。 勉2和IU示3用于向PC 1输入字符(串)、命4^^ftMt息。 》纽(驱动器)4;i^斤谓的夕h^^iL在图1中，》纽4连接到PC 1上。 石M4在PC 1的控制下i谅并再现AV (视听)数齡。例如，当在PC 1中 ^f豫动图像的编辑时，可^^^it 4树运动图像的AV数据进行割裂 (ripping),即将AV数I^W为PC1可以处理的格式的文件。驱动器5例如是夕htMeJ:驱动器。光盘7能够可拆卸i^MiA^驱动器5中。在图1中，驱动器5连接在PC l上，并JL^PC 1的控制下向M7记录AV 数絲并AU^ 7再现AV数錄照相机(摄<財几)6对对!Mi行成像，并，为成^^^^斤l^得的运动图 像的AV数提(图^^:#图#^据附带的声音数据)ie^记录介质中，例
如可以可拆卸^tA^照相机6的光盘7、未示出的磁带、或半"HM^器， 或者将AV数 过有线或无线传送介质来传送。照相机6可以是输出HD图 ^!t掩ft为运动图像的图傢数据的HD照相机，或者也可以是输出SD (标准定 义)图^lt掩ft为运动图像的图^^:据的所谓SD照相机。絲7例如插4照相机6中。照相机6所获得的AV数据f^皮记絲光 盘7中。光盘7插ASiJ驱动器5中。再现记絲光盘7中的AV数据等。作为 ^7,例如可以^MJ DVD (数字多用itit)或专业盘 。专业^l:可以通过蓝色-紫色^ii行高密度记录的光盘。除了用户最初希 望记录的运动图像的HD或SD图^lt据^卜，减少了数据量的数据以及HD 或SD图傢数据的^t教粉己泉在专业盘中，例j魂i^目较于HD或SD图傢数据 的像素量(itb^适当g为^^数据)^少像素的数量;JW少数据量。与代^S!St据相反，用户最初 ^"记录的运动图像的HD或SD图^lt据被 适当^>#为主1^据。除了运动图像的图^lt据W卜，对于图^^t据附带的声音数据(运动图像 的声音数据)，除了用户最初^^记录的运动图像的声音数据0卜，减少了声音数据的数据量的数粉己絲专业盘中。主数据是指除了用户最初^"记录的运 动图像的HD或SD图^^据W卜，必要时，用户最初 i^"记录的运动图像的 声音数据，或者图^lt据与声音数据二者。类卄她，^S数据是指除了减少了 作为主数据的图^lfc据的数据量的数据^卜，必要时，减少了作为主数据的声 音数据的数据量的数据或这两种数据。图2是示出了图1中的PC 1的硬件结构的示例的图。CPU (中狄理单元)22、 ROM (只读絲器)23、 RAM (随才A^取 絲器)24、石M 25和输A/输出接口 30连接到总线21上。CPU 22 ^f^S^;JlUi行^t处理。 ROM 23中存有由CPU 22 ^/f亍的禾l^ 和必要的数据。RAM 24临时务賭由CPU 22扭/f询禾I^和必要的数据。硬盘 (驱动器)25是内置石M。安装由CPU22^f亍的禾I^，并将必要的数粉己录 徊纽25中。输出单元26包^^如LCD (液晶显示器)之类的显示器41和扬声器42。 输出单元26连接到输A/输出接口 30上。输出单元26显示与A/J^TA/输出接口 30提供的数据相对应的图像，并输出对应于该数据的声音。
输入单元27包^it 2、 IU示3和未示出的;fciX。输入单元27连接到 输A/输出接口30。当用户IMt勉2或IU示3时，输入单元27将从勉2或 !^示3提供的^t信号输出^TA/输出接口 30。通信单元28是诸如网卡(LAN (局域网)卡)或ADSL (非对#^:字用 户^)调制解调^^类的网雑口。通信单元28^f亍PCl和未示出的网络 之间的it4言控制。驱动器29是内置驱动器。驱动器29中可插Ail移走可移动记录介质31。 介质31中。输A/输出接口 30用作总线21与输出单元26、输入单元27、通信单元28、 驱动器29以及^t围装置之间的接口。在图2 (图1)中，石纽4和驱动器 5和^f^卜围装置一样连接到输A/输出接口 30上。可移动记录介质31是可以可移动地插AJ'J驱动器29中的记录介质，例如 城、CD-ROM (紧凑盘只读絲器)、MO (磁光)盘、DVD (数字多用途 盘)、輙或半"^^^器。在如上所描述而构成的PC 1中，例如当用户通it^TA/输出接口 30辦输 入单元27并输入命令时，CPU 22才娥该命令船ROM (只读絲器)23中 所M的禾踏。作为替妙案，CPU22将夕Ml^iU或内置石嫂25中所絲 (安装)的禾踏、M星或网^f^i^、通iiii信单元28接收并且安^^it 4或25中的M、或者从插在内置驱动器29中的可移动记录介质31中或插在 夕I^5驱动器5中的光盘7中读出并安^5更盘4或25中的程序^AJ" RAM(随 ;N!vlMfft器)24中，并^fti亥餅。因此，CPU 22 ^f亍与^描述的^^呈 图相一致的处^^f亍由^描述的框图的部件所^f询处理。例如，CPU 22 員出单元26中输出处理结果，^yJt信单元28发送该结果，或在需要时通过 输A/输出接口 30将该结果记^J^M 4或25中，其中输出单元26包^iH^ LCD (液晶显示器)之类的显示器41和扬声器42。可以预B CPU 22 "^e^j禾I^记录(安装)在用作内置于PC 1中的记录 介质的石纽25或ROM 23中，或^i己^^夕Ml^植4中。作为替M案，可以临时或永;MiM^I^4^(记录)在可以可移动插入 夕h^驱动器5中的M7中或可以可移动插入内置驱动器29中的可移动记录介
质31中。可以提供光盘7和可移动记录介质31作为所谓的封^Jt件。除了良的从可移动记录介质31等向PC1中安^fi^以夕卜，也可以通过 无线电经由用于数字卫星广播的Ait^星或通过有线经由诸如LAN (局域网) 和因特网之类的网络，从下载站点将^^传it^PCl。在PC1中，可以扭 信单元28中接jRitiiil种方式传送的禾誘，并将该禾I^安鈔iJ内置石M 25等 中。PC 1通过^^f呈序而进行的处理步骤无需总是按照以下所描述的流程图 中所述的顺序的时间序列;iMi行处理。处理步舰包括并行或分别^f亍的处理(例如，并4亍处iSi^M^对象的处理)。禾1^可以仅由PC 1处理，或者可以由多个PCl分布i(^h理。jWi^卜，可 樹l^传iti^^ PC并在其中运行。如上所述，PC 1中至少安装有OS和用于进4豫动图像编辑的编辑程序。 当^^通电源时，PCI (CPU22) ^f亍OS,并进一步在OS的控制下才娥用户 的##^^辑禾踏。因此，PC1用作编辑系统。为了向用户展示作为编辑对象的充当所谓素材(material)的运动图像(图 像)等，用作编辑系统的PC1使显示器41来显示窗口，该窗口用于显示充当 素材的运动图像等。图3 ^!示出了用作窗口的取二豪器51的结构的示例的图，其中该窗口用于 显示充当素材的运动图4象等。取景器51包括显示部52、拖放条53、时间码显示部55和IMt部56，该 取景器51具有4^文功能。M^景器51的上部到中央到下部布M示部52，显示部52显示运动图像 (图像)。"^^条53用于在形^动图像的图片当中指U示部52中显示的图片。 4fe^L条53是在水平方向JJ^伸的^！ GUI (图形用户界面)，换放条53的M 拨块54可在7jC平方向上移动。用户可以沿着4^t条53移动^t拨块54,例如 通过辦4^t拨块54 iM^fi亥移动。用户可以4娥4^t拨块54的位置指 示部52中显示的图片。图片指的是帧或区域。在以下的说明中，釆用帧作为图片。但也可以辆 区域作为图片。
时间码显示部55被i^在4^t条53之下，显示部52中显示的帧的时间 码显示在时间码显示部55中。,部56被^ 在时间码显示部55 ^下。M部56包^f皮操怍为开始 再m动图像(在显示部52中显示图像)的播放独、被辦为停止再现等的 4亭止^^以^^皮IMt为向前'tfe^^f;^运动图4象的快iia。图4是示出了图1中照相机6的结构的示例的图。照相机6包括成HJMt71、图像处理单元72、 ^JLX73、声音处理单元 74、 AV文fN'j建单元75、 Fy文，J建单元76^己录单力通信单元77。成^^元71对对象成^象，以获取SD或HD图^lt据，并将图^lt据提供 给图像处理单元72。成^^元71包^iH口 CCD (电荷^^装置)或CMOS (互4h^属氧化物半导本)成像H^类的光电转^L件、以及iH口透^^类的 将光聚集在光电转^L件上的光学系统。成#4元71光电转^A射到其上的 光，并将与该ibN对应的(数字)图^lt据4l^^给图4象处理单元72。图像处理单元72对来自威#^元71的图傢数据施加必需的处理，例如用 于去l^^声的噪声去除处理。图像处理单元72按照时间序列以帧为卑^i将该处 理^的图##_据提供给AV文^N'J建单元75和Fy文^N'j建单元76。73收M成^^元71进行成像的时候输入的作为空气振动的声 音，将该声音转^^作为电信号的(数字)声音数据，并将该声音数据提供给 声音处理单元74。声音处理单元74对来自:^A73的声音数据^必要的处理，例如噪声 去除处理。声音处理单元74按时间序列将该处理之后的声音数据提供给AV文 個建单元75。AV文^H'J建单元75创建AV文件，并将该AV文件提^H己录单it/通信 单元77,其中该AV文件中存有来自图像处理单元72的时间序列图#^#来 自声音处理单元74的时间序列声音数据。Fy文^H'J建单元76以帧为#计算^^来自图像处理单元72的图^lt据 的变^^I^的变化量。Fy文^N'J建单元76^^帧的变化量在需要的时候以图 片为卑^i确定显示类型，该显示类型表示^l景器51 (图3)中显示帧的显示 方法。Fy文^H'J建单元76创建文件(此后适当地称为Fy文件)并将该文件提^i己录单^/通行单元77，其中所it^:件中存有作为iti:件(itJ:据文件)(之
一)的以帧为^i的变化量和显示类型之一或二者，所i^til件中存有来自图 ^^t理单元72的时间序列图^lt据的it教据。记录单it/通信单元77在ifeJt 7上记^ AV文^H'J建单元75提供的AV 文件以M Fy文^H'J建单元76提供的与AV文件相对应的Fy文件，即从图像 数据创建的Fy文件，其^ft征AV文件创建单元75提供的AV文件中，并 从Fy文铜'J建单元76提供，或者经由未示出的传输介质传输AV文件和Fy 文件。例如，对Av文件fav和Fy文件fFy给出文件名，该文件名表示Av文件f;v和与之对应的Fy文件fpy相互对应。换句话说，例如，AV文件l和与^t应的Fy文件％的文件名^^ur展名不同的文件名(除扩M^卜，文件名是相 同的)。图5是示出了图4中AV文^H'J建单元75的结构的示例的图，在图5所示的AV文^N，J建单元75的结构示例中，光盘7是记录了主数据和^S数据二者的专业盘。图5中，AV文^N'J建单元75包括主线编码器81、 ^3S编码器82和文件创建单元83。主线编码器81包括主^W编码器81V和主线，编码器81A。 作为主数据的图^^据从图像处理单元72 (图4)被提^^主^M编码 器81V。主^W编码器81V将来自图像处理单元72的作为主数据的图傢数 据编码成例如MPEG2 (例如MPEGIMX系统)，并将该图傢数据提供给文件 创建单元83。将声音数据从声音处理单元74 (图4)提^f^^主线賴编码器81A。主线' ，编码器81A将来自声音处理单元74的声音数据转M例如AES (音频工 程师协会)3系统的声音数据，其作为主数據，并将该声音数据提^^文^N'J 建单元83。^3S编码器82包括^^ 编码器82V和^^，编码器82A。 作为主^:据的图^|^据#皮>1€^^^来自图像处理单元72 (图4)的f(^M 编码器82V。代理M编码器82V缩减来自图像处理单元72的作为主数据的 图^^据的像素数量，以计算例如作为代理数据的图^Nt据，所述^S数据具 有低于主数据的緒率(空间分辨率)。W卜，代理舰编码器82V将作为代MPEG4进4彌码，并将该图像数据提^^文件创建 单元83。声音数据从声音处理单元74 (图4)被提供^R^^M编码器82A。 4 ^M编码器82A将来自声音处理单元74的声音数据转M例如ITU-T (国际 电信微，电信标准化部门)G711A-Law系统的声音数据，其作为^R^数据， 并将该声音数据提條文飼建单元83。文件创建单元83在例如大约两秒的再现时间内分别多路JJU来自主g 频编码器81V ，为主数悟的图傢数据、来自主线，编码器81A斧ft为主数 据的声音数据、来自代理视频编码器82V并怍为代理数据的图傢数据、以* 自代理顿编码器82A并作为代理数提的声音数据(的编^^t据)。文件创建 单元83创建预定格式的AV文件，其中该文件中存有通过多路1^)所获得的比 特流，即预定格式的AV文件，其中存有通过在大约两秒的再现时间里分别复 用(充当)主数据(的图傢数据和声音数据)和(充当)代虔数据(的图< 旨声音数据)而获得的比特流。文件创建单元83将AV文件提供i^己录单元 /通信单元77 (图4 )。图6是示出了图4中Fy文fN'J建单元76的结构的示例的图。Fy文^H'j建单元76包括数据减少单元91、变化J^十，元92、显示类型 确定单元93、选择单元94和文鈔j建单元95。以帧为^的图^^:据从图^^理单元72 (图4)被"^^Ht据减少单元 91。数据减少单元91缩减来自图〗^t理单元72的以帧为^i的图像数据的像 素数量，并将作为缩减结果而获得的减少了像素数量的图傢数据提供给变化量 计胖元92。数据减少单元91^^愤^Mt，例如，将来自图像处理单元72的图j綠 据帧的7JC平和垂直像素数量分别减少到原来的1/8。因此，当从图4狄理单元72 (图4)提供i^t据减少单元91的图^^t据 帧例如由在垂直和7JC平方向上排列的720x480个4象素形成时，数据减少单元91 对来自图像处理单元72的具有720x480个像素的图#^据的像素进^^减，例 :iH口图7所示，从而形成7jC平和垂直像素数量减少到卯x60 ^H象素的图^^:据， 即720x480像素的1/8。换句话说，数据减少单元91例如将来自数据处理单元72的具有720x480
像素的图^^据分割成水平和垂iL^向上氺^的8x8的像素块，并对M块分 配形^^块的像素的像素值的平均值等，从而生成具有90x60像素的图<緣 据。为了减少以后处理的负担，通过数据减少单元91减少了来自图像处理单 元72的图^lt据的像素数量。当Fy文^N'J建单元76具有足够的性能并iUt需 减少处理负担时，数据减少单元91可以在后续阶段将来自图像处理单元72的 图傢数据直#^^变化*#胖元92。作为替M案，不必在Fy文件创建 单元76中提^lt据减少单元91。变化ii十^"元92计算从数据减少^ 91提供的以帧为#的表示图傳_ 数据的变4MU的变化量，并将该变化量按时间序列提供给显示类型确定单元 93和选择单元94。变化4^十#元92可以计算表示时间变^^变的变化量(此 后适当 为时间变化量)和表示空间变^^1的变化量(jtt^适当^为空间变化量)^:一或者^^者来作为以帧为^的变4匕量。时间变化量表示图像在时间方向上的变^^变。例如，帧内的时间变化量 表示该帧与紧邻该帧的前一帧之间在图像上的变^^呈度，即图像的运动私变。因此，jtk^M时间变化:tit当:^为运动信息。空间变化量表示图像在空间方向上的变^f艮变。例如，帧内的空间变化量 表示形成该帧的像素在像素处的变^f級，即图像的细度(复杂度)。因此， 》1^*空间变化*^当地称为细度信息。显示类型确定单元93 ^L^从变化fri十^4元92按时间序列^^供的以帧为 ^的变化量，以帧为单位确t毘示类型并将该显示类型提供^4择单元94， 其中该显示类型表示显示帧的显示方法。显示类型的详情将在以后描述。选择单元94选择从变化4^十#4元92 ^_供的以帧为#的变化*^皿 示类型确定单元93提供的以帧为#的显示类型中之一或二者，并将变化量和 显示类型中之一或二者提^M^N'j建单元95。例如，可以才娥用户的IMt预先i5X或确定^^择单元94中进^f可种选 择。当^ii择从变化^i十料元92提供的以帧为^i的变化量时，也可以i议 ^i^择单元94中固定的，那么Fy文^H'J建单元76中駄需提供显示类型确定 单元93辑择单元94 了。文^H'J建单元95创建预定格式的Fy文件，并将该Fy文件提供^i己录单
力通信单元77 (图4 )，其中该Fy文件中存有^4择单元94提供的以帧为单 位的变化量和显示类型中之一或二者。以下将参考图8的流程图来说明图6中的Fy文^H'j建单元76所^f亍的处 理(Fy文賴^h理)。首先，在步骤Sll中，数据减少单元91在必要时^^亍数据减少处理，用 ^减来自图像处理单元72 (图4)的图^^t据的4象素li:量。^t据减少单元91 将作为数据减少结果的图像数据提供给变化量计算单元92。处理进行到步骤 S12。在步骤S12中，变化ii十胖元92使用来自数据减少单元91的图像数据， 计算表示来自图像处理单元72 (图4)的图^^据#帧内的变^^呈度的以帧 为单位的变化量。变化4i十^元92按时间序列将变化量提供给显示类型确定 单元93械择单元94。处理进行到步骤S13。在步骤S13,显示类型确定单元93 ##来自变化J^十^元92的以帧为 ^i的变化量，以帧为^^i确^示类型，该显示类型表示显示帧时的显示方 法。显示类型确定单元93将显示类型提供^i^择单元94。处^ii行到步骤S14。在步骤S14，选择单元94选择从变化^i十胖元92提供的以帧为单位的 变化量和来自显示类型确定单元93提供的以帧为^的显示类型中之一或二 者。选择单元94将变化J^显示类型之一或二者提供给文^H'J建单元95。处 舰行到步骤S15。在步骤S15，文^N'j建单元95创建预定格式的Fy文件，该文件中存有从 选择单元94提供的以帧为^的变化量和显示类型中之一或二者。文^N'J建单 元95将Fy文件提供^i己录单it/通信单元77 (图4)并结狄理。图9是示出了图6中的变化:ti十^"元92的结构的示例的图。如上所述，变化*##元92可计算表示时间变^^1的运动信息(时 间变化量)和表示空间变^^变的细度信息(空间变化量)之一或者二者来作 为以帧为^的变4匕量。图9中顶端的图示出了在仅计算运动信息作为以帧为4^的变化量时，变 化J:i十^:元92的结构的示例。图9中从顶端开始的第二幅图示出了在仅计算 细JL信息作为以帧为^的变化量时，变化:ti十^f元92的结构的示例。图9 中从顶端开始的第三幅图(在底端)示出了在计算运动信息和细度信息二者作
为以帧为^i的变化量时，变化ti十^^元92的结构的示例。在图9顶端的变化^i十胖元92具有运动信息计料元101。从图9顶端 开始的第二个变化4i十^元92具有细度信息计^4元102。从图9顶端开始 的第三个变化J^十^元92具有运动信息计^元101和细度信息计^4元 102。来自数据减少单元91 (图6)的图像数据被提供絲动信息计料元101 和细度信息计胖元102。运动信息计，元101使用来自数据减少单元91的图傢数据以帧为为单 位计算运动信息，并输出该运动信息。细度信息计胖元102^U来自数据减 少单元91的图^^:据以帧为#的细度信息，并输出该细度信息。以下将参考图10说明通过图9中的运动信息计#4元101计算的以帧为 ^i的运动信息。例:M口图10所示，运动信息计料元101计脉紧接在前的第i-l个帧到 第i个帧的图像中的变化量，作为形a动图像的时间序列的帧当中从顶端开 始的第i个帧的运动信息。^it种情况下，；f^在第一个帧的运动信息。然而， 例如可采用与第二个帧的运动信息相同的运动信息作为第一个帧的运动信息。 作为替M案，可假设笫0个帧的图像A^斤有像素值为0的图^Ml者是与第一个帧的图^Mi同的图像，来计算第一个帧的运动信息。图11是示出了图9中的运动信息计，元101的结构的示例的图。 在图11中，运动信息计鮮元101包絲动向量^r测单元111械ihti十 胖元112。图^^据从数据减少单元91 (图6)被提供絲动向t^r测单元111。运 动向量^"测单元111将来自数据减少单元91的图^l!t据帧顺序i5^^i^^ 帧，并将紧邻该感魏帧的前一帧(J^适当^^为前一帧)分割成例如16x16 像素的块(mpeg中的宏块)。jHW卜，运动向量检测单元111为前一帧的#— 个宏块计算运动向量，并将该运动向量提供g计ii十W"元112，其中该运 动向量表示从前一帧到感^帧的运动。统计J:i十，元u2计算4树来自运动向量^r测单元111的前一帧的宏块所计算的运动向量的统计量，并将该统计量作为感M帧的运动信息瑜出。 将参考图12对图11中的运动信息计料元ioi的处Sii^i—步的说明。
扭动信息计料元101中，运动向极测单元111将前一帧分割成16x16 像素的宏块，并为前一帧的每一个宏块检测与该宏块最相似的感兴趣帧的 16x16像素块(jth^称为相似块)。运动向量检测单元lll计算例如具有将宏块 的左上部作为开始点以及将相似块的左上部作为结束泉的向量，来作为该宏块 的运动向量AF0 (h，v)。从前一帧的左边开始第h个和从顶部开始第v个宏块的位置净錄示为F0 (h， v)，而通it^块F0 (h， v)的运动向量AFO (h，v)而M块FO (h， v) 所移动的位置中的感兴趣帧的16x16像素块的位置，即相似块的位置净iL^示为 Fl (h, v)。通过等式AFO (h，v) =F1 (h， v) -FO (h， v)絲示宏块FO (h， v)的运动向量AFO (h,v)。统计^fi十^元U2计算例如前一帧的所有宏块的运动向量AFO (h，v)的 大小IAFO(h，v)l^pD(NSIAFO (h，v) |，作为为前一帧的宏^^斤计算的运动向量 的统i情，并输出该和DO作为感兴趣帧的运动信息。和DO=i:|AFO (h，v) I中的# S表示通过把h从1变到前一帧水平方向上 的宏块数量，以及把v从1变到前一帧垂直方向上的宏块数量iMi行的求和。当前一帧的^个宏块FO(h，v)的运动向量AFO (h，v)很大时，运动信息 DO，即运动向量^>, W艮大。因此，当感3^^帧的运动信息DO很大时，感 ^帧的图^il动^艮大(剧烈)。在上述情况中，前一帧所有宏块的运动向量AFO (h，v)的大小IAFO(h，v)l # D0=2:|AF0 (h,v) l被计算作为4Wt—帧宏^^斤计算的运动向量的统计量。 然而，作为为前一帧的宏块所计算的运动向量的统计量，除了和DO "卜，还 可采用例如为前一帧的宏^/斤计算的运动向量的分布。^Ml种情况下，统if^i十，元U2计算前一帧所有宏块的运动向量AFO (h，v)的平均值A跳，M过计算例:^〉式o0-2 (AfO(h，v)- Aave) 2来计算前 一帧所有宏块FO (h，v)的运动向量AFO (h，v)的分布trt)。分布o0 = ￡ (Afl)(h，v)曙Aave) 2中的,沐2表示通过把h从1变到前一帧横 向方向上的宏块数量，以及把v从1变到前一帧垂直方向上的宏块数量^J^行 的#。与和D0相似，当感M帧的图像运动很大(剧烈)时，分布oOhM艮大。 在图5中的主^LM编码器81V中进行图像数据编码的情况下，当计算运
动向量AF0 (h，v)时，统if^i十料元U2 (图11)可以^^1在主^LM编码 器81V中计算的运动向量AF0 (h，v)来计算如上所述的统计量。在这种情况下， 不需要在图11的运动信息计^4元101中该！运动向:i^r测单元m。 图13是示出了图9的运动信息计，元101的结构的另一示例的图。 在图13中，运动信息计胖元IOI包括直方图创建单元121、直方图賴 单元122和差值计料元123。来自数据减少单元91 (图6)的图像数据被提供到直方图创建单元121。 直方图创建单元121将来自凝:据减少单元91的图^^t据的帧顺序地i5^^兴 趣帧，并可以说，创建感兴趣帧的像素值的简单直方图。直方图创建单元121 将该直方图提供给直方图^ft单元122和差值计，元123，作为感M帧的 直方图。直方图存储单元122存储从直方图创建单元121提供的感兴趣帧的直方 图。直方图^ft单元122具有足够^ft至少两个帧的直方图的a量。直方图 ^f^单元122 ^^从直方图创建单元121提供的林的感兴趣帧的直方图以及 上一次的感兴趣帧即前一帧的直方图。差异计，元123计算从直方图创建单元121提供的感M帧的直方图与 ^^在直方图^#单元122中的前一帧的直方图的差^i^f值^，这将在以 后描迷，并将该差m^t值^作为感兴趣帧的运动信息而输出。将参照图14进一步说明图13中的运动信息计^"元101的处理。当^M&据减少单元91 (图6) 4€^^^直方图创建单元121的图^lt据的 像素M示为例如能够表示0到255的整数值的8比特时，jL^r图创建单元121 将0到255的范围等分成例如八个小范围，0到31、 32到63、 64到95、 96到 127、 128到159、 160到191、 192到223以及224到255。 J^r图创建单元121 计算包含在各个小范围中的像素值的频率，从而创建感M帧的简单直方图。例如，如图14所示，当第i + l个帧是感兴趣帧时，差值计，元123计 算作为感M帧的第i + l个帧与前一帧第i个帧在同一小范围中的频率间的差 值的^t值A (图14中的阴影部分)，如图4所示。差值计料元123进一步 计算为直方图的八个小范围计算的频率的差值的鍵对值^ 2A(差值^t值之 和)，并将该和作为感M帧的运动信息而输出。当感魏帧的运动很大(剧烈)时，感兴趣帧的像素值的频率分布与前一
帧的像素值的频率分布不同。因此，当感她帧的差值fej"值4^PEA很大时，感兴趣帧的图像的运动^艮大(剧烈)。图15是示出了图9中的细度信息计#元102的结构的示例的图。在图15中，细度信息计料元102包括DCT (离散余弦变换)转换单元131、权重因子计料元132棘分单元133。来自数据减少单元91 (图6)的图傢数椐被提供给DCT转换单元131。DCT转换单元131顺序#来自数据减少单元91的图傢数悟的帧该^^感兴趣帧，并将感痛帧分割成例如8x8像素块。DCT转换单元131对感兴趣帧的每个块都进行DCT转换，并将对于每个:^斤获得的8x8 DCT因子提供给积分单元133。权重因子计胖元132计算4f要;^到块的8x8 DCT因子的权重，并将该 权重提條积分单元133。积分单元133将脉重因讨料元132提供的权重胁到从DCT转换 单元131提供的块的8x8 DCT因子上，并对DCT因子进^^分来计算积分值。 jH^卜，积分单元133计算为感兴趣帧的^H^斤计算的积雑的总和，并输出 该和作为感兴趣帧的细度信息。将参照图16进一步说明图15中的细度信息计，元102的处理过程。图16的左边部^出了 DCT转换的基图像。该基图像包括8x8个图案(频 率成分)。更向右和更向下的图案是具有更高频率成分的图案。在块的8x8 DCT因子中，Mit^i个(i-1， 2，…，8)和从顶端第j 个(j-l， 2，…，8)DCT因子Fi-Lji表示块中从基图像的左边第i个和从顶 端第j个的图案的频率成^包^#呈度。图16的右边部^出了图15中的权重因子计，元132计算的权重权重Gw"是胁到DCT因子Fj-l "的权重。权重因"fi十料元132根 ^^hft^^式G"w-ixj来计算权重GHj4。因此，^3L重因fS十料元132中， 当将Gw^^到较高频率成分的DCT因子Fh, p时，所计算的权重Gwj.i也 更大。图15中的积分单元133将从DCT转换单元131提供的块的DCT因子F; -l p与>^1重因^^十料元132提供的权重G叫.!进frf目乘，从而计算^r值Gw^x Fh, j—la积分单元133对为块的8x8 DCT因子Fi—L "所获得的^R值 GHjjxFi画!,jiit^^ 、分，来计算积^LV-i:G"mxFi-Lj小积^V-i:GHwX Fj-L中的求和S表示通过分别将i和j从1变到8来进行的求和。积分单元133进一步计算对感痛帧的所有^^得的积雑V # K，并 将该和K输出作为感兴趣帧的细度信息。由于较高的频率成分包含在感兴趣帧内，因为细度信息农大，即积^h直V 的和K较大，感兴趣帧的图像是一幅更细致的(m杂的)图像。图17是示出了图9中的细度信息计^元102的结构的另一示例的图。在图17中，细度信息计料元102包括平均值计料元141、差值计料 元142^ 、分单元143。来自数据减少单元91 (图6)的图像数据被提，平均值计^元141和 差值计斜元142。平均值计料元141连续珊来自数据减少单元91的图像 数据帧iit^i^^帧，并将感兴趣帧分割成例如8x8像素的块,如图18所示。 jH^卜，平均值计胖元141计絲讀帧的块的像素值的平均值，并将该平均 值提供给差值计料元142。当将8x8像素块的itW3描顺序中的第k W象素的像素^4示为Pk时， 平均值计算单元141 4M&公式Pave=l/(8x8) xEPk计算平均值Pave。平均值 Pave=l/(8x8) xi:pk中的求和2表示通it把k从1变到8x8( = 64 )iM^询求和。勤以于平均值计^元141，差值计m元142将感兴趣帧分割成8x8的 像素块，计躲的每^h象素值Pk与从平均计料元141提供的块的像素值的平均值Pave之间的差值的^f询Pk - Pave| ，并将该射差询Pk - P柳I提^HP、分单元143。积分单元143对差值的射询Pk-Pave,沐分来计算积維Q=2|Pk-Pave|，其中所述差值的^KM:从差值计^f元142提供的为块的^^象素计算 的差值的^t值。积綠Q=qPk - Pave|中的,沐S表示通过把k从1变到8x8 (=64)絲行的,沐oH^卜，积分单元143计算为感兴趣帧的所有^^得的积^i^^Q,并输 出该和值作为感兴趣帧的细度信息。为感:^帧计算的积^i"^Q被称为帧内AC。由于帧内AC的值较大， 感兴趣帧中的像素值的波动植大。因此，当细度信息即积^IL^^Q较大时，
感魏帧的图像是一幅更细致的(n杂的)图像。#实施例中，如以下所描述的，诸M动信息和细度信,lr^类的变化量用于(包括)拖放(的变速再现)。jtb^卜，还可在例:H^测场景变4沐实现MPEG 编码的效率中^U该变化量。以下将参照图19-25来说明图6中的显示类型确定单元93。图19 K化J^十料元92 (图6)计算的每个帧的变化量的曲线图。在 图19中，横坐标表示帧(从顶端开始的帧的位置)，脏标表示变化量。当变化量例如是动作剧烈(大)的帧中的运动信息时，该变化量^艮大。 在没有(几乎没有)动作的帧中，变化量很小。显示类型确定单元93 (图6)根据图19所示的由变化*^十#^元92计算的以帧为#的变化量，从多个显示类型当中确U示类型，该显示类型表示 显示每个帧的显示方法。图20 ^^示出了由显示类型确定单元93确定的显示类型的示例的图。在图20中，作为显示类型，具有三种类型，即表示以静态图像显示的静态图《象类型V1、以及"fit类型V2和高显示速率/低M率类型V3，在"fif类型V2和高显示速率/^^f率类型V3中，显示帧的M率和显示帧的显示速率是不同的。显示帧的M科旨的n示在^^显示器41 (图2)之类的显示装置上的 图像的空间緒率。例如，对于用作主数据和4^g数据的图^lt据，主数据具 有较高的M率，而^m数据具有较低的M率。显示帧的显示速科旨的A^新在iH^显示器41之类的显示装置中的显示 的频率(周期)。例如，当以与运动图像的帧速率(例如30Hz)相同的显示速 率来更新显示，并且以与帧速率相同的速率iM^—帧到下一帧(时间Ji4一帧 之后的帧)更新J^显示的帧时，以单一的速率^^动图像。iH^卜，例如当以两# 动图像的帧速率的显示速率来更新显示，并且以 两倍于帧速率的速率;JM^—帧到下一帧更新要显示的帧时，以两倍的i^E示 运动图像。例如，当以与运动图像的帧速率相同的显示速率来更新显示，并且以两倍 于帧速率的速率^Mw—帧到下一帧更新要显示的帧时，也以两倍的i^E絲 动图像。
当以两倍于运动图像的帧速率的显示速率来更新显示，并且以两倍于帧速 率的速率来更新要显示的帧时，显示形錄动图像的所有的帧，没有丢失。然 而，当以与运动图像的帧速率相同的显示速率来更新显示，并且以两倍于帧速 率的速率来更新要显示的帧时，每隔一帧絲示形錄动图像的帧，即丢失帧 的状态。因此，当以高于帧速率的速率更新要显示的帧时，可以通过增 示速率 g免(减少)丟失帧。对于静态图像类型VI的帧，例如，即^^L^J^显示的帧，只要可以M 显示的帧的图<緣作是与在该图像紧#^前显示的帧(的图像)相同的图像， 皿示该图1象紧4^L前显示的帧(的图〗象)(继续显示)。对于辆图像类型V2的帧，例如，以与运动图像的帧速率相同的显示速率(jtb^被适当g为"fiiii率)和与作为主数据的图^lfc据的^^率(高于作为^c^lt据的图^lit据的^^率)相同的，率(#适当#为1^^# 率)絲示图像。对于高显示速率/^^f率类型V3的帧，例如，以高于^iiil率的显示速 率，例如两^^tit率的显示速率，以及以与作为代^^数据的图像数据的分<当具有^ft类型时，即图20所示的静态图;类型VI、 "fit类型V2和高 显示速率/^^f率类型V3作为显示类型时，变化:ti十^元92计算运动信息， M帧的时间变^^L4示为变化量。显示类型确定单元93 ，'Bt^^个帧的变 化量(运动信息)与两个预定阈值进行》嫩，并^^Jto^果来确定帧的显示 类型是静态图像类型V1、 M类型V2 ^高显示速率/#^率类型V3。图21示出了根悟图19所示的以帧为4^的变4匕量，由显示类型确定单元 93以帧为^所确定的显示类型的图。显示类型确定单元93将以帧为^的变化量(运动信息)与阈值L和阈 值H之一进行t嫩，其中L〈H。显示类型确定单元93确定作为一种^^率/ 高显示速率类型的高显示速率/^^率类型V3，作为运动信息等于或大于阈 值H的帧的显示类型，即用于其中运动信息表示时间变^f^l很大的帧的显示 类型。当例如在具有时间变^tt^J^^艮大的帧、即^辑所进^^拖故中的具有较
大运动的帧的显示中iLi丟失帧时，图像中的时间变化倾向fifct漏。因此， 希望以高显示速率来显示具有较大运动的帧。然而，当将显示速率i5^高时，设备进^^的负妙重。jtb^卜，由于 具有大运动的帧的数据量很大，因jH^H亥帧的处理负担也H^寸不具有较大运动 的帧的处理负担大。因此，林实施例中，以高显示速率絲示具有大运动的帧。然而，辆 高显示速率/^^f率类型V3用于该帧，该类型V3是一种用于显示具有^^ 辨率的图像的低緒率/高显示速率类型。低緒率的图^Ml对于高辨率图 像，具有较小的数据量。因此，可通过以用于具有大运动的帧的高显示速率显 示低緒率图像如咸少用于4fe^的设备的负担，同时狄编辑中图像中的时间 变化的遗漏。另一方面，显示类型确定单元93为运动信息小于阈值L的帧，即运动信 息表示时间变^fiJL很小的帧，确定静态图像类型VI作为显示类型，该类型 VI表示以静态图^ii行显示。例如，具有较小时间变^^艮复的帧，即帧没有(几乎没有)运动的帧^ 辑中^M亍的4^:中连续。^it种情况下，当在帧中更新要显示的帧时，即使将 在*显示器41 (图2)之类的显示装置上的显示从紧接更新之前的帧(的图 像) 到更新后要显示的帧(的图像)，显示装置Ji^示的图像也不tt (罕 有变化)。当更新要显示的帧，而不管显示扭示装置Ji^示的图^J殳有变化时，如 果用这种方式将显示装置上的显示从紧接更新之前显示的帧tt到更新后要显 示的帧，则可以i树用于M的设备产生了额外的负担。在没有(财没有)运动的帧持续的情况下，当在帧中更新要显示的帧时， 如果#1射。显示器41 (图2)之类的显示装置上的显示从紧接更新前显示的帧 改变成更新后要显示的帧时，显示在显示装置上的图像会轻孩汉化。在这种情 况下，在没有动作、罕被i5^编辑点的连续帧的区间中，辨用于城的设 备的用户的注意力将被吸引，也可以iJC lX用的。i^t用户增加了负担。因此，#实施例中，即4狄变了要显示的帧，只要可以将要显示的帧的 图4緣作是与紧接更新之前显示的帧的图<財目同的图像，则可对没有运动的帧 iM用于显示紧接更新之前显示的帧(的图像)的静态图像类型V1。这使得可
以i^^用于城的设备和##设备的用户胁额外负担。对于运动信息等于或高于阈值H的帧以U动信息小于阈值L的帧以外 的帧，即运动信息等于或大于阈值L并小于阈值H的帧，显示类型确定单元 93确定"fit类型V2作为这些帧的显示类型。采用用于以4iti4率(与图像的帧速率相同的显示速率)和f"i!M率来 显示图像的"fif类型V2，用于具有某种运^1但并非具有很大运动的帧。在按时间序列形^it动图像的帧(序列)中，其中静态图像类型VI的帧 *的区间称为静态图像区间，其中"fit类型V2的帧连续的区间称为"fit区 间。其中高显示速率/低^f率类型V3的帧连续的区间称为高显示速率/^^ 率区间。图22是示出了图6中的显示类型确定单元93的结构的示例的图。在图22中，显示类型确定单元93包括<##单元161、阈M理单元162、 錄性判断单元163和确定单元164。从变化^i十，元92 (图6)将以帧为^的变4匕量^^^^^t单元161。 ^ft单元161临时^ft来自变化^i十，元92的以帧为^的变化量。阈M理单元162将4^^4^单元161中的以帧为^i的变化量与阈值 H和阈值L (两者或之一)进行t汲，并且以帧为单位将表示tb^果的t饿 信,y^供M续性判断单元163和确定单元164。来判断例如是否以帧数N (多个)或更多连续出现变化量等于或;^于阈值H的 帧，以AA否以帧数N或更多錄出现变化量小于阈值H的帧。絲性判断单 元163将表示判断结果的判断信息《^^^确定单元164。确定单元164才緣来自阈M理单元162的tb^信息和来自il^性判断单 元163的判断信息来为形^t动图像的每一帧确定显示类型，并输出该显示类 型。接下;j(L^照图23和24的流程图来说明图22中的显示类型确定单元93的 处理。当从变化^i十料元92 (图6)提供以帧为扭的变化量时，在步骤S41， 显示类型确定单元93使《##单元161高速緩存(临时务賭)以帧为^的变化 量。处舰行到步骤S42。^i十料元92被提供到显示类型确定单元93作为 变化量。显示类型确定单元93例如^^t类型中为每个帧确定一种显示类型， 该三种类型即图20中所示的静态图像类型VI、 "fii类型V2和高显示速率/低 M率类型V3。在步骤S42中，阈M理单元162执行阈^h理，该阈,理用于将M ^##单元161中的以帧为^的变化量(运动信息)与阈值H和阈值L (两 者或之一)进行J^i艮。阈m理单元162以帧为卑啦将tb^信息炎供i^续性 判断单元163,其中该比较信息表示以帧为#的变化量与阈值H或阈值L的 》b^果。处舰行到步骤S43。在步骤S43，连续性判断单元163从形絲动图像的帧中选#^如没有设 ^^姨帧的按时间序列的顶部帧，Fy文件创建单元76 (图6)将为翻，J建 Fy文件。处舰行到步骤S44。在步骤S44中，连续性判断单元163 ##来自阈m理单元162的tb^信 息判断感M帧内的变化量是否等于或大于阈值H，以及判断变化量等于或大 于阈值H的帧是否以帧数N (多个)或更多连续出#感^帧紧4^^前、紧 ^J^、或之前与^0当在步骤S44中判断出感M帧内的变化量等于或大于阈值H并且变化量 等于或大于阈值H的帧以帧数N(多个)或更多连续出m^感兴趣帧紧^^前、 紧4^t后、或之前与之后时，i^性判断单元163将表示判断结果的判断信息 提供给确定单元肌处舰行到步骤S45。在步骤S45中，确定单元164根据来自魏性判断单元163的判断信息扇 定高显示速率/低分辨率类型V3作为感兴趣帧的显示类型。处理进行到步骤 S50。才缺步骤S44和S45,当感魏帧内的变化量等于或大于阈值H，并且变 化量等于或大于阈值H的帧以帧数N (多个)或更多i^出l^感兴趣帧紧接 之前、紧^^后、或之前与之后时，确定高显示速率/^^率类型V3作为感 ^帧的显示类型。这:种确^l^于以下原因的。如以下所描述的，当在M中，E种显示类型即静态图像类型VI、普 通类型V2和高显示速率/^^率类型V3中确定显示类型的时候，为静态图 像类型VI的帧和"fit类型V2的帧显示高緒率的图像(具有^ii，率的图
像)。换句"^兌，通败理具有较大数据量(大于^g数据的数据量)的主数据
的图^^据絲示图像。另一方面，对于高显示速率/^^率类型V3的帧， 显示具有低，率的图像。换句^^兌，通it^:理具有较小数据量(小于主数据
的数据量)的代理数悟的图^^据束显示图像。
例如，当絲7 (图1)是记絲主数#^^数据的专业盘时，记 絲储7中的主数絲^^数据^em。接下来，对于静态图像类型VI
或辆类型V2的帧，必须^MeJ: 7中读出主数据。对于高显示速率m^f率
类型V3的帧，必须m盘7中读出代理数据。
在储7中，主数絲^^数据被记絲物SJi^目互分离的位置中。因此， 例如当静态图像类型VI或*类型V2的帧与高显示速率/^^率类型V3的 帧交替出现时，对M7中(记录的数据)进4沐动时频繁^M亍查找。M于 用于4^文的设备的性能，可育摊以流畅^^愤过辦 ^条53 (图3)而指 定的帧的显示。
因此，林实施例中，为了敏频^i行查找，确U示类型，从而以帧 数N或更多iMI:续呈现高显示速率/^^率类型V3的帧并且还以帧数N或更 多来呈现静态图像类型VI或*类型V2的帧。
例如，如上所述，在步骤S44和S45中，当感m帧内的变化量等于或大 于阈值H，并且变化量等于或大于阈值H的帧以帧数N (多个)或更多錢出 踪感姨帧紧^t前、紧#^、或之前与^时，确定高显示速率/#^# 率类型V3作为感兴趣帧的显示类型。
可以考虑例如用于播;tt盘7的驱动器5等的最长查找时间、以及形^ 动图像的帧的总^MI定帧数N，其中Fy文^N'j建单元76 (图6)要为所g 动图l象创建Fy文件。可以响应用户的l^ft来确定帧数N。
当确定显示类型时，帧数N A^化量等于或大于阈值H的应该连续的帧 的最小数量(j^卜，如以后所描述，其;i^化量小于阈值H的应该连续的帧的 最小数量)，J^将帧数N适当g为最小树艮帧数N。
当在形g动图像的按时间序列的帧中，对用于4M主数据显示图像的静 态图像类型VI或*类型V2的帧和用于^^H^^数据显示图像的高显示速率 /寸^f率类型V3的帧进4预繁地切换时，查4^bi—个问题。当在^U主数据 显示图像的静态图像类型VI的帧和"fif类型V2的帧之间进^ft^换时，查找不
成问题。
另一方面，当在步骤S44中判断感^帧内的变化量并不等于或大于阈值 H，或者即使感M帧内的变化量等于或大于阅值H，但变化量等于或大于阈 值H的帧没有以最小极P艮帧数N或更多而连续出i^感^帧紧^t前、紧接 ^、以及之前和^时，处Sii行到步骤S46。连续性判断单元163才娥来 自阈M理单元162的tb^信息判断感3^帧内的变化量是否小于阈值H以及 是否变化量小于阈值H的帧以最小极限帧数N或更多而连续出l^感^帧紧 歉前、紧#^、或之前与^。
当在步骤S46中判断感兴趣帧内的变化量小于阈值H并且变化量小于阈值 H的帧以最小极限帧数N或更多而连续出tt感魏帧紧^L前、紧^L^、 或之前和^时，錢性判断单元163将表示判断结果的判断信息炎^^确定 单元164。处舰行到步骤S47。
确定单元164 M续性判断单元163接收提供的判断信息，该判断信息所 表示的判断结果是感兴趣帧内的变化量小于阈值H并且变化量小于阈值H的帧 以最小极限帧数N或更多而连续出郝感她帧紧^^前、紧^t^、或之前 和^。接着，在步骤S47中，确定单元164才娥来自阈做理单元162的比 较信息判断感M帧内的变化量是否等于或大于阈值L。
当在步骤S47中判断感M帧内的变化量等于或大于阈值L，即当感M 帧内的变化量等于或大于阈值L且小于阈值H时，处^ii行到步骤S48。确定 单元164确定辆类型V2作为感兴趣帧的显示类型。处^ii行到步骤S50。
当在步骤S47中判断感M帧内的变化量并不等于或大于阈值L，即当感 姨帧内的变化量小于阈值L时，处3Sii行到步骤S49。确定单元164确定静 态图像类型VI作为感兴趣帧的显示类型。处Sii行到步骤S50。
才條步骤S46至S49，当感M帧内的变化量小于阈值H，并且变化量小 于阈值H的帧以帧数N或更多而il^出l^感M帧紧^^前、紧#^、或 之前和^时，如果感絲帧内的变化量等于或大于阈值L，则确定辆类型 V2作为感M帧的显示类型。如果感M帧内的变化量小于阈值L，则确定静 态图像类型VI作为感姨帧的显示类型。i^U;了狄^i^^口上所述的拖 放时频^it行查找。
在步骤S50中，錢性判断单元163判断在形錄动图像的帧中是否存在
没有^^作感M帧的帧，其中，FY文件创建单元76 (图6)要为所述帧创建
py文件。
当在步骤S50中判断仍存在没有^it作感兴趣帧的帧时，处理回到步骤 S43。新选^^未:^fe^作感^帧的帧作为感^帧。重复相同的处理。
当在步骤S50中判断;^^在尚未^^作感痛帧的帧时，显示类型确定单 元93结A^t理。
另一方面，当在步骤S46判断感兴趣帧内的变化量不小于阈值H，或者即 使感^^帧内的变化量小于阈值H,变化量小于阈值H的帧没有以最小极限帧 数N或更多连续出踪感兴趣帧紧^^前、紧^4L^、以及之前和^时，处 ^ii行到图24中的步骤S61。魏性判断单元163判断是否变化量i^L阈值H 的帧以最小极限帧数N或更多出l^感兴趣帧紧^t前、紧^^、或之前和
图25是以帧为^的变化的曲线图。在图25中，横坐标表示帧，纵坐标 表示变化量。图25中仅示出了阈值H和L中的阈值H。
当感讀帧的变化量等于或大于阈值H，并且变化量等于或大于阈值H的 帧以帧数N或更多出贴感a帧紧^^前、紧^^、或之前和^时，在 图23的步骤S45中，确定高显示速率/^^率类型V3作为感兴趣帧显示类型。
当感3^帧的变化量小于阈值H,并且变化量小于阈值H的帧以最小极限 帧数N或更多出贿感姨帧紧^^前、紧^^、或之前和^时，在图23 的步骤S48或S49中，确定"fit类型V2或静态图像类型VI作为感M帧的显 示类型。
因此，当变化量等于或大于阈值H的帧没有以帧数N或更多出贿感兴 趣帧紧^^前、紧<駄后、以及之前和之昏，并且变化量小于阈值H的帧没有 以最小极限帧数N或更多出郝感絲帧紧^^前、紧^t^、以及之前和之 后时，^1f亍图24中的步骤S61。 il^这^^种情况，其中感兴趣帧是例如图25 所示的位于表示为区间T\、 T2、 T3和T4的区间中的一个帧，在所述区间中出 现变化量，阈值H的帧(其中混合有变化量等于或大于阈值H的帧以 化 量小于阈值H的帧的区间)，以及其中变化量等于或大于阈值H的连续帧的数 量以 化量小于阈值11的帧的数量至多小于最小极限帧数N的区间(jtk^被 适当i^为:^^区间)中的帧。
如图25所示，混合区间典型地出5^变化量等于或大于阈值H的帧以帧 数N或更多连续出现的区间(此后适当地称为大变化量区间)以及具有连续变 化量小于阈值H的帧以最小极限帧数N或更多出现的区间(jH^适当i^ 为小变化量区间)之间，或出现在大变化量区间之间，或小变化量区间之间。
混合区间可^^割成区间&变(帧数)等于或大于最小极限帧数N的区间 和区间长度小于最小极限帧数N的区间。在图25中的混合区间l至T4中，混 合区间T2是区间"M:等于或大于最小极限帧数N的区间，其它混合区间1\、 T3、 T4是区间长度小于最小极P艮帧数N的区间。
也可以将;^給区间分割礼g大变化量区间和小变化量区间之间的区间、在 大变化量区间之间的区间、以碌小变化量区间之间的区间在图25的》V給区间 1\至T4中，》V給区间I 、 T2是在大变化量区间之间的区间，；^^区间T3是在 大变4匕量区间和小变4匕量区间之间的区间。濕合区间14;^在小变^:量区间之间 的区间。
重新参考图24，如前所述，在步骤S61中，连续性判断单元163判断是否 变化量，阈值H的帧以最小极限帧数N或更多连续出#感^^帧紧^ 前、紧#^、以及之前与^，即是否出5W兴趣帧的^^区间是区间tt 等于或大于最小树艮帧数N的区间。
当在步骤S61中判断变化量*阈值N的帧以最小树艮帧数N或更多连 续出踪感兴趣帧紧^^前、紧#^、或之前和^，即出舰兴趣帧的混 合区间是区间"j^l等于或大于最小极限帧数N的区间，如图25中的"給区间 T2时，处Sii行到步骤S62。确定单元164例如确定"fif类型V2作为感兴趣帧 的显示类型。处iSii行到图23中的步骤S50。 jtt^，扭行以上所描述的处理。
对于其中变化量，阁值H的帧以最小极限帧数N或更多连续出现的混 合区间中的帧，确定使用(充当)主数据(的图像数据)显示图像的"fit类型 V2或^^J (充当)^S数据(的图^^据)显示图像的高显示速率/低M率
类型V3作为帧的所有显示类型。这使得可以狄频^i行查找。
因此，在^实施例中，^fit类型V2确^混合区间中的帧的所有显示 类型，其中在所必昆合区间中，变化量，阈值H的帧以最小极限帧数N或更 多而i^出现。除了"fit类型V2，也可以将高显示速率/^^率类型V3确定 为混合区间中的帧的显示类型，其中在所必昆合区间中变化量，阈值H的帧
以最小树艮帧数N或更多而魏出现。
当仅注重狄频繁^f亍查找时，也可以4ff^I主数据显示图像的静态图像 类型VI确^混合区间中的帧的显示类型。然而，由于混合区间是其中出现 了变化量，阈值H的帧的区间，因此不^fti^脊ft为变化量小于阈值L的帧的 显示类型的静态图像类型VI确定为^^区间中的帧的显示类型。因此，#f 通类型V2或高显示速率m^f率类型V3确U混合区间中的帧的显示类型。
另一方面，当在步骤S61中判断没有变化量，阈值H的帧以最小极限帧 数N或更多而连续出難感絲帧紧4ML前、紧4ML^、以及之前和^时， 即当其中出鶴兴趣帧的〉V給区间(jH^称为感兴趣^給区间)是区间M小 于最小极限帧数N的区间，如图25中的混合区间TV 13和14时，处^ii行到 步骤S63。连续性判断单元163判断是否在区间狄小于最小极限帧数N的感 兴趣混合区间左边的时间上在前的帧Ub^癒逸当地称为左帧)中的々N^感兴 趣》V給区间的帧中的变化量以M感兴趣"^区间右边的时间Ji^后的帧(此 后被适当g为右帧)中的^于感兴趣^^区间的帧中的变化量中的-H^ 于或大于阈值H而另一个小于阈值H。换句话说，i^性判断单元163判断区 间M小于最小极限帧数N的感3^混合区间是否是位于大变化量区间和小变 4匕量区间之间的区间。
当在步骤S63中判断区间M小于最小极限帧数N的感M混合区间是位 于大变化量区间和小变化量区间之间的区间时，即区间M小于最小极限帧数 N的感M混合区间是如图25中的混合区间T3这样的位于大变化量区间和小 变4匕量区间之间的混合区间时，处3Sii行到步骤S62。如上所述，确定单元164 # 类型V2确^感魏帧的显示类型。处Sii行到图23中的步骤S50。 脉进粉口上所述的处理。
位于区间HL小于最小极限帧数N的感兴趣混合区间两边的大变化量区 间和小变化量区间二者都是区间长度等于或大于最小极限帧数N的区间。此外， 确定^^^^数据显示图像的高显示速率/^^#率类型V3作为大变化量区间 中的帧的显示类型。确定^^]主数据显示图像的"fit类型V2或静态图像类型 VI作为小变化量区间中的帧的显示类型。
对于位于大变化量区间和小变化量区间之间的区间长度小于最小极P艮帧 数N的感M》V^区间中的帧，显示类型与被确定作为;^化量区间中的帧的
显示类型的高显示速率/^^率类型V3或被确定作为小变化量区间中的帧的 显示类型的辆类型V2相同。因此，高显示速率/^^率类型V3或辆类 型V2的帧以最小柳艮帧数N或更多连续。这使得可以i^频^ii行查找。
因此，#实施例中，4ffit类型V2确定为感3^:^^区间中的帧的所 有显示类型，其中所述感^^:^^区间位于大变化量区间和小变化量区间之间， 并JL^该感兴趣^^区间中变化量，阈值的帧少于最小极限帧数N。除了普 通类型V2，也可将高显示速率/j^^率类型V3确定为感M^^区间中的帧 的所有显示类型，其中所述感兴趣〉'^^区间位于大变化量区间和小变化量区间 之间，并J^E该感讀^給区间中变化量i^阈值H的帧少于最小极限帧数N。
另一方面，当在步骤S63中判断区间U小于最小极限帧数N的感M混 合区间不是位于大变化量区间和小变化量区间之间的区间时，处Sii行到步骤 S64。连续性判断单元163判断在区间狄小于最小极限帧数N的感兴趣^給 区间的左边的时间上的在前帧(左帧)中々條于感兴趣:^^区间的帧中的变化 量、以^感兴趣混合区间右边的时间上的在后帧(右帧)中，于感M混 合区间的帧中的变化量i^i者是否都等于或大于阈值H。换句"^兌，錢性判 断单元163判断区间A变小于最小^LF艮帧数N的感兴趣混合区间是否是位于大 变4匕量区间之间的区间。
当在步骤S64中判断区间长度小于最小树艮帧数N的感M混合区间不是 位于大变化量区间之间的区间时，即当区间"ML小于最小极限帧数N的感M 〉！^区间是位于小变化量区间之间的混合区间时，如图25中的混合区间T4， 处^ii行到步骤S62。如上所述，确定单元164^^it类型V2确定为感M帧 的显示类型。处^ii行到图23中的步骤S50。此后，进^S(口上所述的处理。
换句"^兌，对于在两个小变化量区间之间的区间^JL小于最小极限帧数N 的感兴趣混合区间中的帧，显示类型与被确定(可育^皮确定)作为两个小变化 量区间中的帧的显示类型的lit类型V2相同。结果，^类型V2的帧以最小 树艮帧数N或更多连续。这使得可以敏频f4t行查找。
另一方面，当在步骤S64中判断区间M小于最小极限帧数N的感M混 合区间是位于大变化量区间之间的区间时，即当区间"^1小于最小极限帧数N 的感缺混合区间是位于妓化量区间之间的混合区间时，如图25中的混合区 间T"处Sii行到步骤S65。确定单元164将高显示速率/^^率类型V3确
^7感魏的显示类型。处Sii行到图23中的步骤S50。廷，进行如上所述 的处理。
换句话说，对于位于两个大变化量区间之间、区间长度小于最小极限帧数 N的感^"^区间中的帧，显示类型与被确定作为两个大变化量区间中的帧 的显示类型的高显示速率m^f率类型V3相同。因此，高显示速率/低M率 类型V3的帧以最小极限帧数N或更多连续。这使得可以i^频^Ji行查找。
图26是示出了当由图6中的变化ii十胖元92计算运动信息作为变化量、 显示类型确定单元93根g动信,I^U示类型、由选择单元94选择变化量 和显示类型时，图6中由文^N'J建单元95创建的Fy文件的示例的图。
在图26中的Fy文件中，从左到右，连续布置有表示从顶端开始的帧的位 置的帧数、对应于帧数的帧的时间码、充当对应于帧数的帧中的变化量的运动 信息、以及对应于帧数的帧的显示类型。
在图26中的Fy文件中，将^t类型中的^f^f可一种，即图20中的静态图 像类型V1、 "fit类型V2和高显示速率m^率类型V3确定作为显示类型。
在图26中的Fy文件中，为了确tE示类型，分别采用1和5作为阈值L 和阈值H。 ^MJ通过公式N-FxP计算的值作为最小极p艮帧数N，其中F是创 建Fy文件的运动图像的帧的总数，P是预定因子。当创建Fy文件的运动图像 的帧的总数F是例如3000，并且预定因子P是例如O.Ol时，最小树艮帧数N 为30 ( =3000x0.01)。
在图26中，辆运动信息作为变化量，并JU娥帧的运动信息，将^t 类型中的任何一种，即静态图像类型V1、 lii类型V2和高显示速率/低^率 类型V3，确定作为帧的显示类型。但是，为帧确 示类型的方法并不限于此。
图27是示出了由图6中的显示类型确定单元93确定的显示类型的另一例子。
在图27中，有五种类型的显示类型，即表示以静态图像显示的静态图像 类型Vll、 "fit类型V12、以M示帧的^^率和显示帧的显示速率不同的高 显示速率Af^M率类型V13、超高显示速率/^^f率类型V14、和特高显示 速率/^^率类型V15。
对于静态图像类型Vll的帧，就像图20中的静态图像类型VI，即使
^!tt示的帧，只要可以扭要被显示的帧的图像看作是与紧接该图^M:前显示
的帧(的图像)相同的图像，雌示紧接该图^^前显示的帧(的图像)(继续 显示)。对于"fit图像类型V12的帧，如图20中的lit类型V2，以与运动图像的 帧速率相同的显示速率( 4率)和与作为主数据的图^4^据的M率相同 的緒率(辆緒率)絲示图像。对于高显示速率/^t辨率类型V13的帧，以高于"fiti4率的显示速率,例如^iiit率两倍的显示速率，以及以与作为^^Slfc据的图〗^:据的^^率相同的M率("fit，率)a示图像。对于超高显示速率/^^率类型V14的帧，以高于高显示速率/辆雑 率类型V13的显示速率，例如"fitii率三倍的显示速率，以及以与作为代理数据的图4^t据的^^率相同的M率(，剩氐于作为主lt据的图^^:据的分辨率)絲示图像。对于特高显示速率/^^率类型V15的帧，以高于超高显示速率/辆分 辨率类型V14的显示速率，i(O"fitit率四倍的显示速率，以及以与作为代^S数 据的图傢数据的^lf率相同的^f率(M剩氐于作为主数提的图像数提的分 辨率)；J^示图像。当^filit率是与NTSC(国家电视系M员会)系统的显示速率相同的(大 约)30帧/秒时，絲类型V12、高显示速率Afit緒率类型V13、超高显示 速率/^^f率类型V14和特高显示速率/低M率类型V15的显示速率分别是 30帧/秒、60帧/秒、90帧/秒以及120帧/秒。当具有五种类型，即图27所示的作为显示类型的静态图像类型V1、 "fit 类型V12、高显示速率Afit，率类型V13、超高显示速率/#^#率类型V14 和特高显示速率/^^率类型V15时，变化4i十料元92 (图6)计算表示帧 中的时间变^^JL的运动信息作为变化量，显示类型确定单元93 (图6)裯W'J i^^个帧的运动信息与四^^定阈值进行tb^。显示类型确定单元93 #^tb^ 结果来确定静态图像类型Vll、辆类型V12、高显示速率/辆緒率类型 V13、超高显示速率/^^率类型V14或特高显示速率/^^率类型V15作 为帧的显示类型。图28是作为变化量的运动信息和由显示类型确定单元93 (图6)根据变 化量以帧为#所确定的以帧为#的显示类型的曲线图。
在图28中，横坐标表示帧，M标表示变化量。显示类型确定单元93 (图6)将以帧为单位的变化量(运动信息)与阈值 TH1、 TH2、 TH3和TH4进行H^，其中THl^ra2^TH3^TH4。显示类型确 定单元93 ##高显示速率/#^率类型V15 (其是^^率/高显示速率类型 的一种)确定为运动信息等于或大于阈值TH4的帧的显示类型，即所述帧的运 动信息表示时间变^^1极大。在图28中，條高显示速率/低緒率类型V15 确定为区间D5中的帧的显示类型，该区间D5中运动信息等于或大于阈值TH4 的帧连续。显示类型确定单元93皿高显示速率/^^f率类型V14确^运动信息 等于或大于阈值TH3且小于阈值TH4的帧的显示类型，其中，所ii^高显示 速率m^率类型V14是^^率/高显示速率类型的一种，并且它的显示速 剩氐于特高显示速率/^^^率类型V15的显示速率，所述帧的运动信息表示时 间变^^i^很大，接近于极大。在图28中，皿高显示速率/低，率类型V14 确定为区间D4和D6中的帧的显示类型，其中该区间中运动信息等于或大于阈 值TH3且小于阈值TH4的帧连续显示。显示类型确定单元93将高显示速率Afit，率类型V13确^运动信息 等于或大于阈值TH2且小于阈值TH3的帧的显示类型，其中，所述高显示速 率A^IM率类型V13的显示速^f氐于超高显示速率/^^率类型V14的显 示速率，并且它的，率高于超高显示速率/^^率类型V14的，率，所述 帧的运动信息表示时间变^^1并非极大但仍很大。在图28中，将高显示速率 /"fii^lf率类型V13确定为区间D3和D7中的帧的显示类型，该区间中运动 信息等于或大于阈值TH2且小于阈值TH3的帧连续。显示类型确定单元93 # 类型V12确定为运动信息等于或大于阈值 TH1且小于阈值TH2的帧的显示类型，其中，所述"fit类型V12的显示速率 低于高显示速率Afit，率类型V13的显示速率，所述帧的运动信息表示时间 变^^SJL不是很大。在图28中，4ffit类型V12确定为区间D2和D8中的帧 的显示类型，该区间中运动信息等于或大于阈值TH1且小于阈值TH2的帧连 续。jtb^卜，显示类型确定单元93 ，态图像类型Vll确^运动信息小于阈 值TH1的帧的显示类型，其中，所述静态图像类型Vll表示以静态图像进行显
示，所述帧的运动信息表示时间变^^^很小。在图28中，絲态图像类型 Vll确定为区间Dl和D9中的帧的显示类型，该区间中运动信息小于阈值TH1 的帧连续。接下来将参照图29和30中的流程图来说明图22中的显示类型确定单元 93在确定如图27所示的静态图像类型Vll、 ^it类型V12、高显示速率/辆 緒率类型V13、超高显示速率m^f率类型V14或特高显示速率/^^f率 类型V15的情况下的处理。当从变化^i十料元92 (图6)提供以帧为^i的变化量时，在步骤S81， 显示类型确定单元93使^ft单元161(图22)高速緩存(临时員)以帧为# 的变化量。处^ii行到步骤S82。例如，运动信息作为变化量从变化4i十^f元92 ,皮^^^到显示类型确定 单元93。在步骤S82中，阈做理单元162 (图22)执行阈做理，用于将^#在 ^ft单元161中的以帧为#的变化量(运动信息)与阈值TH1、 TH2、 TH3 或TH4进行t饿。阈皿理单元162将表示以帧为^i的变化量和阈值TH1、 TH2、 TH3、或TH4的J^^结果的tb^信息以帧为卑^k^供^il^性判断单 元163。处舰行到步骤S83。在步骤S83,錢性判断单元163 (图22)从形錄动图像的帧中选鄉'J 如没有iH^^帧的按时间序列顺序的开头帧作为感兴趣帧，Fy文件创建 单元76 (图6)将为翻'j建Fy文件。处Sii行到步骤S84。在步骤S84中，錢性判断单元163 4娥来自阈做理单元162的》b^信 息判断感M帧内的变化量是否等于或大于阈值TH3，以及判断变化量等于或 大于阈值TH3的帧是否以最小极限帧数N或更多连续出#感^帧紧#^ 前、紧^^或之前与^。当在步骤S84中判断出感M帧内的变化量等于或大于阈值TH3并且变 化量等于或大于阈值TH3的帧以最小极限帧数N或更多个连续出m^感a 帧紧^t前、紧4M^或^^前与之后时，连续性判断单元163将表示判断结果 的判断信息炎供给确定单元164 (图22)。处igii行到步骤S85。确定单元164从持续单元163接收^^供的判断信息，该判断信息表示的判 断结果是感兴趣帧内的变化量等于或大于阈值TH3并且变化量等于或大于阈
值TH3的帧以最小树艮帧数N或更多i^出:^感^帧紧^L前、紧R 后或之前与^。接下絲步骤S85中，确定单元164才娥阈做理单元162 的tb^信息判断感^帧内的变化量是否等于或大于阈值TH4。当在步骤S85中判断出感M帧内的变化量等于或大于阈值TH4时，处 ^ii行到步骤S86。确定单元164 ,高显示速率/^^率类型V15确定为感 ^帧的显示类型。处歡'J步骤S93。当在步骤S85中判断出感^帧内的变化量不是等于或大于阈值TH4时， 即，当感3^帧内的变化量等于或大于阈值TH3并且小于阈值TH4时，处理 进行到步骤S87。确定单元164 M高显示速率/^^率类型V14确定为感兴 趣帧的显示类型。处igii行到步骤S93。才娥步骤S84和S87，当感M帧内的变化量等于或大于阈值TH3，并且 jH^卜变4匕量等于或大于阈值TH3的帧以帧数N个或更多连续出KL^感^^帧 紧^^前、紧^^或之前与^时，##高显示速率/#^#率类型V15或超 高显示速率/^^率类型V14确定为感M帧的显示类型。这种确^U^于以 下原因的。当在拖放中，在图27所示的静态图像类型V1、 "fit类型V12、高显示速 率AfitM率类型V13、超高显示速率/^^率类型V14和特高显示速率/低 M率类型V15中确定显示类型时，为具有静态图像类型Vll的帧、具有"fit 类型V12的帧以及具有高显示速率Afii，率类型V13的帧显示高M率的 图像(具有^t^f率的图像)。换句^i兌，通舰理具有较大数据量(相对于 ^m数据的数据量)的主数据的图<^:据4^示图<象。另一方面，对于具有超高显示速率/^^率类型V14的帧和具有特高显 示速率/^^f率类型V15的帧，显示具有^f^lf率的图^0换句"^^兌，通舰 理具有较小数据量(相对于主数据的数据量)的代^3^lt据的图^lt据iM^示图 像。例如，当M 7 (图1)是记絲主数据和^^数据的专业盘时，^fW记 絲M7中的主数^^R^数据^^^it接下来，如参照图23中所说明的 情况，在形錄动图像的按时间序列的帧中，当具有^JIH^^数据絲示图像 的超高显示速率/^^率类型V14或特高显示速率/^^率类型V15的帧和 具有^^)主数据来显示图像的静态图像类型Vll、 *类型V12或高显示速率/
絲緒率类型vi3的帧频^;换时，频繁4^亍查找。因此可育摊于平滑舰 M过,^:条53 (图3)而指定的帧的显示。为了狄频^ii行查找，需要絲在具有^^镇数据絲示图像的超高 显示速率/#^率类型V14或特高显示速率/^^f率类型V15的帧和具有使 用主数据来显示图像的静态图像类型Vll、 M类型V12或高显示速率Afit分 辨率类型V13的帧之间进^Mf^7换。另一方面，M高显示速率m^率类型V14和特高显示速率/^^率 类型V15的帧二者中，^^KJ(^数据絲示图像。因此，对于絲高显示速率 Af^^率类型V14的帧和特高显示速率/^^率类型V15的帧之间进行的切 换，查找不成问题。jH^卜，在静态图l象类型Vll的帧、*类型V12的帧和高显示速率/f"it 緒率类型V13的帧的所有帧中，^u主数据絲示图像。因此，对于絲静 态图像类型Vll的帧、^it类型V12的帧以及高显示速率AfiiM率类型V13 的帧之中的任意一种显示类型的帧和另一种显示类型的帧之间进行的切换，查 找也不成问题。因此，在图29和30中，在区间中以至少最小树艮帧数N连续的帧的区间中ia^i^具有^^H^s数据显示图像的显示类型(超高显示速率m^率类型V14或特高显示速率m^率类型V15)的帧和具有^^I主数据显示图像 的显示类型(静态图像类型Vll、 "fit类型V12或高显示速率Afit^率类型 V13)的帧之间的切换。为此，在步骤S84至S87中，当感兴趣帧内的变化量 等于或大于阈值TH3并且变化量等于或大于阈值TH3的帧以最小极限帧数N 或更多连续出i^感^^帧直^t前、直41^、或之前与^时，M高显 示速率m^^率类型V14或特高显示速率/^^f率类型V15确定为感兴趣帧 的显示类型。进一步地，在区间中以至少最小极限帧数N连续的帧的区间中it^ii^ 具有^^^^数据显示图像的显示类型的帧和具有^^I主数据显示图像的显示 类型的帧之间的切换。为此，a后描述的步骤S88至S92中，当感3^帧内 的变化量小于阈值TH3并且变化量小于阈值TH3的帧以最小极限帧数N或更 多连续出g感M帧紧^^前、紧^昏、或之前与4^时，##态图像类 型Vll、"fit类型V12或高显示速率Afit^lf率类型V13确^7感M帧的显
示类型。当在步骤S84中判断出感M帧内的变化量不是等于或大于阈值TH3，或 者即使感兴趣帧内的变化量等于或大于阈值TH3，但变化量等于或大于阈值 TH3的帧没有以最小极限帧数N或更多连续出録感3^^帧直^^前、直歉 后、以及之前和^时，处3Sii行到步骤S88。连续性判断单元163才娥来自 阈做理单元162的》b^f言息判断感^帧内的变化量是否小于阈值TH3以及 是否变化量小于阈值TH3的帧以最小极限帧数N或更多连续出#感^^帧 紧歉前、紧#^、或之前与^。当在步骤S88中确定感兴趣帧内的变化量小于阈值TH3并且变化量小于 阈值TH3的帧以最小极限帧数N或更多连续出tt感兴趣帧紧^^前、紧接 之后、或^^前与之后时， 性判断单元163将表示判断结果的判断信息炎供 给确定单元164。处鄉亍到步骤S89。确定单元164 >^^性判断单元163接收提供的判断信息，该判断信息所 表示的判断结果是感兴趣帧内的变化量小于阚值TH3并且变化量小于阈值 TH3的帧以最小极限帧数N或更多连续出i^感^帧紧^^前、紧#^、 或之前与^。接着，在步骤S89中，确定单元164才娥来自阈做理单元162 的》b^信息判断感M帧内的变化量是否小于阈值TH1、是否等于或大于阈值 TH1但小于阈值TH2、或者是否等于或大于阈值TH2但小于阈值TH3。当在步骤S89中判断感^^帧内的变化量小于阈值TH1时，处Sii行到 步骤S90。确定单元164确定静态图像类型Vll作为感M帧的显示类型。处 舰行到步骤S93。当在步骤S89中判断感兴趣帧内的变化量等于或大于阈值TH1但小于阈 值TH2时，处3gii行到步骤S91。确定单元164确定絲类型V12作为感姨 帧的显示类型。处^ii行到步骤S93。当在步骤S89中判断感M帧内的变化量等于或大于阈值TH2但小于阈 值TH3时，处^ii行到步骤S92。确定单元164确定高显示速率/絲辨率类 型V13作为感M帧的显示类型。处^ii行到步骤S93。才緣步骤S88至S92,如上所述，当感3 ^帧内的变化量小于阈值TH3并 且变化量小于阈值TH3的帧以帧数N或更多錢出1^感^帧紧#^前、 紧#^、或之前与^时，将用于^!I主数据显示图像的静态图像类型V11、
絲类型V12或高显示速率/辆緒率类型V13确^ 感姨帧的显示类型。 如上所述，it^了狄频繁贿查找。在步骤S93中，连续性判断单元163判断在形^t动图像的帧中是否存在 没有^^作为感讀帧的帧，其中，Fy文^N'J建单元76 (图6)将为所述感兴 趣帧创建Fy文件。当在步骤S93中判断仍存在没有^t作为感絲帧的帧时，处舰回到步 骤S83。如上所述，重新选#^5没^^作感兴趣帧的帧作为感兴趣帧。M， 重复相同的处理。当在步骤S93中判断不存在仍没^^作感姨帧的帧时，显示类型确定单 元93结^Jt理。另一方面，当在步骤S88中判断感M帧内的变化量不小于阈值TH3，或 者即使感^帧内的变化量小于阈值TH3，但变化量小于阈值TH3的帧没有 以最小极限帧数N或更多连续出5y^魏帧紧^^前、紧#^、以及之前 与^时，处Sii行到图30中的步骤S101。连续性判断单元163判断具有跨 越阈值TH3的变化量的帧是否以最小极限帧数N或更多连续出IIL^感^帧 紧歉前、紧^^、或之前与仏当感M帧内的变化量等于或大于阈值TH3并且变化量等于或大于阈值 TH3的帧以帧数N或更多魏出5yt感^^帧紧^^前、紧#^、或之前与 之后时，在图29的步骤S86或S87中，M高显示速率/^^率类型V14或 特高显示速率/低，率类型V15确定为感兴趣帧的显示类型。当感a帧内的变化量小于阈值TH3并且变化量小于阈值TH3的帧以最 小极限帧数N或更多连续出郝感M帧紧^^前、紧>^#、或之前与^ 时，在图29的步骤S90至S92中，##态图像类型Vll、絲类型V12或高 显示速率/^t^率类型V13确定为感兴趣帧的显示类型。因此，当变化量等于或大于阈值TH3的帧没有以帧数N或更多錢出现， 并且变化量小于阈值TH3的变化量的帧没有以最小极限帧数N或更多錄出 #感兴趣帧紧#^前、紧#^后、以及之前与之昏时，扭行图30中的步骤 S101中的处理。这种情况是这#-种情况，其中感絲帧是这样的区间中的帧， 在该区间中，出现变化量i^阈值TH3的帧(变化量等于或大于阈值TH3的 帧以;S^化量小于阈值TH3的帧相濕合的区间)，并ibi这样的区间，其中变
化量等于或大于阈值TH3的连续帧的数量以;5L^化量小于阈值TH3的连续帧 的数量至多小于最小极限帧数N (jtk^^t当^M;;^^区间)。如参考图25所i兌明的情况，濕合区间典型地出g变化量等于或大于阈 值TH3的帧以帧数N或更多i^出现的区间(3 ^适当 为大变化量区间) 和变化量小于阈值TH3的帧以最小极限帧数N或更多连续出现的区间(itk^ 适当^M;小变化量区间)之间，或出#两个大变化量区间之间，或两个小 变化量区间之间。因此，混合区间可^L^割成区间长度(帧数)等于或大于最小树艮帧数N 的区间和区间狄小于最小极限帧数N的区间。也可以将^^区间分割絲大变化量区间和小变化量区间之间的区间、在 大t/f匕量区间之间的区间、以l在小变化量区间之间的区间。在步骤SIOI中，il^性判断单元163判断变化量，阈值TH3的帧是否 以最小极限帧数N或更多魏出踪感兴趣帧紧歉前、紧^L^、或之前与 即出 ^^帧的^^区间是否是区间"^1等于或大于最小极限帧数N 的区间。当在步骤SIOI中判断变化量，阈值TH3的帧以最小极限帧数N或更多 连续出l^感兴趣帧紧^^前、紧#^、或^^前与^时，处^ii行到步骤 S102。确定单元164在^JU主数据来显示图像的显示类型中确定例如高显示速 率/扭錢率类型V13作为感絲帧的显示类型。处^it行到图29中的步骤 S93。 M以上所描述的处理。对于在具有，阈值TH3的变化量的帧以最小柳艮帧数N或更多il^出 现的混合区间中的帧，将使用(充当)主数据(的图^lt据)显示图像的显示 类型或使用(充当)代理数据(的图像数提)显示图4象的显示类型确定作为所 有帧的显示类型。这使得可以i^频^i行查找。因此，在图30中，例如4ff捐主数据显示图像的显示类型中的高显示速 率Afit^f率类型V13确^7"給区间中帧的所有显示类型，其中所述;給区 间中变化量，阈值TH3的帧以最小极P艮帧数N或更多魏出现。除itb^卜，例如可^^ I主数据显示图像的显示类型中的"fit类型V12确 ;UH^区间中帧的显示类型，其中在所述混合区间中变化量，阈值TH3的 帧以最小树艮帧数N或更多魏出现。也可#^如^^)^^据显示图像的超高
显示速率/^^lf率类型v14或特高显示速率/^^率类型v15确U混合区 间中帧的显示类型，其中在所述^^区间中变化量絲阈值th3的帧以最小极 限帧数n或更多连续出现。另一方面，当在步骤s101中判断变化量，阈值th3的变化量的帧没有 以最小树艮帧数N或更多连续出贿感兴趣帧紧4^t前、紧^^、以及之前 和^时，即当出现了感姨帧的》v給区间(感姨^^区间)是区间狄小 于最小极限帧数n的区间时，处^it行到步骤s103。连续性判断单元163判断 在区间长变小于最小极p艮帧数n的感^混合区间左边的时间上的在前帧中邻 接于感兴趣混合区间的帧(左帧)的变化量和在感兴趣混合区间右边的时间上 在后的帧中々條于感兴趣;&^区间的帧(右帧)的变化量中的一个是否等于或 大于阈值th3，而另一个是否小于阈值th3。换句"^兌，连续性判断单元163 判断区间长变小于最小极限帧数n的感兴趣"^区间是否是位于大变化量区间 和'J 、变化量区间之间的区间。当在步骤s103中判断区间长变小于最小极限帧数n的感M混合区间是 位于大变化量区间和小变化量区间之间的区间时，处^ii^亍到步骤s102。如上 所述，确定单元164将高显示速率Afit，率类型v13确^感^帧的显示 类型。处Sii行到图29中的步骤s93。 jH^，进行如上所述的处理。位于区间M小于最小极限帧数n的感兴趣混合区间两边的大变化量区 间和小变化量区间都是区间^1等于或大于最小极限帧数n的区间。jH^卜，确 定^^fC^数据显示图像的显示类型(超高显示速率m^率类型v14或特高 显示速率/#^率类型V15)作为大变化量区间中的帧的显示类型。确定^JU 主数据显示图像的显示类型(静态图像类型Vll、 "fit类型v12或高显示速率/ M^lf率类型v13)作为小变化量区间中的帧的显示类型。对于在大变化量区间和小变化量区间之间的、区间狄小于最小树艮帧数 n的感^^^区间中的帧，显示类型与大变化量区间中的帧的显示类型或小 变化量区间中的帧的显示类型相同。这使得可以敏频^i行查找。因此，在图30中，例如^f^I主数据显示图像的显示类型中的高显示速 率AfitM率类型v13确^感3^混合区间中的帧的所有显示类型，其中所 述感兴趣^^区间位于大变化量区间和小变化量区间之间，并iL^该感^混 合区间中的变化量i^阈值th3的帧少于最小极P艮帧数N。
除jtb^卜，例如可^f^I主数据显示图像的显示类型中的M类型V12或 ^^H^S据显示图像的显示类型中的超高显示速率Af^lf率类型V14确^; 感兴趣混合区间中帧的显示类型，其中所述感兴趣混合区间位于大变化量区间 和小变化量区间之间，并且该感兴趣混合区间中的变化量i^阈值TH3的帧少 于最小极限帧数N。另一方面，当在步骤S103中判断区间长度小于最小极限帧数N的感M "給区间不是位于大变化量区间和小变化量区间之间的区间时，处^ii行到步 骤S104。魏性判断单元163判断在区间^1小于最小极限帧数N的感3^混 合区间的左边的时间上的在前帧中々條于感兴趣混合区间的帧(左帧)的变化 量以M感兴趣;^^区间右边的时间Ji^后的帧中々峰于感兴趣^^区间的帧 (右帧)的变化量是否,于或大于阈值TH3。换句话说，连续性判断单元163 判断区间长变小于最小极限帧数N的感兴趣"^区间是否是位于大变化量区间 之间的区间。当在步骤S104中判断区间^1小于最小极限帧数N的感兴趣混合区间不 ;1在大变化量区间之间的区间时，处Sii行到步骤S102。如上所述，确定单元 164将例如^^J主数据显示图像的显示类型中的高显示速率/"fil^^率类型 V13确定为感M帧的显示类型。处^ii行到图29中的步骤S93。此后，进行 如上所述的处理。换句"^兌，对于在两个小变化量区间之间的、区间狄小于最小极限帧数 N的感M混合区间中的帧，显示类型与被确定作为两个小变化量区间中的帧 的显示类型、^^I主数据显示图像的显示类型相同。这使得可以^频^i行 查找。另一方面，当在步骤S104中判断区间长度小于最小树艮帧数N的感M ^^区间^i位于大变^J:区间之间的区间时，处Sii行到步骤S105。确定单元 164 #^如^^^^数据显示图像的显示类型中的超高显示速率/^^#率类型 V14确定为感M帧的显示类型。处^ii行到图29中的步骤S93。 jtt^，进行 如上所述的处理。换句话说，对于在两个大变化量区间之间的、区间长度小于最小极限帧数 N的感^^混合区间中的帧，显示类型与被确定作为两个大变化量区间中的帧 的显示类型的^^H^^数据显示图像的显示类型相同。这使得可以i^频^i
行查找。图31是示出了由图6中的显示类型确定单元93确定的另一显示类型的示 例的图。在图31中，有1类型的显示类型，即^^率/"fiW示速率类型Cl、 ^"if类型C2、和^ii^f率/^^示速率类型C3，它们的显示帧时的，率和 显示速率是不同的。对于低^f率AfiW示速率类型Cl的帧，以与运动图〗象的帧速，率相同的 显示速率("f^率)和与用作^^iSlt据的图^li:据的，率H氐于用作主数 据的图^lt据的緒率)相同的M率絲示图像。对于"fii类型C2的帧，以^ili4率的显示速率和与用作主数提的图像数 据的緒率相同的緒率(辆緒率) 示图像。对于"fit，率/^a示速率类型C3的帧，以低于^itii率的显示速率， 例如"fm率一半的显示速率，以及以与用作主数据的图^lt据的^f率相同 的緒率(高于用作^^数据的图^^t据緒率的緒率)絲示图像。当具有三种类型，即图31所示的低^f率AfM示速率类型Cl、 lit类 型C2和"fit^f率/^E示速率类型C3作为显示类型时，变化^i十料元92 (图6)计算表示帧的空间变4M呈度的细度信息作为变化量。显示类型确定单 元93 #^*个帧的变化量(细度信息)与两 定阈值进行^^。显示类型 确定单元93 ##》(^^^确定^^率/^ 示速率类型Cl、 "fif类型 C2、或"fit^f率/^a示速率类型C3作为帧的显示类型。图32是怍为变化量的细度信息和由显示类型确定单元93 (图6)根梧变化量而以帧为卑"^^斤确定的以帧为^的显示类型的曲线图。 在图32中，横坐标表示帧，M标表示变化量'显示类型确定单元93将以帧为#的变化量(细度信息)与阈值L和阈 值H中的一个进行t嫩，其中L<H。显示类型确定单元93确定"fit錢率/ ^m示速率类型C3作为细度信息等于或大于阈值H的帧，即细度信息表示空 间变^^^1很大的帧的显示类型，其中^it^f率/^E示速率类型C3是高分 辨率/^J^示速率类型中的一种。即在^素值中有较大变化的图像(复杂图像)的帧进行显示时，图;中的空间
变化倾向刊M漏。因此，希望以高雑率絲示复杂图像的帧。然而，显示具有高緒率的复杂图像的处理负妙大于显示不复杂的图像例如平坦图像的处理负担。因此，尽管以高緒率来显示复杂图像的帧，但也可以采用絲辨率/#^示速率类型C3 ^t代高緒率，其中辆辨率/^E示速率类型C3是 一种以低显示速率显示图像的高，率/的显示速率类型。当以^E示速率显示 图像时，相对于以高显示速率显示图像的情况，处理的负滩小。因此，对于 复杂图像的帧来说，可通过以^a示速率显示具有高M率的图像来减少用于 城的设备的负担，同时狄编辑过程中遗漏图像中的空间变化。另一方面，显示类型确定单元93确定^f^f率Afita示速率类型Cl作 为细JL信息小于阈值L的帧，即所述细度信息表示空间变^^1很小的帧的显 示类型，其中^^率AfM示速率类型Cl以低于辆緒率m^示速率类 型C3的^^率的^^率并且以高于"fit^f率/^^示速率类型C3的显示速 率的4ilil率显示图像。对于空间变^^JL很小的帧，即平坦图像的帧，即使以高赠率显示图像， 图像的细节也不会比^H^f率显示图像的细节看上去有很大差异。当采用这种方式用高分辨率和用低分辨率显示图像时图像的细节看上去 差别不大时，如果用高，率显示图像，可以iW进^t^的设备增加了额外 的负担。因此，确定^f^^率/"fM示速率类型Cl作为平坦图像的帧的显示类型， 其中低^^率/1 示速率类型Cl以低于^it，率/^^示速率类型C3的 ，率并且以高于"fit，率/^a示速率类型C3的显示速率的"fitii率显示图像。这使得敏为进^^的设备增加额外的负担。显示类型确定单元93确定M类型C2作为除了细度信息等于或大于阈值 H的帧以及细度信息小于阈值L的帧以外的帧、即细度信息等于或大于阈值L 并且小于阈值H的帧的显示类型。换句^ti兑，用于以litit率(与运动图像的帧速率相同的显示速率)和普 通，率来显示图像的"fit类型C2被确定为不那么复^it不平坦的图像的帧 的显示类型。以下将参照图33和34的流程图来说明图22中显示类型确定单元93在下
述情况中的处理，在该情况中，才Wt为变化量的细度信息游图31中所示的低 ，率AfM示速率类型Cl、 "fit类型C2或^it，率/^a示速率类型C3 确定为显示类型。当从变化J^十料元92(图6)提供以帧为扭的变化量时，在步骤S121， 显示类型确定单元93使^4^单元161(图22)高速緩存(临时务賭)以帧为# 的变化量。处舰行到步骤S122。在图33和34中，细度信息作为变化量从变化^i十^f元92被提供到显 示类型确定单元93。在步骤S122中，阈M理单元162执行阈值处理，该阈^t理用于将存 储>^4#单元161中的以帧为#的变化量(细度信息)与阈值H或L进行比 较。阈做理单元162以帧为^i将tb^信息炎供^l^性判断单元163，其 中比较信息表示以帧为单位的变化量与阔值H或L的tbW果。处^ii行到步 骤S123。在步骤S123，连续性判断单元163从形絲动图像的帧中选"^更有^j:成 感兴趣帧的按时间序列的开头帧作为感兴趣帧，FY文件创建单元76 (图6)将 为翻'J建Fy文件。处^ii行到步骤S124。在步骤S124中，錢性判断单元163才娥来自阈做理单元162的t嫩 信息判断感兴趣帧内的变化量是否小于阔值L，以 化量小于阈值L的帧是 否以最小树艮帧数 或更多 出贿感^^帧紧《^^前、紧#^、或之前 与^。当在步骤S124中判断出感M帧内的变化量小于阈值L，并且变化量小 于阈值L的帧以最小极限帧数N或更多魏出踪感她帧紧^^前、紧歉 后、或:IL前与^时，i^性判断单元163将表示判断结果的判断信息炎* 确定单元164。处^ii行到步骤S125。在步骤S125中，确定单元164才娥来自连续性判断单元163的判断信息 ##^^率/"# 示速率类型Cl确定为感兴趣帧的显示类型。处理到步骤 S130。才娥步骤S124和S125，当感兴趣帧内的变化量小于阈值L，并JUb^卜变 化量小于阈值L的帧以帧数N或更多i^出iyL感M帧紧^l前、紧# ^、 或之前与^时，樹^^率/^ 示速率类型Cl确定为感M帧的显示类
型。il种确^&于以下原因。当在M中，在图31所示的^^f率/"fiW示速率类型Cl、 "fit类型 C2、以及"f^^lf率/^^示速率类型C3中确定显示类型时，为具有4^lf率 Afit^示速率类型Cl的帧显示具有^^率的图像。换句^i兌，通i^l:理具 有较小数据量(相对于主数据的数据量)的代理数据来显示图像。另一方面，对于具有辆类型C2和辆雑率/^E示速率类型C3的帧， 显示具有高，率的图像。换句话说，通it^理具有较大数据量(相对于^3S 数据的数据量)的主数据的图像数据来显示图像。例如，当M 7 (图1)是记絲主数据和^3S数据的专业盘时，4^]记 絲M7中的主数据或^^数据^e^t。接下来，如参照图23中所说明的 情况，在形錄动图像的按时间序列的帧中，当具有^^HJ(^数据絲示图像 的低緒率/"fM示速率类型Cl的帧和具有^^J主数据絲示图像的"fif类 型C2或"fit^lf率/^a示速率类型C3的帧频f^刀换时，频繁4W亍查找。因 此，可f摊于平滑^M诚过辦4fe^条53 (图3)而指定的帧的显示。为了i^频^^f亍查找，需要i^在具有^^H^数据M示图像的^^ 辨率AfiW示速率类型Cl的帧和具有^U主数据^示图像的"fii类型C2 或^t緒率Af缓示速率类型C3的帧之间频^ki^1^刀换。另一方面，在賴类型C2的帧和辆辨率/^a示速率类型C3的帧中，4W主数据絲示图像。因此，对于在絲类型C2的帧和^it緒率/^a示速率类型C3的帧之间进^^I切换，查找不成问题。因此，在图33和34中，在帧至少以最小极P艮帧数N连续出现的区间中， 避免引^具有^IH^g数据显示图像的显示类型(低^lf率AfM示速^1 型Cl)的帧和具有^f^IiJt据显示图《象的显示类型("fit类型C2或"fit^f 率ma示速率类型C3)的帧之间的切换。为此，在步骤S124和S125中，当 感兴趣帧内的变化量小于阔值L，并且变化量小于阈值L的帧以最小树艮帧数 N或更多连续出i^感M帧紧^:前、紧4M^、或^^前与^时， 4J^g数据显示图像的j^^率/^lE示速率类型Cl确定为感M帧的显示类型。进一步地，在帧至少以最小极限帧数N连续出现的区间中，i^t引起^^ ^^数据显示图像的显示类型的帧和具有^^I主数据显示图像的显示类型的帧
之间的切换。为此，^jH^描述的步骤S126至S129中，当感^帧内的变化 量等于或大于阈值L，并且变化量等于或大于阈值L的帧以最小极限帧数N或 更多连续出IUfe感兴趣帧紧^^前、紧#^后、或之前与之后时，将^ I主数 据显示图像的"fii类型C2或扭辨率/^^示速率类型C3确^感姨帧 的显示类型。当在步骤S124中判断出感M帧内的变化量不小于阈值L，或者即使感 兴趣帧内的变化量小于阈值L，但变化量小于阈值L的帧没有以最小极限帧数 N或更多魏出IML感^^帧紧^^前、紧4M^、以及之前和4^时，处理 进行到步骤S126。魏性判断单元163 4娘来自阈皿理单元162的tbi^信息 判断感M帧内的变化量是否等于或大于阈值L,以 化量等于或大于阈值 L的帧是否以最小极限帧数N或更多魏出3^感3^^帧紧^^前、紧^J^、 或之前与^。当在步骤S126中判断感^帧内的变化量等于或大于阈值L，并且变化 量等于或大于阈值L的帧以最小极限帧数N或更多i^出l^感兴趣帧紧^^ 前、紧4^^、或之前与^时，魏性判断单元163将表示判断结果的判断 信4^^^确定单元164。处igii行到步骤S127。确定单元164 M续性判断单元163接收提供的判断信息，该判断信息所 表示的判断结果是感^帧内的变化量等于或大于阈值L，并且变化量等于或 大于阈值L的帧以最小树艮帧数N或更多i^出5^感M帧紧^L前、紧接 ^、或之前与^Jg"。接着，在步骤S127中，确定单元164##来自阈做理 单元162的比较信息4定感M帧内的变化量是否等于或大于阈值H。当在步骤S127中判断感M帧内的变化量等于或大于阈值H时，处m 行到步骤S128。确定单元164确定"fit^^率/^^示速率类型C3作为感^ 帧的显示类型。处^ii^于到步骤S130。当在步骤S127中判断感M帧内的变化量不等于或大于阈值H时，即当 感絲帧内的变化量等于或大于阈值L并小于阈值H时，处Sii行到步骤S129。 确定单元164确定"fit类型C2作为感兴趣帧的显示类型。处理进行到步骤 S130。才緣步骤S126至S129,当感M帧内的变化量等于或大于阔值L，并且
紧^4^、或^L前与4L^时，樹^)主数据显示图像的^f^lf率/^E示速率 类型C3或辆类型C2作为感姨帧的显示类型。i^; 了敏在^^亍如上所 述的贼时频繁舰行查找。在步骤S130中，连续性判断单元163判断在形^t动图像的帧中是否存 在仍没有*4作为感姨帧的帧，其中，Fy文飛'J建单元76 (图6)将为所述感^帧创建py文件。当在步骤S130中断定仍存在没有^^作为感M帧的帧时，处3Si4回到 步骤S123。新选"^没^^作感兴趣帧的帧作为感兴趣帧。重复相同的处理。当在步骤S130中判断;r^4在没净iL^作感^^帧的帧时，显示类型确定单元93结M理。另一方面，当在步骤S126中判断感^帧内的变化量不等于或大于阈值 L，或者，即使感兴趣帧内的变化量等于或大于阈值L,但变化量等于或大于阈 值L的帧没有以最小极限帧数N或更多连续出I^感^^帧紧^^前、紧^ 后、以及之前与^时，处^ii行到图34中的步骤S151。 i^性判断单元163 判断变化量，阈值L的帧是否以最小极限帧数N或更多连续出I^感^^帧 紧歉前、紧#^、或之前与仏当感^^帧内的变化量小于阈值L，并且变化量小于阈值L的帧以帧数N 或更多絲出贿感兴趣帧紧^^前、紧#^、或之前与^时，在图33的 步骤S125中，#(^^率/"# 示速率类型Cl确定为感3^帧的显示类型。当感a帧内的变化量等于或大于阈值L，并且变化量等于或大于阄值L 的帧以最小极限帧数N或更多il^出^E感魏帧紧^^前、紧^t^、或之 前与之后时，在图33的步骤S128或S129中，将"fii，率/^^示速率类型 C3或"fit类型C2确定为感M帧的显示类型。因此，当变化量小于阈值L的帧没有以帧数N或更多帧、以収化量等于 或大于阈值L的帧没有以最小树艮帧数N或更多魏出li^感^帧紧4^t 前、紧k后、以及之前与之昏时，执行图34中的步骤S151。这种情况是这 #-种情况，其中感兴趣帧是位于出现变化量，阈值L的帧的区间(混合有 变化量小于阈值L的帧以 化量等于或大于阈值L的帧的区间)，以及其中变4匕量小于阈值L的连续帧的数量以;sj^化量等于或大于阈值L的连续帧的数量至多小于最小柳艮帧数N的区间(jH^^^皮适当地称为混合区间)中的帧。
如图25所说明的情况，^^区间典型地出itt其中变化量小于阈值L的 帧以帧数N或更多錢出现的区间(jtb^yt当^为小变化量区间)以政 化量等于或大于阈值L的帧以最小极限帧数N或更多帧连续出现的区间(jtt^ ^当g为大变化量区间)之间，或出贿两个大变化量区间之间，或两个 小变化量区间之间。因此，混合区间可分割成区间长度(帧数)等于或大于最小极限帧数N的 区间和区间M小于最小极限帧数N的区间。也可以将^^区间分割礼jt大变化量区间和小变化量区间之间的区间、在 大变4匕量区间之间的区间、以瓦在小变化量区间之间的区间。在步骤S151中，连续性判断单元163判断变化量，阈值L的帧是否以 最小极限帧数N或更多连续出m^感3^帧紧"^^前、紧#^、或之前与之 后，即出tt魏帧的混合区间是否是区间狄等于或大于最小极限帧数N的 区间。当在步骤S151中判断变化量，阈值L的帧以最小极限帧数N或更多连 续出贿感兴趣帧紧^^前、紧^^、或之前与^时，处iSit行到步骤S152。 确定单元164在^^]主数据来显示图像的显示类型中确定例^^类型C2作 为感^^帧的显示类型。处^ii行到图33中的步骤S130。此后，执行以上所 描述的处理。对于其中变化量跨越阈值L的帧以最小极限帧数N或更多连续出现的混合 区间中的帧，确定使用(充当)主数据(的图^^:据)显示图像的显示类型或 使用(充当)代理数据(的图傢lt据)显示图像的显示类型作为所有帧的显示 类型。这使得可以敏频^i行查找。因此，在图34中，例如4^^1主数据显示图像的显示类型中的lit类型 C2确U^^区间中的帧的所有显示类型，其中在所必^^区间中变化量， 阈值L的帧以最小极限帧数N或更多魏出现。除jH^卜，例如可^fM^s数据显示图像的^^率AfM示速率类型 Cl确U混合区间中帧的显示类型，其中在所ii^^区间中变化量，阔值L 的帧以最小极限帧数N或更多连续出现。另一方面，当在步骤S151中判断具有，阈值L的变化量的帧没有以最 小极限帧数N或更多连续出贿感姨帧紧^t前、紧4^^、以及之前和之5后时，即当其中出现了感讀帧的》v給区间(感魏"給区间)是区间狄小于最小树艮帧数N的区间时，处^ii行到步骤S153。 i^性判断单元163判断的变化J^在感兴趣"^区间右边的时间上的在后的帧中々條于感^^^区 间的帧(右帧)的变化量中的一个是否小于阈值L，而另一个是否等于或大于 阈值L。换句"^兌，连续性判断单元163判断区间M小于最小极P艮帧数N的 感兴趣;^^区间是否是位于大变化量区间和小变化量区间之间的区间。当在步骤S153中判断区间"^1小于最小极限帧数N的感M;^^区间是 位于大变化量区间和小变化量区间之间的区间时，处Sii行到步骤S152。如上 所述，确定单元164 4ffit类型C2确定为感M帧的显示类型。处Si^行到 图33中的步骤S130。 M，进行如上所述的处理。位于区间M小于最小极限帧数N的感兴趣混合区间两边的大变化量区 间和小变化量区间二者都是区间长度等于或大于最小极p艮帧数n的区间。jH^卜， 确定^^主!St据显示图4象的显示类型(！^t类型C2或"M^f率/^^示速率 类型C3)作为大变化量区间中的帧的显示类型。确定^JIHJ(^数据显示图像的 显示类型(低M率/"fM示速率类型Cl)作为小变化量区间中的帧的显示 类型。对于在大变化量区间和小变化量区间之间的、区间长度小于最小树艮帧数 N的感兴趣"^区间中的帧，显示类型与大变化量区间中的帧的显示类型或小 变化量区间中的帧的显示类型相同。这使得可以敏频^4行查找。因此，在图34中，例如#[^1主数据显示图像的显示类型中的^1类型 C2确定为感兴趣混合区间中的帧的所有显示类型，其中所述感M混合区间位 于大变化量区间和小变化量区间之间，并J^该感兴趣;^区间中变化量， 阈值L的帧少于最小树艮帧数N。除jH^卜，例如可将小变化量区间中的帧显示类型，即^^^3S数据显示 图像的低M率Afit^示速率类型Cl，确定为感兴趣混合区间中帧的显示类 型，其中所述^^区间在大变化量区间和小变化量区间之间，并JL^该感兴趣 ;^^区间中变化量，阈值L的帧少于最小极限帧数N。另一方面，当在步骤s153中判断区间长变小于最小极限帧数n的感3^ ^給区间不是在大变化量区间和小变化量区间之间的区间时，处3gii行到步骤
S154。絲性判断单元163判断在区间U小于最小极限帧数N的感^^V給 区间左#时间_11^前的帧中*于感^^^区间的帧(左帧)的变化量以 ^感兴趣^^区间右i4^时间Ji^后的帧中，于感兴趣^^区间的帧(右 帧)的变化量二者是否都小于阈值L。换句^i兑，il^性判断单元163判断区 间HJ、于最小极限帧数N的感^混合区间是否是在小变化量区间之间的区 间。当在步骤S154中判断区间&变小于最小极限帧数N的感^混合区间不 是在大变化量区间之间的区间时，即当区间H卜于最小极限帧数N的感M "^区间;i在大变4匕量区间之间的区间时，处Sii行到步骤S152。如上所述， 确定单元164将大变化量区间中的帧的显示类型，即例如^^主数据显示图像 的显示类型中的M类型C2确定为感兴趣帧的显示类型。处Sit行到图33中 的步骤S130。 itb^，进份口上所述的处理。换句话说，对于在两个小变化量区间之间的、区间长度小于最小极限帧数 N的感兴趣^^区间中的帧，显示类型与被确定作为两个小变化量区间中的帧 的显示类型的、使用主数据显示图像的显示类型相同。这使得可以^频M 行查找。另一方面，当在步骤S154中判断区间M小于最小树艮帧数N的感兴趣 "給区间是在小变化量区间之间的区间时，处3Sii行到步骤S155。确定单元164 ^N:MM^^数据显示图像的^^率/4M示速率类型Cl确定为感兴趣 帧的显示类型。处Sit行到图33中的步骤S130。此后，进fr^上所述的处理。换句^i兌，对于在两个大变化量区间之间的、区间M小于最小树艮帧数 N的感M^^区间中的帧，显示类型与被确定作为两个大变化量区间中的帧 的显示类型的、^^^S数据显示图像的^^率/"ftt示速率类型Cl相同。 这使得可以狄频糊亍查找。图35是示出了当由图6中的变化4i十，元92^^动信息和细度信息计 算为变化量、显示类型确定单元93确^于运动信息的显示类型和基于细度信 息的显示类型、并且由选择单元94选择变化量和显示类型时，由图6中的文件 创建单元95创建的Fy文件的示例的图。在图35中的Fy文件中，M到右，錢排列有表示从顶端开始的帧的位 置的帧数、对应于该帧数的帧的时间码、充当对应于帧数的帧中的变化量的运
动信息和细度信息、以^于对应于帧数的帧的运动信息的显示类型和基于帧 的细;l信息的显示类型。图36是示出了当由图6中的变化^i十，元92计算运动信息和细度信息 计算作为变化量并J^^择单元94 ^(Xi^择变化量时由图6中的文^N'J建单元95 创建的Fy文件的示例的图。在图36中的Fy文件中，M到右，錢排列有表示从顶端开始的帧的位 置的帧数、对应于该帧数的帧的时间码、以及怍为对应于帧数的帧中的变化量 的运动信息和细度信息。图37是示出了当由图6中的变化ii十，元92计算运动信息和细度信息 作为变化量、显示类型确定单元93确U于运动信息的显示类型和基于细度信 息的显示类型、并Ji&择单元94 ^(5U^^显示类型时由图6中的文^N'J建单元 95创建的Fy文件的示例的图。在图37中的Fy文件中，M到右，连续排列有表示从顶端开始的帧的位 置的帧数、对应于该帧数的帧的时间码、以M于对应于帧数的帧的运动信息 的显示类型和基于帧的细度信息的显示类型。在上述情况中，^^动信息或细度信息肩定显示类型。然而，也可4娥 运动信息和细度信息二者来确定显示类型。图38是示出了由图6中的显示类型确定单元93确定的显示类型的另一例子的图。在图38中，有四种类型作为显示类型，即表示以静态图像显示的静态图 像类型VC1、和"W类型VC2、其中的显示帧的，率和显示帧的显示速率不 同的高显示速率/^^率类型VC3和# 示速率/#^率类型VC4。对于静态图像类型VC1的帧，就像图20中的静态图像类型VI,即使tt 要#組示的帧，只要可以:^^ 示的帧的图^|"作是与在该图像紧^^前显 示的帧(的图像)相同的图像，就可以显示在该图像紧4M^前显示的帧(的图 像)(拷镇显示)。对于辆图像类型VC2的帧，如图20中的"fif类型V2，以与运动图像的 帧速率相同的显示速率("fitil率)和与作为主数据的图^lt据的緒率相同 的，率(^t^f率) >示图像。对于高显示速率/^^率类型VC3的帧，如图20中的高显示速率/^^
辨率类型V3，以高于"fitit率的显示速率，例:fc^Iit率两倍的显示速率，以及以与作为代^S^:据的图^^:据的，率H氐于作为主^:据的图^lt据的， 率)相同的緒率絲示图像。对于"W^示速率/^W率类型VC4的帧，以"fiiii率的显示速率和与 作为^CS^:据的图l^t据的，率相同的，率(低于作为主数据的图^^:据 的，率)絲示图像。高显示速率/低，率类型VC3和"ftt示速率/^^率类型VC4的区别 仅在于，相对于在高显示速率/低M率类型VC3中以高于 4率的显示速 率扭示图像，在1 示速率/^^率类型VC4中以^itit率(的显示速 率)絲示图像。当具有四种类型作为显示类型，即图38所示的静态图像类型VC1、 * 类型VC2、高显示速率/低，率类型VC3、和"fiW示速率/低M率类型VC4 时，变化*^十#4元92 (图6)计算运动信息和细度信息作为变化量。显示类 型确定单元93 (图6) #^动信息和细度信息二者，*动信息与两个阈值 进行tbi艮，并将细度信息与一个阈值进行tb^。显示类型确定单元93#^》嫩 结果来确定静态图像类型VCl、"fit类型VC2、高显示速率/^^率类型VC3、 或^ 示速率/#^率类型VC4作为帧的显示类型。图39是怍为以帧为^的变化量的运动信息和细度信息、和由显示类型 确定单元93 (图6) ^^动信息和细度信息以帧为^^^斤确定的显示类型的 曲线图。图39上半部分中的曲线图表示以帧为单位的运动信息，图39下半部分中 的曲线图表示以帧为^:的细JL信息。在图39中，横坐标表示帧，链标表示变化量(运动信息和细度信息)。显示类型确定单元93(图6)将以帧为^i的运动信息与阈值L和H中的 一个进行比较，其中L<H。可以说，显示类型确定单元93 #^1^^果确定 临时的显示类型(临时确定一种显示类型)。例如，通过参考图20至25所说明的情况中的相同方式，显示类型确定单 元93根提帧的运动信息游图20中所示的静态图像类型VI、 ^fii类型V2、或 高显示速率/低，率类型V3确定为帧的临时显示类型(临时确定一种显示类 型)。
因此，如参考图20至25所说明的，大概i脉，絲态图像类型vi、普 通类型v2、和高显示速率/^^率类型v3分别临时确^运动信息小于阈值 l的帧的显示类型、运动信息等于或大于阈值l但小于阈值h的帧的显示类型、 以;SJt动信息等于或大于阈值h的帧的显示类型。显示类型确定单元93 (图6)将以帧为单位的细度信息与预定阈值K进行 》艮。显示类型确定单元93 ^t^b^^^L^动信息临时确定的临时显示 类型，最终确定图38中所示的静态图像类型vc1、 ^it类型vc2、高显示速 率/低M率类型vc3、或"fita示速率/^^率类型vc4作为帧的显示类型。显示类型确定单元93最^f^定静态图像类型vc1和高显示速率m^率 类型vc3分别作为临时显示类型是静态图像类型vi的帧的显示类型和临时显 示类型是高显示速率/低，率类型v3的帧的显示类型，显示类型确定单元93最,定"f^t类型vc2作为细度信息等于或大于阈 值K的帧，即帧中的不被当作是平坦图像的图像的帧的显示类型，该帧的临时 显示类型是"fit类型v2。 jH^卜，显示类型确定单元93最,定"ftt示速率/ 4^f率类型vc4作为细度信息小于阈值K的帧，即帧中的平坦图像的帧的 显示类型，该帧的临时显示类型^L"W类型v2。临时显示类型是"fif类型v2的帧;^具有一定牙JJl的i^动的帧，^是很 大的动作。细度信息小于阈值K的帧是平坦图像的帧。因此，在帧当中，临时 显示类型是"fit类型v2且细度信息小于阈值K的帧是平坦图l象的帧，但是具 有一定狄的运动。即使图像具有一定禾級的运动，但只要图像是平坦的，当以#^#率显示 图像时，图像中的空间变4饼不^^ii漏。当在滅中以低^f率显示图像时， 可减少用于4^文的设备的负担。因此，对于临时显示类型是扭类型v2且具有一定禾級的运动的帧，原 则上，将以辆^f率显示图像的絲类型vc2确^显示类型。然而，只要 细度信息小于阈值K,将以低于"fit^^率的分辨率显示图像的！M示速率/ ^^t率类型vc4最,定为显示类型。在图39中，最,定"fM示速率/^^率类型vc4作为区间Dp中的 帧的显示类型，所述帧的细度信息小于阈值K且期M^1动信息的临时显示类 型是4^t类型v2。
根提以帧为^的运动信息和细度信息，将图38中所示的静态图像类型 VC1、 "fit类型VC2、高显示速率/%^^率类型VC3、或"fiW示速率/^^ 辨率类型VC4 ^C^,定为显示类型。此后适当的将这种显示类型称为最终显 示类型。以下将参照图40的流程图来说明这#-~种情况下的图22中的显示类型确 定单元93的处理，在该情况下，才Wt动信息和细度信息二者将图38中所示 的静态图像类型VC1、 ^it类型VC2、高显示速率/#^#率类型VC3、或普 tt示速率/低M率类型VC4确定为显示类型(最终显示类型)。变化4i十，元92 (图6)计算运动信息和细度信息作为变化量，并* 动信息和细JL信息4C^^给显示类型确定单元93。在步骤S181，如图23和24所说明的，显示类型确定单元93推据来自变 化ti十^4元92 (图6)的以帧为单位的运动信息扇^于该运动信息的显示 类型(临时的显示类型)。处3Si^f亍到步骤S182。在步骤S182中，显示类型确定单元93使^4^单元161 (图22)高速緩存 变化ii十^4元92 ^_供的以帧为#的细度信息。处Sii行到步骤S183。在步骤S183中，阈m理单元162 (图22 )扭行阈m理，用于将絲 ^#单元161中的以帧为^的细度信息与阈值K进行tb^。阈皿理单元 162将tb^f言息以帧为We^l^性判断单元163,其中tb^信息表示以帧 为单位的细^1信息与阈值K的tb^结果。处3Sii行到步骤S184。在步骤S184,连续性判断单元163 (图22)从形錄动图像的帧中选棘 没有iU^^^帧的按时间序列的开头帧作为感M帧，Fy文件创建单元76 (图6)将为斜'j建Fy文件。錢性判断单元163将感讀帧的信息炎#^确 定单元164 (图22 )。处3Sii行到步骤S185。在步骤S185中，确定单元164判断基于感3^帧的运动信息的显示类型 (在步骤S181确定的临时显示类型)是否是静态图像类型VI。当在步骤S185中判断出基于感^帧的运动信息的显示类型是静态图像 类型V1时，处3gi^f亍到步骤S186。确定单元164最,定静态图像类型VC1 作为感M帧的最终显示类型(基于感M帧的运动信息和细度信息的显示类 型)。处舰行到步骤S193。当在步骤S185中判断出基于感兴趣帧的运动信息的显示类型不是静态图
《象类型V1时，处Sii行到步骤S187。确定单元164判断基于感M帧的运动 信息的显示类型是否是高显示速率m^率类型V3。当在步骤S187中判断出基于感^帧的运动信息的显示类型是高显示速 率/j^f率类型V3时，处Sii行到步骤S188。确定单元164最,定高显示 速率m^率类型V3作为感^L帧的最终显示类型。处Sii行到步骤S193。当在步骤S187中判断出基于感M帧的运动信息的显示类型不是高显示 速率/^^#率类型V3时，即当基于感姨帧的运动信息的显示类型时"fit类 型V2时，处^ii行到步骤S189。连续性判断单元163 (图22)才娥来自阈值 处理单元162的tb^信息判断感^帧的细度信息是否小于阈值K并判断细度 信息小于阈值K的帧是否以最小极限帧数N或更多连续出贿感她帧紧歉 前、或紧^后、或之前和之后，其中所述感兴趣帧的基于运动信息的显示类 型是"fit类型V2。当在步骤S189中判断出感M帧内的细度信息不小于阈值K，或者即使 感兴趣帧的细度信息小于阈值K，但具有细度信息的帧没有以最小招跟帧数N或更多连续出^感兴趣帧紧4^^前、紧^L^、以;^^t与^时， 性判断单元163将表示判断结果的判断信息炎供给确定单元164 (图22 )。处^ii 行到步骤S190。确定单元164 (图22) M续性判断单元163接收提供的判断信息，该判 断信息所表示的判断结果是感M帧内的细度信息不小于阈值K，并且细度信 息小于阈值K的帧没有以最小极限帧数N或更多錢出贿感a帧紧^t 前、紧^t后、以及之前与之后。接着，在步骤S190中，确定单元164最, ^it类型VC2确定为感M帧的最终显示类型，其基于运动信息的显示类型是 "fit类型V2。处舰行到步骤S193。当在步骤S189中判断出感M帧内的细度信息小于阈值K，并且细度信 息小于阈值K的帧以最小极限帧数N或更多连续出#感兴趣帧紧^:前、紧 ^t^或之前与^时，处^ii行到步骤S191。当将帧以最小树艮帧数N或更 多连续出5^细度信息小于阈值K的感M帧紧^t前、紧#^后、或之前和 ^的区间的帧之中的基于动作信息的显示类型是"fit V2的帧的显示类型改 变成"fM示速率m^率类型VC4时，錢性判断单元163 (图22)判断 是否存在类型相同的连续帧的数量小于最小极限帧数N的区间。
例如，在图39中，区间Dp是细度信息小于阈值K的以帧最小掛艮帧数N 或更多i^出现的区间。^it种情况下，在步骤S191，当将区间Dp的帧之中 基于运动信息的显示类型是"fit类型V2的帧的显示类型 成>^ 示速率/ ^Wf率类型VC4时，判断勤目同显示类型的帧以显示类型的时间序列连续区 间中是否存在类型相同的连续帧的数量小于最小极限帧数N的区间。显示类型 基于最终为运动图像获得的运动信息和细度信息，其中将为该运动图像创建Fy 文件。当在步骤S191中判断当在将以最小极限帧数N或更多个帧连续出tt细 度信息小于阈值K的感M帧紧^:前、紧R后、或之前和之后的帧的区间 的帧当中的基于运动信息的显示类型是"fit类型V2的帧显示类型M成^ii 显示速率/^^率类型VC4时，存^it种具有相同类型的连续帧的数量小于 最小极限帧数N的区间，即当如果M于运动信息的显示类型是"fit类型V2 感兴^^贞的最终显示类型，^成lM示速率/^^f率类型VC4则可肯顿 ^Ei行查找时，处iSii行到步骤S190。如上所述，确定单元164 (图22 )最终 4ffit类型VC2确^(;基于"fit类型V2的显示类型是运动信息的感^帧的 最^f显示类型。处3Sii行到步骤S193。当在步骤S191中判断在将帧以最小极限帧数N或更多魏出l^细度信 息小于阈值K的感^帧紧^L前、紧#^、或之前和4L^的区间的帧之中 的基i^动信息的显示类型是"fit类型V2的帧的显示类型 ^# 示速率/低^#率类型vc4， ；r^v^it种具有相同类型的连续帧的数量小于最小极限帧数N的区间时，处^ii行到步骤S192。确定单元164(图22)最^## 示速率/^^^率类型VC4确^^^于运动信息的显示类型是^it类型V2的感 M帧的最终显示类型。处iSii行到步骤S193。当在拖改中，在如图38所示的静态图像类型VC1、 "fit类型VC2、高显 示速率/^^#率类型VC3和^tt示速率/^^f率类型VC4中确 示类型 (最终显示类型)时，对于静态图像类型VC1的帧和絲类型VC2的帧，显 示具有高緒率的图像(具有辆緒率的图像)。换句"^兌，通狄理具有较 大数据量(相对于^S数据的数据量)的主数据的图^Ht据絲示图像。对于高显示速率/低，率类型VC3的帧和^W示速率/低M率类型 VC4的帧，显示具有^^f率的图像。换句^ti兌，通舰理具有较小数据量(相
对于主数据的数据量)的^^数据的图^lt据絲示图像。例如，当M 7 (图1)是iE^"主数絲^3g数据的专业盘时，4^J记 絲話7中记录的主数据或^3S数据"i5!Le^:。接下来，如参照图23中所说 明的情况，在形錄动图像的按时间序列的帧中，当具有^^J^^数据紐示 图像的高显示速率/^^f率类型VC3或^tt示速率/^^率类型VC4的帧 和具有^ I主数据来显示图像的静态图像类型VC1或^it类型VC2的帧频繁 切换时，频繁^lf亍查找。因此，可倉摊于平滑iW^愤过辦4^文条53 (图3) 而指定的帧的显示。为了^频^ii行查找，需要iat在具有^IH^数据来显示图像的高显 示速率m^f率类型VC3或^M示il率/^^f率类型VC4的帧和具有^jfl 主数据;^示图像的静态图像类型VC1或^it类型VC2的帧之间进4t^繁地 切换。因此，在图40中，在步骤S1卯至S192中，4fftt示速率/低M率类 型VC4确^^以下情况中基于运动信息的显示类型是"fit类型V2的感兴 趣帧的最终显示类型。也^i说，即使将帧以最小树艮帧数N或更多连续出现 在细度信息小于阈值K的感3^帧紧4^t前、紧#^后、或之前和之后的区间 的帧之中的基于运动信息的显示类型是員类型V2的帧的显示类型，改变成"# 示速率/^^率类型VC4时，也;f^^在具有相同类型的连续帧的数量小于最小极限帧数N的区间。在另一种情况中(当存在具有相同类型(最终显 示类型)的连续帧的数量小于最小树艮帧数N的区间时)，4ffif类型V2确定 为基i^动信息的显示类型是"^t类型VC2的感兴趣帧的最终显示类型。在步骤S193中，连续性判断单元163判断在形錄动图像的帧中是否存 在仍没有^^作为感姨帧的帧，其中，Fy文^H'建单元76 (图6)将为所述感M帧创建Fy文件。当在步骤S193中判断仍存在没有净^fo^作为感3^帧的帧时，处g回到 步骤S184'新选#^殳^^作感兴趣帧的帧作为感兴趣帧。重复相同的处理。当在步骤S193中判断不存在仍未:lfa^作感M帧的帧时，显示类型确定 单元93结束处理。图41是示出了当由图6中的变化:fi十^元92计算运动信息和细度信息 计算作为变化量、显示类型确定单元93确定基于运动信息和细度信息的显示类
型(最终显示类型)、由选择单元94选择变化量和显示类型时由图6中的文件 创建单元95创建的FY文件的示例的图。在图41中的Fy文件中，M到右，连续排列有表示从顶端开始的帧的位 置的帧数、对应于帧数的帧的时间码、作为对应于帧数的帧中的变化量的运动信息和细度信息、以;5L4于对应于帧数的帧的运动信息和细度信息的显示类型(最终显示类型)。图42是示出了图1中的驱动器5的结构的示例的图。 驱动器5包粉己录单; L/再SiL^元181、解码器182、 Fy文^H'j建单元183、 和鸦I/F184。记录单^L/再財元181将^h^ I/F184提供的数据(文件)和从Fy文件 创建单元183提供的Fy文件写(记录)到光盘7上。记录单^L/再群元181 A^:7读出^:据，并将该数据提^^解码器182或夕h^I/F184。解码器182对从记录单it/再l^元181提供的数据进^^码，并将该数据 提條Fy文件创建单元183。Fy文^N'J建单元183具有与图4中的Fy文fr^建单元76相同的结构。 FV文件创建单元183 ^Mv)^码器182 ^_供的数斜|建作为>^:件的Fy文件，并 将Fy文件提供^i己录单力再麟元181。夕MP I/F 184接Jli^U己录单iL/再财元181提供的数据，并将该数据输出 到夕h"^。夕W I/F 184 # 1^|^^供的数据，并将该数据提供^己录单; L/再 赠元181。在如上ii^斤构成的驱动器5中，记录单力再5UMt 181才娥例如用户的操 作，舰必N51/F 184提供的数谢己鬆'J組7中。记录单; L/再財元181 读出记絲M7中的数据，絲必h^I/F184将该数据输出到夕MP。例如，当組7是记絲絲了主数I^M^g数据的AV文^^絲了元 数据的;^iL件的专业盘时，例如当M 7插ASU驱动器5中时或射緣用户的 辦，在驱动器5中，记录单力再财元181检查絲7所记录的ibiL件中是 否存在Fy文件。当M 7中没有记录Fy文件时，记录单^/再i^元181 7中读出作为主数据的图傢数据iM^取该图傢数据，并将该图傢数据提供给解码器182。 例如以参照图5所说明的MPEG2系统，对记M光盘7中的作为主数据
的图^lt据进^^码。因此，解码器182对来自MPEG2系统中的记录单it/ 再l^元181的主数据进^Sf玛，并将怍为解码结^^斤获得的图^lt据提^ F>文fN'j建单元183oFy文^N'J建单元183釆用与图4中的Fy文^H，J建单元76相同的方式，创 建作为天丈件的Fy文件，所iiiLiL件具有来自解码器182的图像数提(记絲 中的图^lt据)的天教据。Fy文似'J建单元183计算来自解码器182的图傢lt据的务一帧的变化量。 jH^卜，如果需要的话，Fy文件创建单元183才緣帧内的变化量确u示类型。 Fy文^H'J建单元183创建存有以帧为^i的变化量和显示类型之一或两者的 Fy文件，并将该FV文件提^i己录单力再财元181。记录单^L/再财元181将从Fy文^N'J建单元183提供的Fy文俗己鬆ij光 盘7中。在图42的驱动器5中，例如，Wh^^itiW图傢数提以MPEG2系统 进^^码而获得的编码比特^^供^MPI/F184，并且记录单it/再5^元181 将WMP I/F184提供的编码比特流(的文件)记絲光盘7中。在这种情况下， Fy文^fH'j建单元183可以在编码比特流的记絲束^，创建如上所迷的Fy 文件。作为替M案，^J:单iL/再5l!^元181将^MP I/F184提供的编码比特 ^La供给解码器182， ^H^^码器182对编码比特^i^ft^码并将解码的比特 ^R條昏Fy文^H'j建单元183。因此，Fy文^H，J建单元183可与向光盘7记 ，码比特流并行g'J建Fy文件。不特别限^I于计算帧内的变化量的像素值的种类。当像素值包括亮度信 号(Y)和色差信号(Cb, Cr)时，可^ I亮度信号或色差信号来计算变化量。 然而，由于亮度信号中的变^^f人的视觉感应所产生的较大影响要大于色差信 号中的变化，因#望^^亮度信号来计算变化量。当像素值包括R、 G、 B颜色成分时，例如可^JU颜色成分括R、 G、 B的 平方和等来计算变化量。作为充当变化量的运动信息，可釆用除了参照图11至14所说明的值"卜 的、在数量Ji4^动强度的值。相a她，作为充当变化量的细度信息，可釆 用除了参照图15至18所说明的值"卜的、在数量Ji4示图像细度的值(例如 被称为难度值(difficulty)和平坦度值的值).
例如，当如参照图42所i兌明的4捐以MPEG2系皿码的图^lt据来计 算变化量时，可以对通过以MPEG2系统中编码图^fet据而获得的编码比特流 进行分析(解析)，# 1分析结果计算变化量。编码比特流中包^1动向量。因此，当如图U和12所说明的那样使用运 动向^i十算作为变化量的运动信息时，可以对编码比特^ii行分析iM^得包含 在编码比特流中的运动向量，作为分析的结果，^HM运动向^i十算运动信息。通iW8x8像素块进行DCT转换而获得的DCT因f"^皮包含絲码比特流 中。因此，当如图15和16所说明的那样^^J DCT因子来计算作为变化量的细 度信息时，可以对编码比特^ii行分析;jM^得包含在编码比特流中的DCT因子 作为分析的结果，并使用DCT因子计算细度信息。jtb^卜，通iW 8x8像素块进行DCT转换而获得的DCT因子当中的所谓 DC^*，即左上部的DCT因子，是8x8像素块的像素值的平均值。因此，当信息时,可以对编码比特;^ii行分析;jM^得包含^码比特流中的DCT因子当 中的DC分量作为分析的结果，并使用DC ^t计算细度信息，即块的像素平 均值。图43是示出了当图1中的PC 1的CPU 22 (图2) 时，作为编辑系统的PC1的功能结构的示例的图。编辑系统包:^盘2、鼠标3、显示器41、编，制单元201、流^ft控 制单元221和;;^ft器222。编，制单元201包括GUI控制单元2U、纟jyf5^:置;^测单元212、解 码器提供控制单元213、 Fy文件管理单元214、显示类型获^元215、解码器 216、 Fy文賴建单元217、和显示控制单元218。GUI控制单元211控制显示控制单元218，从而使显示器41 (图2)显示 诸如图3所示的^t景器51之类的GUI, GUI控制单元211 4W用户在显示器作信号。GUI控制单元211才^^Mt信号将必要的信息等提^^!^^W置检 测单元212、数据提供控制单元213和显示控制单元218等。*^地，GUI控制单元211例:H^^从勉2或IU示3提供的辦信号，..p厄i
信息以及指定应该在拖放中再现的帧的信息一同提供给^W码位置检测单元212。射卜，GUI控制单元211^^从^t2或I^示3提供的,信息游用于基 于变化量确定显示类型的阈^t"^^^:据^^^控制单元213。;jf^f6W置^r测单元212才^t来自GUI控制单元2U的命令生成帧号和流 号，所述帧^iM作为指定要在显示器41 Ji^示的帧的信息，所述流"fi^作 为指定包括该帧的数据(主数据或^fJ^^数悟)的流的信息，流解^H^置检测单 元212将帧号和流号提^^t据提供控制单元213。M地，数据提供控制单元213从GUI控制单元211接收例如阈值，并将 该阈值提供给Fy文件管理单元214。数据提供控制单元213从^Jf6^i置检测 单元212 4^:例如帧号和流号，并将该帧号和流号^^^^显示类型获M元215 和^##控制单元221。 jl^卜，数据提供控制单元213从^/fHt控制单元221 接收例如流(主数据或微数据)，并将銜錄供给,器216。数据提供控制 单元213通过接收Fy文件获取例如^yj^ 7读出的Fy文件，并将该Fy文件 提供给Fy文件管理单元214。 jtb^卜，数据提供控制单元213接^Fy文M'J 建单元217提供的Fy文件，将该Fy文件提^i^yt7， ^HM^:7来记录Fy 文件。Ey文件管理单元214对从数据提供控制单元213提供的Fy文件进行管理 ( )。 Fy文件管理单元214通过将^ft在Fy文件中的变化量与从数据提供 控制单元213提供的阈值进行J^&来(再次)确定显示类型。显示类型获M元215获取由从数据提供控制单元213提供的帧号(和必 要的流号)指定的帧的显示类型，即参考F>文件管理单元214所管理的Fy文 件在显示器41 M示的帧。显示类型获#元215将显示类型^^>^给解码器 216、显示控制单元218以及^y誠编辑系统所必要的块，如GUI控制单元 211。解码器216包括^fe制单元216A。解码器216对从数据提供控制单元 213提供的流(主数据或^g数据)进^llf码，并4fft为解码结^^得的帧的 图^^据(基带的图^Ngt据)提供给Fy文^H'建单元217和显示控制单元218。
解码器216对;jfLii^lf码，同时使RAM 24 (图2) 4^^码该i^t程中 必要的数据。包含在解码器216中的^f^制单元216A控制RAM 24中的数 据读出和数据写入。在某些情况下，当显示器41上显示的帧的显示类型是静态 图Y象时，解码器216不i^fflSf码，解码器216通过^^考皿示类型^^^元215 ^^供的显示类型，识别显示在显示器41上的帧的显示类型是静态图像类型。Fy文件创建单元217具有与图6中的Fy文^H)J建单元76相同的结构。py文^N'J建单元217 ^F码器216提供的图^lt据创建Fy文件，并将该图像数据提供驗据提供单元213。显示控制单元218 4N^从GUI控制单元211提供的信息以及Fy文件管理 单元214管理的Fy文件等使显示器41显示GUL显示控制单元218使显示器示相应于A/J^码器216提供的帧的图^^t据的图像。^示器41 Ji^示相应于 ^!在帧緩存器218A中的数据的图像，其中帧緩存器218A充当-^分RAM 24 (图2)中的絲区域。显示控制单元128将图^^据写A^帧緩存器218A 中，从而使显示器41显示相应于图傢数据的图像。;M^制单元221控制>^^: 7和^^器222中读#写入流(主数 据或^S数提)。流控制单元221从数据提供控制单元213读出解码帧号和流号 所指定的帧所必须的流数悟(主数据iUJ(^数据)，并将该数据提供iNi:据提供 控制单元213,并且，如果需要的话，提供给^Ht器222。^^ft器222是,分RAM 24 (图2)中的賴区域，其4#从$)(1## 控制单元221提供的;;iy^据。^##^制单元221 7读出的^Jt据提^J5i4^器222， ^H吏-^ft器222 ^i玄数据。；M^制单元221将已 ^#在;^"#器222中的a^t絲出。^jt^jt^器222读出^LIt据的i^呈中， 可以与v^J^ 7读出的i^L相比的高速读出数据7。在如上所itiBL^的编辑系统中，^WJ:7读出FV文件，并将该文^Nt过 数据提供控制单元213提條FV文件管理单元214，并^fti"其中。另一方面，当^ 中被指^7扭示器41 Ji^示的帧称为感姨帧时， 显示类型获M元215通过查阅Fy文件管理单元214所管理(务賭)的Fy文 件A^絲兴趣帧的显示类型，并将该显示类型提供给显示控制单元218。解码器216将M盘7中读出^t过数据提供控制单元213提^^解码器216的数据解码MM帧的图^lt据，并将该图^Kt据提供给显示控制单元 218。显示控制单元218使显示器41以由感M帧的显示类型表示的显示方法 絲示相应于感3^帧的图^lt据的图像。如上所述，对以帧为单位的变化量和显示类型中的一个或两者进行选择， 并^^^"fFy文件中。因此，在Fy文件中,同时存有变化量和显示类型，或者 ^^有变4匕量而不^^显示类型，或者存有显示类型而^#变化量。当Fy文件中4#有显示类型时，即当同时存有变化量和显示类型时或当 存有显示类型而没，变化量的时候，可使显示器41使用Fy文件中实际存有 的显示类型自身^示对应于感M帧的图傢数据的图像。当FY文件中肩"^有变化量时，即当同时存有变化#显示类型或存有变 化量而没^t显示类型的时候，Fy文件管理单元214可#4^^#在Fy文件中 的以帧为#的变化量来确定以帧为#的显示类型，并使显示器41 4^)该显 示类型tt示相应于感3^帧的图傢lt据的图1象。当城7中没有记录Fy文件时，Fy文^H'J建单元217可创建Fy文件， 并将该Fy文^H己絲M 7中。^"说明中，在图43的编辑系统中，以光盘7中所记录的数拾ft为对象 4u^f^放。除jH^卜，例如，可以记录在图1的硬盘4和图2的硬盘25中的 数,为对象^iie^t。图44是示出了图43中的Fy文件管理单元214和显示类型获#元215 的结构的示例的图。Fy文件管理单元214包括文件^t单元231、变化量获轉元232、显示 类型确定单元233和显示类型写7v单元234。文件^#单元231 ^#从数据提供控制单元213 (图43 )提供的Fy文件 (中所絲的数据)。变化量获#元232通:1^##在文件^#单元231中的Fy文，出变 化量iMl取以帧为牟(i的变化量，并将该变化量^^^^显示类型确定单元233。显示类型确定单元233包^^Ht单元241、阈皿理单元242、 il^性判 断单元243和确定单元244。显示类型确定单元233 ^4t从变化量获:W元232 提供的以帧为^的变化量，采用和图22中的显示类型确定单元93相同的方 式(再次)确定以帧为单位的显示类型，并将该显示类型提供给显示类型写入
单元234。在显示类型确定单元233中，存储单元241、阔M理单元242、连续性 判断单元243和确定单元244具有分别与图22中的显示类型确定单元93中的 4^单元161、阈做理单元162、连续性判断单元163和确定单元164相同的 结构。与阈皿理单元162相似，阈^h理单元242以帧为專"^将变化量与阈值 进行tbi艮。然而，通过阈M理单元242与变化量进行tb^的阈^feA从图43中显示类型写入单元234与文件^^单元231中M的Fy文件(图26)中帧为^的显示类型。一 ' 一 、 '、显示类型获^元215包括显示类型读出单元251。显示类型读出单元251 通过从Fy文件管理单元214所管理的Fy文件中读出显示类型来获取与数据提 供控制单元213所^^供的感M帧的帧号相关联的显示类型，即所述Fy文件是 ^ft在Fy文件管理单元214的文件^ft单元231中的Fy文件。显示类型读出 单元251将显示类型提供给图43的解码器216、显示控制单元218等。在图43的编辑系统所^e^M中，才緣例如图3所示的4^L条53的拖 放拨块54的位置来指定显示器41 (^Ji所显示的取景器51中的显示部分52) 上要被显示的帧(感兴趣帧)。图43中的GUI控制单元211 ^^示控制单元218显示4^t条53 ，并将拖 放条53的换放拨块54的位置所指定的帧识别为感M帧.将参照图45说明4fe^拨块54的位置和由该位置指定的帧之间的关系。图45是示出了^L条53的图。在4fe^t条53中，可将4^文拨块54可移动的水平方向上的一^H多动范围(例 如7jC平方向上，大约10至20厘米的的"j^l范围)》嗜]成与形成禾皮i5^;^^ #^1的运动图像(的流)的帧数相同数量的子区间(M拔逸当地称为指定 区间)。在图45中，可移动范围^fc^成F个指定区间。当将图45中的指定区间的水平方向中的U (将可移动范围分割成指定 区间的H)称为区间&变时，将可移动范围分成(相等iik^^割成)具有相同
区间M的指定区间。在分割可移动范围的^^指定区间中，按时间序列分配形^f皮i^^"进 ^#^丈的运动图像的帧，例如以从左边的指定帧到右边的指定帧的方向。因此， 当将从可移动范围的左边开始的第i个指定区间称为第i个指定区间，并且将从 形庙被iM成要进^^t的运动图像的帧的顶部开始的第i个帧称为第i个帧 时，将第i个帧分酉e^第i个指定区间。GUI控制单元211 ^r测4fe^L拨块54 ^t应于一种显示速率的时刻而在其中,i^位的指定区间，其中所^示速率由4fe^拨块54移动紧^:前显示在显示器41上的帧的显示类型指示。GUI控制单元211 ^^酉eiH亥指定区间的帧识别为感M帧。作为显示类型，iM)三种类型，即如图20所示的静态图像类型V1、 "fit 类型V2和高显示速率/^^f率类型V3。静态图像类型VI和M类型V2的 显示速率例如是30帧/秒。高显示速率/^^率类型V3的显示速率例如是60 帧/秒。图了4^t"f^类型V2和高显示速率/#^率类型V3的帧时的 显示方法的图。当在4fe^文41块54移动紧4I^L前显示在显示器41上的帧的显示类型是显示 速率为30帧/秒的静态图像类型VI或"fit类型V2时，GUI控制单元211每隔 1/30秒检测4fe^t拨块54所^^位的指定区间。GUI控制单元211旨西ei^该指 定区间的帧识别为感兴趣帧。因此，当显示类型是辆类型V2时，以l/30秒 的间隔更新显示器4lJim示的帧(指定帧)，即30帧/秒的显示速率。当在4fe^L拨块54移动紧^t前显示在显示器41上的帧的显示类型例如是 显示速率为60帧/秒的高显示速率/^^率类型V3时，GUI控制单元211每 隔1/60秒检测4^t拨块54所ifct位的指定区间'GUI控制单元211 #^條 该指定区间的帧识别为感她帧。因此，当显示类型是高显示速率/^^#率类 型V3时，以1/60秒的间隔更新显示器41上显示的帧(感兴趣帧)，即60帧/ 秒的显示速率。因此，当以例如在1/30秒中以两个指定区间的长度M移动到右的速度在 显示类型为l^t类型V2的帧连续的"fit区间中移动^:拨块54时，将每隔一 帧，即第i个、第i+2个、第i+4个帧等，i议成间隔1/30秒的感:5^帧。结果，
扭示器41 Ji^丢失帧的状态下以两^^示图像。例Wo同在上述情况中，以在1/30秒内以两个指定区间的长度M移动到 右的速^^M多动^^拨块54,即在1/60秒内以一个区间长度从左移动到右的速 度移动4^文拨块54。在这种情况下，在高显示速率m^率类型V3帧连续的 高显示速率/^^率区间中#^个帧，即第i个、第i+l个、第i+2个帧等，以 1/60秒为间5^^^姨帧。结果，在显示器41上以两^f^^示图像，而 不会丢失帧。当以高移动i^JUM多动4fe^拨块54，用于进行双^1的显示(再现)时， 在某些显示类型的帧中发生丟失帧，而在，显示类型的帧中不J^jt丢失帧。 对于具有相对于"fit类型V2而言的高显示速率的高显示速率/^^f率类型V3 的帧，即具有大运动的帧，即使fefet移动^t拨块54，也不容易发生丢失帧。这使得可以防jb寸于具有大运动的帧遗漏图像中的时间改变。如上所述，在^it区间中以l/30秒的间隔更新感^^帧，而在高显示速率 /^^率区间中以1/60秒的间隔更新感M帧，其是"fit区间中的一半。因此，解码器216 (图43)需要以两倍于"fit区间的帧(显示类型为M 逸变V2的帧)的速JUMf玛高显示速率/^^率区间中的帧(显示类型为高 显示速率m^率类型V3的帧)。j^卜，高显示速率m^lf率区间中的帧是 动作大于"fit区间中的帧的帧。因此，当固定^f率时，高显示速率/^^率 中的帧具有由解码器216解码所必需的大数^J:，该大数据量要大于"fi逸区间 中的帧的数据量。因此，相对于脊逸区间中的帧的显示，显示高显示速率m^ 辨率区间中的帧^^a较大的负荷。因此，在图43的编辑系统中，当显示絲区间中的帧时，对作为主数据 的图傢数据进^^码。当显示高显示速率/^^率区间中的帧时，对作为代渡 数据的图#^据进^^码，该作为^S数据的图^^:据的数据量要小于主数据 的数#*。通itil种方式，减少了对高显示速率/^^lf率区间中的帧的显示所 ^a的负担。在上述情况中，例如以在1/30秒内以两个指定区间的长度从左移动到右的 ^t^M多动^i文拨块54。 jtb^卜，例如当以在1/30秒内以一个指定区间的"^1从 左移动到右的i4^M多动4fe^拨块54时，tt示类型为絲类型V2的帧连续 的4if区间中，#^个帧以1/30秒的间隔{ ^^兴趣帧。结果，在显示器41
上以单一^tt示图像，而没有丢失帧。当以在1/30秒中以一个指定区间的长度从左移动到右的iM^M多动M拨块54时，4^L拨块54在1/60秒中以一个指定区间的1/2的^1M移动到 右。因此，在显示类型为高显示速率m^率类型V3的帧连续的高显示速率/ ^^f率区间中，在l/30秒中将相同的帧iU越病帧。结果，^EJt示器 41上以单-^tt示图^象，而没有丢失帧。将参照图47说明显示类型为静态图像类型VI的帧的显示。在图43的编辑系统中，对于显示类型为静态图像类型VI的帧连续的静态 图像区间中的帧，即^^静态图像区间的帧中改变感M帧(JH組示的帧)， 感兴趣帧紧^L前在显示器41上昆示的帧的图像也会改变。对于静态图像区间中的帧，只絲态图像区间中的帧是感兴趣帧，在静态 图像区间中首^y皮i^^兴趣帧的帧的图^^显示。例如，如图47的顶部所示，在^i文的开始处，拖放拨块54指定,态图 像区间以外的区间(M为舉逸区间或高显示速率/^^率区间)中的帧作为 感兴趣帧。^jfeil种情况下，当用户将4fe^拨块54^移动到右时，才鹏该移动， 首先#^态图像区间的帧中位于左端的帧(静态图像区间中最早的帧)指定为 感絲帧。接下来，解码器216 (图43) ^H皮指^;感她帧的帧的图^lt据 进^Hf码。在显示器41上显示与该图^lt据相对应的图像。jtk^，只絲态图像区间中的帧被指U感a帧，絲首^f皮i^A^ 兴趣帧的帧的图像显示为当前感兴趣帧的图像。因此，只M态图像区间中的 帧被指定为感兴趣帧，除了首先被指定为感M帧的帧的图傢数据"卜，解码 器216不对当前感M帧的图^lt据进^^码。例如，如从图47顶部开始的第二幅图所示，在开始拖故时，换放拨块54 ##态图像区间中的帧指^7感^^帧。^it种情况下，解码器216(图43) 对在4^L开始Ni皮指定为感^^帧的帧的图傢lit据进^^码。在显示器41 M 示与该图傢数据相对应的图像。jtb^，只^#态图像区间中的帧被指^;感^帧，皿示在4^文开始时 ^c指^i^帧的帧的图^象作为当前感兴趣帧的图^象。因此，只M态图《象区间中的帧被指定为感兴趣帧，除了在^i文开始时被指定为感兴趣帧的帧的图^^t据^卜，解码器216不对当前感3^帧的图^lt据进^^码。
砂卜，例如图47中从顶部开始的第三幅图(底部的图)所示，在开始拖 放时，换放拨块54将除了静态图像区间以外的区间U狄为舉逸区间或高显示速率m^f率区间)中的帧指定为感M帧。在这种情况下，当用户将4^:拨块54M移动到右时，才 该移动，首先4W态图像的帧当中位于静态图像区 间右端的帧(静态图像区间中絲的帧)指^感絲帧。接下来，解码器216 (图43 )对被指定为感M帧的帧的图傢数据进^^码。在显示器41上显示 与该图^lt据相对应的图像。jtk^，只絲态图像区间中的帧被指U感兴趣帧，tW首;^皮指^i 兴趣帧的帧的图像显示为当前感兴趣帧的图像。因此，只M态图像区间中的 帧被指定为感兴趣帧，除了首先被指定为感兴趣帧的帧的图傢数据"卜，解码 器216不对当前感^帧的图^^据进^lf码。将参照图48对图43中的编辑系M^ft的4y^t^ii^i^ti兑明。例如，用户彬己絲AV文件和Fy文件的光盘7 (图1)插Wj驱动器5， 并#^勉2或IU示3来启动编4^誘。接下来，CPU 22 (图2) ^Lfri亥编辑 禾J^。因此，PC1用作图43中的编辑系统。M，当用户^^勉2或IU示3来指定要进^^t的AV文件时，相对 应于该#^的*信号从,2或IU示3被提供到GUI控制单元211 。在步骤S211 ， GUI控制单元211才娥来自键盘2或鼠标3的IMt信号识别 将要进^^的AV文件。处舰行到步骤S212。在步骤S212中，Fy文件管理单元214对相应"f^皮GUI控制单元211识别 为旨寸象的AV文件的Fy文件进行高速緩存(临时务賭)。处3Sit行到步骤 S213。GUI控制单元211通过^j^石m置检测单元212控制lt据^^^控制单元 213，以提供相对应i^皮识别为要进^it的AV文件的Fy文件。数据提供控 制单元213根据GUI控制单元211的控制，减盘7中读出F>文件，并将F> 文件提條Fy文件管理单元214。在步骤S212中，如上所述，py文件管理单 元214 ^il件^t单元231 (图44) ^#从数据提供控制单元213提供的Fy 文件。在步骤S213中，Fy文件管理单元214的变化量获W"元232 (图44)判 断文件^f^单元231在紧接的前一步骤S212中所賴的Fy文件中是否出
示类型。当在步骤S213中判断文件4^单元231中所^的Fy文件中出M示类 型时，厨組以下描述的步骤S214。处^ii行到步骤S215。当在步骤S213中判断文件4#单元231中所員的Fy文件中不出皿示 类型时，变化量荻^^元232M^f^^i:件^^单元231中的Fy文件中读出以 帧为4^的变化量，并将该变化量提^^显示类型确定单元233 (图44)。处理 进行到步骤S214。在文件^ft单元231中所务賭的Fy文件中至少^#有作为以帧为#的 变化量的运动信息。在步骤S214中，显示类型确定单元233以和图22中的显示类型确定单元 93相同的方式，才^&从变化量获:W元232提供的以帧为^^的变化量来确定 以帧为^Ni的显示类型，并4f该显示类型^C^^显示类型写^v单元234(图44 )。 显示类型写7v单元234将来自显示类型确定单元233的显示类型写Af'J文件存 储单元231中的Fy文件中。处涯步骤S214进行到步骤S215。在步骤S214中确定显示类型的iW中，显示类型确定单元233的阈, 理单元242 (图44)将变化量与阔值进行tbi欧。作为阈值，使用与图22中的显 示类型确定单元93的阈^t理单元162所4M的阈似目同的阈值。当处理如上所m步骤S213进行到步骤S215或从步骤S214进行到步骤 S215时，在图43的编辑系统中，开始进行GUI显示处理，该处理用于在显示 器41 Ji^^^如图3中的取景器51之类的GUI。 3 ^#^细描述GUI显示处 理的详情。在步骤S215中，GUI控制单元211判断键盘2或鼠标3是否被操作用于 结絲蝌脉当在步骤S215中判断勉2或IU示3没有被辨用于结絲辑禾誘时， 处iSi^行到步骤S216。 GUI控制单元211判断取景器51 (图3)的^it条53 中所提供的4&^拨块54是否移动，所i^t景器51通过GUI显示处職示，该S215时开始。换句话说，GUI控制单元211判断用户是否通过IMt键盘2或鼠 标3移动了拖放拨块54。当在步骤S216中判断4fe^L拨块54被移动时，这:^M用户已辨了勉2或I^示3 iM多动^L拨块54，并且与该,相对应的旨信号从Mit 2或鼠 标3被提供到GUI控制单元2U。 ^it种情况下，GUI控制单元211将分酉eJ'J 4^t拨块54所定位的指定区间(图45)的帧该^4M帧。GUI控制单元 211将关于感姨帧的信息通过;^lf5秘置检测单元212和数据提供控制单元 213 ^_^^显示类型获*元215。处^i^f亍到步骤S217。在步骤S217中，显示类型获M元215通过^U^W置检测单元212和通it^Fy文件管理单元214的文件^ft单元231 (图44)中读出显示类型，从 而为感姨帧获 示类型。显示类型获財元215将显示类型提供给GUI控 制单元2U、解码器216和显示控制单元218。 jt(^卜，在步骤S217中，解码器 216和显示控制单元218判断来自显示类型获#元215的感M帧的显示类 型。解码器216和显示控制单元218扭行显示控制处理，用;J^示感^帧的 图像(jtb^描述的步骤S218至步骤S223 )。处舰回到步骤S215。当在步骤S217判断感兴趣帧的显示类型是静态图像类型VI时，处Sii行 到步骤S218。显示控制单元218参照Fy文件管理单元214的文件^f^单元231 中所，的Fy文件，判断^^#感3^帧紧^^前的感兴趣帧的帧(》^适 当,为在前帧)的显示类型;i否;i静态图^象类型VI,并判断在前帧和感M 帧是否是同-"#态图像区间中的帧。当在步骤S218判断在前帧和感魏帧不是同-"^态图像区间中的帧时， 处^ii行到步骤S219。当数据提供控制单元213从光盘7中读出感M帧的主 数据(和)lf5马感兴趣帧所必需的数据)并将主数据提^^解码器216时，解码 器216获取(M)感兴趣帧的主数据。处3Sii行到步骤S220。在步骤S220中，解码器216将从数据提供控制单元213获取的感^帧 的主数据进^Hf码。解码器216脊泎为解码结^l得的图^^:据提供给显示控 制单元218。处Sii行到步骤S221。在步骤S221中，显示控制单元218使帧緩 存器218A存储来自觯码器216的感M帧的图傢lt据。处Sii行到步骤S222。 显示控制单元218使显示器41显示相应于^ft在帧緩存器218A中的图像数据 的图像。因此，对于显示类型为静态图像类型VI的帧的图像，显示对应于用作主 数据的图^lt据的图像，即具有较高，率(相对于与作为代^^数据的图^^
据相对应的图像而言)的图像另一方面，当在步骤S218判断在前帧和感絲帧是同-^态图像区间中 的帧时，处Sii行到步骤S222。显示控制单元218 41E示器41显示相对应于 在步骤S221中存储在帧绥存器218A中的图^lt据的图像，作为感M帧的图 像。当在前帧和感M帧是同一^态图像区间中的帧时，作为静态图像区间中 的帧的图像，显示静态图像区间的帧中首先被i5^感兴趣帧的帧的图像。因 此，^jfeii种情况下，由于解码器216无须45WfHf码，因此可减少PC 1上的负担。另一方面，当在步骤S217判断感魏帧的显示类型是辆类型V2时，处 您顷序^ii行到步骤S219到步骤S222。如上所述，显示感^帧的图像。在步骤S219中，当数据提供控制单元213 ^feJt 7中读出感M帧的主 数据，并将主数据提^^解码器216时，解码器216获絲絲帧的主数据。 处舰行到步骤S220。在步骤S220中，解码器216对从数据提供控制单元213获取的感兴趣帧 的主数据进^Hf码。解码器216脊ft为解码结^^斤获得的图^^:据提供给显示 控制单元218。处Sii行到步骤S221。在步骤S221,显示控制单元218使帧緩 存器218A 4#来自解码器216的感兴趣帧的图^lt据。处^ii行到步骤S222。 显示控制单元218使显示器41显示相对应于^ft在帧緩存器218A中的图傢数 据的图像。因此，作为显示类型为"fit类型V2的帧的图像，显示相对应于用作主数 据的图^lt据的图像，即具有较高緒率(相对于与作为^R^数据的图^^据^ t应的图l象而言)的图像。另一方面，当在步骤S217判断感^帧的显示类型是高显示速率/J^f 率类型V3时，处理^Of到步骤S233。当数据提供控制单元213M盘7中读 出感M帧的代理数据(和解码感M帧所必需的数据)，并#^^数据提* 解码器216时，觯码器216获^^^帧的代理数据。处Si^f亍到步骤S220。在步骤S220中，解码器216对从数据提供控制单元213获取的感3^帧 的代理数据进^^码。解码器216将作为解码结果J斤获得的图^^据提供给显 示控制单元218。处Sii行到步骤S221。在步骤S221，显示控制单元218使帧 緩存器218A ，来自解码器216的感兴趣帧的图像lt据。处理进行到步骤S222。显示控制单元218 <祖示器41显示相对应于^ft在帧緩存器218A中的 图^^t据的图《象。因此，作为显示类型为高显示速率m^率类型V3的帧的图像，显示相 对应于用作^^数据的图像数据的图像，即具有较低M率(相对于与作为主 数据的图^^据对应的图像而言)的图像。另一方面，当在步骤S216中判断4&^拨块54没有移动时，处^ii行到步 骤S222。显示控制单元218使显示器41显示对应于在步骤S221中存储在帧緩 存器218A中的图^lt据的图像，作为感兴趣帧的图像。制单元218 4tt示器41再雄示对应于^ft在帧緩存器218A中的图^lt据的 图像，即在判断紧^^前显示的图像(上个步骤S222中显示的图像)。在如上所述的步骤S222中显示感兴趣帧的图像之后，处理进行到步骤 S224。 GUI控制单元211判断步骤S217中M示类型获M元215提供的感 ^帧的显示类型。当在步骤S224中判断感兴趣帧的显示类型是高显示速率m^率类型V3 时，处3gii行到步骤S225。 GUI控制单元211判断在上一个步骤S216中判断 4&^1拨块54是否移动^，是否经过了与高显示速率/低M率类型V3的显示 it率相对应的时间，例如1/60秒。当在步骤S225中判断没有经过1/60秒时，处舰回到步骤S225。当在步骤S225中判断经过了l/60秒时，处舰回到步骤S215。 jtt^，重 复进行上舰理。因此，当显示类型为高显示速率m^率类型V3的帧是感魏帧时，在 步骤S216中，GUI控制单元211判断4^t拨块54是否以对应于高显示速率/ 4^f率类型V3的1/60秒的周期进4博动。当判断4fe^拨块54移动时，显示控制单元218 4組示器41显示对应于图 ^^t据的图像，该图^a据是通it)^^Sei^多动^^t拨块54所定位的指 定区间(45)的帧的代^3g数据而获得的。当判断4^L拨块54没有移动时，显示控制单元218使显示器41显示在判 断紧^^前显示在显示器41上的图寸象。如上所述，对于显示类型为高显示速率/^^率类型V3的帧，以该显示动时，显示控
类型的显示速率60帧/秒在显示器41上显示图像。另一方面，当在步骤S224中判断感^帧的显示类型是静态图像类型VI或"fit类型V2时，处^ii行到步骤S226。 GUI控制单元211判断在上一个步骤S216中判断4^丈拨块54是否移动之后，是否经过了与静态图像类型VI或辆类型V2的显示速率相对应的时间，例如1/30秒。当在步骤S226中判断没有经过1/30秒时，处m回到步骤S226。 当在步骤S226中判断经过l/30秒时，处m回到步骤S215。》b#，重复进行上舰理。因此，当显示类型为静态图像类型VI或辆类型V2的帧是感姨帧时， 在步骤S216中，GUI控制单元211判断4^文拨块54是否以对应于静态图像类 型VI或M类型V2的1/30秒的周期进^f^多动。当判断4^文拨块54移动时，显示控制单元218 4tt示器41显示对应于图 ^!t据的图像(具有高緒率的图像)，该图^lt据是通it^码分酉eiH多动^ 4fe^L拨块54所定位的指定区间(45)的帧的主^t据而获得的。当判断4&^t^块54没有移动时，显示控制单元218使显示器41再次显示 在判断紧^^前显示在显示器41上的图《象。如上所述，对于显示类型为静态图^象类型VI和"fit类型V2的帧，以该显 示类型的显示i^率30帧/秒在显示器41上显示图像。另一方面，当在步骤S215中辦勉2或IU示3絲絲辑禾踏时，即号从键盘2或鼠标3被提條GUI控制单元211时，4^h理(编辑程序的执 行)结束。如上所述，获取作为由插放拨块54所指定的感兴趣帧的感^帧的显示 类型，絲过感兴趣帧的显示类型所表示的显示方法来显示感兴趣帧的图像。 因jt匕，可以适当^lft^t。当显示类型为静态图像类型VI的帧，即没有动作的帧是感兴趣帧时，通并显示相应于该图^lt据的图像，其中在所述静态图像区间中包括感兴趣帧的 静态图l象类型VI的帧连续。这样，显示相同帧的高质量图像。结果，用户可 以容易^r查图像的内容。iH^卜，只要相同静态图像区间中的帧净iL^i5^
感兴趣帧，駄需解码主数据。因此，可以斷^t作为编辑系统的PCl所的负担。当显示类型为高显示速率m^率类型v3的帧，即具有大(剧烈)运动 的帧是感兴趣帧时，以高显示速率显示图像。因此，用户可以精确g查具有 剧烈运动的图像的内容。jH^卜，当显示类型为高显示速率m^率类型v3的帧是感兴趣帧时，对 数据量小于主数据的4戈虔数据进^^码，并显示相应于解码结果的图像数据的 图像。因此，可以减少对作为编辑系统的pc1所^口的负担， ^编辑禾踏 由于在pc1上所;^的较大负荷而未能作出响应(PClM)。当显示类型为"fit类型v2的帧，即具有一定运动程度條动禾級不剧烈 的帧是感兴趣帧时，显示速剩氐于显示类型为高显示速率/低M率类型v3的帧的显示速^a，率高于显示类型为高显示速率m^率类型v3的帧的分辨率的图^ 示。显示类型为辆类型v2的帧具有较小的图^il动(帧之 间的像素值中的变化)，该图傢运动小于显示类型为高显示速率/低，率类， v3的帧的运动。因此，即使以低于显示类型为高显示速率m^率类型v3的 帧的显示速率的显示速率;^示显示类型为4ia类型v2的帧，用户也可精确 綠查图像的内容。jHW卜，显示类型为*类型v2的帧具有较小的图^i^动，该图^il动小 于显示类型为高显示速率/^^f率类型v3的帧的运动。显示类型为lit类型 v2的帧的主数据的数据量小于显示类型为高显示速率/^^率类型v3的帧的 主数据的数 。因此，当显示类型为"fit类型v2的帧是感M帧时，即使 解码主数据并显示对应于作为解码结^^斤获得的图^lt据的高緒率图像，作 为编辑系统的PC 1所ifc^加的负荷也小于当解码显示类型为高显示速率/^^ 辨率类型v3的帧的主数提时所^ii加的负荷。如上所述，在图43的编辑系统中，在4fe^t过程中，才娥显示类型tt图 像的赠率和显示速率，而不是以相同的显示方法显示所有帧。w卜，才緣显 示类型只解码必需的帧，而不;Uf码所有被"i^^絲帧的帧。这使得可以 ^ffit当的M。在图48的4fe^t理中，有^t显示类型的显示类型，即图20中所示的根 M动信息所确定的静态图相类型vi、 ^it类型v2和高显示速率/j^^率类
型V3。然而，即使显示类型例如;LE种类型，即图27中所示的静态图像类型 Vll、辆类型V12、高显示速率Afit緒率类型V13、超高显示速率m^ 率类型V14、和特高显示速率m^f率类型V15，也可以扭^4^t理。即使 显示类型是例如图31所示的才娥细度信息、确定的低，率Aftt示速率类型 Cl、辆类型C2、和辆緒率/^^示速率类型C3 i^t类型，也可以进在上述情况中，具有高^^率的图像的主数#具有^^#率的图像的代 理数据被记絲^7中，即包樹目同内容且具有两种，率的图像记絲光 盘7中，并才W帧的显示类型絲示高緒率的图^N^f率的图像。 例如可将^ft^f率，即高、中、^^f率的图像记^^eJ:7中，并才鹏帧 的显示类型显示高，率图像、中M率图^^低^^率图像。如上所述，在图43的编辑系统中，当图48中的4fe^t皿步骤S213进 行到步骤S215或者从步骤S214进行到步骤S215时，开始进行用于在显示器 41 Ji^7^t口图3中的取景器51之类的GUI的GUI显示处理。如上所述，选择以帧为^的变化量和显示类型的两者之一或两者，并将 其^ft在Fy文件中。在接下来的说明中，至少将变化量和显示类型中的变化量糨在Fy文件中。当在Fy文件中M变化量，但L^^显示类型时，可才W^亥变化量在Fy 管理单元214 (图43)中确U示类型。因此，对于图43中包括Fy管理单元 214的编辑系统，没^#显示类型但存有变化量的Fy文件与存有显示类型和变 化量二者的Fy文件1^上等同。另一方面，当在Fy文件中;^#变化量^#显示类型时，由于难于从显示类型计算变化量，因jtbft于存有显示类型但没M变化量的Fy文件来说， 不^W亍以下所说明的用于计算变化量的处理。然而，即^j^没有，变化量的 文件中，如果Fy文，'j建单元217^目应于Fy文件的AV文件中所糊的数 据中重新创建存有变化量的Fy文件，可^^I重新创建的Fy文件进行在以下描 述的处理中计算变化量的处理。图49是示出了通过GUI显示处^显示器41上所显示的作为GUI的编 辑窗口301的示例的图。在图49的编辑窗口 301中，参照图3所说明的取景器51被布J^图49
的右上方。Fy文件显示部分311被iU在编辑窗口 301的下方，该Fy文件显 示部分311是一个水平矩形区域。在Fy文件显示部分311中显示相对应于要进^f^t的AV文件的Fy文件 中所M的表示信息等的GUI。#^动信息作为变化量^#^目对应于要进^ :的AV文件的Fy文件 中。^t动信息与例如阈值L或阈值H进行比较，如参照图20和21所说明的。 因此，絲态图像类型V1、辆类型V2或高显示速率/^W率类型V3确定 为显示类型。在图49的Fy文件显示部分3U中，显示了在数量Ji4示^^在将要进行 拖故的AV文件、即Fy文件管理单元214所管理的Fy文件中所务賭的变化量 的曲线图(此后适当g作变化量曲线图)。在图49中(^MEjtt^描述的图中)， Fy文件显示部分311的水平方向(从左到右的方向)表示时间的经过，即帧(从 顶部开始的帧的位置)及其垂直方向表示变化量。jH外，在Fy文件显示部分3U中，显示位置指示器312，该位置指示器 312作为表示分酉e^"取景器51中的换放拨块54所定位的指定区间的帧的位置 的位置信息。在拖改中，分酉eiHj换放条53的换放拨块54所定位的指定区间的帧被设 ^示^^景器51的显示部分52上的感M帧。位置指示器312是在垂直 方向JJ^f申的段的GUI，它显示^j^t应于按时间序列形^:动图像的帧中的感 ^帧的位置中，所i^动图^^"应于要进^^的AV文件(要进^ 的 运动图像)。当在水平方向J^多动4^t拨块54,并将感兴趣帧从作为移动前的 感^帧的帧 到另一个帧时，位置指示器312 ^水平方向Ji^动，从而 指示与另 一个帧相^J"应的位置。显示变化量曲线图的Fy文件显示部分3U的区域的7jC平方向上的X^与4fe^t条53的可移动范围的;d相^t应。如^it过将显示变化量曲线图的FV文件显示部分3U的区域的水平方向 上的M与预定数相乘，而将显示Fy文件显示部分3U的变化量曲线图的区域 的水平方向上的长度和4^L条53的可移动范围的长度^^f目同H则Fy 文件显示部分3U中所显示的位置指示器312的位置与掬放拨块54的位置将是 相互一致的。
如上所述，当将显示变化量曲线图的Fy文件显示部分311的区域的7jC平 方向上的长^l和4fe^文条53的可移动范围的长度i^U目同钇变的时候，换放拨 块54的位置上的变化量曲线图的M由换放拨块54所定位的分酉ei^指定区间 的帧的变化量。在图49中，才娥FV文件管理单元214所管理的Fy文件中务賭的变化量， 在Fy文件显示部分311中还显示用作阈值信息的阈值指示器313H和313L, 该阈值信息表示在确定显示类型过程中使用的阈值。阈值指示器313H和313L是在水平方向Jl 1伸的段的GUI，其显示翻目 应于确定显示类型时所使用的阈值的垂直方向上的位置中。因此，当存储在Fy 文件管理单元214所管理的F>文件中的变化量是例如上述的运动信息，并将该 运动信息与阈值L或阈值H进行H^M角定静态图像类型VI、 "fit类型V2 或高显示速率m^率类型V3作为显示类型时，例如拟目对应于阈值H(垂 直方向上)的位置上显示阈值指示器313H,并iL^目对应于阈值L的位置上 显示阈值指示器313L。用户可以通过IHt编辑系统(图43)的#2或^#3 (例M过拖动光 标)，在垂直方向Ji^多动作为阈值信息的阈值指示器313H和313L。这使得可 以将用于确定显示类型的阅值tt成由移动之后的阈值信息所表示的阈值。当 改变了用于确定显示类型的阈值时，文件管理单元214 (图44)的显示类型确 定单元233将^ft在Fy文件中的变化量与^^的阈^NlH^，并才pl^》b^ 果再次确^示类型。在之后描述的GUI显示处理中扭行使用以这种方式 后的阈^t再次确^示类型的处理。才娥上述的Fy文件显示部分3U，用户可以才娥变化量图可浮舰掌4i^整个将要进^^t的运动图像上的变化量的转变。当变化量例如是运动信息时， 用户可以^^变化量曲线图掌#^整个将要进# 的运动图像上的动作^1的转变。结果，用户可以提前掌握例如将要进^ :的运动图像是在^^上具有运动或具有较d 、运动的运动图像或者是在部分帧中具有剧烈运动的运动图像。用户可以才緣变化量曲线图以及指示感兴趣帧的位置的位置指示器312, 掌握取景器51 (的显示部分52)中所显示的感兴趣帧以及靠近感M帧的帧的 运动饥
用户可以才娥变化量曲线图、指示感3^帧的位置的位置指示器312、以 及阈值指示器313H和313L，掌握取景器51中显示的图像辆的是何种显示 类型(显示方法)。jtb^卜，用户可以识别出Fy文件在编辑系统(图43)中是 ^W可被^^]的(例如用于在M中显示图像)。接下来将参照图50中的流程图来说明GUI显示处理。在GUI显示处理中，GUI控制单元211控制显示控制单元218显示编辑 窗口 301 (图49 )。显示控制单元218使显示器41显示编辑窗口 301。在步骤 S251中，显示控制单元218读出py文件管理单元214 (图43 )所管理的F>文 件，即^t在Fy文件管理单元214的文件^ft单元231 (图44)中的Fy文件， 并根悟Fy文件中所^#的变化量来使编辑窗口 301的F>文件显示部分311显 示变化量曲线图。处Sii行到步骤S252。在步骤S252中，显示控制单元218才娥用于确定^ft在Fy文件管理单元 214的文件^f^单元231 (图44)中Fy文件中所員的显示类型的阈UM吏编 辑窗口 301的Fy文件显示部分311显示例如阈值指示器313H和313L(图49)。在GUI处理开始紧^t^采用的阈值被称为默认阈值，所述阈^U^于确 定^f^在Fy文件管理单元214的文件^ft单元231 (图44)中的F>文件中所 M的显示类型的阈值。假设有两个阈值H和L作为默队阈值，显示分别对应于这两个阈值H和 L的阈^t指示器313H和313L。当只有一个阈值作为默认阈值时，显示相对应于这一个阈值的阈值指示 器，该阈值指示器充当一条阈值信息。当有三个或更多个阈值作为默认阈值时， 显示与默认阈值的数對目同数量的阈值指示器，这些阈值指示器充当多条阈值 信息。jtk^，处g步骤S252进行到步骤S253。显示控制单元218获M示器 41上所显示的编辑窗口 301 (图49)中的换放拨块54的位置上的信息以及被 WeiN^:拨块54所定位的指定区间的帧，即同^f来自GUI控制单元211的 感兴趣帧(接J^ GUI控制单元211提供的感M帧的信息)。处3Sii行到步 骤S254。在步骤S254中，显示控制单元218根据关于在紧接的前一步骤S253中从 GUI控制单元211获取的感，帧的信息来使编辑窗口 301的F>文件显示部
分311显示位置指示器312 (图49 )。显示控制单元218使Fy文件显示部分311 显示线段形状的位置指示器312 (图49),该位置指示器312相对于^geiH^t 拨块54所定位的指定区间的帧(感3^帧)在Fy文件显示部分3U的7JC平方 向上的位置中以垂直方向延伸。处g步骤S254进行到步骤S255。 GUI控制单元211判断^Jfe: 2或IU示 3是否被辦絲絲辑抓当在步骤S255中判断勉2或鼠标3没有被辦絲絲辑禾誘时，处 ^ii行到步骤S256。 GUI控制单元211判断是否移动了4fe^拨块54，即用户是 否通过^t^ 2或E^示3移动了 4^t拨块54 。当在步骤S256中判断移动了^^拨块54时，这:t^M用户已^t勉2 或IU示3进行了^^M多动^t拨块54，并JL^应于该IMt的，信号从^: 2或鼠标3被提供到GUI控制单元2U。在这种情况下，GUI控制单元211将 分酉eiNfe^:拨块54所^l^位的指定位置(图45)的帧诏^^a帧，并将 关于感病帧上的信息炎^^显示控制单元218。处舰回到步骤s253。 jH^， 重复相同的处理。当在7JC平方向上移动^L拨块54，并i^娥步骤S253至S256的处理将感兴趣帧v^多动紧^^前被i5^^她帧的帧改变到另一个帧时，位置指示器312^7jC平方向中移动，从而指示对应于该另一个帧的位置。步骤S255和S256分别与图48中的步骤S215和S216相同。因此，可以 分别^图48中的步骤S215中的处^步骤S216中的处理作为步骤S255和 S256中的处理。^it种情况下，如参照图48所说明的，当感M帧的显示类 型是静态图像类型VI或絲类型V2时，以1/30秒的周期4Mt^骤S255和 S256。当感兴趣帧的显示类型是高显示速率m^率类型V3时，以l/60秒的 周^i^ft^骤S255和S256。另一方面，当在步骤S256中判断4^文拨块54没有移动时，处^ii行到步 骤S257。 GUI控制单元211判断阈值指示器313H或313L (图49)是否开始 移动，即用户是否￡^勉2或1#3 ^M多动阈值指示器313H或313L。当在步骤S257中判断阈值指示器313H或313L的移动没有开始时，处理 返回到步骤S255。》1^，重复相同的处理。当在步骤S257中判断阈值指示器313H或313L开始移动时，这^ M"用
户eJMt勉2或I^示3^M多动阈值指示器313H或313L,并Jjft应于该辦 的,信号从键盘2或鼠标3被提供到GUI控制单元211。在这种情况下,GUI 控制单元2U條来自勉2或^f示3的l^t信号计算阈值指示器313H或313L 所移动到的位置。GUI控制单元211将指示位置的信息^^供给显示控制单元 218。处Si^f亍到步骤S258。在步骤S258中，显示控制单元218使Fy文件显示部分3U以与来自GUI 控制单元2U的信息相对应的位置取代阈值指示器313H或313L移动紧^L前 的所显示的位置来显示阈值指示器313H或313L。处Mii行到步骤S259。在步骤S259中，GUI控制单元211判断阈值指示器313H或313L的移动 是否结束，即用户是否结束了用来移动阈值指示器313H或313L的键盘2或鼠 标3的操怍。当在步骤S259中判断用于移动阈值指示器313H或313的操作结束了的时 候，这^ 木着用户连续##键盘2或鼠标3来移动阈值指示器313H或313L， 并JU t应于该，的^^信号从^Jt 2或鼠标3被提，GUI控制单元211 。 ^tit种情况下，GUI控制单元211才娥来自M 2或！^示3的^ft信号计算阈 值指示器313H或313L所移动到的位置。GUI控制单元211将指示位置的信息 提供给显示控制单元218。处^il回到步骤S258。此后重复相同的处理。才娥步骤S257至S259的处理，才娥用户为移动阈值指示器313H或313L 而进行的，在垂直方向上移动阈值指示器313H或313L。另一方面，当在步骤S259中判断，用于移动阔值指示器313H或313L的 辦结束了的时候，这^5M"用户结束了为移动阔值指示器313H或313L而进 行的勉2或IU示3的辦，并ib t应于移动阈值指示器313H或313L的辦 的，信号没有从^Jt 2或E^示3被提^ GUI控制单元211。 ^Eil种情况下， GUI控制单元211将对应于移动结束的阈值指示器313H或313L的位置(垂直 方向上)的阈m过数据提供控制单元213 (图43 )提#^ Fy文件管理单元 214。处^ii《亍到步骤S260。由GUI控制单元211通过数据提供控制单元213提供给F>文件管理单元 214的阈值被提供给阈M理单元242，其中该阈M理单元242构成了 Fy文 件管理单元214 (图44)的显示类型确定单元233。此后，阈^M:理单元242文件。在步骤S260中，Fy文件管理单元214 (图44)的显示类型确定单元233给阈^t理单元242的阈:tt^新(再次)确^示类型，即在由作为阈值信息的阈值指示器313H或313L移动^所指示的阈值，以及^^在F>文件賴 单元231中的Fy文件中的变化量。显示类型确定单元233将^t在Fy文件^t单元231中的Fy文件中所存 储的变化量与在作为阈值信息的移动^的阈值指示器313H或313L所指示的 阈值H或L进行》腺。显示类型确定单元233才^^bi^果再次确定显示类型。 将显示类型确定单元233再次确定的显示类型通it^示类型写入单元234写入 到文件^"^单元231中，以M Fy文件^#单元231中所，的F>文件中的因此，oH^在如上所述的图48中的步骤S217至S224中，参照显示类型 确定单元233再次确定的显示类型来判断感兴趣帧的显示类型。##显示类型 絲示感兴趣帧。如上所述，用户通过辦作为GUI的阈值指示器313H或313L在确 示类型的过程中改变阈值H或L。可以说，使用^后的阈值H或L实时地 再次确^示类型。因此，用户可以考虑PC 1的性能等来改变阈值H或L， 并可以容易地调整在拖放中显示帧(图像)时的显示类型(显示方法)，从而使 得可以^ff平滑(最佳)的M。在步骤S260的处理之后，处3Sil回到步骤S255。此后，重复相同的处理。 当在步骤S255中判断##勉2或^f示3以^#絲#^时，这^^木 着用户已经操怍了^: 2或鼠标3 MA^辑程序，并将对应于该操怍的^ 信号从键盘2或鼠标3提^GUI控制单元2U。在这种情况下，结束GUI 显示处理。在图49中，变化量曲线图、位置指示器312、和阈值指示器313H和313L 净組示在Fy文件显示部分3U中。然而，也可以在Fy文件显示部分3U中显 示显示类型信息4^t代变化量曲线图、位置指示器312、和阈值指示器313H和 313L，或与变化量曲线图、位置指示器312、和阈值指示器313H和313L—同
显示，其中该显示类型信息是以时间序列表示F>文件管理单元214 (图43 )所 管理的Fy文件中的显示类型的带状区域的GUI。图51是示出了 Fy文件显示部分3U的示例的图，在该Fy文件显示部分 中类型信息与变化量曲线图、位置指示器312和阈值指示器31犯和313L —同 显示。在图51中，Fy文件显示部分3U包括曲线图显示部分321和类型信息显 示部分322。曲线图显示部分321是位于Fy文件显示部分311上部的矩形区域。在图 U示部分321中，显示了图49中所说明的变化量曲线图、位置指示器312、 和阈值指示器313H和313L。类型信息显示部分322是位于Fy文件显示部分311下部的矩形区域。类 型信息显示区域322中显示了类型信息。类型信息是具有水平矩形区域的GUI。它的7]C平方向(M到右的方向) 表示时间的经过，即图49中关于Fy文件显示部分3U所说明的帧(从顶部开 始的帧的位置)。类型信息表示与水平方向中^^位置相对应的帧的显示类型。在图51中， 假设具有^类型，即图20中所说明的静态图像类型VI、 "fif类型V2和高 显示速率m^率类型V3，用从下向左(从上向右)的斜线来示出具有静态 图像类型VI的帧i^的静态图〗象区间，用没有图案的区^示出具有*类 型V2的帧连续的"fit区间，用水平方向的线(水平线)来示出具有高显示速 率m^f率类型V3的帧连续的高显示速率/^^f率区间。因此，用户可以才娥类型信息来掌握要进^^i欠的运动图像的帧的显示类型。曲线图显示部分321中所显示的变化量曲线图的水平方向的Xjl与类型信 息显示部分322中所显示的类型信息的相同。因此，当将注意力集中到Fy文件 显示部分3U水平方向中的位置作为感兴敝置时，感^^i置中的变化量曲 线图的偵表示对应于感3^i置的帧的变化量(运动信息)。^X于感^fi置 中的类型信息上的图案表示相应于感^i置的帧的显示类型。假i組将要进^^^文的运动图像中，变化量小于阈值指示器313L指示的 阈值L的连续帧的数量的最小值、变化量等于或大于阈值指示器31犯指示的
阈值H的连续帧的数量的最小值、以M化量等于或大于阈值L且小于阈值H 的连续帧的数量的最小^W等于或大于最小极限帧数N。接着，分别，态图 像类型V1、 "f"it类型V2、和高显示速率m^率类型V3确^变化量小于 阈值L的帧的显示类型、变化量等于或大于阈值L且小于阈值H的帧的显示类 型、以A^化量等于或大于阈值H的帧的显示类型。^Eit种情况下，如图51所示，曲线图显示部分321中变化量曲线图的值 (变化量)小于阈值指示器313L指示的阈值L的区间、与类型信息显示部分 322中用斜a示的类型信息的区间，即静态图像区间，相一致。曲线图显示 部分321中变化量曲线图的值等于或大于阈值指示器313H指示的阈值H的区 间、与类型信息显示部分322中用水平^4示的类型信息的区间，即高显示速 率/^^率区间，hM目互一致。变化量曲线图的值等于或大于阈值L且小于阈 值H的区间与类型信息显示部分322中没有图案的类型信息的区间，即普通区 间，"tM目互一致。jtl^卜，在类型信息显示部分322中，图絲示部分321中显示的位置指示 器312与类型信息一同显示为作为位置指示器312的段的延伸。因此，用户可以(看一眼就)容易地掌握取景器51 (的显示部分52)(图 49)中显示的感^帧，即与位置指示器312的位置相对应的帧的变化量和显 示类型(显示类型所^示的显示方法)。在作为类型信息的矩形区域中，除了对每种显示类型施加不同的图案以影。
P 、5 5 "如图51中所示，当F>文件显示部分3U包括显示了变化量曲线图等的曲 线图显示部分321和显示了类型信息的类型信息显示部分322时，如图49中的 Fy文件显示部分3U，可以才娥用户的IMt来移动阈值指示器313H和313L。当移动阈值指示器313H或313L,并因此改变用于确定显示类型的阈值H 或L时，文件管理单元214的显示类型确定单元233 (图44)将Fy文件中所 务賭的变化量与 tt后的阈值H或L进行》傲，并才緣J^^果再次确定显示 类型。然而，才M^再次确定的显示类型再次显示图51中的类型信息显示部分 322的类型信息。图52 ;i示出了当用于确t显示类型的阈值H或L ^时再:^示的类型
信息。
图52顶端的图示出了在某个时刻显示的Fy文件显示部分311。在图52中， 除了Fy文件显示部分3U，还示出由勉2或E^示3辦的it+示。
当示出图52的顶端的FV文件显示部分311时，例如，用户^^ibf亍施曳 向下移动阈值指示器313L。在这种情况下，文件管理单元214的显示类型确定 单元233 (图44)将F>文件中賴的变化量与移动后阈值指示器313L指示的 ^之后的阈值L或与没有改变的阈值H进行J^艮，并^4^b^果再次确定 显示类型。才娥显示类型确定单元233再次确定的显示类型再次显示类型信息。
图52中从顶端开始的第二幅图示出了上述具有再次显示的类型信息的Fy 文件显示部分3U。
当如上所述向下移动阈值指示器313L时，移动^的阈值指示器313L所 指示的阈值(变化后的阈值)L变得小于移动前的阈值指示器313L所指示的阈 值(变化前的阈值)L。因此，在阈值指示器313L移动之后，与移动前相对比， 变化量小于阈值L的帧减少了 ，而变化量等于或大于阈值L且小于阈值H的帧 增多了。换句话说，在阈值指示器313L移动之后，与移动前相对比，显示类型 为静态图〗象类型VI的帧减少了 ，显示类型为"fit类型V2的帧增加了 。
结果，在阈值指示器313L移动之后，如图52中从顶端开始的第二幅图所 示，显示了相对于移动之前静态图像部分(斜线部分)减少JLfit部分(没有 图案的部分)增多的类型信息。
另一方面，当显示在图52的顶端的第一Fy文件显示部分311时，例如用 户^U ib^、拖曳以向上移动阔值指示器313L。 ^it种情况下，文件管理单元214 的显示类型确定单元233 (图44)将Fy文件中4^的变化量与移动后阈值指示 器313L所指示的 ^的阈值L或与没有妙的阈值H进行》嫩，并才赚比 ^果再次确 示类型。才M^显示类型确定单元233再次确定的显示类型再 M示类型信息。
图52中从顶端开始的第三幅图(底端)示出了如上所述具有再次显示的 类型信息的Fy文件显示部分3U。
当如上所述向J^多动阈值指示器313L时，移动^的阈值指示器313L所 指示的阈值L (变化后的阈值)变得大于移动前的阈值指示器313L所指示的阈 值L(变化前的阈值)。因此，在阈值指示器313L移动^，与移动前相对比，
变化量小于阈值L的帧增多了 ，而变化量等于或大于阈值L且小于阈值H的帧 减少了。换句话说，在阈值指示器313L移动之后，与移动前相对比，显示类型 为静态图像类型VI的帧增多了 ，而显示类型为"fit类型V2的帧减少了 。
结果，在阈值指示器313L移动之后，如图52中从顶端开始的第三幅图所 示，显示了与移动之前相比其中静态图像区间(斜线部分)增多和絲区间(没 有斜线的部分)减少的类型信息。
将参照图53中的流程图来说明当如参照图51和52所说明的那样显示类 型信息时的GUI显示处理。
在该GUI显示处理中，GUI控制单元211控制显示控制单元218来显示 编辑窗口 301 (图49 )。因此，显示控制单元218使显示器41显示编辑窗口 301。
在步骤S281中，如图50中的步骤S251,显示控制单元218读出Fy文件 管理单元214 (图43 )所管理的Fy文件。显示控制单元218使编辑窗口 301 的Fy文件显示部分3U (图51)中的曲线图显示部分321才娥Fy文件中的变 化量^示变4匕量曲线图。处^ii行到步骤S282。
在步骤S282中，显示控制单元218使Fy文件显示部分3U (图51)的类 型信息显示部分322根据Fy文件管理单元214 (图43 )所管理的Fy文件中的 显示类型絲示类型信息，该类型信息糸时间序列表示显示类型(按时间序列 表示显示类型的安排的类型信息)。处^i^行到步骤S283。
在步骤S283中，如同图50中的步骤S252,显示控制单元218使编辑窗口 301的Fy文件显示部分3U (图51)中的曲线图显示部分321才緣用于确定Fy 文件管理单元214的文件^#单元231 (图44)中所，的Fy文件中，的显 示类型的阈值(默认阈值)来显示阈值指示器313H和313L (图49)。
jtb^，处g步骤S283进行到步骤S284。在步骤S284至S291中，^f亍 与图50中的步骤S253至S260的处刻目同的处理。
在步骤S291中，如同图50中的步骤S260， Fy文件管理单元241的显示 类型确定单元233 (图44 HM移动^的阈值指示器313H或313L所指示的 阈值以;51##在Fy文件^ft单元231 (图44)中的Fy文件中所^fW变化量 来再次确 示类型。当将再次确定的显示类型新写A^文件^^单元231中 时，处Sii行到步骤S292。显示控制单元218 (图43 )在类型信息显示部分322 中^f亍显示更新，用于使Fy文件显示部分311 (图51)的类型信息显示部分
322才NW写AJ'J Fy文件管理单元214 (图44)的文件^ft单元231中的显示 类型来新显示类型信息，所述类型信息、按时间序列表示显示类型(按时间序列 表示显示类型的安排的类型信息)。处igil回到步骤S286。
当用户如前所述辦作为GUI的阈值指示器313H或313L时，用于确定 显示类型的阈值H或L祐玫变。当偵月^后的阄值H或L再次确定显示类 型时，##再次确定的显示类型来更新按时间序列表示显示类型的类型信息的 显示。
作为变化量，有运动信息和细度信息。可以在py文件中^##^动信息 和细度信息中的一个。也可以在F>文件中同时^f^动信息和细度信息it^ 者，例i咖图35中所示。
当F>文件中存有运动信息和细度信息it^者时，在Fy文件显示部分311 中，例如可以选摔作为FV文件中的变化量的运动信息和细度信息中的一个，并 显示按时间序列表示所选#^变化量的变化量曲线图。
图54是示出了 (包含)文件显示部分311 (的编辑窗口 301 )，该Fy 文件显示部分3U用于选择变化量中的一个，即运动信息和细度信息^L一，并 显示按时间序列表示所选，变化量的变化量曲线图。
在图54中，在FV文件显示部分3U的左上^P^供有运动信息标签331和 细度信息标签332，这两个标lft为用于选择在按时间序列表^动信息的变 化量曲线图和按时间序列表示细度信息的变化量曲线图中选鄉卩一个的GUI。
当用户^^#^^^#^械动信息标各331和细度信息标善332中的运 动信息标签331时(例如用鼠标3来点击运动信息标签331 )，在F>文件显示 部分3U中显示按时间序列表^动信息的曲线图作为变化量曲线图。当用户 ^^#^;5^^#^》遮动信息标签331和细度信息标签332中的细度信息标签 332时，在Fy文件显示部分3U中显示按时间序列，细度信息的曲线图来作 为变4匕量曲线图。
在图54中，扭行用于选#^度信息标苍332的操怍，由jtb^Fy文件显示 部分3U中显示按时间序列表示细度信息的曲线图作为变化量曲线图。
当在Fy文件中同时存有运动信息和细度信息ii^者时，可在Fy文件显示 部分3U中显^动信息或细度信息的变化量曲线图。jtb^卜，可以同时显^it 动信息和细度信息二者的变化量曲线图。也可以与变化量曲线图一^示按时
间序列表示显示类型的显示类型信息。
图55 ;|_示出了 Fy文件显示部分311的图。
图55中的Fy文件显示部分3U包括显示有变化量曲线图等的曲线图显示 部分321和显示有类型信息等的类型信息显示部分322。
在图55的Fy文件显示部分3U的左上部，提供有作为GUI的运动信息标 签331、细度信息标各332和4^^f言息标l333。这些标善用于选^^^示按时 间序列表75^动信息的变化量曲线图(jH^适当,为运动信息曲线图)、按时 间序列表示细度信息的变化量曲线图(此后适当地淋为细度信息曲线图)、还是 运动信息曲线图和细度信息曲线图二者。
当用户在如图55上部所示的运动信息标洛331、细度信息标洛332和4^ 信息标各333中"i^亍例如用于选解动信息标苍331的辦时,在Fy文件显示 部分3U的曲线图显示部分321中显75^t动信息曲线图。在Fy文件显示部分 311的类型信息显示部分322中，显示按时间序列表示显示类型(基于运动信息 的显示类型)的类型信息，所述类型信息是通过g动信息与阈值H和L进行 HS2艮而确定的。jH^卜，在Fy文件显示部分3U中，还分别显示了指示 >景器 51 (图49)中所显示的帧(感兴趣帧)的位置的位置指示器312和指示阈值H 和L的阈值指示器313H和313L，其中阈值H和L用于才Wt动信息来确定 显示类型。
当F>文件中^^有运动信息和细度信息时，例协参照图38至40所说 明的，^^动信息与两个阈值H和L相比较，并且将细度信息与阈值K相比 较。因此，才Wt动信息和细度信息游图38所示的静态图像类型VC1、辆 类型VC2、高显示速率/^^f率类型VC3、或"fi!E示速率m^f率类型VC4 确定为显示类型(最终显示类型)。
^it种情况下，当用户如图55下部所示^M:动信息标签331、细度信息标 签332、和4^信息标答333中^M亍例如用于选择^MMt息标甚333的辦时， 在Fy文件显示部分3U的图^示部分321中显示运动信息曲线和细度信息曲 线图。在Fy文件显示部分311的类型信息显示部分322中，显示类型倌息，类 型信息、換时间序列表示基于运动信息和细度信息的显示类型，所述显示类型是 通过g动信息与阈值H和L进行HSi艮、并且将细度信息与阈值K进行t嫩 而确定的。》f^卜，在Fy文件显示部分3U中，还分别显示了指示取景器51 (图
49)中所显示的帧(感M帧)的位置的位置指示器312和指示阈值H、 L以 及K的阈值指示器313H、 313L以及313K，其中阈值H、 L以及K浮iUIJ于确 示类型。
当用户g动信息标善331、细度信息标各332、和4^M言息标答333中 1^亍用于选#^如细度信息标苍332的辦时，如同^f亍用于选躲动信息标 签331的情况，在Fy文件显示部分311的曲线图显示部分321中显示细度信息 曲线图。在Fy文件显示部分3U的类型信息显示部分322中，显示了按时间序 列表示显示类型(基于细度信息的显示类型)的类型信息，所述类型信息是通 过将细度信息与阈值K进行t嫩而确定的。jtb^卜，在Fy文件显示部分3U中， 还显示了指示了取景器51 (图49)中显示的帧(感M帧)的位置的位置指示 器312和指示阈值K的阈值指示器313K，其中阈值K^M于确定显示类型。
将参照图56的j:^^呈图来i兑明当如参照图54和55所i兌明的那^^在Fy文件 中員多种信息(值)iH喊动信息和细度信息作为变化量时，所^f亍的GUI 显示处理。
运动信息和细度信息作为变化*##在Fy文件中。例如，條动信息和 细度f言息中的运动信息iit^为作为感3^^化量的默认的感兴趣信息。jH外， 当Fy文件中没有^ft为默认的感^H言息的基于运动信息的显示类型时,在 图48中的4fe^h理的步骤S214中，Fy管理单元214 (图43) 4Ni^动信息扇 U示类型，并将该显示类型写A^文件^ft单元231中(图44)。
在GUI显示处理中，GUI控制单元211 (图43 )控制显示控制单元218 (图43 )来显示编辑窗口 301 (图49 )。因此，显示控制单元218使显示器41 显示编辑窗口301。在步骤S311中，显示控制单元218读出Fy文件管理单元 214 (图43 )所管理的py文件，即^#在Fy文件管理单元214的文件^ft单 元231 (图44)中的Fy文件。显示控制单元218使编辑窗口 301的Fy文件显 示部分311才^t^^在Fy文件中的运动信息和细度信息中作为默认的感兴趣信 息的运动信息，来显示变化量曲线图(运动信息曲线图)。
jtb^卜，显示控制单元218使Fy文件显示部分311 #^从Fy文件管理单元 214的文件^t单元231中读出的Fy文件中所^(W运动信息和细度信息显示 例如如图55所示的运动信息标签331、细度信息标吝332和4^^Mt息标各333。 处获步骤S311进行到步骤S312.
在步骤S312中，显示控制单元218使编辑窗口 301的Fy文件显示部分3U (图51)的类型信息显示部分322 #^^^在Fy文件管理单元214 (图43 ) 的文件^t单元231中的作为默认的感兴趣信息的基于运动信息的显示类型， ^示按时间序列表示显示类型的类型信息(按时间序列表示显示类型的布置 的类型信息)。处^ii行到步骤S313。
在步骤S313中，显示控制单元218使F>文件显示部分311 ##用于确定 基于运动信息的显示类型的阈值H和L,来显示阈值指示器313H和313L(图 55)，其中该阈值H和L作为存储在Fy文件管理单元214的文件^j^ft单元231 (图44)中的Fy文件中所M的默认的感^^信息。
itk^，处^v步骤S313进行到步骤S314。在步骤S314至S317中，^M亍 与图50中的步骤S253至S256相同的处理。
在步骤S314中，显示控制单元218从GUI控制单元211获取关于4fe^l拨 块54的位置的信息以及分酉eiN&^拨块54所定位的指定区间(图45)中的帧， 即感3^帧(接收关于从GUI控制单元211提供的感^帧的信息)。处^ii 行到步骤S315。
在步骤S315中，显示控制单元218使Fy文件显示部分311 ##在紧接的 前一步骤S314中从GUI控制单元211获取的感^^帧的信息絲示位置指示 器312 (图55 )。显示控制单元218使Fy文件显示部分311在与分酉eJij4^t拨 块54所定位的指定区间的帧(感^帧)相对应的位置中显示位置指示器312。
处3S^步骤S315进行到步骤S316。 GUI控制单元211判断^ 2或鼠标 3是否被辦絲絲辑禾沐
当在步骤S316中判断勉2或鼠标3没有被,絲絲辑禾i^时，处 3Sii行到步骤S317。 GUI控制单元211判断是否移动了换放拨块54，即用户是 否通过,^: 2或11# 3移动了 _拨块54。
当在步骤S317中判断移动了^it拨块54时，这*"用户已^t勉2 或IU示3进行了^f^M多动4fe^拨块54，并ib t应于该,的^^信号从M 2或鼠标3被提供到GUI控制单元2U。在这种情况下，GUI控制单元211将 分酉e^4fe^拨块54所定位的指定位置中(图45)的帧iMM^^帧，并将 关于感兴趣帧的信,y^^^显示控制单元218。处Sil回到步骤S314。 jtb^， 重复相同的处理。
另一方面，当在步骤S317中判断^^拨块54没有移动时，处Sii行到步 骤S318。 GUI控制单元211 (图43)判断是否^W亍了用于选衬骤S311中显 示的运动信息标苍331、细度信息标各332、或4^ff息标l333的操怍'当在步骤S318中判断没有^e用于选^动信息标各331、细度信息标苍 332、或4^M言息标吝333的辦时，浪,t^描述的IW亍用于妙感a帧的 处理的步骤S319至步骤S322。处Jgi^行到步骤S323。当在步骤S318中判断执行了用于选#^动信息标签331、细度信息标答 332、或4^M言息标各333的辦时，这意-M用户已^ft勉2或IU示3选择 运动信息标l331、细度信息标各332、或4^^M言息标洛333,并将对应于该选 #^|#^信号从,2或I^示3提供给GUI控制单元211 (图43 )。 4il种情 况下，GUI控制单元2114娥来自键盘2或IU示3的，信号将对应于运动信 息标l331、细度信息标苍332、和4^M言息标莶333中净i6^賴一个(jH^适 当録为所选标蕃)的信息iM絲兴趣信息。处^ii行到步骤S319'当所选标各是运动信息标各331时，辦为对应于运动信息标逸331的信 息的运动信息iM^3^^信息。当所选标苍是细度信息标答332时，将对应 于细度信息标l332的细度信息i^J^^3^H言息。当所选#^是4^#|^言息标 签333时，将FY文件中絲的所有变化量，即对对应于4^信息标各333的运 动信息和细度信息二者浙M鋪姊信息。在步骤S319中，显示控制单元218 (图43)读出F>文件管理单元214管 理的Fy文件，即^f^在Fy文件管理单元214的文件^ft单元231 (图44)中 的Fy文件。显示控制单元218使编辑窗口 301的Fy文件显示部分311才條存 储在Fy文件中的运动信息和细度信息中的感兴趣信息束昆示变化量曲线图。例如，当运动信息和细度信息中的运动信息是感^^信息时，在步骤S319 中，显示控制单元218使Fy文件显示部分311运动信息曲线图，显示如图55 上部所示。例如，当细度信息是感3^^信息时，在步骤S319中，显示控制单元 218使Fy文件显示部分311显示细度信息曲线图。jtb^卜，例如当运动信息和细 度信息二者都是感^&信息时，在步骤S319中，显示控制单元218使Fy文件 显示部分311显示运动信息曲线图和细度信息曲线图，如图55底部所示。jft^，处緣步骤S319进行到步骤S320。 Fy文件管理单元214 (图43) 在昆示类型确定单元233中将感^^信息与用于#^感3^&信息4 示类型
的当前阈值(默认阈值或由阈值指示器313H、 313L或313K (图55)的位置 所体现的阈值H、 L或K)进行W艮，从而^^感3^^信息来确n示类型， ^H^L件^^单元231iM^^亥显示类型。处^ii行到步骤S321。在步骤S321中，显示控制单元218使Fy文件显示部分311才^t基于^ 在Fy文件管理单元214 (图43 )的文件^ft单元231中的感3^^信息的显示类 型i^示按时间序列表示显示类型的类型信息(按时间序列表示显示类型的安 排的类型信息)。处^ii行到步骤S322。在步骤S322中，显示控制单元218使Fy文件显示部分311才緣用来确定 显示类型的阈值H、 L或K (其用于在紧接的前一步骤S320中确定显示类型) 扭示阈值指示器313H、 313L或313K(图55)，所i^示类型基于^ft在Fy 文件管理单元214的文件4#单元231 (图44)中的感3^^信息。例如，当运动信息和细度信息中的运动信息是感兴趣信息时，在步骤S322 中，显示控制单元218使Fy文件显示部分311在其Jj t应于用于才Wt动信息 来确定显示类型的阈值H和L的位置上显示阈值指示器313H和313L,如图 55中的上部所示。例如，当细度信息是感^^信息时，在步骤s322中，显示控制单元218 使Fy文件显示部分3u在其Ju t应于用于才娥细度信息来确n示类型的阈值 k的位置Ji^示阈值指示器313k。jtW卜，例如当运动信息和细度信息二者都是感兴趣信息时，在步骤S322 中，显示控制单元218使Fy文件显示部分311在其JUft应于用于分别#4^动 信息和细度信息来确 示类型的阈值H、 L和K的位置Ji^示阈值指示器 313H、 313L和313K如图55中的下部所示。jH^，处狐步骤s322进行到步骤s323。在步骤s323至s327中，^/f亍 与图53中的步骤S288至S292的处對目同的处理。在步骤S323中，GUI控制单元211判断Fy文件显示部分311中显示的阈 值指示器，即与用于##感兴趣信息确 示类型的阈銜目对应的阈值指示器 (阈值指示器313H、 313L和313K中的一个)，是否开始移动，即用户是否已 #^键盘2或鼠标3来移动阈^i指示器。当在步骤S323中判断Fy文件显示部分311中显示的阈值指示器没有开始 移动时，处舰回到步骤S316。》b^，重复相同的处理。
当在步骤S323中判断Fy文件显示部分3U中显示的阈值指示器开始移动 时，这tM用户eJ^t勉2或I^示3 ;M多动Fy文件显示部分3U中显示的 阈值指示器，并iUt应于该操怍的梯作信号从键盘2或鼠标3被提供到GUI控 制单元211。在这种情况下，GUI控制单元211 ##来自键盘2或鼠标3的操 作信号计算fy文件显示部分311中显示的阈值指示器所移动到的位置。GUI 控制单元211将表示位置的信息提供给显示控制单元218。处理进行到步骤 S324。在步骤S324中，显示控制单元218使Fy文件显示部分311在与来自GUI 控制单元211的信息相对应的位置中显示阈值指示器，以取代阈值指示器紧接 在该步骤之前的显示位置。处舰行到步骤S325。在步骤325中，GUI控制单元211判断阈值指示器的移动是否结束，即用 户是否结束了用来移动阈值指示器的键盘2或鼠标3的操怍。当在步骤S325中判断用于移动阈值指示器的辦没有结束时，这tM 用户继续辦勉2或1# 3 ^M多动阔值指示器，并且将对对应于该辦的操 作信号从^2或I^示3提供给GUI控制单元2U。 ^it种情况下，GUI控制 单元211 ##来自键盘2或鼠标3的M信号计算阈值指示器所移动到的位置， 并将表示位置的信息炎^^显示控制单元218。处舰回到步骤S324。 jtb^重 复相同的处理。另一方面，当在步骤S325中判断用于移动阔值指示器的操作结束的时候， 这t木着用户结束了为移动阈值指示器而进^^l键盘2或鼠标3的操怍，并且 对应于移动阔值指示器的操作的梯作信号没有从键盘2或鼠标3被提^GUI 控制单元211。在这种情况下，GUI控制单元211将对应于结束阈值指示器移 动的位置(垂直方向上)的阈值通过数据提供控制单元213 (图43)提^Fy 文件管理单元214。处Sii行到步骤S326。如参照图50所说明的，由GUI控制单元211通过数据提供控制单元213 提^ Fy文件管理单元214的阈值净皮II^^阈M理单元242 ，该阈M理单 元242构成了 Fy文件管理单元214(图44 )的显示类型确定单元233的一^分。4^供的阈值^f亍处理，直到新的阈值被提供给阚M理单元242或文件^ft单 元231中存储了新的Fy文件。
在步骤S326中，Fy文件管理单元214 (图44)的显示类型确定单元233阈,理单元242的阈偵来新(再次)确定显示类型，即由移动之后的阈值指 示器所指示的阈值，以及作为感^^信息^^在Fy文件^^单元231中的Fy 文件中的变化量。显示类型确定单元233将作为感兴趣信息^f^在Fy文件^^单元231中 的Fy文件中的变化量与移动后的阈值指示器所指示的阈值进行tb^。显示类型 确定单元233 #4^(^果再次确^^于感^^信息的显示类型。将显示类型 确定单元233再次确定的基于感兴趣信息的显示类型写Ai'j文件^ft单元231 中，覆盖Fy文件^#单元231中务賭的显示类型。当如上所#步骤S326中确定了基于感兴趣信息的显示类型之后，处理 进行到步骤S327。显示控制单元218 (图43 )在类型信息显示部分322中"^f亍 显示更新，用于使FY文件显示部分311才娥新写入到Fy文件管理单元214 (图 44)的文件^ft单元231中的基于感兴趣信息的显示类型;J^示按时间序列表 示显示类型的类型信息(表示显示类型按时间序列的安排的类型信息)。处m 回到步骤S316。当在步骤S316中判断，辦了勉2或鼠标3絲A^^踏时，这意 pM用户已经^^^:2或鼠标3^^;^辑禾I^,并ibft应于该操怍的, 信号从^Jt2或IU示3被提^^GUI控制单元2U。 ^it种情况下，GUI显示 处理结束。在拖改中，以与显示速率相对应的周^"测4^:拨块54的位置。旨配 给4&^:拨块54所定位的指定区间的帧iM^^^帧。^l景器51 (图3)中 显示感减帧。为了简化说明，^Ri組示速率是固定的。如参照图45所说明的，将^:条53的可移动范围划分成以与形成^i^f亍 M的运动图像的帧数相同数量而被提供的、并具有相同区间狄的指定区间。 ^it种情况下，当以固^H移动^:拨块54时，在,时间内4^t拨块54 移动固定的距离和固定数量的指定区间。因此，如上所述，如U示速率是固 定的，则当以固定的i^l将4&^拨块54移动固定的距离时,显示固定数量的帧。 这W^于4^t条53在可移动范围中的何种范围中移动。
例如，在将要进#^:的运动图像中，存在其中具有剧, 腿动的帧连续的 区间(此后适当地沐为具有运动的区间)和不具有运动的帧连续的区间(jtb^ 适当iW为i^动的区间)。^Lii种情况下，在4fe^:条53的可移动范围中，即 使以固定的速度将4^:拨块54在分配了具有运动的区间中的帧的指定区间的 范围中以及在分配了无运动的区间中的帧的指定区间的范围中移动固定的距离，取景器51中所显示的帧数也是相同的。然而，当在分配了具有运动的区间中的帧的指定区间的范围中移动4^文拨块54时，由于具有运动的区间中的帧具有剧烈的运动，取景器51中显示的图^^生了很大私变的变化(移动)。另一方面，当在分配了ibi^动的区间中的帧的指定区间的范围中移动M 拨块54时，由于^it动的区间中的帧不具有运动(具有很小的运动)，因》讽 景器51中显示的图傳不;^t变化(变^fW艮小)。因此，在将4fe^条53的可移动范围划分成具有相同区间狄的指定区间 的情况下，当以固定的i^l将^^拨块54移动固定的距离时，在某些范围中， 取景器51中显示的图^^很大变化，而在另一些范围中不U变化。在分配了iLit动的区间中的帧的指定区间的范围中，即使拜4^t拨块54 移动一定的禾級，取景器51中显示的图像也不^jt变化。因此，用户IMt城 拨块54有时会感到不悦。另一方面，在分配了具有运动的区间中的帧的指定区间的范围中，当将拖 放拨块54移动一定禾嫂时，取景器51中显示的图^^A很大的变化。因此， 为了彬" 的图像的帧，用户,4^:拨块54有时需要对4fe^拨块54扭行 ^ft确(小心)的操怍。因此，不固定分配了帧的指定区间的区间H而是才娥例如作为分酉條 指定区间的帧的变化量的运动信息，对分配了帧的指定区间的区间长度进^权。这使得当具有作为变化量的较大运动信息的帧净，ei^指定区间时，可以 将^t条53的可移动范围划分成具有具有较大区间^1的指定区间。 图57是示出了对指定区间的区间"ML进^沐权的权重的示例。 在图57中，横坐标表示帧(从顶部开始的帧的位置)，M标表示作为变 化量的运动信息。在图57中，^^满足关系L一L^I^L4的阈值Lp Lz、 L3和I^。将用于
射5了运动信息等于或大于阈值l4的帧的指定区间的区间M的权重w该M 例如1 。将用于射&了运动信息等于或大于阈值Lz且小于阈值Lt的帧的指定区 间的区间"ML提供的权重w iM成例如0.7。将用于分配了运动信息等于或大 于阈值L3且小于阈值L2的帧的指定区间的区间狄的权重w该i成例如0.5。 将用于分配了运动信息等于或大于阈值"且小于阈值"的帧的指定区间的区 间长变的权重w设置成例如0.3。 jHW卜，将用于射己了运动信息小于阈值l4的 帧的指定区间的区间M的^l重w i^成例如0.1。例如，如以下所^兑明的，可以^^I权重w来计算加权的区间M。 将具有由相同^5L重w进*权的区间长复的指定区间称为相同权重区间。 将射ei^成要进^^:的运动图像的帧的指定区间序列划分成Q个相同权重 区间。在Q个相同权重区间中形成^^顶部开始的第q个相同权重区间的指定区间的数量以及分西ei^形成第q个相同权重区间的指定区间的帧的数4^^示为Fq。给予形成第q个相同权重区间的每个指定区间的区间M的权重净A^示为Wq。将要进^^t的运动图像的帧的总数F被表示为F-F一F2+…+Fq。 ^i殳可移动范围的"l^L为1，当指定区间的区间长度没有^^权时，将指 定区间的区间")^^示为1/F。另一方面，当区间^^fc^权时，，^A顶部开始的第q个相同权重区 间的指定区间的区间长JL^示为Wq/(IWiFi)。由于从顶部开始的第q个相同权 重区间的长度净iL^示为WqFq/(SwiFj),通过将WqFq/OiFi)除以形成第q个相同权重区间的指定区间的数量(分SeiH亥指定区间的帧数)Fq，可以在区间M^C^权的时候计算形^w顶部开始第q个相同权重区间的指定区间的区间长 度。^WjFi表示当下标i从l变到Q时WiFi的总和。可以计算在^M相同权重w对区间"^l进^^权时没有通过iK^斤有的 权重WhW2，.,.，W(j而对区间"l^a权的时候的指定区间的区间H如上所述， 对区间长度进O权时形^A顶部开始的第q个相同权重区间的指定区间的区间^^Wq/(IWiFi)。当将WbW2，…，和WQiMJ^目同权重W时，Wq/(IWiF0:w/(wXF—l/SF尸l/F。在图57中使用与用于确定显示类型的阈值无关的四个阈值L" Lz、 La和
L4来计^S麵的指定区间的区间狄的权重。然而，除》力卜，也可以使用用于确U示类型的阈^iiM十算区间M的权重w。图58是示出了^^用于^^动信息4^^示类型的阔值H和L所计算的积J:的示例的图。在图58中，横坐标表示帧(从顶部开始的帧的位置)，M标表示用作变 化量的运动信息。在图58中，将用于分配了运动信息等于或大于阈值H的帧指定区间的区 间M的权重w i^X成例如0.5。将用于分配了运动信息等于或大于阈值L且 小于阈值H的帧的指定区间的区间长JL"^供的权重w设置成例如0.3。将用于 分配了运动信息小于阈值L的帧的指定区间的区间长变的权重w诏3成例如 0.1。jH^卜，例如，当才緣帧的运动信息来确定帧的显示类型时，可4娥该显示类型来确定分gei^各帧的指定区间的区间长度的权重w。当才Wt动信息来确U示类型时，显示类型表示帧的运动禾級。更胁地，例*图20中所示，当#^动信息擴态图像类型VI、 "fit类型V2 或高显示速率/^^率类型V3确定为显示类型时，原则上，静态图像类型V1 的帧是运动信息小于阈值L的帧，lii类型V2的帧是运动信息等于或大于阈 值L且小于阈值H的帧。高显示速率m^率类型V3的帧是运动信息等于或 大于阈值H的帧。因此，M可在^^I参照图58所说明的阈值H和L的情况下，可分别将用 于分酉沐静态图像类型VI的帧的指定区间的区间"j^L的权重w、用于分酉沐 絲类型V2的帧的指定区间的区间狄的权重w、以朋于分酉沐高显示速 率/#^率类型V3的帧的指定区间的区间^JL的权重wi议为0.1、0.3和0.5。当根提帧的显示类型确^1于分酉,的指定区间的区间^1的权重时， 其中静态图像类型VI的帧魏的静态图像区间、其中絲类型V2的帧絲的 M区间、以及其中高显示速率/^^率类型V3的帧连续的高显示速率/^^ 辨率区间瑚s;^相同;^重的区间。图59 ;l^别示出了对区间"^l进4沐权时和不对区间"^l进4沐权时的 指定区间的图。当不对区间长^liiO权时，如图59的上半部所示，# 1条53的可移
动范围划分成以与形成将^"i^f亍拖故的运动图像的帧的数量相同的数量^^ 的、并且具有相同区间狄的区间。如图45所说明的， ^"进#^1的运 动图像的帧按时间序列M边的指定区间开始射己。当不对区间^l进e^权时，为所有静态图像区间、辆区间和高显示速 率/^^f率区间中的M分配的指定区间的区间^lL d，其中在静态图像区 间中静态图像类型V1的帧连续，在^i逸区间中"fit类型V2的帧连续，在高显 示速率/低M率区间中高显示速率/^^率类型V3的帧连续。另一方面，当对区间^1进0权时，如图59的下^所示，将4^L条 53的可移动范围划分成指定区间。如参照图45所说明的，鄉成要进#^ 的运动图像的帧按时间序列从左边的指定区间开始分配。然而，在分酉沐用作 为变化量的运动信息教大的帧的指定区间中，区间长度较大。在图59中，分Ki^态图像区间的帧即没有运动的帧的指定区间的区间 ■^1^ d/2，该^A在不对区间")^口权时的区间狄d的1/2倍，其中在静 态图像区间中，静态图像类型VI的帧连续。分酉ei^逸区间的帧即有运动但 运动不强烈的帧的指定区间的区间"j^为d，该区间M与不对区间长度进行 加权时的区间Md同样大，其中在"fii区间中"f^类型V2的帧连续。此外， 分酉踏高显示速率/低，率区间的帧即具有剧烈运动的帧的指定区间的区间 "ML为3d，该区间"j^A不对区间^!进0权时的区间长变d的三倍，其中 在高显示速率/^^f率区间中高显示速率/低^f率类型V3的帧连续。因此，M区间"^L进^^权的过程中，当将4^t拨块54移动不对区间 "j^L进4沐权时的移动量的1/2时，静态图像区间中的帧的显示结束。结果， 即使^L拨块54被移动了一定樣变，由于取景器51中显示的图銜殳有变化，在寸区间长度进^^口权的情况下，当将4&^t拨块54移动不对区间长度进 O权时的移动量的3倍时，取景器51中显示的感魏帧从高显示速率m^ 辨率区间中的一个帧变^J'J下一个帧。因此，用户可以容易舰到 的图像 的帧，而无需那么賴确(小心) ^4^欠拨块54。在图59中，显示了在7K平方向上的刻度与^t条53的可移动范围的刻度 相同的类型信息(按时间序列表示显示类型的带状区域的GUI)。在水平方向上的刻度与^t条53的可移动范围的刻度相同的类型信息中，
4^:拨块54位置上的类型信息(的图案)表示分酉eiN^:拨块54所定位的指 定区间的帧的显示类型。在图59中，在作为类型信息的带状区域中，带有斜线的区域D1表示其中 静态图像类型VI的帧连续的静态图像区间，没有图案的区域D2表示其中辆 类型V2的帧连续的"W区间。水平线区域D3表示其中高显示速率/^^率 类型V3的帧连续的高显示速率/低，率区间。在图59中，如上所述，当对区间>]^>权时，分酉ei^态图像区间中的 帧的指定区间的区间"^为d/2，该^l在不对区间^^权时的区间&变d 的1/2，其中在静态图像区间中静态图像类型V1的帧连续。因此，当对区间长 度进O权时表示静态图像区间的区域Dl的水平方向上的^1也是不对区间 ^>权时的7&平方向上的狄的1/2。在图59中，当对区间^^权时，分酉ei^逸区间的帧的指定区间的区 间"j^^d，该狄与不对区间^^权时的区间狄d相同，其中在"fit区 间中"fit类型V2的帧连续。因此，当对区间^l进0权时表示^ii区间的 区域D2的水平方向上的长度也与不对区间"j^P权时的该水平方向上的^！ 相同。jH^卜，在图59中，当对区间^rp权时，^SCi^高显示速率m^率区 间中的帧的指定区间的区间"1^1为3d,该^i不对区间"^^权时的区间长 度d的3倍，其中在高显示速率/^^率区间中高显示速率/^^lf率类型V3 的帧錢。因此，当对区间"]ML进^沐权时表示高显示速率/^^率区间的区 域D3的7JC平方向上的长度也是不对区间^UP权时的该水平方向上的M的3 倍。如上所述，当对区间")^1进0权时，类型信息拟于加^的区间狄， 并且与不对区间长^1进0权时的类型信息不同(换句话i兌，当不对区间M 进O权时，类型信息与对区间长度进O权时的类型信息不同)。在图43的编辑系统中，提供用于对指定区间的区间^1进4沐权的加权开模式和用于不对区间长^p权的加权关模式作为^t模式。可以根据用户的 辦将鰣模式切^>权开模錄加权关模式。以下，将参照图60的流-呈图来说明通过图43中的编辑系鍵^5 t指定区间的区间长^^斤应用的处理(关于区间^1的处理)。
絲辑窗口301 (图49)中提供有未示出的加权独，该加权^L用于将^t模式切换到加权开模式或加权关模式。当用户IMt该加^lM时，,模 式切换到加权賴式或加权关模式。假设4^文条53的可移动范围的"j^为1。在关于区间^1的处理中，在步骤S351中，GUI控制单元211判断M 模W否被切换。当在步骤S351中判断^ft模^皮切换到加权开模式时，处理 进行到步骤S352。 GUI控制单元211才娥Fy文件管理单元214 (图44)的文 件>##单元231中機的Fy文件的变化量或显示类型，计算如上所粉予为帧 分配的每个指定区间的区间M的权重。处^ii行到步骤S353。在步骤S353中，GUI控制单元211才緣给予为该帧分配的每个区间的区 间M的^K重，计算^^指定区间的加权区间M。当在步骤S352中4娥变化量或显示类型来如上所述计算给予为该帧射己 的每个指定区间的区间狄的权重时，GUI控制单元211将其中具有由相同权 重w加权的区间M的指定区间连续的区间识别为相同积J:的区间。如上所述，#^@,成将要进^ :的运动图像的帧的指定区间序列划分成Q个相同权重区间。接下来，GUI控制单元211使用形成Q个相同权重 区间中从顶部开始的第q个相同权重区间的指定区间的数量Fq以;5L4步骤S353 中计算的给予形成第q个相同权重区间的指定区间的区间M的权重Wq,计算 形威^v顶部开始的第q个相同权重区间的指定区间的区间^！Wq/(IWiFi)。在步骤S353中计算了形成Q个相同权重区间中的每个区间的指定区间的 区间ttwq/OiF0^, GUI控制单元2U ^P指定区间的区间^lwq/Q:WiFi) 提^^显示控制单元218 (图43 )。处Sii行到步骤S354。 GUI控制单元211 将划分取景器51中显示的换放条53的可移动范围的指定区间的区间长度i经 成( ^)步骤S353中计算的区间tt。处3Sii行到步骤S355。例如，如图51所示，当在FV文件显示部分3U中显示类型信息时，在步 骤S355中，显示控制单元218才娥步骤S353中从GUI控制单元211提供的指 定区间的区间狄Wq/(IWiFi)来紋参照图59所说明的Fy文件显示部分311 中显示的类型信息。处3Si4回到步骤S351。另一方面，当在步骤S351中判断^t模i^皮切换到加权关模式时，处理 进行到步骤S356。 GUI控制单元211 ^^酉eiH亥帧的每个指定区间的区间"j^L^E成( 成)相同的狄1/F，并将区间狄1/F提^^显示控制单元218。 处J^ii行到步骤S357。如上所述，F表示形成将^"进^^L的运动的图4象的帧 的总数。例如，如图51所示，当在Fy文件显示部分311中显示类型信息时，在步 骤S357中，显示控制单元218才娥步骤S356中从GUI控制单元211提供的区 间"j^变1/F来改变Fy文件显示部分311中显示的类型信息。处m回到步骤 S351。在Fy文件显示部分311中，显示表示分配范围的显示射己范围信息，所 述分配范围是4^文条53的可移动范围中分SeiM"头指定区间到^^旨定区间 的帧的范围。可以将由分配范围信息所表示的分配范围中的开头帧到束l帧分酉eiN^:条53的可移动范围中的开头指定区间到^4i旨定区间。图61是示出了Fy文件显示部分311的显示的示例的图，在F^文件显示 部分3U中显示作为分配范围信息的的范围指定指示器351S和351E。如参照图51所说明的，图61中的Fy文件显示部分3U包括曲线图显示 部分321和类型信息显示部分322。 Fy文件显示部分3U中显示了变化量曲线 图、类型信息、位置指示器312、和阈值指示器313H和313L。jH^卜，在图61的Fy文件显示部分3U中，显示表示舶己范围的范围指定 指示器351S和351E，所述射己范围是^^条53的可移动范围中分酉ei^开头指 定区间到^^旨定区间的帧的范围。将^ 1条53的可移动范围中的开头指定区间到^4^旨定区间分Sei^要 进e^i文的运动图像的开头帧到^wC帧的状态称为默认分配状态。在默认分配 状态中，如参照图49所说明的，如絲过将显示有变化量曲线图的Fy文件显 示部分3U的区域水平方向上的^1乘以一个预定的数，将显示有变化量曲线 图的Fy文件显示部分3U的区域的水平方向上的长^l和4^t条53的可移动范 围的^Li^J^^目同的^1,则Fy文件显示部分3U中显示的位置指示器312 的位置和赋拨块54的位置相互一致。因此，可以认为将要进^^的运动图像的开头帧到;Wi贞对应于显示有变化量曲线图的Fy文件显示部分311的区域的水平方向中的名+位置。位置指 示器312在显示有变化量曲线图的Fy文件显示部分3U的区域的水平方向上的 位置之中被与取景器51中显示的帧(感兴趣帧)相对应的位置上M示。
范围指定指示器351S和351E是垂直方向上延伸的、并与信号指示器312 平行的鄉的GUI,范围指定指示器351S和351E显示在Fy文件显示部分311 的曲线图显示部分321中。H外，用户可以通过IMt键盘2或鼠标3^示有 Fy文件显示部分3U (的曲线图显示部分321)的变化量曲线图的区域中的水 平方向Ji^多动范围指定指示器351S和351E。然而，范围指定指示器351S比范围指定指示器351E更向右边的移动，换 句话说，范围指定指示器351E比范围指定指示器351S更向左边的移动，受到 限制。因此，可以^m示有变化量曲线图的Fy文件显示部分311的区域的左 端到范围指定指示器351E的位置的范围内移动范围指定指示器351S。可以在 从范围指定指示器351S的位置到显示有变化量曲线图的Fy文件显示部分3U 的区域的右端的范围内移动范围指定指示器351E。根据范围指定指示器351S和351E，在形成将要进^^i丈的运动图像的帧 中，将对应于范围指定指示器351S的位置的帧到对应于范围指定指示器351E 的位置的帧的范围(射己范围)内的帧射eiN^t条53的可移动范围内的开头 指定区间到，旨定区间。因此，当4^t拨块54定^E可移动范围的左端时，将对应于范围指定指 示器351S的位置的帧设置A^景器51上显示的感^帧。当换放拨块54定位 在可移动范围的右端时,将对应于范围指定指示器351E的位置的帧i^^^景 器5lJi^示的感兴趣帧。在范围指定指示器351S定^Ea示有变化量曲线图的FY文件显示部分 311的区域的M端，并且范围指定指示器351E定錄显示有变化量曲线图的 FV文件显示部分3U的区域的右端的状态下，将4^t条53的可移动范围中的开头指定区间到^4^旨定区间分酉ei^将要进^^t的运动图像的开头帧到^C 帧。因此，该状态为默认的分配状态。在默认分西沐态下，当^t拨块54定^可移动范围的末端时，^&#要 进^^的运动图像的开头帧^M^景器51 Ji^示的感^帧。当换放拨块 54定錄可移动范围的絲端时，^F要进4^^文的运动图像的^C帧^^成 取景器51 JlJ:示的感兴趣帧。在默认射己状态下，如上所述，将^L条53的可移动范围中的开头指定区间到;M^旨定区间分se^将要进^^t的运动图像的开头帧到^^帧。
因此，例如，当将要进^^t的运动图像的帧的数量很大时，指定区间的区间"M^峰。因此，即使当4&^t拨块54移动很小,分时，i^錄示棘 景器51中的感M帧的帧^L^^^拨块54移动的前后^A很大的改变(分酉ei^多动之后的换放拨块54所定位的指定区间的帧与分Sei^移动之前的掬放拨块54所定位的指定区间的帧之间相隔大量的帧)。结果，难于找到M的图 像的帧。因此，在形成将要进^^t的运动图像的帧中，移动范围指定指示器351S 和351E将^J t应于范围指定指示器351S的位置的帧到对应于范围指定指示器 351E的位置的帧的范围(分配范围)内的帧分酉ei^^i文条53的可移动范围中 的开头指定区间到^旨定区间中。这使得可以容易g到^"的图像的帧。通ii^多动范围指定指示器351S或351E，可以4f"^分范围i^A分配范围(分酉eiN^:条53的可移动范围内的开头指定区间到^4i旨定区间的帧的范 围)，而不^i整个范围，所述"^分范围是在形成将要进^ :的运动图像的帧中，^M"应于范围指定指示器351S的位置的帧到对应于范围指定指示器351E 的位置的帧的范围，即形成将^~进^^改的运动图像的开头帧到束€帧。通过^P要进^^t的运动图像的范围的""^^^J^分配范围，与将整 个范围iMA射己范围的情^U目比，减少了换3文条53的可移动范围中的从开头 指定区间到;^旨定区间的所分配的帧的数量。结果，指定区间的区间长^1增 加了。因此，可以遮免由于指定区间的区间^J^i，而iiAiM^C景器51中 所显示的感兴趣帧的帧在4^文拨块54移动前后JLt很大变化。因此，可以简单皿到M的图像的帧。当分商2iHfe^拨块54所定位的指定区间的帧附近的图像中没有运动时， 即使iW^^景器51中所显示的感M帧的帧在^t拨块54移动前后;^很 大变化，取景器51中显示的图像也不会U变化。因此，即使itl^^景器 51中所显示的感^^帧的帧在4fe^拨块54移动前后JCi很大变化，也不会阻 碍用户查找^"的图^象。另一方面，当射2i^^t拨块54所定位的指定区间的帧附近的图像具有 强烈运动时，当"&J^^景器51中所显示的感姨帧的帧在4fe^L拨块54移动 前后^jt很大变化时，取景器51中显示的图像会^A很大的变化。因此，如果iO^^景器51中的感^帧的帧在4^L拨块54移动前后;^很大变化，这 将ia^用户查找 M"的图像。因此，fe4f要进^^的运动图像中的具有图像的剧, 腿动的帧的区间设 置成分配范围是有效的(通过^P要进4l^i文的运动图像中的具有图像的剧烈 运动的帧的区间诏M射己范围，可#^易^^*的图像的帧)。在Fy文件显示部分3U中，如果條动信息作为变化量^^在FV文件中， 则显^动信息的曲线图(运动信息曲线图或变化量曲线图)，并显示表示才娘 运动信息确定的显示类型的类型信息。用户可以通ii;见看Fy文件显示部分3U中显示的运动信息曲线图和类型信息而容易地识别出具有图像的剧烈运动的区间。iH^卜，用户可以操怍范围指 定指示器351S和351E将该区间诏！成分配范围。由于范围指定指示器351S和351E指示分配范围，该分配范围即分酉e^拖放条53的可移动范围中开头指定区间到;K^旨定区间的帧的范围，因此，范围指定指示器351S和351E也可以被称为分配范围信息。oH^卜，由于在指定分配 范围时辦范围指定指示器351S和351E，因此，范围指定指示器351S和351E 也可以称为范围指定,^置。jtk^还将范围指定指示器351S和351E中的范围指定指示器351S适当地 称为赵会点指示器351S。 ii将范围指定指示器351E适当地称为结束点指示器 351E。以下将参照图62的流程图来，说明才娥参照图61所说明的范围^点指示 器351S和结束泉指示器351E来iU分酉eiNfe^L条53的可移动范围的(指定 区间的)帧的范围(射己范围)的分配范围诏i处理，在步骤S371中，GUI控制单元211 (图43 )控制显示控制单元218来使 Fy文件显示部分311显示勤会点指示器351S和结束泉指示器351E。处^i^行 到步骤S372。在分配范围iU处理开始后紧接着4^亍的步骤S371中，"示有变化量 曲线图的Fy文件显示部分3U的区域的左端和右端的位置上，分别显示了M 点指示器351S和结束存、指示器351E。作为替换方案，4f^f台点指示器351S和 结束泉指示器351E显示在与上一次编辑禾^的^^橫束时赵会点指示器351S 和结^^点指示器351E的位置相同的位置上。
在步骤S372中，GUI控制单元211 (图43)在形成将要进^ :的运动 图像的帧中，i^tA^t应于絲点指示器351S的位置的帧到对应于结束点指示 器351E的位置的帧的范围。GUI控制单元211 #^己范围中的帧分酉eiN^t 条53的可移动范围。如果为了简化说明而不考虑对指定区间的长度进^f沐权的话，GUI控制单 元211将4fe^t条53的可移动范围划分成指定区间，具有通过将4fe^条53的可 移动范围的M除以分配范围中的帧数而获得的高。GUI控制单元2U #配范围内的帧分酉ei^可移动范围中的开头指定区间到^4i旨定区间。处3^步骤S372进行到步骤S373。 GUI控制单元211判断船台点指示器 351S或结束点指示器351E (图61)是否开始移动，即用户是否辦了勉2 或鼠标3来移动起始点指示器351S或结束点指示器351E。当在步骤S373中判断絲点指示器351S和结束泉指示器351E都没有开 始移动时，处g回到步骤S373。当在步骤S373中判断起始点指示器351S或结束泉指示器351E开始移动 时,这:I^M用户已经辦了勉2或^f示3而移动勤会点指示器351S或结束 点指示器351E，并且与该##相对应的,信号从# 2或鼠标3被提供给 GUI控制单元2U。 ^jfeit种情况下，GUI控制单元211^^来自,2或I^示 3的,信号，计算勤会点指示器351S或结束泉指示器351E移动到的位置。 GUI控制单元211将表示位置的信息炎供给显示控制单元218,处3gi^行到步 骤S374。在步骤S374中，显示控制单元218^^台点指示器351S或结束泉指示器 351E处于对应于来自GUI控制单元211的信息的位置中，而不是在该步骤紧 ^L前指示器戶/Ntt示的位置。处Si^f亍到步骤S375。在步骤S375中，GUI控制单元211判断船会点指示器351S或结束泉指示 器351E的移动是否完成，即用户是否完成了用于移动船台点指示器351S或结 束泉指示器351E的键盘2或鼠标3的操怍。当在步骤S375中判断用于移动，点指示器351S或结束点指示器351E 的辦没有结束时，这:t^M用户继续IMt勉2或Ii示3 iM多动船台点指示 器351S或结束点指示器351E,并Jb t应于该操怍的^ft信号从键盘2或鼠标 3被提供到GUI控制单元2U。在这种情况下，GUI控制单元211才緣来自键m
盘2或鼠标3的,信号，计算起始点指示器351S或结束泉指示器351E移动 到的位置，并将表示该位置的信息炎供给显示控制单元218。处舰回到步骤 S374。此后，重复相同的处理。才娥步骤S373至S375中的处理，才娥用于移动起始点指示器351S或结 束点指示器351E的操作，在水平方向上移动起始点指示器351S或结束点指示 器351E。另一方面，当在步骤S375中判断用于移动赵会点指示器351S或结束泉指 示器351E的,完成了的时候，这t未着用户完成了移动起始点指示器351S 或结束点指示器351E的键盘2或鼠标3操作，并且与用于移动船台点指示器 351S或结束点指示器351E的梯作相对应的l^信号没有从键盘2或鼠标3被 提供到GUI控制单元2U。在这种情况下，GUI控制单元211识别移动后的起 始点指示器351S或结束点指示器351E的位置(水平方向上)。处理逸回到步 骤S372。 GUI控制单元211在形成将要进^^:的运动图像的帧中，将>^应 于^i台点指示器351S的位置的帧到对应于结束泉指示器351E的位置的帧的范围iM成分配范围。GUI控制单元211 #^配范围中的帧射eiN^:条53的可移动范围。此后，重复相同的处理。如上所述，用户可以通过,作为GUI的起始点指示器351S或结束点指示器351E而容易邮形錄动图像的帧之中g^^要进^^:的帧(分酉eiN^条53的可移动范围的帧)的范围(分配范围)。例如当编辑禾I^结束时，图62中的射己范围iM处理结束。在拖故中，可以才峰例如帧的显示类型来改变取景器51中显示的帧的图像的尺寸。图63是示出了拟艮提帧的显示类型^t^取景器51中所显示的帧的图像的 尺寸时取景器51的显示示例的图。例如才M^t动信息，将参照图20所说明的静态图像类型VI、辆类型V2 或高显示速率/^^f率类型V3确定为帧的显示类型。图63左ii^第一幅图示出了当取景器51中显示静态图像类型VI的帧的 图《象时的显示示例的图。在图43的编辑系统中，例如，事先为静态显示图像类型VI的帧的图像设 ^JIWA^寸。取景器51在将对角线^1或水平和垂直^1调整到事先设定的默i^寸的情况下显4态显示图像类型VI的帧的图像。图63 Mii^二幅图示出了当取景器51中显示M类型V2的帧的图像 时的显示示例的图。在图43的编辑系统中，例如，为"fit类型V2的帧的图像设置大小为默认 尺寸1.5倍的尺寸。取景器51在将对角线长度或7JC平和垂直^1调整到1.5倍 于默iAA寸的的情况下显示lit类型V2的帧的图4象。图63m边第三幅图(M边第一幅图)示出了当取景器51中显示高显 示速率/^^率类型V3的帧的图4象时的显示示例的图。在图43的编辑系统中，例如，为高显示速率/^^率类型V3的帧的图 像iM大小为默i^寸2倍的尺寸。取景器51 ^f角线"^l或水平和垂直^！ 调整到2 M默i^寸的情况下显示"fii类型V2的帧的图像。由于"fit类型V2的帧的图傳4有一定考UL的运动，通过以如上所述的大 尺寸絲示辆类型V2的帧的图像，因此，用户可以查看图像的运动细节。由于高显示速率/^^#率类型V3的帧的图〗象具有剧烈的运动，通过以如 上所述的更;^寸a示高显示速率/^^率类型V3的帧的图像，用户也可 以查看图像的动作细节。jtb^卜，如上所述，通过以对于"^种显示类型而不同的;C寸束E示图4象，用 户可以容易地识别出取景器51中显示的图像帧的显示类型以;Sj^动私变。在图63中，以对于基于运动信息而确定的每种显示类型而不同的尺寸来 显示图像。jH^卜，例如，也可以以对于基于细度信息而确定的每种显示类型而 不同的尺寸錄示图像。当M于基于细度信息而确定的每种显示类型而不同的尺寸来显示图像 时，例如，通过以较;UC寸絲示具有较大细度禾級的、具有基于细度信息而 确定的显示类型的图像，用户可以容易地查看图像的细节。在参照图48所说明的4fe^t理中，在步骤S222中显示图像时，可以以对 应于显示类型的尺寸^示图^象。将参照图64的流程图来说明图48中步骤S222所进行的处理(显示处理)， 该处理用于以对应于显示类型的尺寸来显示图像。例如，如上所述，参照图20所说明的静态图像类型V1、 ^it类型V2、或 高显示速率/低^f率类型y3被确^^显示类型。如参照图63所说明的，为静
态图像类型Vl的帧的图像i5^JIWA^寸。例如，为"fit类型V2的帧的图像设 置大小为默iAA寸1.5倍的尺寸。W卜，例如，为高显示速率m^l^率类型V3 的帧的图偉^L置大小为默i^寸2倍的尺寸。在步骤S391中，显示控制单元218 (图43)判断分酉eiN^l拨块54所定 位的指定区间的帧(感M帧)的显示类型是静态图像类型VI、 "fit类型V2 和高显示速率/j^l^率类型V3中的哪一个，其中该显示类型从显示类型获取 单元215 (图43)提供。当在步骤S391中判断感魏帧的显示类型是静态图像类型VI时，处 4亍到步骤S392。显示控制单元218使取景器51以默iAA寸显示对应于^f^在 帧緩存器218A (图43)中的图^^据的图像，如从图63左边第一幅图所示。当在步骤S391中判断感兴趣帧的显示类型是顿类型V2时，处^it行到 步骤S393。显示控制单元218使取景器51以1.5倍于默i/JC寸的尺寸显示对应 于^H^在帧緩存器218A中的图^^t据的图像，如从图63左^二幅图所示。当在步骤S391中判断感M帧的显示类型是高显示速率/^^率类型V3 时，处Sii行到步骤S394。显示控制单元218使取景器51以2倍于默"i^寸 的尺寸显示对应于^ft在帧緩存器218A中的图^lt据的图像，如从图63左边 第三幅图所示。当以大于默i^寸的尺寸显示图像时，取景器51的尺寸，大。结果， 编辑窗口 301^1景器51以默i^寸显示时可视的部分区域隐M增;^寸的 取景器51 ^而变得不可视。因此，当增大取景器51的尺寸时，可以在例如 半透明状态下tt示取景器51中的图像。^jfeil种情况下，可以避免编辑窗口 301 >景器51以默i/JC寸显示时可视的部分区域隐M增;^寸的取景器51^而变得不^r一见。只有在操怍(例如拖动)掬放拨块54时，才可以4W^上所述的显示尺 寸来^lt取景器51 (中所显示的图像)的尺寸，并JL^停止^fMfe^拨块54 时，将尺寸iM^默iAA寸。jH^卜，除了才Mt感3^帧的显示类型以夕卜，还可以才娥用户对4^:拨块54 的,来^图像的尺寸。通常，在搜索M的图像时，当用户对取景器51中显示的图#^是那么 感M时，用户IMt^t拨块54'^i移动。相反，当用户对图4M兴趣时，用
户IMt4^文拨块54緩慢移动。因此，当4^t拨块54被'^i移动时，可以以默iA^寸显示图像。当緩慢 移动4^L拨块54时，可以以大于默iAXjt的尺寸絲示图像。通itit种方式， 用户可以容易 到 ^的图像。在图63中，由于改变了整个取景器51的尺寸，因jtb^^文条53的尺寸也 紋了。然而，当在辦4^文条53的过程中妙4^文条53的尺寸时，可能会 难于辦4^L条53。因此，希望不 4&^条53的尺寸(例財望^ 取 景器51的显示部分52 (图3 )的尺寸)。在以上所说明的发明中^W亍了4^h理。然而除了^lfr^以外，还可在 ^t^f亍可变速再现(n^4再现)时应用^^发明。^il种实施方式中，作为在指定取景器51中显示的帧时所操怍的手段， iMJ具有4^文拨块54的4^文条53，并^l^^:拨块54的位置指定取景器51 中显示的帧。jHi^卜，还可以通过操怍例如(真实的)所谓的滚动M(jogdial)、 滑动环(shuttlering)等(不是GUI)来指定取景器51中显示的帧。^il种实施方式中，为每个帧计算表^it动图像的图^lt据的变^^l的 变化量(运动信息或细度信息)，##该变化量为^个帧确 示类型，射吏 用该显示类型扭行用于 的^处理。此外，例如当声音数据伴 运动图 像时，可#^其声音数提的船"(功率)自身或表示声音数提中的变^^1的 ^JM角定显示类型。例如，在声音数据的级别从小变到大(具有声音的顶点) 的帧中，这非常像显示一幅有趣场景的图像。因此，例如当在某种考5JUi，运 动信息教大时，可将具有高显示速率的显示类型确定为声音数据的船'J从小变 到大的帧的显示类型。例如当在某种禾嫂上，细度信息农大时，可将具有高分 辨率的显示类型确定为帧的显示类型。^it种实船式中，假i5^7是记絲主数^^3S数据的专业盘，使 用记絲光盘7中的主数旨^3g数提，即具有两种^^率的图^lt据，来执 e 。 iHWK可使用例如具有一种，率或三种或更多种M率的图傢数据^it种实施方式中，为了解决查找(seek)的问题，图22中的显示类型确 定单元93 (图44中的显示类型确定单元233 )判断变化量等于或大于阈值或小 于阈值的帧是否以最小树艮帧数N连续(对连续性的判断)。然而，如果无需
解决查找的问题，可才娥变化量是否等于或大于阈值还是小于阈^i^确^示 类型。^Eit种实施方式中，为"^个帧计算变化量，并##该变化量为每个帧确定 显示类型。然而，也可以为每多个帧计算变化量。也可以为每多个帧确定显示 类型。图65是例3彿成作为多个帧的一个GOP的每个帧的(#)的变化量的 曲线图。在图65中，横坐标表示帧，M标表示变化量。在图65中，粗体M4示形成一个GOP的每个帧的变化量。作为形成一个 GOP的每，个帧的变化量，可iMl例，成该一个GOP的所有帧的变化量的平 均值、在形成一个GOP的帧中的I个图片中的变化量等。如图65所示，当计算形成一个GOP的每个帧的变化量时，可以用与从每 个帧的变化量来确定每个帧的显示类型相同的方式，##该变化量来确定形成 一个GOP的每个帧的(单元)显示类型。例如不仅才W^成一个GOP的每个帧的变化量，也可以才N^个帧的变 化量为形成作为多个帧的一个GOP的每个帧确定显示类型。图66是务賭了每个帧的变化量和每个帧的显示类型二者的Fy文件的图。例如，当一个GOP由15个帧形成时，例如可4W成一个GOP的15个帧 中使用率最高的显示类型确定为形成一个GOP的15个帧中每个帧的显示类 型。^it种情况下，例如在由图66所示中的Fy文件中从顶端开始的第一个帧 到第15个帧形成的一个GOP中，在每个帧的显示类型VI、 V2和V3中显示 类型V2是使用率最高的显示类型。因itb4f显示类型V2确^7—个GOP的显 示类型。例如，对于图66中的Fy文件中所示的从顶部开始的第9个帧，针对每个 帧的显示类型是V1， M于一个GOP来说，显示类型是V2。如上所述，当对形成作为多个帧的一个GOP的每个帧确定变化#显示 类型，并将它们^f^在Fy文件中时，与在Fy文件中^ft每个帧的变化妙显 示类型的情;W目比，可减少Fy文件的容量(文件大小)。进一步的，可斷^ 析Fy文件(文件)S^斤)所必需的处理的负担。在创建Fy文件时在MPEG系统中编码图^l!i:据的情况中，当对形成一个GOP的每个帧确定变化妙显示类型时，可在作为MPEG系统中编码结^i斤 获得的流中的GOP报头中包括变化量和显示类型。^it种实施方式中，由于在MPEG系统中对图^^据进4彌码，射己录 在储7中，图43中的编辑系统的解码器216需要在MPEG系统中解码图像 数提。在MPEG系统中，例如对iH5^—个GOP的15个帧，*个帧编 码成一种图片类型的图片，即I (内部)图片、P (预测)图片、B (双向预测) 图片。^J^之前编码的I或P图片作为参考图像(作为产生预测图像基准的图 像)对I、 P和B图片中的P图片和B图片进4彌码。因此，錄解码参考图 ^Ml后方可解码P图片和B图片。例如，当由15个帧形成一个GOP并且15个帧中的^—个帧都由指示图 片类型的I、 P或B以及指示显示顺序的数字^4示时，可#-~个GOP的15 个帧的布錄示为例如B1、 B2、 13、 B4、 B5、 P6、 B7、 B8、 P9、 BIO、 Bll、 P12、 B13、 B14和P15。在由15个帧Bl至P15形成的GOP中，例如，^^I从顶部开始的第3个 I图片13作为参考图像，对从顶部开始的第6个P图片P6进4彌码。^fM从 顶部开始的第6个P图片P6作为参考图像，对从顶部开始的第9个P图片P9 进^f彌码。^^)从顶部开始的第9个P图片P9作为参考图像，对从顶部开始 的第12个P图片P12进#^码。使用从顶部开始的第12个P图片P12作为参 考图像，对从顶部开始的第15个P图片P15进行编码。使用从顶部开始的第 12个P图片P12和从顶部开始第15个P图片P15作为参考图像，对从顶部开 始的第13个B图片B13进4彌码。^ii种情况下，例如当将从顶部开始的第13个B图片B13诏i^^景 器51中显示的感魏帧时，錄解石^^顶部开始的第3个I图片13、参考从顶 部开始的第3个I图片13解码从顶部开始的第6个P图片P6、参考从顶部开 始的第6个P图片P6解码从顶部开始的第9个P图片P9、参考从顶部开始的 第9个P图片P9解码从顶部开始的第12个P图片P12、以及参考从顶部开始 的第12个P图片P12解Wv顶部开始的第15个P图片P15之后，才可解码从 顶部开始的第13个B图片m3。 itA由于在以这种方式解瑪^图片之前，不可 能参考从顶部开始的第12个P图片P12以及从顶部开始的第15个P图片P15。 因此，B图片B13的解g费了时间。
因此，将用于解码其它图片所参考到的P图片P6、 P9、 P12、 P15分别存 储在称为P-I文件的单独文件中，作为I图片I6、 19、 112、 115。在需要时，解 码器216可以参考^^在P-I文件中的图片"iiWt^码。^il种情况下，例如， 可以参考^#在P-I文件中的I图片112和115，拟峰的时间中解码B图片 B13。在上舰辦列中，通过CPU 22(图2^LfS踏而^f亍的处理也可以^^1 所有可利用的专用硬件来^U亍。^J页域的^^A员应该S^到，#1^殳计的需#其它因素，在所附权利JMUl其等同物的范围内可产生^t修改、组合、^i且合以及替换。
权利要求
1、一种用于处理运动图像的图像数据的数据处理设备，该数据处理设备包括获取装置，用于获取表示图像数据变化程度的、以图片为单位的变化量；显示类型确定装置，用于根据变化量以图片为单位来确定表示显示图片时的显示方法的显示类型；以及显示控制装置，用于使显示器来显示表示图片显示类型的类型信息和表示由被操作为指定要被显示的图片的图片指定操作装置指定的图片的位置的位置信息。
2、 一种用于处Sit动图像的图^^据的数据处理设备，该数据处理设备 包括获W"元，获^^示图^^t据变^^JL的、以图片为^的变化量；显示类型确定单元，##变化量以图片为#来确^示显示图片时的显示方法的显示类型；以及显示控制单元，使显示器;5^示表示图片显示类型的类型信息和表示由被,为指定要,经示的图片的图片指定IMt单元指定的图片的位置的位置信 命
3、 才娥权利要求1的数据处理设备，其中显示类型表示显示图片时的分 辨率或显示图片时的显示速率败比不同的显示方法。
4、 才 ^'虔求3的数据处理设备，其中 变化量A^示图片中空间变^^1的细度信息，以及 当图片的细度信息4旨示空间变^^JL很大时，显示类型确^^置将具有高^f率或^^示速率的高，率/^E示速率类型确定作为图片的显示类型。
5、 #^ '虔求3的数据处理设备，其中 变化量;i^示图片中时间变^^^的运动信息，以及当图片的运动信,y旨示时间变^^i很大时，显示类型确^^置将具有低，率或高显示速率的^^率/高显示速率作为图片的显示类型。
6、 才M^5^要求3的数据处理设备，其中 显示类型包括表示以静态图^ii行显示的静态图像类型，以及 显示类型确定装置将表示以静态图像进行显示的静态图像类型确定为具 有小变化量的图片的显示类型。
7、 才N^U'决求1的数据处理设备，其中显示类型确定装置^^将图片中的变化量与预定阈值进行比较而获得的 Hs^果，确 示类型，以及显示控制装置使显示器进一步与表示阈值的阈值信息一同显示按时间序 列表示图片中的变化量的曲线图。
8、 #^权利要求7的数据处理设备，其中 阈值信息4娥用户的辦而移动，以及显示类型确定装置才Mt将图片中的变化量与移动后的阈值信息所表示的 阔值进行tb^而获得的H^结果，再次确^示类型。
9、 ##^'决求8的数据处理设备，其中当显示类型确定装置再次确定 了显示类型的时候，显示控制装置ltt示絲^t类型信息进行显示。
10、 #^权利要求7的数据处理设备，其中将表示图片中空间变^^呈度的细度信息和表示图片中时间变^^呈度的运 动信息^t在文件中，作为以图片为#的变化量，以及显示控制装置使显示器显示按时间序列表示细度信息的曲线图、按时间序 列表示运动信息的曲线图、或者按时间序列表示细度信息的曲线图和按时间序 列表^动信息的曲线图二者。
11、 才^t^U'J要求10的数据处理设备，进一步包^i^Wt装置，用于选 #^被显示的按时间序列表示细度信息的曲线图、按时间序列表示运动信息的 曲线图、或者按时间序列表示细度信息的曲线图和按时间序列表示运动信息的 曲线图二者。
12、 ^^M'J要求1的数据处理设备，其中 图片指定辦装IA其中拨块可移动的条，按时间序列将图片^SeiH'J分可移动范围的子区间，其中拨块可在所述可 移动范围中移动，以及显示控制装J/f組示器絲示位置信息，所述位置信息表示射e^拨J^斤 定位的子区间的图片的位置。
13、 #^权利要求12的数据处理设备，其中 显示控制装置^f組示器进一步显示分配范围信息，该信息表示分配范围是分酉ei^可移动范围中的开头子区间到^C子区间的按时间序列的图片范围， 才娥用户的辦移动^S己范围信息，以及将分配范围信息所表示的分配范围中的开头图片到^C图片分配给可移 动范围中的开头子区间到^子区间。
14、 一种用于处m动图像的图^lt據的数据处理方法，该lt据处理方法包括##变化量以图片为^来确^4示显示图片时的显示方法的显示类型， 该变化量以图片为^^示图^^据变^fiJL;以及使显示器显示表示图片显示类型的类型信息和表示由^皮操作为指定^"被 显示的图片的图片指定##^^置指定的图片的位置的位置信息。
15、 一种用于处3^t动图像的图^lt据的数据处理设备，该数据处理设备包括获取装置，用于以图片为^获^4示显示图片时的显示方法的显示类 型，所i^示类型是^^表示图^^:据变^^变的、以图片为^的变化量来 确定的；以及显示控制装置，用于使显示器^示表示图片显示类型的类型信息和表示 由净皮操怍为指定^"净組示的图片的图片指定，装置指定的图片的位置的位置 信息。
16、 一种用于处m动图像的图^lt据的数据处理设备，该数据处理设备包括获取单元，用于以图片为^获取表示显示图片时的显示方法的显示类 型，所^^示类型是##表示图^^:据变>[^1的、以图片为^i的变化量来 确定的；以及显示控制单元，用于使显示器^示表示图片显示类型的类型信息和表示 由,皮##为指定^#組示的图片的图片指定IMt单元指定的图片的位置的位置 信息。
17、 一种用于处舰动图像的图^^据的数据处理方法，该数据处理方法 包^it样的步骤4 示器;^示表示图片显示类型的类型信息和表示由被操 作为指定要被显示的图片的图片指定M装置指定的图片的位置的位置信息， 所i^示类型是^^表示图^^t据变^^呈度的、以图片为^的变化量来确定 的，所皿示类型^^显示图片时的显示方法，
18、 一种用于处Sit动图像的图^a据的数据处理设备，该数据处理设备包括获^^置，用于获^示图^^据变^^呈度的、以一个或多个图片为^ 的变化量；显示类型确定^置，用于##变化量以多个图片为#来确^4示显示图 片时的显示方法的显示类型；以及显示控制装置，用于^ftt示器M示表示图片显示类型的类型信息和表示 由衫L操怍为指定^4皮显示的图片的图片指定,装置指定的图片的位置的位置 信息。
19、 一种用于处m动图像的图^lt据的数据处理设备，该数据处理设备包括获*元，获#示图#^:据变^^呈度的、以一个或多个图片为4^的变 化量；显示类型确定单元，#^变化量以多个图片为#来确^4示显示图片时 的显示方法的显示类型；显示控制单元，使显示器^示表示图片显示类型的类型信息和表示由被 ,为指定要^c^示的图片的图片指定，单元指定的图片的位置的位置信 息。
20、 一种用于处m动图像的图^lfc据的数据处理设备，该数据处理设备 包拾获^^置，用于以多个图片为卑^t^^示显示图片时的显示方法的显示 类型，所述显示类型是才Mt表示图傢数据变^^l的、以一个或多个图片为单 位的变化量来确定的；以及显示控制装置，用于使显示器a示表示图片显示类型的类型信息和表示 由被操怍为指定^#支显示的图片的图片指定，装置指定的图片的位置的位置 信息。
21、 一种用于处m动图像的图^lt据的数据处理设备，该数据处理设备 包括 获取单元，以多个图片为^i获^示显示图片时的显示方法的显示类 型，所i^示类型是^^表示图^^据变^f嫂的、以一个或多个图片为# 的变4匕量来确定的；以及显示控制单元，使显示器;J^示表示图片显示类型的类型信息和表示由被操作为指定要被显示的图片的图片指定操作单元指定的图片的位置的位置信 息，。
全文摘要
本发明公开了一种处理运动图像的图像数据的数据处理设备和数据处理方法。该数据处理设备包括获取装置，用于获取表示图像数据变化程度的、以图片为单位的变化量；显示类型确定装置，用于根据变化量以图片为单位来确定表示显示图片时的显示方法的显示类型；以及显示控制装置，用于使显示器来显示表示图片显示类型的类型信息和表示被操作为指定要被显示的图片的由图片指定操作装置指定的图片的位置的位置信息。
文档编号H04N5/14GK101150657SQ20071016761
公开日2008年3月26日 申请日期2007年2月16日 优先权日2006年2月17日
发明者小野崇也, 荻窪纯一 申请人:索尼株式会社