用于视频编辑系统的图标显示的制作方法

专利名称：用于视频编辑系统的图标显示的制作方法
技术领域：
本发明的领域涉及视频编辑，更特别地涉及用于编辑视频、音频 及元数据的基于计算机的系统。
背景技术：
用于编辑及排版音频可视作品的基于计算机的系统已经存在超过
十年了。最近的系统将来自诸如可携式摄4象机、VCR、 DVD、 MPEG 流、数字卫星信号、流式web视频等的各种集合的音频可视信号转换 为特定数字格式，从而保存到块存储设备上，例如硬盘上，来预期未 来的处理。
模拟视频信号由计算机接收用于以各种速率 一 次转换 一 副图像 (即帧)。例如，标准的NTSC电视^见频以每秒29.97帧的速率到达。 其它标准支持不同的帧速率以及不同的帧尺寸。这些帧的每一个被转 换为帧的数字表示并被存储在包含帧的时序组(视频序列或片段)的 文件中。视频序列可由特定的文件名标识，其中文件名被保存或者通 过附加的描述信息(元数据)。元数据可以是任何与音视频序列中的 各个帧或者整个序列本身相关的数据。例如，原始的"录像带名"、注 释、位置信息、甚至全球定位系统数据等可与所得到的视频序列一同 被存储，并用于帮助组织及进行未来的编辑决策。视频编辑者可给出 元数据参考来识别用于特定节目的某些特定的连续镜头。元数据可被 嵌入到音频视频帧来提供附加信息。帧精确的"时间码"可与片段内的 各个帧相关联，从而精确地识别事件发生的点。例如，录像带名 Superbowlxx，时间码00:12:41:15可用于识别一见频片段中Superbowl 20中线开球(kickoff)发生的准确点。见图1。
视频编辑者在编辑过程中依赖视觉、音频及元数据提示来识别准确的时间点进行编辑决策。这些决策包括修剪、删除、定位、添加效 果、覆盖图形、将音效等包含到作为结果的视频中等。
用于帮助识别片段的通常方法使用来自视频的较小的参考图(图
标、aka picon)。但是，由于北美电视以大约每秒30帧的速率发送 标准清晰度的视频信号，几秒的非常短的视频片段可包含几百个帧。 在持续时间中几分钟的片段将包含几千个帧。为了物理地将片段内的 这些图形的帧表示适合于在计算机显示器上表示，仅表示实际帧的较 小子集。图2中的例子表示了 3秒的片段，其包括仅由6个帧表示的 900个实际帧(即仅使用了 1/150的帧)。典型地，用于^L频编辑的用 户接口利用计算机显示器来呈现媒体及它们在时间轴内的相对时间位 置。片段可以代表所述特定故事流程的从左(较早时间)到右(较晚 时间)的序列风格来布置。例如，视频故事的下列部分标题、介绍、
场景1， 2， 3......N、结尾、及演职员表(credit)，可典型地在时间
轴上分别从左到右顺序布置。见图3。注意，也可在片段之间表示空 间。这些空间典型地由黑视频帧填充。
图3表示了单个跟踪时间轴(track timeline )，其中片段在水平 或x轴上以前后顺序简单排列。
本领域计算机编辑系统的当前状态使用所公知的作为预览窗来在 标记过程期间向操作者提供反馈。预览窗在滑动头(scrubhead)所在 的点显示视频帧。注意，典型的编辑系统利用有双重作用的组合滑动 头/播放头(playhead);显示重放期间时间轴的当前位置以及用于编 辑的时间轴的当前位置。由于我们描述的是允许在重放期间编辑的编 辑系统，因而我们应将分开这两种功能，这样滑动头将描述当前的编 辑位置，而播放头将描述正在从视频编辑系统输出(或播放)的视频 在时间轴上所在的当前时间点。在图3中，如果滑动头在位置x，预 览窗将参考在x时刻显示来自介绍片段的单个帧。类似地，如果滑动 头在位置y，则预览窗将显示来自场景2片段的单个帧。典型地，预 览窗是计算机显示器接口上的单独窗口。它们在单独轨迹时间轴上特 别地提供单点反馈是有效的。现代的视频编辑系统支持多种轨迹，包括视频、音频、图形、标
题、效果等。在多轨迹时间轴的范例中，竖轴或y轴用于表示视频、 音频、图形、标题、效果等片段的层次。见图4。
在多轨迹时间轴中，可使用分层效果在同 一 时间播放不同的片段。
例如，这些效果包括过渡、画中画、透明、覆盖等。在图4中，在a 时刻，视频片段x可过渡到视频片段y。通常的过渡包括擦除、淡出 或复杂的3D效果。在时刻b，标题A被置于视频片段y顶端上的前 面(即覆盖)。在时刻c，图片A被置于视频片段z的前面。这些是 多轨迹时间轴中多种覆盖可能的简单例子。除了图4中示范的可视片 段之外，音频片段、元数据片段、以及虚拟占位符片段可以类似的方 式净皮组合。
再次，预览窗被用于在多轨迹时间轴中向操作者提供反馈。然而， 由于在任一时间点上可存在多个片段，预览窗反馈包括组合输出。使 用图4中的例子，在时刻a，预览窗将通过过渡提供包括视频片段x 和视频片段y—部分的可视帧。在时刻b，预览窗将显示覆盖在视频 片段y顶端上的标题A。在时刻c，预览窗将在视频片段z之前显示 图像A。图5表示了在以上3个时间点上的预览窗。
尽管提供包括时间点上所有层相加的"组合"反馈是有效的，但是 预览窗不能提供该复合层的每个特定层上的准确信息。
因而，本发明的一个目的是在视频编辑领域中使用的时间轴上的 任一时间点，为每个单独层提供更好的反馈。

发明内容
提供了 一种用于编辑视频序列的方法和设备。该方法包括步骤 提供显示器，在显示器上描述多个音频/可视序列，其中所述多个音频 可视序列的每个音频/可视序列被显示为与笫一轴平行的时间轴，且其 中沿该时间轴的每个位置对应于该音频/可视序列内的音频/可视信息 的时域位置，其中该多个音频/可视序列沿所述第一轴交迭，提供扩展 跨越所述多个时间轴的滑动头线，其适合相对于所述多个音频/可视序列被移动，以及同时显示来自各个音频/可视序列窗内的多个音频/可 视序列每 一 个的音频/可视信息，其中所显示的信息对应于沿所述多个 音频/可视序列的各个时间轴的滑动头线位置。
该方法可进一步包括步骤对应于特定的时间，相邻于时间轴上 两个或多个轨迹，在时间轴上显示视频序列的时间矩形(a.k.a.视频片 段)并放置图标。这些图标以某种方式(例如以条的方式)被物理排 列，从而与时间轴上的每个媒体层产生容易的视觉关联。每个图标代 表属于时间轴上特定时间的信息，并且可包括实际的媒体(视频、 音频、图形或标题)或元数据(有关媒体的信息)。


图1是可由图6的系统使用的时间代码；
图2是由计算机显示器上的6个小画面(picon)表示的视频片段， 该计算机显示器可由图6的系统使用；
图3是一个可由图6的系统使用的视频编辑中使用的单轨迹时间 轴比喻；
图4是一个可由图6的系统使用的视频编辑中使用的多轨迹时间 轴比喻；
图5是在3个不同时间点(从左到右)上显示的预览窗时刻a， 在视频片段x和视频片段y之间的水平擦除过渡；时刻b,标题A覆 盖在视频y顶端上；时刻c,可由图6的系统使用的图像A (在视频 片段z之前的阴阳符号)；
图6是根据所例示的本发明的实施例，典型的视频编辑系统的结 构图7是图6系统的视频编辑系统监控器上的典型的时间轴窗； 图8是使用图6系统所使用的每个片段上的一个或多个单独的实 际媒体帧来识别时间轴上片段的典型方法；
图9是在图6系统内的滑动头位置处的预览窗显示；
图IO是一个单独的时间轴轨迹，其中图6系统的视频帧显示控制的指针表示滑动头位置处的显示精确帧信息；
图ll是一个单独的时间轴轨迹，其中图6系统的音频帧显示控制
的指针表示滑动头位置处的精确帧信息；
图12是图6系统的一个单独的时间轴轨迹，其中图像不发生变化； 图13是一个单独的指针的时间轴轨迹，其中该指针受图6系统的
静态标题显示的控制，使用图片图标来显示滑动头位置处的准确文本
信息；
图14是图6系统的图标的一个单独轨迹，其表示了静态位置处理
机；
图16是图6系统的图标条，其表示了用于滑动头位置处每个时间 轴层的单个时间点上的精确帧，从而提供反馈用于重放期间的同时编
辑；
图17是图6系统的图标条视频编辑接口的一个实施例的截屏；
图18a表示了图6系统所使用的复合窗口内的单个帧；及
图18b表示了图6系统所显示的来自不同时间轴的帧的同时显示。
具体实施例方式
图6是通常根据本发明的一个实施例所示的，用于编辑音频/可视 序列的视频编辑系统10的结构图。该视频编辑系统IO可用于编辑视 频序列及/或视频序列。如在此所使用的，所编辑的视频是随着预定的 故事情节的多个源音频/可视序列的复合产物。
该-见频编辑系统内包括中央处理单元(CPU) 12，例如因特尔奔 腾系列、AMD的Athlon、苹果G5等，其基于合适的操作系统以及用 于执行创造性处理的编辑步骤的应用软件运行，该操作系统例如 Microsoft windows、 Linux或苹果的OS X。与该CPU关联的大量的 记忆存储设备(即硬盘驱动)14和随机访问存储器(RAM) 16，用 于音频及视频源文件(片段)、中间的音频可视结果、以及最终编辑 成的输出文件的长期和短期存储。显示监控器(例如阴极射线管或液
13晶显示器)18被提供用于视频片段的可视呈现，并作为最终产品的汇 编及编辑中的可视辅助。键盘20和鼠标22用于编辑过程的操纵和控 制。
该视频编辑系统中还包括视频捕获接口 24，用于将来自各种视频 源26 (例如可携式摄像机、视频磁带记录器、直播视频馈送、数字视 频磁盘播放器等)的信号转换为合适的数字格式用于在该大量存储器 14和RAM16内存储。当每个文件或片段被捕获并保存时，其被给定 了合适的名称(例如片段l、片段2、 superbowll等)。
包含视频信号的音频可视呈现的数据文件可基于行业公知的任何 合适的格式被存储。某些示例的文件格式为音视交织(AVI)、苹 果的Quick Time电影、运动图像专家组(MPEG) 、 MXF (素材交 换格式)等。还可通过捕获接口从音频/视频源获得音频信息(不包括 视频)。可基于行业公知的任何合适的文件类型(例如mp3、 wav等) 保存音频信息。类似地，可通过视频捕获板捕获视频信息(不包括音 频)，并将其作为视频帧序列(视频序列)进行保存。可基于其产生 源文件的其它合适的视频、图像、音频及图形格式包括DIB、Microsoft 的位图文件格式(BMP) 、 Autodesk的FLI/FLC、 CompuServe的 GIF、 Xsoft的PCX、苹果的PCT、柯达的photo CD、 TureVision的 TGA、 Aldus的TIF、联合图像专家组的JPG。如在此所4吏用的，这 些文件(无所谓类型)将称为片段(clip)。
数字视频段及音频文件还可被装载用于通过标准的输入/输出 (I/O)端口 28进行编辑。I/O端口可与任何合适的信息源(例如软 驱、PCMCIA存储卡、SCSI设备、USB密钥、网络连接、WIFI等) 相接口。这些1/0端口还可用于向接收者输出完成的音视作品。
跟随合适的源文件的入口，视频编辑系统的操作者(未示)可在 显示监视器上以多种格式访问并浏览视频文件。在一种格式中，已知 作为时间轴的屏幕区域可专用于显示视频段。操作者可以普通的广播 视频速度(即NTSC的每秒29.97帧、PAL的每秒25帧、或者合适 的HD帧速率)或各种多媒体速度(例如12fps、 15fps等)浏览片段。可选地，操作者可基于菜单、键盘或鼠标的控制，通过在时间方向上 向前或向后步进的方式每次一帧的浏览片段。当操作者浏览片段时， 显示与帧对应的帧号码(或时间代码)。也可显示有关片段的其它数
据，通常已知为元数据。元数据的例子包括文本说明、非公开的标 题信息、创建信息、唯一ID、任何数目的与视频片段或特定视频帧关 联的信息。在浏览了视频片段的各个帧之后，操作者可执行编辑操作， 例如删除不希望的帧、添加来自当前或其它片段的新帧、复合当前片 段顶端上的视频或图形的多个层、设定从一个片段到另 一个的过渡点、 或者任何数目的其它视频编辑操作。这些编辑操作可在时间轴接口上 执行，该时间轴接口用于时间地以及空间地展示多个视频/音频/图形 片段。在停止重放时，或者在片段或整个时间轴重放期间可执行编辑 变化。
为了创建所编辑的视频，可使用各种进程。 一种典型的策略是通 过创建大致的情节串联图版(storyboard)来预先排列出主要的视频 片段。在该策略中，操作者集合所需要的源片段并将主要的片段拖拉 到"箱"或"库，，窗口内的时域序列中。该片段序列然后可以同 一时间顺 序被发送到主时间轴窗口 ，用于很好的调谐及复合多个音频/可视层。
时间轴是可在其位置编辑多种片段类型(视频、音频、图形、标 题、元数据、虛拟等，这些及其它片段类型可共同已知为媒体片段) 的主接口。如该名称所暗示的，时间轴可以时间顺序排序片段。实际 上，某些时间轴仅支持片段必须以序列(时间)顺序设置的单一轨迹。 现代的时间轴加入了另 一灵活性维度，允许用户控制多个层并在同一 时间点上排列多个片段。这通过在可设置多个不同媒体类型片段的层 中添加多个轨迹来实现(图7)。典型的时间轴使用x轴作为时间刻 度，其右侧代表时间上较晚的点，y轴作为复合机制，其较高的片段 在主片段的顶端上被复合(注意，复合片段的顺序可根据编辑接口中 使用的范例被转换)。如背景部分中较早所述的，当前的机制在时间 轴上提供复合片段的同步时间反馈，其依赖于整个预览窗的。
该预览窗表示a)来自特定时间点上的单一片断，或者表示b)来自特定时间点上所有片断的复合结果。典型地，从实际的视频媒体 提取更小的图片或图标并在预览窗中显示，该预览窗提供给编辑者必 要的反馈用于编辑。该预览窗典型地显示时间轴滑动头上的信息。但 是，其还通常实践来在编辑操作，例如修剪期间利用预览窗显示来自
单个片段的单个帧(例如参见图18a)。
基于所例示的本发明的实施例，图标条提供了一种方法来在特定 的时间点上同时可视地检查多个媒体片段的内容(图16、图18b)。 这通过提供多个与每个独立的时间轴轨迹相关联的图标，并以同步的 方式更新它们而实现。因此操作者可擦除(即移动)滑动头，直到图 标条中的信息显示对于滑动头位置时间轴上所有媒体的期望反馈为 止。例如，编辑者可能希望剪掉音频无声以及视频恰好显示黑屏的作 品的部分。为了达到这一点，操作者简单地跨时间轴擦除该滑动头， 直到在图标条的各个图标中不显示音频及空白(例如黑)视频为止。 当操作者继续擦除时，该空白部分的开始及结尾时间可被识别及标记 用于删除。所编辑的片段可被向右或向左移动以修正由编辑产生的定 时缺陷。
图标条可根据片段以及其交叉滑动头的位置显示不同的信息类 型。图标条可显示的信息的例子包括图片标记、刻度图、音频波形及 元数据。
用户通过键盘、鼠标或其它选择设备控制感兴趣的时间点，并通 过时间轴指针(也公知为滑动头)在计算机的监视器上显示。在时间 上前后移动该滑动头的动作公知为擦除时间轴。可利用擦除来选择不 同的时间点用于编辑或重放的目的。例如，操作者可通过执行下列两 个步骤来在时刻00:00:02:00之前删除所有素材1)移动滑动头到该 时间点并调用切片操作来剪掉该精确点处时间轴上的所有媒体，及2 ) 在00:00:02:00之前选择所有片段及切片的片段部分，并执行删除操 作。在该简化的例子中，我们使用了特定的时间点(即00:00:02:00) 作为参考来删除时间轴的多个层上的片段。但是，基于每个媒体片段 中的实际素材确定准确的剪切点对于视频编辑者来说是非常公知的。在该本发明的实施例中，操作者使用鼠标来选择时间轴的滑动头， 并进行来将其向左右拖动，从而提高或降低正在参考的时间(擦除) 点。l)在实际的擦除操作期间，当操作者移动到时间轴上的不同点时
向操作者提供交互性的反馈，及2)当滑动头被设置在(或放在)时 间轴上的特定时间点时，更新图标条。可具有多种选项来在图标条上 显示不同的信息。但是，所显示的典型信息基于所述滑动头所相交的 时间轴轨迹上的媒体类型如下。
对于视频片段，图标条上相应的图标可用于在滑动头位置显示帧 的较小尺寸图片(图10)。由于视频片段由一系列的独立图片(或帧) 组成，因而滑动头将在一时间点上的精确的一帧上(即所选的帧)交 叉视频片段。然后从其存储位置(典型地在计算机硬盘上、网络上的 共享驱动、存储器中、因特网上等)读取该所选的帧，并将大小调整 到合适尺寸用于在图标条中显示。典型地在视频编辑应用软件的控制 下通过图片处理技术来进行重新调整。可选地，该视频编辑软件可实 现如操作者所期望的显示各种图标大小。
对于音频片段，图标条上相应的图标可用于在滑动头位置显示音 频的波形表示(图11)。用于对于每一视频帧进行超过1000个的采 样来典型地记录音频，因而波形图用于以容易理解的方式来提供这些 采样的可视表示。该音频采样用于创建对应于媒体中滑动头位置或附 近的波形图。这些采样从其存储位置(典型地在计算机硬盘上、网络 上的共享驱动、存储器中、因特网上等)被读取。典型地在视频编辑 应用软件的控制下制作该图。可选地，该视频编辑软件可允许显示操 作者所期望的各种图标大小及尺度。
对于图形片段，图标条上相应的图标可用于显示全部图像微缩图 (图12)。还由于图像片段包括单一的非变化的、通过多个视频帧重 复的图像，因而该图像用于呈现在滑动头在其上移动时的整个图形片 段。该图形帧从其存储位置(典型地在计算机硬盘上、网络上的共享 驱动、存储器中、因特网上等)被读取，并被调整到合适大小用于在 图标条中显示。典型地在视频编辑应用软件的控制下通过图像处理技术来进行重新调整。可选地，该视频编辑软件可实现显示操作者所期 望的各种图标大小。
可以类似于视频片段或图形片段的方式基于标题是静态的还是动 态的来控制标题片段。静态的标题片段不能从一个视频帧变化到另一
个视频帧，因此类似于静止图形(图13)。另一方面，标题可具有动 作(例如滚动或爬行)，并因此随帧而变化。可以类似于移动的视频 片段的方式来控制这些标题(图10)。
在任一种情况中，标题帧从其存储位置被读取(典型地在计算机 硬盘上、网络上的共享驱动、存储器中、因特网上等)，并被重新调 整到合适的大小用于在图标条中显示。典型地在视频编辑应用软件的 控制下通过图像处理技术来进行调整。可选地，该视频编辑软件可实 现显示操作者所期望的各种图标大小。
虚拟片段是用于目前不可用的媒体的占位符(图14)。例如，虛 拟片段可表示还没有被获得或者正在被离线存储的素材。在某些情况 中，虚拟片段可包含用于不可用媒体的必须的元数据。这些可发生时 间的通常例子是当媒体被存档用于长期存储时，以及当视频项目文件 被视频编辑者打开时。在这种情况中，该视频项目文件包含有关实际 媒体的信息(例如，录像带Superbowl、场景=开球、日期40xx年1 月23日等)。编辑者可使用这些信息来从档案文件获取合适的素材， 甚至使用该元数据作为参考用于编辑。对于虚拟片段，实际的媒体图 像可以是可用的，也可以是不可用的。参考图像可被存储来代表丟失 的媒体，或者可替代使用占位图像。
除了上述虛拟片段情况之外，也可在图标条(EYECONBar)上 显示元数据用于所有其它片段类型(图15)。
应当注意，所述的所有交互并不排除在实际时间轴重放期间进行 编辑。实际上，图标条被设计为在编辑的所有阶段，包括在预览窗内 发生重放的时刻，允许为用户实现更好的交互(由于其的多个同时浏 览)(图16)。在重放时间轴时，图标条可选地在播放头(视频在任 何时刻播放的位置)或所述的滑动头位置提供反馈。如果图标条被设定为在播放头上提供反馈(即，滑动头和播放头一致)，则用户可通
过计算机键盘或其它输入设备执行"飞行中(onthefly)"编辑。例如， 用户可基于时间轴重放期间来自图标条的反馈，使用在键盘上敲击特 定键来剪掉播放头位置处时间轴上的所有片段。可选地，图标条可在 不同于重放发生时播放头位置的滑动头位置处提供反馈。在该情节中， 可通过鼠标控制滑动头来完全独立于播放头位置选择感兴趣的点。这 引起了多种感兴趣的情节。例如，操作者可以开始在预览监视器上出 现的重放，然后进行到时间上稍后点来在重放头到达之前进行编辑变 化。也可发生相反的情况。可在重放头经过某个时间点之后对程序进 行调整和改变。图标条提供了足够的同时反馈来帮助实现该交互编辑 的概念。
出于例示执行及使用本发明的方式的目的，已经描述了根据本发 明用于编辑视频片段的新颖性设备的特定实施例。应当理解，本发明 的其它变化及修改的实现以及其各个方面对于本领域普通技术人员来 说是显而易见的，本发明并不限于所述的特定实施例。因此，落在在 此公开及请求的基本原理的实际精神和范围之内的任何及所有修改、 变化、或等价物都被期望覆盖本发明。
权利要求
1.一种编辑视频序列的方法，该方法包括提供显示器，使多个音频/可视序列被显示在所述显示器上，其中所述多个音频/可视序列中的每一个音频/可视序列按照与第一时间轴平行的时间轴被显示，以及其中沿所述时间轴的每个位置对应所述音频/可视序列内的音频/可视信息的时域位置，以及其中所述多个音频/可视序列沿所述第一轴在时域上重叠；提供滑动头线，其延伸穿过所述多个时间轴，以及其适合于相对于所述多个音频/可视序列的时间轴被移动；及同时显示来自所述音频/可视序列的各个窗口内所述多个音频/可视序列每一个的音频/可视信息，其中所显示的信息对应于沿所述多个音频/可视序列的各个时间轴的滑动头线的位置。
2. 如权利要求1所述的编辑视频序列的方法，进一步包括定位 所述各个窗口 ，该窗口在邻近所述多个时间轴的各个时间轴的一端的 显示区域内表示所显示的音频/可视信息。
3. 如权利要求1所述的编辑视频序列的方法，进一步包括将滑 动头线定义为与所述第一轴正交。
4. 如权利要求1所述的编辑视频序列的方法，进一步包括提供 正交于延伸穿过所述多个时间轴的所述第一轴的播放头线。
5. 如权利要求4所述的编辑视频序列的方法，进一步包括在预 览窗口内显示所述多个音频/可视序列的故事情节，其中基于所述播放 头线的时域位置从所述多个音频/可视序列获得所显示的故事情节。
6. 如权利要求5所述的编辑视频序列的方法，其中显示所述故 事情节的步骤进一步包括所述播放头遍历所述时间轴，同时从对应于 所述播放头位置的所述多个音频/可视序列的一个音频/可视序列内的 时域位置获得音频/可视信息。
7. 如权利要求6所述的编辑视频序列的方法，其中显示所述故 事情节的步骤进一步包括，从所述多个音频/可视序列的第一音频/可视序列获得音频/可视信息以用于在所述预览窗内显示，直到播放头到 达沿所述第一音频/可视序列的时间轴的预定时域位置为止，然后在所 述预定时域位置之后从所述多个音频/可视序列的第二音频/可视序列 获得音频/可视信息。
8. 如权利要求7所述的编辑视频序列的方法，进一步包括将所 所述时间轴。
9. 如权利要求8所述的编辑视频序列的方法，进一步包括在所 述滑动头和播放头遍历所述时间轴时将滑动头和播放头重合地设置。
10. 如权利要求9所述的编辑视频序列的方法，进一步包括通过 沿所述时间轴移动所述播放头来编辑所述故事情节。
11. 如权利要求9所述的编辑视频序列的方法，进一步包括在所 述播放头遍历所述时间轴时使用所述滑动头来编辑所述故事情节。
12. —种用于编辑视频序列的设备，该设备包括用于对显示器提供在显示器上图示的多个音频/可视序列的装 置，其中所述多个音频可视序列中的每一个音频/可视序列按照与第一 轴平行的时间轴被显示，并且其中沿所述时间轴的每个位置对应所述 音频/可视序列内的音频/可视信息的时域位置，以及其中所述多个音 频/可视序列沿所述第 一轴重叠；用于提供延伸穿过多个时间轴的滑动头线的装置，该滑动头线适合于相对于所述多个音频/可视序列的时间轴#皮移动；及用于同时显示来自所述音频/可视序列的各个窗口内的多个音频/ 可视序列每一个的音频/可视信息的装置，其中所显示的信息对应于沿 所述多个音频/可视序列的各个时间轴的滑动头线的位置。
13. 如权利要求12所述的用于编辑视频序列的设备，进一步包 括用于定位所述各个窗口的装置，该窗口在邻近所述多个时间轴的各 个时间轴的一端的显示区域内表示所显示的音频/可视信息。
14. 如权利要求12所述的用于编辑视频序列的设备，进一步包 括用于将滑动头线定义为与所述第一轴正交的装置。
15. 如权利要求12所述的用于编辑视频序列的设备，进一步包 括用于提供正交于延伸穿过多个时间轴的所述第一轴的播放头线的装 置。
16. 如权利要求15所述的用于编辑视频序列的设备，进一步包 括用于在预览窗口内显示所述多个音频/可视序列的故事情节的装置， 其中基于所述播放头线的时域位置从所述多个音频/可视序列获得所 显示的故事情节。
17. 如权利要求16所述的用于编辑视频序列的设备，其中用于 显示所述故事情节的装置进一步包括，用于允许所述播放头遍历所述 时间轴，同时从对应于所述播放头位置的所述多个音频/可一见序列的一 个音频/可视序列内的时域位置获得音频/可视信息的装置。
18. 如权利要求17所述的用于编辑视频序列的设备，其中用于 显示所述故事情节的装置进一步包括，用于从所述多个音频/可视序列 的第 一音频/可视序列获得音频/可视信息以用于在预览窗内显示，直 到所述播放头到达沿所述第 一 音频/可视序列的时间轴的预定时域位 置为止，然后在所述预定时域位置之后从所述多个音频/可视序列的第 二音频/可视序列获得音频/可视信息的装置。
19. 如权利要求18所述的用于编辑视频序列的设备，进一步包共同遍历所述时间轴的装置。
20. 如权利要求19所述的用于编辑视频序列的设备，进一步包合地设置的装置。
21. 如权利要求20所述的用于编辑视频序列的设备，进一步包 括用于通过沿所述时间轴移动所述播放头来编辑所述故事情节的装 置。
22. 如权利要求20所述的用于编辑视频序列的设备，进一步包 节的装置。'、"、、 ，、 、、_"、.
23. —种用于编辑视频序列的设备，该设备包括显示器，提供有在该显示器上图示的多个音频/可视序列，其中 所述多个音频可视序列中的每一个音频/可视序列按照与第一轴平行 的时间轴被显示，并且其中沿所述时间轴的每一个位置对应所述音频/ 可视序列内的音频/可视信息的时域位置，以及其中所述多个音频/可 视序列沿所述第一轴重叠；滑动头线，其延伸穿过所述多个时间轴，其适合于相对于所述多 个音频/可视序列的时间轴被移动；及图标条，其同时显示来自所述音频/可视序列的各个窗口内所述 多个音频/可视序列每一个的音频/可视信息，其中所显示的信息对应 于沿所述多个音频/可视序列的各个时间轴的滑动头线的位置。
24. —种编辑视频序列的方法，包括下列步骤 在监视器上显示具有多个时域交迭的平行时间轴的时间矩形、图标条以及延伸穿过所述多个时间轴的滑动头；将第一视频序列表示为所述多个时间轴的第一时间轴； 在所述第一时间轴上的滑动头位置所指示的时间，显示对应于所 述第 一视频序列的视频帧版本在图标条内；将第二视频序列表示为所述多个时间轴的第二时间轴; 通过与显示所述第一视频序列基本相同的方式，同时显示来自所 述第二媒体序列的媒体帧在所述图标条内，其中所述第二媒体序列与 所述第一媒体序列不同，并且其中从所述滑动头位置所标识的时域上 的单个时间点选择所显示的第 一和第二视频序列的媒体帧；及 基于同时显示在所述图标条内的媒体帧编辑所述视频序列。
25. 如权利要求24所述的方法，进一步包括使用计算机鼠标来 控制时间轴上所述滑动头的位置，因而导致表示所选时间上所述视频 序列的图标条内所有图标的更新。
26. 如权利要求24所述的方法，进一步包括使用计算机键盘来 控制时间轴上所述滑动头的位置，因而导致表示所选时间上所述媒体 的图标条上所有图标的更新。
27. 如权利要求24所述的方法，进一步包括使用计算机光标控 制设备来定位时间轴上的滑动头，因而导致表示所选时间上所述媒体 的图标条上所有图标的更新。
28. 如权利要求24所述的方法，进一步包括基于使用图标条反 馈进行的编辑，从视频编辑系统输出视频节目。
29. 如权利要求24所述的方法，其中编辑视频序列的步骤进一 步包括同时重放所述时间轴。
30. —种编辑音频序列的方法，包括下列步骤 在监视器上显示具有多个时域交迭的平行时间轴的时间矩形、图标条以及延伸穿过所述多个时间轴的滑动头；在所述多个时间轴的 一 个时间轴上表示音频序列； 在所述滑动头位置所指示的时间，显示对应于所述音频序列的音频帧版本；同时在所述多个时间轴的其它时间轴上显示来自其它媒体序列 的媒体帧，其中所述其它媒体序列与所述音频序列不同，但全部来自 单个时间点；及基于同时显示在所述图标条上的媒体帧编辑序列。
31. —种编辑图形的方法，包括在监视器上显示具有多个时域交迭的平行时间轴的时间矩形、图标条以及延伸穿过所述多个时间轴的滑动头；将第一图形序列表示为所述多个时间轴的第一时间轴； 在所述滑动头位置所指示的时间，显示对应于所述第一图形序列的图形帧版本；的媒体帧，，其中所述其它媒体序列与所述;一图形序列不同，并且其 中从所迷滑动头位置所标识的时间轴中的单个时间点选择所显示的图 形帧和媒体帧；及基于同时显示的在图标条上可听的以及媒体帧编辑所述图形序 列和媒体序列中的至少一个。
32. —种编辑标题的方法，包括在监视器上显示具有多个时域交迭的时间轴的时间矩形、图标条以及延伸穿过所述多个时间轴的滑动头；在所述多个时间轴的 一 个时间轴上表示标题序列；在所述标题序列的时间轴上所述滑动头位置所指示的时间，显示对应于所述标题序列的标题帧版本；所述多个时间轴的其它时间轴上同时显示来自其它媒体序列的 媒体帧，其中所述其它媒体序列与所述标题序列不同，并且其中从所述滑动头位置标识的单个时间点选择所显示的帧；及基于同时显示在所述图标条上的媒体帧编辑所述标题帧。
33. —种编辑虚拟片段的方法，包括在监^L器上显示具有多个时域交迭的平行时间轴的时间矩形； 在所述多个时间轴的 一个时间轴上表示虚拟片段； 在所述滑动头的时域位置所指示的时间，显示对应于所述视频片 段的占位符帧版本；的媒体帧，其中所述虚拟片段与其它媒体序列完全不同，并且其中从 所述滑动头标识的单个时间点选择所显示的帧；及基于同时显示在所述图标条上的媒体帧编辑所述虛拟片段。
34. —种编辑媒体序列的方法，包括在监视器上显示具有多个时域交迭的平行时间轴的时间矩形、图 标条以及延伸穿过所述多个时间轴的滑动头； 将片段表示为时间轴；在所述片段的时间轴上所述滑动头的时域位置所指示的时间，显 示对应于所述片段的元数据；在所述多个时间轴的其它时间轴上同时显示来自其它媒体序列 的媒体帧，其中所述片段和其它媒体序列完全不同，并且其中从所述 滑动头位置标识的时间轴中的单个时间点选择所显示的元数据和帧； 及基于同时显示在所迷图标条上的媒体帧编辑该元数据片段。
35. —种计算机编辑多个媒体片段的方法，包括 在监视器上显示具有多个时域交迭的平行时间轴的时间矩形、图标条以及延伸穿过多个时间轴的滑动头，其中每个时间轴表示所述多 个媒体片段的一个媒体片段；同时显示来自所述多个媒体序列每一个的媒体帧在所述图标条 内，其中所述多个媒体序列完全不同，并且其中从所述滑动头位置标 识的单个时间点选择所显示的帧；所述多个时间轴的一个重放时间轴；及基于同时显示在所述图标条上的媒体帧编辑该重放时间轴。
36. —种编辑-f见频序列的方法，该方法包括 使用显示器上图示的多个音频/可视序列提供显示，其中所述多个音频可视序列中的每一个音频/可视序列按照沿第 一轴的时间轴被 显示，并且其中沿所述时间轴的每一个位置对应所述音频/可视序列内 的音频/可视信息的时域位置，并且其中所述多个音频/可视序列沿所 述第一轴重叠；提供适合于沿第二轴拖动的垂线，所述第二轴在所述多个音频/ 可视序列的时间轴上正交于所述第一轴；及同时在显示器上显示来自所述多个音频/可视序列每一个的音频/ 可视信息，其中所显示的信息对应于沿所述音频/可视序列的所述垂线 的位置。
全文摘要
提供了一种用于编辑视频序列的方法和设备。该方法包括步骤使用显示器上图示的多个音频/可视序列提供显示，其中所述多个音频可视序列中的每一个音频/可视序列按照与第一时间轴平行的时间轴被显示，并且其中沿所述时间轴的每一个位置对应所述音频/可视序列内音频/可视信息的时域位置，且其中所述多个音频/可视序列沿所述第一轴重叠；提供延伸穿过多个时间轴的滑动头线，其适于相对于所述多个音频/可视序列的时间轴被移动；及同时显示来自所述音频/可视序列的各个窗口内多个音频/可视序列每一个的音频/可视信息，其中所显示的信息对应于沿所述多个音频/可视序列的各个时间轴的滑动头线的位置。
文档编号G06F15/00GK101322112SQ200680017738
公开日2008年12月10日 申请日期2006年4月3日 优先权日2005年4月4日
发明者萨姆·李 申请人:哈里公司