专利名称：多媒体素材同步编辑装置的制作方法
技术领域：
本发明涉及一种多媒体素材编辑技术，尤其涉及用于对多媒体素材进行同步编辑的多媒体素材同步编辑装置。
背景技术：
随着社会的发展，人们对信息的需求越来越迫切，同时对信息的表现形式也投入了更多的关注。多媒体作为一种新兴的传播媒体，可以集多种类型的素材于一身，日益被应用到社会生活的各个方面。这种广泛的应用给多媒体的制作提出了更高的要求，其中，在多媒体的制作中实现各种变化的多媒体素材间的同步是十分关键的。
所谓素材同步是指，多媒体页面上部分或所有素材的外观、位置、内容等属性在某一特定时间或时机发生变化，而这种变化是预先定义的。可以进行同步编辑的多媒体素材被称为多媒体同步对象或同步对象，其可以包括多媒体页面上一切随时间变化的多媒体素材，这里所述的变化包括时间和/或空间(页面平面)上的变化。所述多媒体素材的类型例如可以为文字、图像、音频和视频等，其中图像可以包括图标、图片等，音频可以包括音乐、语音等，视频可以包括动画、视频流媒体等。
同步对象在页面上的表现形式可以包括两种，即随时间的变化在页面上发生位移和随时间的变化在页面上表现(显示和/或发出声音)的内容发生改变。针对第一种表现形式，相应的同步编辑方式为路径动画同步编辑，即对同步对象在何时运动到页面的何处进行编辑；针对第二种表现形式，相应的同步编辑方式为视频/音频媒体编辑，即对同步对象在何时播放到哪一帧或哪一片断进行编辑。前一种编辑方式针对的同步对象例如为文字、图像等，后一种编辑方式针对的同步对象例如为动画、音频媒体和视频媒体等。其中，对于页面上可视的动画和视频媒体，由于其既可以随时间的变化在页面上发生位移，也可以随时间的变化在页面上表现的内容发生变化，因此可以对其进行两种形式的同步编辑。
现有技术中，实现多媒体同步编辑的装置在用户对某一目标同步对象进行路径动画的同步编辑即第一种形式的同步编辑时，只能向用户提供分离的页面编辑窗口和时间编辑窗口，用户必须分别在页面编辑窗口中输入当前目标同步对象的运动路径——路径信息(也可以称为空间信息)和在时间编辑窗口中指定当前目标同步对象的起始、结束时间——时间信息。此外，现有的多媒体同步编辑装置也不能在一个编辑窗口中实现路径动画和视频/音频媒体两种形式的同步编辑操作。如果要进行这两种形式的同步编辑，就必须使用不同的编辑窗口。并且，现有技术的多媒体同步编辑装置也不能在一个编辑窗口中实现一个或者多个视频媒体和一个或者多个音频媒体的同步编辑操作，同样也不能在一个编辑窗口中实现多个视频媒体或者多个音频媒体的同步编辑操作。因此，现有技术中的多媒体同步编辑装置无法为用户提供一个直观统一的同步编辑界面，而在多个编辑窗口中进行的频繁切换造成了同步编辑工作的繁琐和低效率。
发明内容
本发明的目的在于提供一种多媒体制作中对多媒体素材进行同步编辑的装置，它可以为用户提供一个统一地编辑各种类型的同步对象的同步关系的编辑窗口，直观地向用户显示同步对象的时、空同步关系，从而简便而准确地把握各素材之间的同步关系，有利于统一安排同步效果。
根据本发明的第一方面，提供一种多媒体素材同步编辑装置，包括同步对象数据存储装置，用于存储同步对象的同步信息；同步代码生成装置，用于读取同步对象数据存储装置中存储的所述同步对象的同步信息，将该同步信息转换成同步代码并输出；还包括一个同步编辑器，用于设定所述同步对象的时间信息和空间信息，并将所设定的时间信息和空间信息进行同步处理，使之成为所述同步信息，而后将所述同步信息存储到所述同步对象数据存储装置中。
根据本发明的第二方面，还提供一种多媒体素材同步编辑装置，包括同步对象数据存储装置，用于存储同步对象的同步信息；同步代码生成装置，用于读取所述同步对象数据存储装置中存储的所述同步对象的所述同步信息，将该同步信息转换成同步代码并输出；还包括一个同步编辑器，用于设定所述同步对象的关键帧和/或关键波形点与关键时间点之间的同步关系，并进行处理，将得到的所述同步信息存储到所述同步对象数据存储装置中。
本发明的多媒体同步编辑装置为用户提供了一种对多媒体页面中多种类型的多媒体素材进行统一的同步编辑的装置，该装置可以将进行同步编辑的多种类型的多媒体素材的同步情况全部显示在一个编辑窗口中，这不仅使得用户能够清楚地观察到某个素材在某个时间处于什么状态，而且，也便于观察多个多媒体素材在时间和空间上同步关系的整体情况，从而为编辑多媒体素材的同步提供了极大的方便。
根据本发明的第一方面的多媒体同步编辑装置能够在一个编辑窗口中实现一个或者多个同步对象的路径动画同步编辑。
而根据本发明的第二方面的多媒体同步编辑装置能够在一个窗口中实现视频媒体同步编辑功能和音频媒体同步编辑功能。
将根据本发明的第一方面和第二方面结合在一起的多媒体同步编辑装置能够在一个编辑窗口中实现一个或者多个同步对象的路径动画同步编辑以及一个或多个视频媒体和/或一个或多个音频媒体的同步编辑。
图1是本发明的多媒体素材同步编辑装置的示意图。
图2是根据本发明的多媒体素材同步编辑装置提供的多媒体同步编辑窗口的一个例子；图3是根据本发明的多媒体素材同步编辑装置提供的多媒体同步编辑窗口中时间点编辑区域的一个例子；图4是根据本发明的多媒体素材同步编辑装置进行路径动画同步编辑的路径的一个例子；图5是根据本发明的多媒体素材同步编辑装置进行帧序列同步编辑的帧序列列表的一个例子；以及图6示出的是根据本发明的多媒体素材同步编辑装置中的同步对象列表装置所提供的同步对象列表窗口的一个实例。
具体实施例方式
图1是本发明的多媒体素材同步编辑装置的结构图。图1所示多媒体素材同步编辑装置100包括同步编辑器101、同步对象数据存储装置102以及同步代码生成装置103。
如图1所示的多媒体素材同步编辑装置100的核心部件为同步编辑器101，用于设定同步对象的时间信息和空间信息，并将所设定的时间信息和空间信息进行同步处理。经同步编辑器101进行同步编辑处理后的结果称为同步对象的同步信息。同步编辑器101将同步信息存储到同步对象数据存储装置102中。代码生成装置103将同步对象数据存储装置102中的同步信息转换成可以识别的同步代码。
该同步编辑器101可以提供一个多媒体同步编辑窗口。利用该多媒体同步编辑窗口，该同步编辑器可以接收由用户输入的各种类型的同步对象及针对这些同步对象进行同步编辑所需的时间信息和空间信息。这些输入的同步对象是从整个多媒体页面中提取的由用户确定将进行同步编辑的对象，可以包括文字、图像、音频和视频媒体等。
对于视频同步对象，本发明的同步编辑器101支持其以帧序列的方式输入，并且同步编辑器101接受用户对帧序列中的某个帧的同步关系进行定义所输入的时间信息；对于音频同步对象，本发明的同步编辑器101支持其以波形图的方式输入，这种输入方式使得在该多媒体同步编辑窗口中可以直观地将音频同步对象的波形图显示出来，同步编辑器101接受用户对波形中关键波形点的同步关系进行定义所输入的时间信息。
同步编辑器101根据待同步的同步对象所需进行的同步编辑方式，事先将该多媒体同步编辑窗口划分为不同的编辑区域，使得在一个编辑区域中进行其对应方式的同步编辑。
图2示出了该多媒体同步编辑窗口的一个实施方式。在本实施方式中，将多媒体同步编辑窗口划分为时间点编辑区域、路径动画编辑区域和视频/音频媒体编辑区域。如图2所示，在本实施方式中，将时间点编辑区域置于同步编辑窗口的最上方，将视频/音频媒体编辑区域置于同步编辑窗口的最下方，而在时间点编辑区域和视频/音频编辑区域之间的部分设置路径动画编辑区域。
支持各种类型的同步对象输入的同步编辑器101在接收用户选择的同步对象后，按照被选取的同步对象的不同类型并根据用户不同的同步编辑需求进行识别，从而将各个同步对象分别显示在同一个多媒体同步编辑窗口的相应编辑区域中。即，将用户欲进行路径动画编辑的同步对象显示在位于多媒体同步编辑窗口中间空白位置的路径动画编辑区域，而将欲进行视频/音频媒体编辑的同步对象显示在位于多媒体同步编辑窗口下方的视频/音频媒体编辑区域中，这些不同编辑区域的时间标准都以时间点编辑区域中的时间轴所示时间为准。
对于一个依据时间对同步对象进行同步编辑的多媒体同步编辑窗口，时间点编辑区域是一个必要的区域，它为其他编辑区域中各个同步对象的同步提供一个统一的时间标准。
在本实施方式中，在如图2所示的时间点编辑区域中，设置了一根时间轴，表示对页面中所有同步对象进行同步编辑的时间范围。该时间轴可以前后滚动，并可以根据编辑的需要缩放刻度。
图3示出根据本发明的多媒体同步编辑装置提供的多媒体同步编辑窗口中时间点编辑区域的一个例子。根据用户的输入，在时间点编辑区域的时间轴上方针对各个同步对象设置关键时间点标签，用来确定同步对象在时间上的同步关系。
关键时间点标记了一个时刻，在该时刻同步对象的属性、位置及要播放的视频帧、音频波形等将发生改变。用户可以使用时间轴的滚动和缩放功能，在任意时间点方便地插入关键时间点标签。
在图2所示多媒体同步编辑窗口中的路径动画编辑区域中，针对前述第一种表现形式的同步对象进行同步编辑，即对同步对象在何时运动到页面的何处进行编辑。可以进行路径动画同步编辑的同步对象例如为文字、图像、视频媒体、动画等。
在该路径动画编辑区域中，可以对一个目标同步对象的路径动画进行编辑，也可以同时对多个目标同步对象的路径动画进行编辑。图2中所示出的同步编辑窗口中所编辑的目标同步对象有三个(对象1、对象2和对象3)。
在进行路径动画的编辑时，同步编辑器101允许用户在所提供的多媒体同步编辑窗口中的路径动画编辑区域中为一个正在编辑的同步对象(目标同步对象)输入除起点和终点以外的一个或多个控制点，并由同步编辑器101将这些控制点识别为同一个同步对象路径上的控制点，以便将它们以该同步对象为单元全部显示在同步编辑窗口中。然后，通过建立如图3所示时间点编辑区域中时间轴上关键时间点与这些控制点的关系，逐一定义每个控制点的时间信息，经同步编辑器101处理后，得到一个同步对象的整体时间同步信息。
同时，在该路径动画编辑区域中允许用户对控制点之间的路径进行编辑，该路径可以根据用户选择被定义为直线或曲线。同步编辑器101不仅可以读取根据用户选择而定义的路径上控制点的时间信息，也可以读取根据用户选择而定义的相邻控制点间的空间信息，由同步编辑器101处理后获得该同步对象整体路径的空间同步信息并相应地显示在同步编辑窗口中，从而完成对该同步对象时空结合的路径同步编辑。其中同步对象的时间同步信息和空间同步信息统称为该同步对象的同步信息。通过上述同步编辑窗口中路径动画的时空结合的同步编辑，可以准确地编辑一个同步对象在何时沿何种路径在页面上运动。
连接控制点的每段路径的总和将作为同步对象在多媒体页面上运动的轨迹，其初始位置是第一个控制点所在的位置，也就是用户开始对同步对象进行路径动画编辑时，同步对象所在的点。在本实施方式中，如图4所示，初始位置是图像上反白显示的一点。其他各控制点是用户在路径动画编辑区域内自行定义的。上述控制点的顺序由用户的拖动顺序确定，且该路径允许出现交叉。
此外，根据本发明的同步编辑器101也可以首先定义同步对象的路径，再在该路径上确定一个或多个控制点，并将这些控制点识别为针对同一个同步对象的控制点，然后由用户逐一定义这些控制点的时间信息，经同步编辑器101处理后得到该同步对象的整体时间同步信息。
根据本发明的同步编辑器101可以在同一个同步编辑窗口的路径动画编辑区域中对多个同步对象同时进行上述时空结合的路径同步编辑。
在对多个同步对象进行路径动画编辑时，可以对同步对象进行分组，使得在同步编辑窗口中，仅同时显示同一组内的同步对象的同步编辑情况，而将其他组的同步对象的编辑情况隐藏起来。
本发明中的同步编辑器101除允许在同步编辑窗口的路径动画编辑区域对同步对象进行路径同步编辑外，还允许用户在该同步编辑窗口的音频/视频媒体编辑区域中对音频或者视频媒体进行同步编辑。
图2所示多媒体同步编辑窗口的最下方是视频/音频媒体编辑区域，可以在该区域中针对前述第二种表现形式的同步对象进行同步编辑。换句话说，在该视频/音频媒体编辑区域可以进行视频媒体同步编辑和/或音频媒体同步编辑，其中视频媒体包括动画。在视频媒体同步编辑的情况下，该媒体编辑区域为用户提供视频媒体的播放内容信息，允许用户按照视频媒体播放内容或是视频媒体播放时间定义视频同步对象的同步关系，即对视频同步对象在何时播放到哪一帧或哪一片断进行编辑。在音频媒体同步编辑的情况下，该媒体编辑区域为用户提供了音频媒体的波形信息(反映了音频媒体的段落信息)，并允许用户按照波形信息或是音频媒体播放时间定义音频对象的同步关系。
在本实施方式中，该视频/音频媒体编辑区域可以用来实现多个视频和/或音频媒体的同步编辑操作。可以将该多个视频和/或音频媒体以列表的方式存储在同步编辑器101中，根据用户的需要将其中的一个视频媒体或者音频媒体显示在该视频/音频媒体编辑区域中。用户可以利用滚动条的上下滚动选择当前编辑的目标同步对象。
对于视频媒体的同步编辑而言，本装置向用户提供视频媒体的关键帧信息(显示同步对象的关键帧的影像)，并支持用户采取下列操作定义视频媒体的同步关系用户先选择一个或多个关键帧，再逐一定义这些关键帧的时间信息(为每一关键帧指定关键时间点)，这样，将一个连贯的视频媒体分割成若干片断，并定义了每一片断的播放时机(如图5所示)，实现了视频对象的同步，完成了编辑工作。对于音频同步编辑而言，本装置向用户提供音频媒体的波形信息(显示音频文件的波峰、波谷)，并支持用户采取下列操作定义音频媒体的同步关系用户根据显示的波峰和波谷，先选择出一系列“关键波形点”，这样，连贯的音频媒体被分割为若干片断；用户再逐一定义关键波形点处的时间信息(为每一关键波形点指定关键时间点)，这样，就定义了一个音频对象何时播放哪一个片断，实现了音频对象的同步，完成了编辑工作。
通过上述同步编辑窗口中音频波形的同步编辑，可以准确地编辑一个音频波形同步对象何时播放哪一个波形片断，从而实际上实现了对整个音频文件在时间上的切割，而以整个波形为对象针对音频波形中分段的波形分别进行同步编辑。
应当理解，由于多媒体同步对象的类型不同，而用户的要求各异，可以根据需要对同步编辑窗口进行不同的划分，每个编辑区域针对的同步编辑形式可以有所不同，且编辑区域在同步编辑窗口中的位置和/或数目也可以不同，对同步编辑窗口中编辑区域的不同划分不构成对本发明的限制。
具体地说，在该同步编辑窗口中，可以设置一个或者多个路径动画编辑区域，也可以设置一个或者多个视频/音频媒体编辑区域。路径动画编辑区域和/或视频/音频媒体编辑区域的个数取决于用户的需求。
在设置多个视频/音频媒体编辑区域的情况下，可以同时对多个视频媒体或音频媒体进行同步编辑，或者同时对一个或多个视频媒体和一个或多个音频媒体进行同步编辑。
在进行同步编辑处理时，同步编辑器101将其所作的每一步处理结果，即针对不同同步对象的同步信息，实时地送入如图1示出的同步对象数据存储装置102中，同步对象数据存储装置102将实时接收的关于同步对象的同步信息按照一定的格式进行存储。
如图1所示的同步代码生成装置103按照用户的请求，读取同步对象数据存储装置102中存储的同步信息，并据此生成可以进行识别的同步代码，例如HTML代码或EXE可执行代码。
根据本发明的同步编辑装置100还可以包括一个同步对象列表装置105，如图1所示。该同步对象列表装置105提取多媒体页面(未示出)中所有可以进行同步编辑的同步对象，并提供一个同步对象列表窗口。由该同步对象列表装置105在该对象列表窗口中显示前述提取的同步对象的列表，以便供用户在将同步对象输入同步编辑窗口时进行选择。
此外，在该同步对象列表装置105提供的同步对象列表窗口中，允许用户设置/修改各个同步对象的属性，并将同步对象的属性信息写入同步编辑器101。同步编辑器101将这些属性相应地显示在同步编辑窗口中。同步对象列表装置105也读取同步编辑器101中的同步编辑信息，将这些信息进行处理后相应地显示在同步对象列表窗口的属性栏中，为用户改变和浏览每个同步对象的属性提供方便。同步对象列表装置105将同步对象的属性信息存储到同步对象数据存储装置102中。
图6示出了同步对象列表装置105所提供的同步对象列表窗口的一个实施方式。如图6所示，同步对象列表窗口包括一个列表框，它有三个属性列表可视、轨迹颜色和对象，其中的“对象”栏中的文字是对象的名称，用户可以通过下拉框选择进行编辑的同步对象。“轨迹颜色”栏可以显示同步对象在进行同步编辑时使用的轨迹的颜色，“可视”栏表示在同步编辑窗口中该同步对象的显示状态。如选择“可视”，则在同步编辑窗口中显示该同步对象的同步编辑轨迹，否则则不显示该同步对象的同步编辑轨迹。
本发明还可以包括一个预览装置104，如图1所示，其可以根据用户的请求，查看已进行同步编辑的效果。根据用户的请求，同步代码生成装置103读取同步对象数据存储装置102中的同步信息，并据此生成可以进行识别的同步代码，然后将该同步代码输出到预览装置104中供用户对同步编辑的效果进行预览。如果用户预览后，对同步编辑的效果不满意，则可以不保留该同步代码，而由用户重新进行同步编辑，如果用户对同步编辑的效果满意，则可以输出该同步代码。
在多媒体制作中，利用根据本发明的多媒体素材同步编辑装置，可以在一个同步编辑窗口中完成对多个同步对象的同步编辑，并有效实现同步对象在时间和空间上编辑的结合，使得这种同步编辑更加简便、直观，提高了同步编辑的效率。
不脱离本发明的构思和范围可以作出许多其它改变和改型。应当理解，本发明不限于特定的实施方式，本发明的范围由所附权利要求限定。
权利要求
1.一种多媒体素材同步编辑装置，包括同步对象数据存储装置(102)，用于存储同步对象的同步信息；同步代码生成装置(103)，用于读取同步对象数据存储装置(102)中存储的所述同步对象的同步信息，将该同步信息转换成同步代码并输出；其特征在于，还包括一个同步编辑器(101)，用于设定所述同步对象的时间信息和空间信息，并将所设定的时间信息和空间信息进行同步处理，使之成为所述同步信息，而后将所述同步信息存储到所述同步对象数据存储装置(102)中。
2.根据权利要求1所述的多媒体素材同步编辑装置，其中所述同步编辑器(101)提供一个同步编辑窗口。
3.根据权利要求2所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括一个时间点编辑区域。
4.根据权利要求3所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括至少一个路径动画编辑区域，所述至少一个路径动画编辑区域与所述时间点编辑区域一起用于设定将要进行路径动画编辑的所述同步对象的所述时间信息和空间信息。
5.根据权利要求4所述的多媒体素材同步编辑装置，其中所述空间信息是所述同步对象的路径信息，所述时间信息是所述同步对象的控制点与在所述时间点编辑区域中设置的关键时间点的对应关系信息。
6.根据权利要求4所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括至少一个视频/音频媒体同步编辑区域，用于设定将要进行编辑的视频媒体的关键帧与关键时间点的同步关系。
7.根据权利要求4所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括至少一个视频/音频媒体同步编辑区域，用于设定将要进行编辑的音频媒体的关键波形点与关键时间点的同步关系。
8.根据权利要求6所述的多媒体素材同步编辑装置，其中所述视频/音频媒体同步编辑区域用于设定将要进行编辑的音频媒体的关键波形点与关键时间点的同步关系。
9.根据权利要求1所述的多媒体素材同步编辑装置，其中还包括一个预览装置(104)，用于根据所述同步代码生成装置(103)生成的同步代码向用户提供同步效果的预览。
10.根据权利要求1所述的多媒体素材同步编辑装置，其中还包括一个多媒体素材列表装置(105)，用于提供所有可以进行同步编辑的多媒体素材的列表。
11.一种多媒体素材同步编辑装置，包括同步对象数据存储装置(102)，用于存储同步对象的同步信息；同步代码生成装置(103)，用于读取所述同步对象数据存储装置(102)中存储的所述同步对象的所述同步信息，将该同步信息转换成同步代码并输出；其特征在于，还包括一个同步编辑器(101)，用于设定所述同步对象的关键帧和/或关键波形点与关键时间点之间的同步关系，并进行处理，将得到的所述同步信息存储到所述同步对象数据存储装置(102)中。
12.根据权利要求11所述的多媒体素材同步编辑装置，其中所述同步编辑器(101)提供一个同步编辑窗口。
13.根据权利要求12所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括一个时间点编辑区域。
14.根据权利要求12所述的多媒体素材同步编辑装置，其中所述同步编辑窗口包括至少一个视频/音频媒体同步编辑区域。
全文摘要
本发明提供了一种多媒体素材同步编辑装置，包括同步对象数据存储装置(102)，用于存储同步对象的同步信息；同步代码生成装置(103)，用于读取同步对象数据存储装置(102)中存储的同步对象的同步信息，将该同步信息转换成同步代码并输出；以及一个同步编辑器(101)，用于设定同步对象的时间信息和空间信息，并将所设定的时间信息和空间信息进行同步处理，使之成为同步信息，而后将同步信息存储到所述同步对象数据存储装置(102)中。利用本发明的多媒体素材同步编辑装置，可以在一个同步编辑窗口中完成对多个同步对象的同步编辑，并有效实现同步对象在时间和空间上编辑的结合。
文档编号G06F17/00GK1567381SQ03137440
公开日2005年1月19日 申请日期2003年6月20日 优先权日2003年6月20日
发明者贺新生, 杨猛, 刘波 申请人:北京北佳信息系统有限公司