互动式多媒体影音档案整合播放系统的制作方法

专利名称：互动式多媒体影音档案整合播放系统的制作方法
技术领域：
本发明涉及一种影音档案整合系统，尤指一种互动式多媒体影音档案整合 播放系统。
背景技术：
因为现今计算机软件与硬件的技术不断的提升，所能处理的资料与内容也 不断增进，兼容性更大，在译码软件的支持下，几乎所有的多媒体影音档案格 式都能在个人计算机上播放，而无须经过转档后才能播放，然而、随着个人手
持式装置(如数字相机Digital Still Camera、数字摄影机Digital Camcorder or DV、照相手机、个人数字助理Personal Digital Assistant,个人影音娱乐 中心Personal Media Player or PVR、与手持式游戏装置Gaming Device)的 功能也因为硬件与软件的增进，而使得功能越来越强大，多半除了具有原来的 通讯、游戏或行事历等功能之外，更设计成具有影像获取装置，而可以记录声 音、静态影像或是动态影像，然而特别在设置动态影像的时候，为了取得良好 的影音画质，所以原始未经压缩的影音档案十分庞大，并不合乎携带式手持装 置的存储容量限制，因此各厂牌、甚至是各款的手持装置都具备将动态影像压 缩的功能，然而各种作法不一，有些是使用业界共同的格式如MOV、 MPEG-4、 AVI 等，有些则是采用自行研发具有某项格外功能的特定格式，不论是选用单一共 同的影音格式，或是自行开发专有功能的影音播放格式，都直接或间接造成各 款携带式手持装置的影音无法完全兼容的问题，而且如果个人计算机没有安装 该特定专有格式的应用软件时，甚至造成手持装置与个人计算机无法沟通，当 然更无法与其它不同厂牌、不同款式的手持装置分享多媒体影音档案，这种互
不支持的情况，造成多媒体影音档案交流的屏障。
虽然受到便携式多媒体手持装置的软件与硬件限制，无法随意支持分享多媒 体影音档案，但一般针对多媒体影音档案的转换，还是得借助个人计算机上已经 安装的转换软件解决，但这种转换软件还是受限在某种范围内处理少量的多々某体 档案格式转换，无法提供功能良好且超越单纯播放、暂停、快慢播放等简单功能 的多媒体影音系统，更无法提供与使用者互动的互动式多媒体影音系统。
除此之外、某些厂商考虑多媒体影音档案的互相支持便利性，还是选用业 界共有的多媒体影音档案格式，即使该多媒体影音格式仅具有单纯播放与停止 等功能，无法附加上额外的信息与程序代码至多媒体影音档案内，也就无法产 生如互动式影音游戏或是互动式教学等的附加功能，如此、就无法利用互动程 序代码或是额外信息依附于多媒体影音档案，而使得多媒体影音档案可以具有 互动式功能，并且、该多媒体影音档案除了在支持互动式手持装置上可以执行 外，对于不支持互动式手持平台上，也可以进行原本单纯的播放功能，这样便 增进了多媒体影音档案于不同手持平台装置间的相互交流。
再者，通常互动模式的流程是事先设定在附加的互动描述信息或互动程序 代码中，在一定时间内即激活，这种互动的模式，其实无法由使用者主动的激 活，特别在教育性的教学与游戏中，使用者如果可以适时的中断多媒体档案的 播放，就可以在适当时间且及时的得到想要的解说，更方便使用者利用多媒体 档案特性来学习，因此、本发明即为了解决前述问题而提供一种互动式多媒体 影音档案整合播放系统。

发明内容
本发明的目的在于提出一种弹性化的互动式多媒体影音整合播放系统，可 以让不同格式的多媒体档案互相交流，并且附加互动式功能。
除此之外、通过一组预设的功能装置与功能装置检测模块，可以由使用者
主动在适当的时间点切入了解更深度的信息或是更新的资料。
基于以上的发明目的，本案发明提供一种互动式多媒体影音整合播放系统， 包括一互动式媒体档案、 一播放控制模块用以播放该互动式媒体档案、 一输出 装置用以接收该播放控制模块的影音信号、 一功能装置按键、 一功能装置按键 检测模块用以检测功能装置按键的作动而输出一启始信号以及一互动信息解析 模块用以接收启始信号后，并将一互动信息解析后传输给播放控制模块而产生 互动播j文。
基于以上的发明目的，本发明的互动式多媒体影音整合播放系统内，输出 装置为一个液晶显示器。
基于以上的发明目的，所述互动式媒体档案的产生是由一输出装置； 一媒 体档案产生装置； 一档案型态检知装置，用以连接输入装置并检测一媒体档案 格式； 一媒体档案编辑装置，将该数字媒体档案依照该媒体档案格式附加一互 动标记；以及一媒体档案转出装置，连接该媒体档案编辑装置，可输出该互动 式媒体档案。
另外，根据前述的发明目的，本发明另提供一种互动式多媒体影音档案整 合播;改装置，其包括 一输出装置； 一々某体档案产生装置用以产生一标准的媒 体档案； 一档案型态检测装置用以连接该输入装置并检知一媒体档案格式；一 媒体档案编辑装置将该媒体档案依照该媒体档案格式附加一互动信息； 一媒体 档案转出装置，连接该媒体档案编辑装置，可输出一互动式媒体档案，该媒体 档案转出装置更包括有 一专属互动式媒体档案组合器，是将该互动式媒体档 案转换成一专属互动式多媒体格式；以及一附加互动描述媒体档案组合器是将 该互动式媒体档案转换成一通用互动式媒体格式并附加一互动描述。另外、尚 有一播放控制模块用以播放该互动式媒体档案； 一输出装置，用以接收该播放 控制才莫块的影音信号； 一功能装置,； 一功能装置M检测模块，用以检测 该功能装置按键的作动而输出一启始信号；以及一互动信息解析模块，用以接
收启始信号后，将一互动信息解析后传输给该播放控制模块而产生互动播放。
根据上述内容，其中所述的互动信息为一选单、 一递归点、 一淡入淡出指 令或为一选单。
除此之外，的述互动信息包括有一影片时间段落与 一互动关系说明。 综上所述，本发明可利用各影音档案的整合与分段标注，使得不同平台的 手持式多媒体装置，可以互相分享不同格式的多媒体影音档案，其是利用各类 型的多媒体手持装置的影音撷取功能，模块化的设计，将多样化的多媒体影音 档案建置成一个互动式多媒体平台，使得各项手持式装置可以互动式的播放整 合后的多媒体影音档案，并且在设定的功能键被按下时，即激活互动模式。


图1为本发明与便携式装置连接示意图2为本发明的互动式多媒体档案流程示意图3为本发明的互动式多媒体影音档案整合播放系统的档案整合方块示意
图4A为本发明的互动式多媒体影音档案格式的原影音档案整合后的互动档 案格式；
图4B为本发明的互动式多媒体影音档案格式的专属互动档案格式；
图4C为本案发明的互动式多媒体影音档案格式的标准影音档案附加互动指
令描述的影音档案格式；
图5A为本发明的互动式多媒体影音档案格式的内插互动式标注信息； 图5B为本发明的互动式多媒体影音档案格式的附加互动式描述信息； 图5C为本发明的互动式多媒体影音档案格式的附加互动式指令信息； 图6为本发明的互动式多媒体影音档案播放系统的功能键激活描述解析模
块示意流程图；以及
图7为本发明的互动式多媒体影音档案播放系统应用于一教学导览多媒体 系统的播放流程图。
11:数字相枳i12:多媒体播放机
13:数字随身听14:数字摄录机
15:互动式多媒体整合系统16:互动式多4某体整合装置
17:数字相机18:手持式游戏机
21:手持装置22:档案格式认知单元
23:互动式多^f某体整合系统装置24:附加互动指令档案
25: IMIS档案26:专属互动式档案
31:互动式多媒体整合系统装置32:输入连接器
321:有线传输322:无线传输
33:格式辨识器34:分段编辑器
35:档案转换器351:特定影音格式器
352:格式附加器36:输出连接器
41: AVI格式42: MPEG-4格式
43:互动标记44:互动式多媒体影音格式
45:互动描述信息46: AVI影音格式
47:互动指令信息51:档案格式
照 败53:第二递归
54:渐出55:中断许可
56:影片时间点57:互动特效
58:标注591:互动指令码
592:影片时间分段点593:互动特效指示区
61:影音档案62:播放控制模块
63:影像输出装置64:解析才莫块
65:功能皿检测模块 71:影片介绍 73:第二段影音内容 75:中断信号输入 77:第一次选单 78:第二次选单 79:第三次选单 792:第三层次选单 794:第二研究计画 80:返回
66:功能,
72:第一段影音内容
74:结束影片播放
76:选单
771:影便说明
781:教学影片
791:研究计画表列与说明
793:第一研究计画
795:第三研究计画
具体实施例方式
本案发明的实施例详细描述如下。然而，除所描述的实施例外，本发明亦 可广泛应用在其它实施例上，且本发明的范围不受限定，而以权利要求的范围 为准。
再者，为提供更清楚的描述及更易理解本发明，图式内容各部分并没有依 照其相对尺寸绘图，某些尺寸与其它相关尺度相比已经被夸张；不相关的细节 部分也未完全绘出，求图式的简洁。
本案发明的示意图如图1所示，即数字相机ll (Digital Still Camera, DSC)、携带式多媒体播放机12 (Personal Media Player, PMP )、数字随身听 13 (MPEG-3， MP3)与数字摄录机14 (Digital Video Camcorder, DV)等的影 音输入设备将所储存的不同格式的影音档案通过电缆(Cable)、 USB连接线、存 储卡(CF、 SD、 MMC等)、无线网络(BlueTooth、 102. llabg )等将影音档案转 入一个互动式多i某体整合系统15 (Interactive Multimedia Integration System,下称IMIS)，经由该互动式多媒体整合系统15 (IMIS)的处理后，例如
加上影音注记或是互动式程序代码后，在依设备需求输出到不同的便携式手持
多媒体装置上观看，如另一台数字相机17、手持式游戏机18或是另一台可播放 的互动式多i某体整合系统装置16，其传输的方式也可以经由电缆、USB连接线、 存储卡、无线网络等将影音档案转入，除此之外，该互动式多々某体整合系统15
且，也可配合一个输出辨识接口，来辨别输出的设备，即可以直接转换支持的 影音档案到其它便携式多媒体播放装置上，例如辨识外接输出设备为支持互动 式多^^某体影音平台时，即输出互动式多媒体影音档案，如果检测外接输出设备 不支持互动式多媒体影音平台时，即输出单纯附加互动式程序代码的业界共享 影音档案格式，这样该不支持互动式功能的设备，也可以做最&出的影音播放， 而当该影音档案转出至支持互动式功能的平台时，也可就所附加的互动式程序 代码进行互动式操作与播放，而该互动式多媒体整合系统15 (IMIS)可以为一个 开发为专用的互动式多々某体整合系统，其具有专用的硬件与所开发的软件配合， 或是利用现有的个人计算机硬件达成。
再请参考图2，图中所示为系统流程方块示意图，说明本发明系统装置的方 块流程，首先、便携式手持装置21如数字相机、数字音乐随身听与数字摄影机 等连接于互动式多媒体整合系统装置23时，需经由一个档案格式认知单元22 确认所连接的的手持装置21的厂牌与型号等资料，于参考所支持装置的对比表 后，即可以使用适当的传输模式接收该手持装置21的多媒体影音档案，经由使 用者附加互动式指令于互动式多媒体整合系统装置23后，可输出至少三种多媒 体影音档案，例如连接一般未支持互动功能的手持装置时，直接在一般影音档 案后面附加互动式指令24即可，而输出至另一个互动式多媒体整合系统装置23 时，则以IMIS格式25直接输出，而连接于一个支持互动式指令的手持装置时， 则以定义的互动式多媒体影音档案26输出，最后经由输出连接器36输出至一 外接播放设备。
请参考图3，本发明的整合技术可由图3 了解其内容，即互动式多媒体整合 系统装置31具有一个输入连接器32、 一个档案格式辨识器33、 一个分段编辑 器34、 一个输出档案转换器35以及一个输出连接器36，其中该输入连接器32 用以连接一个多媒体手持装置，可利用有线321或无线322的方式为之，该档 案辨识器33是用以辨识该多媒体手持装置的档案格式，并经由该输入连接器 32传输档案至分段编辑器34，该分段编辑器34，可以通过多个连接的输入装 置内的档案或是通过储存在媒体储存器37 (如硬盘等)内的多媒体档案，而在各 段多媒体影音之间插入互动式指令或者是宣告，如淡入、淡出、选单、跳街、 影片编号、中断许可、中断不许可、外部信号要求中断的作为等标记，达成互 动式多媒体影音的要求，接着该原始多媒体档案，可以通过输出档案转换器35 内的特定互动影音格式器351或是传统影音格式附加器352而输出互动是多媒 体影音档案，其中该特定互动影音格式器351的影音格式可以由业界共同制订， 而传统影音格式附加器352，则是在业界已经制定的一般多媒体影音文件的后面 附加上多媒体的宣告与指令标记，后者作法将使得互动式功能被限制。
请参阅图4A,显示一种通用IMIS多媒体影音格式，即把不同格式的多媒体 影音档案在不改变其原本影音格式下如AVI格式41、 MPEG-4格式42等，于其 中嵌入互动标记(MARK) 43，这样可以为各种影音格式间的播放处理，设定不 同的互动模式，该互动标记43内容可如图5A所示，可标注此段影音档案为档 案格式(File Format) 51、第一递归(Loop A3) 52、第二递归(N4Loop) 53、 渐出(Fade Out) 54、中断许可(Interruption Allowed) 55或是选单等等， 配合这些互动标注，可以让不同格式的影音格式产生不同的播放效果，如跳跃 到特别区块进行影音播放，或是在某一处进行递归播放，亦或是进行选单选择 递归段的影片、或是直接于选单后选择而跳跃到定义的影音区块段。
再请参考图4B，是将原始的IMIS多媒体影音档案转换成一个特定的IMIS 互动式多媒体影音格式，此时已经变^^来的多媒体影音格式，如改变AVI、M0V
与MPEG-4等档案格式，而成为一个专属为互动式多媒体整合系统15所播放的 专属IMIS影音格式44，这个格式的后面可附加互动描述(IMIS SCRIPT) 45， 用以提供制作者的资料、整合的影音来源、全长、各时间的做动(如渐出、渐 入、跳跃、递归、选单等等)、中断起点、中断许可、需要的设备或是韧体编号 等信息，可参考如图5B，可以依照影片中的时间点划分，设定各时间点的互动 方式、播放方式以及中断许可开始与结束点等，可依影片时间点56划分，分段 记录其互动特效57，并提供标注部分58,供解析后面提到的解析;漠块64 (请参 考图6 )解译互动模式展现方式，这个IMIS多媒体影音格式44与互动描述45 整合后即为IMIS专属多々某体影音档案。
当然、为了在一般不支持互动功能的多媒体影音播放装置上也可播放，如 DVD播放机、手机、数字相机等，不论是一般的IMIS多媒体档案或是专属的IMIS 多媒体档案皆可转换为业界通用的单一多媒体影音格式，如AVI、 M0V、 MPEG-4 等，可参考图4C，这是以AVI影音格式46为例，后面可附加转换后的互动指令 (C0DE)47，该转换描述47的内容可进一步参考图5C，最简单的作法可区分为互 动指令码591 (可为数字或是文字代表，图是以数字代表)，影片时间分段点592 (Time Frame)与互动特效指示区593,该互动指令码591是说明该码在某一时 间分段点592，是用以做出何种互动功能(如淡入渐出、深色渐入、跳跃至特定 互动指令码、递归于特定互动指令码、选单开启、中断起点、中断许可、中断 做动等等)，可用以指令互动功能也可用以分段，并依照而指示区593的细部记 载互动模式的展现方法，如模糊、递归编号、跳跃编号、第一选单内容、第二 选单内容等等，当然此等互动指令47并非所有影音播放装置都可以进行解读， 不过当影音播放装置无法解读时，也可以进行单纯的影音播放，因为前段影音 格式"为业界通用影音格式AVI，所以可以增加互动式多媒体影音档案的互通 交流性。
请参考图6，此图说明本案于使用者主动中断插入要求时的播放流程图，首
先、 一个影音串流档案61被送到播放控制模块62内，然后将播放内容的影音 信号传送到影像输出装置63 (如LCD、 Plasma Display或Projector等)播放， 但当影音阅听者想要进一步了解时，可以通过预先设置的装置功能按键进行中 断询问需求，即阅听者按下装置功能按键66, —个功能按键检测模块65将检测 某一个已设定的功能键被压下，即送一个检测信号到互动描述解析模块64内， 该互动描述解析模块64可令播放控制模块62依照影音档案内互动描述指令产 生互动的影音播放，或是依照互动描述指令内的设定就目前播放的影音段落进 行深度的解说。
这种在影音串流档案末端增加互动描述信息，是记录该档案内的各片段说 明，包含总片段数、各片段起使播放时间、结束播放时间、起使播放影片格数 (Frame )、结束播放影片格数、该片段的播放时间、与支持该播放功能的装置 对应案件所应执行的功能(如播放指定片段、重复播放、停止播放)等，当使 用者使用支持该播放功能的装置播放该档案时，即可经由装置上的按键与互动 描述信息记录信息内容，使得播放过程达到互动效果。除此之外、为达到功能， 支持播放此功能的装置，其韧体程序需要额外新增该互动描述解析模块，以分 析含有此互动描述信息的影音档案内容，同时于适当时间(如开始与结束的影
音格数等)暂停或重复播放目前的片段内容，等待使用者输入功能案件，以继 续进行档案内容动作。而且、该功能按键检测于侦测到按键动作时，需同时与 互动描述解析才莫块相互传递信息，告知该互动描述解析模块那个既定的功能按 键被执行，该互动描述解析模块则比对取得的互动描述信息内容，开始播放此 新的影片片段内容，若符合功能M所需执行播放的片段资率超过一段，则以 随机数方式，随机指定某符合的片段进行播放。
请参考图7，所显示的是另一个实施例，特别是用在教育用途上的影音导览， 首先、播放影片介绍71,然后iiX播放程序进行播放第一段影音内容72,接着 进行播放第二段影音内容73，如果没有第三段影音内容，则结束影片播放74，
14
而当影音阅听者按下装置功能键时， 一个中断信号输入75将会激活描述解析模 块，进行互动式的深度教学，此时，记录下此时影片片段数，并从播放第一段 影音内容72处，iiA选单76，依照互动描述的既定模式，可以同时跳出数个次 选单(如77、 78、 79)，此时如果阅听者选择第一次选单77，则可ii^历史事 件影片说明771，历史事件影片结束后则返回80，即回到前述所记录下的第一 段影音内容71的影音片段数，或是回到上一层的选单，另外、如果阅听人选择 的是第二次选单78，则可itA深度教学影片781，播放完毕后同样进入返回程 序方块80，即进入记录的影片片段或回上一层选单，又如果阅听人选择的是第 三次选单79,则i^7v目前研究计画表列与说明791，接着进入第三层次选单792， 分别是第一研究计画说明793、第二研究计画说明794与第三研究计画说明795， 所选择的互动影片播放完毕后，最后也进入所记录的影片片段或回上一层选单， 如此可以完成一个深度且具有互动式教学导览多媒体影音档案整合播放系统， 当然互动式整合内容结构，可以依照设计者通过互动描述或互动指令的选用而 达成不同深度、多样化、实时性与游戏化的目的，更可以通过巧妙的安排而完 成一个简单的游戏，如变化选单为主动式的猜拳游戏等。
而现今影音档案多为串流式格式，其影音数据库可为光盘片或是通过封包 网络的远程数据库，所以影片整合时，可以增加网络检测模块，以含括远程的 数据库，达成实时更新的互动式多媒体影音整合拨放系统，非常适合用在具有 实时新闻性或是发展历程长需长期更新的多媒体资料信息检索与说明上面。
综上所述，本发明可提供使用者播放多媒体影音档案时，除了播放、暂停 播放、停止播放、快速播放、慢速播放、倒转等标准播放功能外，尚可利用支 持各项专属、原始的IMIS档案、附加描述的标准影音档案等的播放装置，产生 互动式功能，如猜拳、游戏或是教学等功能，而在不支持专属、原始的IMIS档 案、附加描述的标准影音档案的标准播放装置中，也可以不理会附加描述而直 接播放标准影音档案，如此增进了多媒体的多样性与交流程度。
权利要求
1.一互动式多媒体影音档案整合播放系统，其特征在于，包括一互动式媒体档案；一播放控制模块，用以播放互动式媒体档案；一输出装置，用以接收播放控制模块的影音信号；一功能装置按键；一功能装置按键检测模块，用以检测功能装置按键的作动而输出一启始信号；以及一互动信息解析模块，用以接收启始信号后，将一互动信息解析后传输给播放控制模块而产生互动播放。
2. 如权利要求1所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述输出装置为一个液晶显示器。
3. 如权利要求l所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动式媒体档案由如下装置产生一输入装置； 一媒体档案产生装置；一档案型态检测装置，用以连接输入装置并检测一媒体档案格式， 一媒体档案编辑装置，将数字媒体档案依照媒体档案格式附加一互动.标记，以及一媒体档案转出装置，连接々某体档案编辑装置，可输出互动式媒体档案。
4. 如权利要求3所述的互动式多媒体影音档案整合播放系统，其特征在于， 所述媒体档案转出装置更包括，一专属互动式媒体档案组合器，是将互动式媒体档案转换成一专属互动式 多媒体格式， 一数字媒体档案播放装置必须支持该专属互动式媒体格式才可播 放，以及 一附加互动描述媒体档案組合器，是将互动式媒体档案转换成一通用互动 式媒体格式并附加一互动描述。
5. 如权利要求l所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息为一选单。
6. 如权利要求l所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息为一递归点。
7. 如权利要求l所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息为一淡入淡出指令。
8. 如权利要求4所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动描述为一选单。
9. 如权利要求4所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动描述包括有一影片时间段落与一互动关系说明。
10. —互动式多媒体影音档案整合播放系统，其特征在于，包括 一输入装置；一士某体档案产生装置，用以产生一标准的媒体档案； 一档案型态检测装置，用以连接输入装置并检测一媒体档案格式； 一媒体档案编辑装置，将媒体档案依照媒体档案格式附加一互动信息； 一媒体档案转出装置，连接媒体档案编辑装置，可输出一互动式媒体档案, 该媒体档案转出装置更包括 一专属互动式媒体档案组合器，是将互动式媒体 档案转换成一专属互动式多4某体格式，以及一附加互动描述媒体档案组合器， 是将互动式媒体档案转换成一通用互动式媒体格式并附加一互动描述； 一播放控制模块，用以播放互动式媒体档案； 一影像输出装置，用以接收播放控制模块的影音信号； 一功能装置按键；一功能装置按键检测模块，用以检测功能装置按键的作动而输出一启始信 号；以及一互动信息解析模块，用以接收启始信号后，将一互动信息解析后传输给 播放控制模块而产生互动播放。
11. 如权利要求10所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息为一选单。
12. 如权利要求IO所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息为一递归点。
13. 如权利要求10所述的互动式多J(某体影音档案整合播放系统，其特征在 于，所述互动信息为一淡入淡出指令。
14. 如权利要求10所述的互动式多々某体影音档案整合播放系统，其特征在 于，所述互动信息为一选单。
15. 如权利要求10所述的互动式多媒体影音档案整合播放系统，其特征在 于，所述互动信息包括有一影片时间段落与一互动关系说明。
全文摘要
本发明为一种交互式多媒体影音档案整合播放系统，利用各影音档案的整合与分段标注，使得不同平台的手持装置，可以互相分享不同格式的多媒体影音档案，特别利用附加交互式标注与描述，以及利用不同影音格式之间加注交互式标记的方式，使得多媒体影音在播放时可参考该标注或描述，而产生交互式影音播放功能，并且在功能键被按下时即激活标注内的互动模式。
文档编号H04N7/14GK101106694SQ20061010188
公开日2008年1月16日 申请日期2006年7月12日 优先权日2006年7月12日
发明者李克明, 邹名志 申请人:鸿友科技股份有限公司