影音同步控制方法、影音同步控制系统及相关的电子装置与流程

文档序号:11628133阅读:175来源:国知局
本发明是有关于一种控制方法、控制系统以及相关的电子装置,且特别是有关于一种影音同步控制方法、影音同步控制系统以及相关的电子装置。
背景技术
::随着科技的进步,通过预录的影片进行教学的方式已经相当地普及。举例而言,在学习乐器时,教学影片的内容通常是由老师讲解相关的技法与知识,并且实际地以不同的乐曲示范乐器的演奏方式。学生在观看教学影片的同时,可以自行对照练习,藉此达到教学的效果。值得注意的是,教学影片不只运用于乐器学习上,还可以运用在机械操作或者是各类电子产品的使用指南之中。然而,一边观看教学影片,一边进行乐器演奏、机械操作或者是电子产品使用,常发生对照不易或对照错误的问题,造成乐器学习上的挫折或者是错误使用机械或电子产品等后果。另一方面,影片以及特定装置的动作若是不同步,则会造成不协调的视听效果。因此,如何提供一个较佳的影音同步控制方法与影音同步控制系统,藉以促进操作设备与影片间的联系性,仍是本领域技术人员努力的目标之一。技术实现要素:本发明提供一种影音同步控制方法、影音同步控制系统以及相关的电子装置,在播放影像文件的同时,解析是否有控制指令的存在,并且对应输出控制指令至操作设备以同步于影像文件而控制操作设备,藉以提升操作设备与影像文件间的联系性。本发明的一实施例提出一种影音同步控制方法,包括下列步骤。取得对应一个操作设备的影像文件,并且播放前述影像文件。对应于所播放的影像文件的目前影像画面,判断是否存在控制指令。若对应目前影像画面而存在 控制指令,则取得控制指令,并且输出控制指令至操作设备以控制操作设备。本发明的另一实施例提出一种影音同步控制系统。影音同步控制系统包括影音数据库、操作设备以及主装置。主装置包括传输接口、显示单元以及处理单元。传输接口耦接操作设备以及影音数据库,并且主装置利用影音数据库以取得对应操作设备的影像文件。显示单元播放影像文件。处理单元,耦接传输接口以及显示单元,对应于所播放的影像文件的目前影像画面,判断是否存在控制指令。若对应目前影像画面而存在控制指令,则处理单元取得控制指令,并且通过传输接口输出控制指令至操作设备以控制操作设备。本发明的又一实施例提出一种电子装置,适于作为影音同步控制系统的主装置。电子装置包括传输接口、显示单元以及处理单元。传输接口耦接操作设备以及影音数据库,并且电子装置利用影音数据库以取得对应操作设备的影像文件。显示单元播放影像文件。处理单元耦接传输接口以及显示单元。对应于所播放的影像文件的目前影像画面,处理单元判断是否存在控制指令。若对应目前影像画面而存在控制指令,则处理单元取得控制指令,并且通过传输接口输出控制指令至操作设备以控制操作设备。基于上述,本发明的实施例所提供的影音同步控制方法、影音同步控制系统以及相关的电子装置,在播放操作设备的教学影像文件的同时,进一步地解析是否存在对应前述影像文件的控制指令。更详细而言,若控制指令确实存在,则对应于影像文件的播放状况,同步地传输控制指令至操作设备。操作设备则依据所接收的控制指令来作动。藉此,通过操作设备以及影像文件的配合,可以提升操作设备与影像文件间的联系性。为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合附图作详细说明如下。附图说明图1是依照本发明一实施例的影音同步控制系统的示意图;图2是依照本发明一实施例的操作设备的示意图;图3是依照本发明一实施例的操作设备的示意图;图4是依照本发明一实施例的影音同步控制方法的流程图;图5是依据本发明一实施例的控制指令的取得流程图;图6是依据本发明一实施例的内嵌于影像画面的控制指令的示意图;图7是依据本发明另一实施例的控制指令的取得流程图;图8是依据本发明一实施例的导引信息的示意图;图9是依照本发明另一实施例的取得影像文件的流程图。附图标记说明:10:影音同步控制系统;100:主装置;110:传输接口;120:显示单元;130:处理单元;db:影音数据库;oi-100:内置部;oi-200:动作部;oi-300:声光部;oi:操作设备;op:操作部;ia:指示装置;p:像素;cvf:目前影像画面;ci:控制指令;cip:指令片段;s310、s312、s320、s330、s332、s334、s340、s342、s350:影音同步控制方法的步骤;s301、s303、s305:取得影像文件的步骤。具体实施方式本发明实施例所提出的影音同步控制方法、影音同步控制系统以及相关的电子装置,在播放影像文件(imagefile)时,进一步地判断是否具有与多张影像画面相对应的控制指令,而控制指令例如是内嵌于影像画面或者是另外存在一个控制指令文件。在播放影像文件时,当所显示的目前影像画面有对 应的控制指令时,则输出控制指令至操作设备,而操作设备则依据所接收的控制指令作动。图1是依照本发明一实施例的影音同步控制系统的示意图。参照图1,影音同步控制系统10包括影音数据库db、操作设备oi以及主装置100。影音数据库db储存多个影像文件,并且前述影像文件分别是对应不同种类的操作设备oi的教学影像文件。具体而言,影音数据库db包括网络影音平台或用于储存影音数据的服务器。影音数据库db的影像文件可直接下载,或是以流格式(streaming)提供给其他装置。影像文件可以是提供平面影像、立体影像或全息投影等不同类型影像的影像文件。操作设备oi例如是乐器、机械产品或者是电子产品。更详细而言,操作设备oi例如是电子琴、电子鼓、电钢琴、电吉他或者是其它种类的电子乐器。另一方面,操作设备oi例如是非电子形式的传统乐器。另一实施例中,操作设备oi例如是娱乐用的机器人。在其它实施例中,操作设备oi还例如是数码相机、数字家电、娱乐用的电子产品或者是其它种类的电子产品,但本发明不限于此。在本发明一实施例中,操作设备oi还包括多个操作部以及对应前述操作部所分别设置的多个指示装置。图2是依照本发明一实施例的操作设备的示意图。请参照图2,当操作设备oi例如为电子琴时,电子琴的多个琴键即为操作部op,而指示装置ia则例如是对应琴键所设置的多个指示灯。在本发明的其它实施例中,操作设备oi的操作部op与指示装置ia还可以是整合于一体。以前述电子琴的范例而言,琴键可以与指示灯整合为一体,使得琴键本体具有发出指示光的功能。值得注意的是,操作部op以及指示装置ia随操作设备oi的种类而为不同的构件。举例而言,若操作设备oi为电子鼓,则操作部op例如是电子鼓的各个敲击面,而指示装置ia即为对应前述敲击面所设置的指示灯。总和来说,当操作设备oi为电子乐器或非电子类型的传统乐器时,指示装置ia例如为对应各类型乐器的操作部op所设置的指示灯,而指示灯由发光二极体(lightemittingdiode;led)或其它类型的发光单元所构成。另一方面,指示装置ia还例如包括一个以上的显示屏幕,其例如是液晶显示器(liquidcrystaldisplay;lcd)或其它类型的显示屏幕,内建于操作设备oi或外接至操作设备oi。然而,值得注意的是,操作设备oi的指示装置ia并不限于前述。在另 一个例子中,若操作设备oi为数码相机,则操作部op例如是数码相机的按键以及触控面板,而指示装置ia即为对应前述按键以及触控面板所设置的指示灯与背光源。在本发明又一实施例中,操作设备oi也可以是不具备前述的指示装置ia与操作部op。图3是依照本发明一实施例的操作设备的示意图。请参照图3,操作设备oi例如是机器人。前述机器人适用于娱乐大众,但本发明不以此为限。在本实施例中,操作设备oi具有内置部oi-100、动作部oi-200以及声光部oi-300。内置部oi-100耦接至动作部oi-200与声光部oi-300。内置部oi-100例如是包括传输接口、处理单元等元件。动作部oi-200例如为机器人的四肢,而声光部oi-300例如为机器人上的灯饰以及扬声器。具体而言,动作部oi-200以及声光部oi-300基于内置部oi-100的控制而作动、闪光或播放音效。参照图1,主装置100包括传输接口110、显示单元120以及处理单元130。在本实施例中,主装置100独立于影音数据库db以及操作设备oi外,并且例如是平板电脑、智能手机、电脑等电子装置。然而,在本发明另一实施例中,主装置100也可以与影音数据库db以及操作设备oi整合于一体,并且是以操作设备oi作为主体。在本发明另一实施例中,主装置100也可以仅与操作设备oi整合于一体,而影音数据库db独立于主装置100与操作设备oi之外。传输接口110以有线或无线的方式分别耦接至操作设备oi以及影音数据库db。详细而言,传输接口110例如是支持蓝芽(bluetooth)、wifi、全球互通微波接入(wimax)、近场通信(nearfieldcommunication;nfc)、长期演进技术(lte)等各种无线通信标准的无线传输接口。在其它实施例中,传输接口110还包括通过非对称性数字客户回路(asymmetricdigitalsubscriberline;adsl)、电缆数据机(cablemodem)等连线的有线传输接口。显示单元120例如是液晶显示器(lcd)、发光二极体(led)显示器等类型的显示单元,用以显示影像文件。处理单元130耦接于传输接口110以及显示单元120,其例如是中央处理单元(centralprocessingunit;cpu),或是其他可程序化的一般用途或特殊用途的微处理器(microprocessor)、数字信号处理器(digitalsignalprocessor;dsp)、可程序化控制器或类似元件 或上述元件的组合。图4是依照本发明一实施例的影音同步控制方法的流程图。图4所示的影音同步控制方法,适用于图1所示的影音同步控制系统,但本发明不以此为限。参照图1与图4,在影音同步控制方法中,通过传输接口110以及处理单元130等元件的协助,主装置100首先取得对应操作设备oi的影像文件(步骤s310)。更详细而言,影像文件例如为操作设备oi的学习教学影像、使用教学影像或其他对应的影像,并且影像文件例如是储存于影音数据库db,又或者是由影音数据库db中的原始教学影像进一步处理而取得,但本发明不限于此。接着,由主装置100的显示单元120播放影像文件(步骤s320)。值得注意的是,若操作设备oi具有显示屏幕类型的指示装置ia,则前述影像文件也可以是由显示屏幕类型的指示装置ia所播放。一般而言,影像文件是由多张连续影像画面所组成。因此,在播放影像文件的过程中,对应于所播放影像文件的一张目前影像画面,由处理单元130判断是否存在控制指令(步骤s330)。更具体而言,在播放影像文件的过程中,对于目前播放于显示单元120的影像画面,或者是对于将要播放于显示单元120的影像画面,处理单元130会判断是否存在有对应的控制指令。若对应前述情况下的目前影像画面而不存在有控制指令,则影音同步控制方法返回前述步骤s320并且由显示单元120继续播放影像文件。然而,若对应前述情况下的目前影像画面而存在控制指令,则处理单元130进一步地取得控制指令(步骤s340)。如同前述,主装置100取得并利用控制指令来控制操作设备。在本发明一实施例中,当操作设备oi为包括多个操作部op以及对应操作部op的多个指示装置ia的操作设备时,操作设备oi更依据所接收的控制指令,配合显示单元120所显示的目前影像画面,由指示装置ia传达导引讯息。具体而言,在前述实施例中,操作设备oi例如是电子琴、电子鼓、电钢琴、电吉他等电子乐器,或者是钢琴、吉他等非电子类的传统乐器,又或者是数码相机、数字家电等可被操作的电子产品。参照图2,以电子琴作为操作设备oi为例,并假设作为操作部op的琴键共有88个,而每一个琴键附有一个可显示多色的指示灯作为指示装置ia。此时,控制指令例如是由8比特(bit)的主要指令以及88个2比特的操作部数 据所组成,而每一个操作部数据对应于一个琴键(操作部op)。主要指令用来指示操作设备oi的各项硬体设定。以电子琴为例,例如是电子琴的整体音量、电源开关、指示灯的颜色、伴奏类型等等。另一方面,操作部数据则用来指示琴键的按压力量以及指示灯的开、关等。基于前述,在此例之中,控制指令共需要23个字节(byte)的储存空间。在本发明另一实施例中,操作设备oi为图3所示的机器人时,操作设备oi的内置部oi-100接收控制指令,然后配合显示单元120所显示的目前影像画面,由内置部oi-100控制动作部oi-200与声光部oi-300,使得操作设备oi动作、闪光或发出音效。控制指令由不同比特长度的片段组成,并且每个片段分别对应至不同的动作部oi-200与声光部oi-300。内置部oi-100依据每个指令片段来分别控制动作部oi-200与声光部oi-300。图5是依据本发明一实施例的控制指令的取得流程图。图6是依据本发明一实施例的内嵌于影像画面的控制指令的示意图。参照图1、图4、图5与图6,在本实施例中,控制指令ci主要是内嵌于影像画面之中。因此,在显示单元120播放影像文件时(步骤s320),处理单元130首先判断目前影像画面是否嵌入控制指令(步骤s332),并且若目前影像画面确实嵌入控制指令,则处理单元130由目前影像画面获取控制指令(步骤s342)。一般而言,影像文件每秒通常是具有30个或60个影像画面,而在红-绿-蓝(rgb)色彩系统中,每一张影像画面的一个像素通常占用3个字节的空间来储存对应的影像数据片段,但本发明不限定于此。在其他实施例中,影像画面还可以是定义在色调-饱和度-明度(hsv)色彩系统、色相-饱和度-亮度(hsl)色彩系统、明亮度-色度-浓度(yuv)色彩系统或其他色彩系统中,并且一张影像画面的一个像素占据来储存影像数据片段的储存空间随着所定义的色彩系统有所不同。因此,以红-绿-蓝色彩系统为例,如图6所示,对于目前播放或将要播放的影像画面cvf而言,控制指令ci可以通过取代部分像素p的方式来内嵌于影像画面cfv之中。举例而言,若控制指令ci为23个字节的大小,则至少需要牺牲8个像素p的影像数据片段,而将控制指令的多个指令片段cip分别写入至前述像素p。换言之,前述像素p所对应的数据片段改为对应至控制指令的多个指令片段cip。为了避免对目前影像画面cfv造成干扰,用以嵌入指令片段cip的像素p可以是位于目前影像画面cfv的 四角。处理单元130通过重组前述像素p所储存的多个指令片段cip来取得完整的控制指令ci。然而,控制指令并不一定内嵌于影像画面之中。在本发明的另一实施例中,影像文件的所有控制指令例如是收集于一个控制指令文件中,但不限于此。更详细而言,控制指令文件包括前述控制指令以及每一个控制指令所对应的传输时间点。图7是依据本发明另一实施例的控制指令的取得流程图。参照图1、图4与图7,主装置100首先利用传输接口110来取得对应操作设备oi的影像文件以及控制指令文件(步骤s312)。接着,显示单元120播放影像文件(步骤s320)。在播放影像文件时,处理单元130依据所播放的目前影像画面在影像文件的播放时间轴上所位于的播放时间点,由控制指令文件中所记载的多个传输时间点来判断目前影像画面是否存在对应的控制指令(步骤s334)。换言之,处理单元130是在影像文件的播放时间轴上,由目前影像画面的播放时间点来比对多个控制指令的传输时间点。若有相符的传输时间点,则代表对应目前影像画面而存在有控制指令。此时,处理单元130由控制指令文件中取得前述控制指令(步骤s340)。接着,在目前影像画面的播放时期,处理单元130会传输对应的控制指令至操作设备oi。值得注意的是,在本发明其他实施例中,影像文件的所有控制指令还可以是储存于指令表(table)、特定的记忆体的区块或是特定的存储装置。每一个控制指令例如是对应一个传输时间点。处理单元130在影像文件的播放时间轴上,由目前影像画面的播放时间点来比对多个控制指令的传输时间点,藉以从指令表、特定的记忆体的区块或是特定的存储装置取得对应的控制指令。重新参照图4,在取得控制指令(步骤s340)后,处理单元130还输出控制指令至操作设备oi(步骤s350)。操作设备oi接收控制指令后,依据控制指令,配合目前影像画面来进行作动。在本发明一实施例中,操作设备oi接收控制指令后,依据控制指令,配合目前影像画面而由多个指示装置ia来传达导引信息。图8是依据本发明一实施例的导引信息的示意图。以图2所示的电子琴作为操作设备oi,在图8中,当显示单元120所播放的目前影像画面为按压多个琴键之一时,操作设备oi同步地依据控制指令而使相同位置的琴键(操作部op)的指示灯(指示装 置ia)进行闪烁。通过闪烁指示灯来提示所应按压的琴键,影音同步控制系统10可以搭配目前影像画面的进度而引导电子琴的学习流程,但本发明不以此为限。在本发明的另一实施例中,当显示单元120所播放的目前影像画面为按压多个琴键之一时,操作设备oi则例如是同步地依据控制指令而播放对应的琴键的音声,藉以提示所应按压的琴键。在本发明的又一实施例中,当显示单元120所播放的目前影像画面为按压多个琴键之一时,操作设备oi则例如是同步地依据控制指令而闪烁指示灯且播放对应的琴键的音声。明显地,在前述实施例中,导引信息例如是指示灯的闪烁以及琴键的音声。在输出控制指令至操作设备oi后,显示单元120仍持续影音文件的播放(步骤s320),并且处理单元130重复地检查后续播放的影像画面是否具有对应的控制指令来决定是否进行控制指令的抽取以及传输,直到影像文件播毕。值得注意的是,在本发明另一实施例中,当操作设备oi为机器人时,则在接收控制指令后,电子机器人可以是随着接收的控制指令来作动,并且搭配同步播放的影像文件案产生娱乐效果。具体而言,操作设备oi的内置部oi-100接收控制指令后,对应地控制动作部oi-200与声光部oi-300来进行动作、闪光或发出音效。在前述数个实施例中,操作设备oi的影像文件例如是具有对应的多个控制指令。在本发明中,教师、指导者或设计者等较为特殊的使用者还可以通过操作前述操作设备oi来逆向地产生控制指令。具体而言,主装置100可以由影音数据库db或其它来源接收不具有控制指令以及相关控制指令文件的原始教学影像,然后自行产生控制指令或控制指令文件。图9是依照本发明另一实施例的取得影像文件的流程图。参照图9,主装置100利用传输接口100而例如是由影音数据库db接收对应操作设备oi的原始影像(步骤s301)。处理单元130产生对应于原始影像的多个控制指令(步骤s303),并且分别内嵌控制指令于对应的原始影像的多个影像画面之中以产生影像文件(步骤s305)。如此一来,所取得影像文件便内嵌有控制指令。以下将以一范例实施例介绍影音同步控制系统10如何基于前述的特殊使用者在操作设备oi的回馈来产生对应影像文件的控制指令。在本发明一实施例中,显示单元120播放原始影像后,主装置100通过传输接口110接收由操作设备oi所回传的操作信息。以图2所示的电子琴(操作设备oi)为例, 若教师、指导者或设计者观看原始影像并跟随影像内容按压琴键(操作部op),则对应每个目前影像画面所按压的琴键组合会作为操作信息而回传至主装置100。换言之,操作信息即为前述人员在操作部op上的操作情形,并且可以是电子信号的形式而由主装置100的处理单元130直接接收。当原始影像播放完毕后,基于原始影像不存在对应的控制指令,处理单元130由所接收的操作信息产生对应原始影像的多个控制指令,其中前述控制指令分别对应至多个影像画面。此外,主装置100还将原始影像以及对应的控制指令内嵌结合以产生影像文件,然后储存至影音数据库db。藉此,教师、指导者或设计者等较为特殊的使用者可以自行产生具有控制指令的影像文件。在本发明一实施例中,影音同步控制系统10以及主装置100还可以用于即时教学。在本实施例中,影音同步控制系统10还例如是包括摄影装置(未示出),而教师以及至少一个学生等多名使用者可以分别使用一组主装置100与操作设备oi。当教师对操作设备oi进行操作时,教师端的主装置100通过摄影装置以及传输接口110来将教师在操作部op上的操作转化为影像。另一方面,教师对操作部op的操作也会转换为操作信息,然后由教师端的处理单元130接收并对应前述影像来产生控制指令。举例而言,当操作设备oi为钢琴时,教师对琴键的操作可以转换为电子信息,然后由处理单元130接收并进行辨识。在本发明一实施例中,处理单元130还结合控制指令于前述录制的影像之中以产生影像文件,并且通过传输接口110将结合控制指令的影像文件即时地传输至学生端的主装置100。值得注意的是,在另一实施例中,教师端的处理单元130还可以是分析摄影装置的影像来取得教师对操作部op的操作情形,并且据以产生控制指令。学生端的主装置100接收结合控制指令的影像文件后,获取出相关的控制指令,然后输出控制指令至学生所使用的操作设备oi,并且配合前述影像文件来传达导引信息。藉此,学生可以即时地跟随老师的操作来进行学习。在本发明又一实施例中,学生端的主装置100还可以是由教师端的主装置100接收没有内嵌控制指令的原始操作影像,然后由学生端的主装置100的处理单元130进行分析,藉以产生对应于原始操作影像的控制指令。此后,学生端的主装置100依据操作影像以及自行产生的控制指令来引导学生进行操作设备oi的学习。综上所述,本发明实施例所提供的影音同步控制方法、影音同步控制系统以及相关的电子装置,在播放操作设备的对应影像文件的同时,进一步地解析是否存在对应前述影像文件的控制指令。控制指令例如是内嵌于影像画面或者是包含于控制指令文件之中。若控制指令确实存在,则对应于影像文件的播放状况,同步地传输控制指令至操作设备。操作设备则依据所接收的控制指令来作动,例如是传达导引信息或者是通过自行动作、闪光与发出音效来娱乐大众。藉此,通过操作设备以及影像文件的配合,可以提升操作设备与影像文件间的联系性。最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。当前第1页12当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1