专利名称：通过运动检测来控制并播放声效的方法、设备以及介质的制作方法
技术领域：
本发明涉及一种输出多媒体数据的方法，更具体地讲，涉及一种能够使用惯性传感器识别特定装置的运动模式，并且将与识别出的运动模式相应的声音和多媒体数据混合起来以输出与声音混合的多媒体数据的方法、设备和介质。
背景技术：
角速度传感器是一种检测特定装置的角度变化并输出与检测出的角度变化相应的传感器信号的传感器。加速度传感器是一种用于检测特定装置的速度变化并用于输出与检测出的速度变化相应的传感器信号的传感器。对下述装置的研究已经进行，所述装置能够使用惯性传感器(例如，角速度传感器和/或加速度传感器)在三维空间中识别特定装置的运动，并且能够操作以输入与识别出的运动模式相应的字符、符号或者特定命令。
用户运动模式稍有不同。如果用户没有以特定的方式(运动模式)运动，则与用户的意图不匹配的字符或者控制命令可被输入到基于运动的输入装置。在传统的基于运动的输入装置中，用户不能识别出输入到该装置的字符或者控制命令的类型和内容。用户仅能在字符或者控制命令被输入之后通过检查所输入的结果来识别输入的字符或者控制命令。因此，最近已经开发了用于更精确地识别用户的各种运动模式的技术。
同时，随着由计算机和网络的快速增长而引起的多媒体的广泛分布，现在很多便携式装置具有播放各种格式(比如MP3和WAV)的音乐的功能。然而，用户仅能听存储在其中的音乐。还没有提出在播放音乐期间使用户能够产生各种声效的技术。这种技术不仅使用户能听存储的音乐，而且还可将声效合入存储的音乐中，从而使用户能合成音乐。
作为一种相关的传统技术，第1999-252240号日本未审查专利公报公开了一种能够通过检测移动电话的摇动并根据该移动电话的摇动来调节接收机的音量的系统。然而，这不过是一种仅根据用户的运动来控制移动电话的一项功能的技术。
此外，第2005-049345号韩国未审查专利公报公开了一种播放模式控制设备和方法，它能基于生物测定信息来分析用户的运动，并响应于用户的运动来控制内容的播放模式。然而，这项技术只是使用用户的运动信息作为控制播放模式的手段，因此不同于根据用户的运动将声效和音乐相混合。
因此，需要这样的一种方法和设备，该方法和设备能够在具有运动传感器的便携式装置中播放音乐时，通过使用传统的运动检测技术来检测用户的运动，并能根据用户的运动将预定的声效或节拍与音乐相混合以输出与声效相混合的音乐。
发明内容
本发明的另外的方面、特征和/或优点将在下面的描述中部分地阐述，部分地，将从下面的描述中清楚或者通过实施本发明而被了解。
因此，本发明解决了现有技术中发生的上述问题。一方面，本发明提供了一种用于实时地将便携式装置中播放的多媒体数据和与用户的运动相应的声效相混合并输出与声效混合的多媒体数据的方法和设备。
本发明的另一方面提供了一种以多种方式表示声效的方法。
在本发明的一方面中，根据本发明，提供了一种用于通过运动检测来控制并播放声效的设备，所述设备包括媒体播放单元，读取多媒体数据并播放声音信号；运动传感器，检测所述设备的运动并产生与检测出的运动相应的传感器信号；模式识别单元，接收产生的传感器信号并基于特定的判断标准来识别所述设备的运动模式；声效播放单元，基于识别结果来播放声效；和输出单元，输出播放的声音信号和声效。
在本发明的另一方面中，提供了一种用于通过运动检测来控制并播放声效的方法，所述方法包括下述步骤(a)读取多媒体数据并播放声音信号；(b)检测声效控制及播放的设备的运动并产生与检测出的运动相应的传感器信号；(c)接收产生的传感器信号并基于特定的判断标准来识别所述设备的运动模式；(d)基于识别结果来播放声效；和(e)输出播放的声音信号和声效。
在本发明的另一方面中，提供了至少一种存储指令的计算机可读介质，所述指令控制至少一个处理器来执行用于通过运动检测来控制并播放声效的方法，所述方法包括(a)读取多媒体数据并播放声音信号；(b)检测用于控制并播放声效的设备的运动，并产生与检测出的运动相应的传感器信号；(c)接收产生的传感器信号并基于特定的判断标准来识别所述设备的运动；(d)基于识别结果来播放声效；和(e)输出播放的声音信号和声效。
从下面结合附图对本发明示例性实施例的描述中，本发明的这些和/或其他方面、特征和优点将会更明显并且容易理解，其中图1是表示根据本发明示例性实施例的便携式装置的外部构造的示图，所述便携式装置在音频数据的播放期间将由用户运动产生的声效与音频数据相混合；图2是根据图1的示例性实施例的便携式装置的框图；图3是根据图2的示例性实施例的便携式装置的硬件连线的框图；图4是表示根据本发明示例性实施例的便携式装置的三维坐标系的示图；图5A和图5B是表示3轴加速度信号和运动识别信号的曲线图；图6到图9是表示声效播放设置的示例；和图10是表示根据本发明示例性实施例的用于通过运动检测来控制并播放声效的方法的流程图。
具体实施例方式
现在将详细描述其示例在附图中表示的本发明示例性实施例，其中相同的标号始终表示相同的部件。通过参照附图，本发明示例性实施例将描述如下以解释本发明。
本发明提供了这样一种方法和设备，即如果便携式装置在特定方向上摇动，则该设备使用安装在便携式装置中的检测便携式装置的运动的运动传感器来分析用户的生物测定信息、将当前正在播放的多媒体数据与存储的声效相混合并输出与声效相混合的多媒体数据。声效可为节拍，也可与多媒体数据有相同或不同的格式。
因此，用户可简单地收听音乐，独立地创建由用户运动所发起的节拍，或者同时根据用户的爱好来执行这两项操作。这不同于简单地检测运动并输入字符或者控制命令的传统技术。
图1是根据本发明示例性实施例的便携式装置100的外部构造的示图，其中，在多媒体数据的播放期间发生运动而发起的声效可与多媒体数据相混合。便携式装置100可包括设置在便携式装置外表面上通过LCD或LED来显示各种信息(例如，便携式装置的当前状态)的显示单元13。便携式装置100还可包括运动传感器60，用于检测由用户的运动引起的便携式装置100的运动；键输入单元12，接收通过键输入的用户命令；和输出单元55，向用户输出混合的声音。
图2是根据图1的示例性实施例的便携式装置的逻辑框图。便携式装置100可包括运动传感器60、模式识别单元80、播放控制器90、声效播放单元40、媒体播放单元30、存储器15、混音器50和输出单元55。
运动传感器60检测便携式装置100的运动，并输出与检测出的运动相应的传感器信号。模式识别单元80基于从运动传感器60输出的传感器信号识别便携式装置100的运动模式。
播放控制器90基于识别出的运动模式来控制声效播放单元40播放特定的声效。声效播放单元40在播放控制器90的控制下产生与模式识别单元80识别出的运动模式相应的声音信号。声效播放单元40可在播放控制器90的控制下使用存储在存储器15中的声效信号产生声音信号。
媒体播放单元30通过解码器(例如，编解码器)恢复存储在存储器15中的多媒体数据，从而产生模拟声音信号。混音器50将声效播放单元40输出的声效与媒体播放单元30输出的声音信号相混合以输出单一混合的声音信号。
图3是图2的便携式装置100的硬件连线的框图的示例性实施例。如图3所示，便携式装置100的部件可通过总线16被电气连接到CPU 10和存储器15。存储器15可以以用于存储由CPU 10执行的程序的只读存储器(ROM)和用于存储各种数据并具有备用电池的随机存取存储器(RAM)的形式实现。RAM可为可读写的并且即使在断电的情况下也能够保存数据的闪存或者是硬盘。其他类型的存储器或存储装置也可被使用。存储器15存储至少一组多媒体数据和一组声音信号数据。
键输入单元12将来自用户的键输入转换为电信号，它可以以键区或者数字转换器的形式实现。显示单元13可用比如LCD和LED的发光元件实现。通信单元14被连接到天线17，经载波调制通过天线17来发送信号和数据，并对经天线17接收的信号和数据进行解调。
麦克风21将输入语音转换成模拟声音信号，放大器22将转换的模拟声音信号放大，其增益由增益控制信号G1来控制。然后放大的信号被输入到语音编码器23和混音器50。语音编码器23将放大的信号转换为数字数据，压缩该数字数据，并将压缩的数据发送到通信单元14。
媒体播放单元30可包括缓冲器31、解码器32、DAC 33和放大器34。缓冲器31的示例是先进先出(FIFO)型缓冲器，它接收并临时存储在存储器15中存储的多媒体数据。解码器32对临时存储在缓冲器31中的多媒体数据解压缩以恢复原始声音信号(视频或者图像也可在该恢复处理中恢复)。解码器32可支持多种格式。解码器可为MPEG 1、MPEG 2、MPEG 4、JPEG或者MPEG层3(MP3)编解码器。
DAC 33是数模转换器，它将解压缩的声音信号转换成模拟声音信号。放大器34根据增益控制信号G2来放大模拟声音信号。
声效播放单元40在播放控制器90的控制下根据存储在存储器15中的声效信号产生模拟声音信号。声效信号可被存储在代替存储器15的分离的存储器中。声效信号可具有与多媒体数据相同的格式，或者它也可具有不同的格式。如果声效信号也为压缩的形式，则声效播放单元40可以以与媒体播放单元30相同的方式包括缓冲器41、解码器42、DAC 43和放大器44。
混音器50将从媒体播放单元30输出的声音信号与从声效播放单元40输出的声音信号相混合。混音器50也可混合通过麦克风21和放大器22输入的声音信号。结果，除了在声效中混合外，用户可将他/她的语音与音频数据相混合。例如，用户可在将节拍插入到播放的音乐中的同时输出或记录他的语音。由于在现有技术中，已经知道多种涉及通过混音器50来混合多个模拟信号的算法，所以将省略其详细的解释。
由混音器50混合的声音(以下，被称作“混音”)可通过输出单元55输出。输出单元55可包括放大器51，其增益根据主增益控制信号G4来控制；扬声器52，将输入的电声音信号转换为实际的声音。
运动传感器60检测便携式装置100的运动，并输出与检测出的运动相应的传感器信号。运动传感器60可包括加速度传感器、角速度传感器、地磁传感器或其他装置，或者其结合。角速度传感器检测声音播放装置的角速度，即装置向右、向左、向上、向下、顺时针和逆时针的运动，并且产生与检测出的角速度相应的传感器信号值。换句话说，角速度传感器检测播放装置的角速度。
加速度传感器检测播放装置的加速度，即播放装置的速度变化，并产生与检测出的加速度相应的传感器信号。播放装置的加速度可通过加速度传感器识别。如果运动传感器60由角速度传感器和加速度传感器的结合而构造，则运动传感器可检测播放装置的角速度和加速度二者，并产生与检测出的角速度和加速度相应的传感器信号。运动传感器60可利用加速度传感器、角速度传感器或其他装置。然而，本发明将参照加速度传感器来描述。
图4是表示根据本发明示例性实施例的便携式装置的三维坐标系的示图。如图4所示，基于运动的播放装置具有左/右、上/下、前/后方向的运动模式。为了检测这三种运动模式，三个加速度传感器被安装在便携式装置100的坐标系的x、y和z轴上。x轴上的加速度传感器检测播放装置的左/右运动。y轴上的加速度传感器检测播放装置的前/后运动。z轴上的加速度传感器检测播放装置的上/下运动。加速度传感器可为运动传感器60的一部分。
参照图3，从运动传感器60输出的传感器信号是与基于运动的播放装置的加速度相应的模拟信号，模数转换器(ADC)70将从运动传感器60输出的模拟传感器信号转换成数字传感器信号。来自ADC 70的数字传感器信号被提供给模式识别单元80，模式识别单元80使用提供的数字传感器信号依次执行用于分析播放装置的运动模式的算法。所述模式识别单元80可在，例如当传感器信号值超过特定的临界值的时刻识别运动的发生。
根据该算法，可识别便携式装置100的运动方向和运动量。该算法的细节将稍后描述。
播放控制器90按照由模式识别单元80提供的运动模式根据特定的设置(setup)(以下称作“声效播放设置”)来控制声效播放单元40播放声效。声效播放设置的细节将稍后描述。
这里使用的图3中所示的部件可为软件或硬件组件，比如执行特定任务的现场可编程门阵列(FPGA)或者专用集成电路(ASIC)，但并不限于软件或硬件组件。组件可有利地被构造为存在于可寻址的存储介质中并被构造为在一个或多个处理器上执行。由组件所提供的功能可由几个组件或一个组件实现。
以下，将解释模式识别单元80中的模式识别处理。与播放装置的运动的大小相应的电压信号由运动传感器60产生，加速度传感器信号值(Abx、Aby、Abz)通过等式(1)产生Abx＝Sbx*(Vbx-Vbox)Aby＝Sby*(Vby-Vboy) ......(1)Abz＝Sbz*(Vbz-Vboz)这里，Abx、Aby和Abz表示在播放装置的坐标系的各个坐标轴(x、y和z轴)上测量的播放装置的加速度传感器信号值，Sbx、Sby和Sbz表示播放装置的坐标系的各个轴的灵敏度。另外，Vbx、Vby和Vbz表示在播放装置的坐标系的各个轴上安排的加速度传感器产生的测量值，Vbox、Vboy和Vboz表示当在播放装置的坐标系的各个轴上安排的加速度传感器的加速度值是“0”时的测量值。
模式识别单元80将传感器信号值与临界值(Cbx、Cby和Cbz)相比较并监视传感器信号值超过特定的临界值的时刻。在传感器信号值超过临界值的时刻，识别特定方向上的播放装置的加速度。可如下面所示来识别播放装置的上/下、左/右或着前/后加速度。
在识别播放装置的左/右加速度的情况下，检测出传感器信号值从|Abx(kx-1)|≤Cbx到|Abx(kx)|＞Cbx改变的时刻(kx)。使用位于播放装置的坐标系的x轴上的加速度传感器来识别播放装置的左/右运动。
另外，在识别播放装置的上/下加速度的情况下，检测出传感器信号值从|Abz(kz-1)|≤Cbz到|Abz(kz)|＞Cbz改变的时刻(kz)。使用位于播放装置的坐标系的z轴上的加速度传感器来识别播放装置的上/下运动。
此外，在识别播放装置的前/后加速度的情况下，检测出传感器信号值从|Aby(ky-1)|≤Cby到|Aby(ky)|＞Cby改变的时刻(ky)。使用位于播放装置的坐标系的y轴上的加速度传感器来识别播放装置的前/后运动。这里，kx、ky和kz表示当前离散时间值，kx-1、ky-1和kz-1表示先前离散时间值。
假定在媒体播放单元30播放多媒体期间，运动传感器60产生如图5A所示的3轴加速度信号。在图5A的曲线图中，各个轴上超过临界值的时刻标记有环形符号或者菱形符号。图5B的曲线图显示经模式识别单元80进行的运动识别结果。然而，可看到如图5A的曲线图所示有9个时刻超过临界值，但在图5B中只有6个时刻被实际识别为运动。这是因为如果多个超过临界值的时刻包括在特定的时间段内，则相应的时刻被识别为一个时刻。在特定的时间段中的多个时刻上识别出的时刻是第一个。因为在非常短的时间内重复声效的输出不是优选的，所以为每一时间段提供临界值。当然，随着时间段的临界值的增加，识别出的时刻的数目减少，反之亦然。
以下，将参照图6到图9来解释播放控制器90控制声效播放单元40所需的声效播放设置。
图6表示这样的一个示例如果在多媒体播放期间识别出运动，则播放声效；如果在声效的播放期间在特定时刻102处又识别出运动，则从初始时刻101又开始播放声效。如果声效是节拍，则每当用户运动时节拍就会重复输出。当然，如果在声效播放期间没有运动，则声效信号将会播放至完成。
图7表示这样的一个示例如果识别出一次运动，则播放多个声效。在第一运动的识别中，声效1从其初始时刻103开始播放；如果在特定时刻104处再次识别出运动，则声效2从它的初始时刻105开始播放。此外，如果在特定时刻106又识别出运动，则声效3从它的初始时刻107开始播放。结果，如果假定总共使用三种声效，则当在声效3的播放期间又识别出运动时，声效1又被播放。
如上所述，在有多种声效存储在存储器15中的情况下，播放控制器90改变声效的索引，并将存储器15提供的相应的声效发送到声效播放单元40。
图8表示针对各个轴输出不同声效的示例。这里，假定x、y和z轴分别相应于声效1、2和3。当在多媒体播放期间识别出x轴运动时，声效1从它的初始时刻111开始播放。当在声效1的播放期间识别出z轴运动模式时，声效3从它的初始时刻113开始播放。相似地，当在声效3的播放期间识别出y轴运动模式时，声效2从它的初始时刻115开始播放。
图8的示例对应于单独的声效被指定给各个轴的情况。从而，用户可根据其爱好将不同的声效插入到正在播放的音频数据中。例如，用户可分别对x轴、y轴和z轴指定鼓声、吉他声、钢琴声，并根据识别出的运动方向来产生不同声效。
图10是表示根据本发明示例性实施例的通过运动检测来控制并播放声效的方法的流程图。
首先，媒体播放单元30读取多媒体数据并播放声音信号(S1)。运动传感器60在声音信号的播放期间检测播放装置的运动，并产生与检测出的运动相应的传感器信号(S2)。模式识别单元80接收产生的传感器信号并基于特定的判断标准识别播放装置的运动(S3)。声效播放单元40基于识别的结果播放声效(S4)，混音器50将声效与正在播放的声音信号相混合以产生混音信号(S5)。然后输出单元55经扬声器输出混音信号(S6)。
在操作S6中，输出单元55可执行经放大器51根据主增益控制信号来控制混音信号的增益的子步骤，并可通过扬声器52将其增益被控制的混音信号转换为实际声音。
图10的流程图还可包括将经过麦克风21输入的语音转换为模拟声音信号并将该模拟声音信号提供给混音器50的操作。
在操作S1中，媒体播放单元30可执行使用缓冲器31来临时存储多媒体数据、使用解码器32对临时存储在缓冲器31中的多媒体数据解压缩以恢复原始的声音信号的子操作。
在操作S4中，声效播放单元40可执行使用缓冲器41来临时存储声效数据、并使用解码器42对临时存储在缓冲器41中的声效数据解压缩以恢复原始声效的子操作。
在操作S2中，运动可由加速度传感器、角速度传感器或其结合来检测。
在操作S3中，模式识别单元80可在传感器信号超过特定临界值的时刻识别出运动的发生。另外，如果多个时刻被识别为在特定时间段内存在的运动发生的时刻，则模式识别单元80可将它们识别为单个运动。
图10的流程图还可包括如果识别出运动的发生则使用播放控制器90根据特定的声效播放设置来控制声效的播放的步骤。
参照图6，声效播放设置以下述方式进行如果在声音信号的播放期间识别出运动，则播放声效；如果在声效的播放期间识别出运动，则从声效的初始时刻开始来播放声效。
参照图7，声效播放设置以下述方式进行每当在声效的播放期间识别出运动时，播放不同的声效。
参照图8，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则根据由运动指示的轴来播放相应的声效。
参照图9，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则声效的幅度随着运动的大小而改变。
除了上述示例性实施例，本发明的示例性实施例也可通过执行介质，例如计算机可读介质上/中的计算机可读代码/指令来实现。所述介质可相应于允许计算机可读代码的存储和/或传输的任何介质/媒体。
所述计算机可读代码/指令可以以各种方式在介质上/中被记录/传送，所述介质的示例包括磁存储介质(例如，软盘、硬盘、磁带等)、光学记录介质(例如，CD-ROM或DVD)、磁性光学介质(例如，光磁软盘)、硬件存储装置(例如，只读存储介质、随机存取存储介质、闪存等)、以及比如传输包括指令、数据结构等的信号的载波的存储/传输介质。存储/传输介质的示例可包括有线和/或无线传输(比如，通过互联网的传输)。有线存储/传输介质的示例可包括光学线和金属线。所述介质/媒体还可为分布式的网络，从而以分布式的方式来存储/传输并执行计算机可读代码/指令。所述计算机可读代码/指令可由一个或者多个处理器来执行。
如上所述，本发明的优点在于用户可根据其爱好实时地将声效或者节拍插入到正在由便携式装置播放的多媒体数据中，从而用户能除了简单地收听音乐之外，还能合成音乐。
尽管已经显示并描述了本发明一些示例性实施例，但是本领域的技术人员应该理解在不脱离本发明的原理和精神的情况下，可对这些示例性实施例进行改变，本发明的范围由权利要求和它们的等同物来限定。
权利要求
1.一种通过运动检测来控制并播放声效的设备，该设备包括媒体播放单元，读取多媒体数据并播放声音信号；运动传感器，检测所述设备的运动并产生与检测出的运动相应的传感器信号；模式识别单元，接收产生的传感器信号并识别所述设备的运动；声效播放单元，基于识别出的运动来播放声效；和输出单元，输出声音信号和声效。
2.如权利要求1所述的设备，还包括混音器，将声效与声音信号相混合，并向输出单元提供混音信号。
3.如权利要求2所述的设备，其中，所述输出单元包括放大器，根据主增益控制信号来控制混音信号的增益；和扬声器，将增益受控制的混音信号转换为实际的声音。
4.如权利要求1所述的设备，还包括麦克风，将输入语音转换成模拟声音信号；和混音器，将声音信号、声效和转换的声音信号相混合，并向输出单元提供混音。
5.如权利要求1所述的设备，其中，媒体播放单元包括先进先出型缓冲器，接收并临时存储在存储器中存储的多媒体数据；和解码器，对临时存储在缓冲器中的多媒体数据解压缩以恢复原始的声音信号。
6.如权利要求5所述的设备，其中，所述多媒体数据为MPEG层-3格式。
7.如权利要求1所述的设备，声效播放单元包括先进先出型缓冲器，接收并临时存储在存储器中存储的声效数据；和解码器，对临时存储在缓冲器中的声效数据解压缩以恢复原始的声效。
8.如权利要求7所述的设备，其中，声效数据为MPEG层-3格式。
9.如权利要求1所述的设备，其中，运动传感器是加速度传感器、角速度传感器、或者其结合。
10.如权利要求9所述的设备，其中，模式识别单元在传感器信号超过特定的临界值的时刻识别出运动的发生。
11.如权利要求10所述的设备，其中，如果在特定的时间段内有多个这样的时刻，即发生单独的运动的时刻，则模式识别单元将它们认为是单个运动。
12.如权利要求9所述的设备，还包括播放控制器，如果运动发生被识别出，则该播放控制器根据特定的声效播放设置来控制声效的播放。
13.如权利要求12所述的设备，其中，声效播放设置以下述方式进行如果在声音信号的播放期间识别出运动，则播放声音数据的声效；如果在声效的播放期间识别出运动，则又从声效的初始时刻开始来播放声效。
14.如权利要求12所述的设备，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则播放与播放的声效不同的声效。
15.如权利要求12所述的设备，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则根据由运动指示的轴来播放相应的声效。
16.如权利要求12所述的设备，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则声效的幅度随着运动的大小而改变。
17.一种通过运动检测来控制并播放声效的方法，该方法包括(a)读取多媒体数据并播放声音信号；(b)检测用于控制并播放声效的装置的运动，并产生与检测出的运动相应的传感器信号；(c)接收产生的传感器信号并识别所述装置的运动；(d)基于识别出的运动来播放声效；和(e)输出播放的声音信号和声效。
18.如权利要求17所述的方法，还包括将声效与播放的声音信号相混合并向输出单元提供混音信号的步骤。
19.如权利要求18所述的方法，其中，步骤(e)包括根据主增益控制信号来控制混音信号的增益；和将增益受控制的混音信号转换为实际的声音。
20.如权利要求17所述的方法，还包括将输入语音转换成模拟声音信号；和将播放的声音信号、声效和转换的声音信号相混合，并向输出单元提供混音。
21.如权利要求20所述的方法，其中，步骤(a)包括接收并临时存储在存储器中存储的多媒体数据；和对临时存储在缓冲器中的多媒体数据解压缩以恢复原始的声音信号。
22.如权利要求21所述的方法，其中，所述多媒体数据为MPEG层-3格式。
23.如权利要求17所述的方法，步骤(d)包括接收并临时存储在存储器中存储的声效数据；和对临时存储在缓冲器中的声效数据解压缩以恢复原始的声效。
24.如权利要求23所述的方法，其中，声效数据为MPEG层-3格式。
25.如权利要求17所述的方法，其中，由加速度传感器、角速度传感器、或者其结合来检测运动。
26.如权利要求25所述的方法，其中，步骤(c)包括在传感器信号超过特定临界值的时刻识别出运动的发生。
27.如权利要求26所述的方法，其中，步骤(c)还包括如果在特定的时间段内有多个这样的时刻，即发生单独运动的时刻，则识别为只有一个运动发生。
28.如权利要求25所述的方法，还包括如果运动被识别出，则根据特定的声效播放设置来控制声效的播放。
29.如权利要求28所述的方法，其中，声效播放设置以这样的方式进行如果在声音信号的播放期间识别出运动，则播放声效；如果在声效的播放期间识别出运动，则又从声效的初始时刻开始来播放声效。
30.如权利要求28所述的方法，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则播放与播放的声效不同的声效。
31.如权利要求28所述的方法，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则根据由运动指示的轴来播放相应的声效。
32.如权利要求28所述的方法，其中，声效播放设置以下述方式进行如果在声效的播放期间识别出运动，则声效的幅度随着运动的大小而改变。
33.至少一种存储指令的计算机可读记录介质，所述指令控制至少一个处理器来执行用于通过运动检测来控制并播放声效的方法，该方法包括(a)读取多媒体数据并播放声音信号；(b)检测用于控制并播放声效的设备的运动，并产生与检测出的运动相应的传感器信号；(c)接收产生的传感器信号并识别所述设备的运动；(d)基于识别出的运动来播放声效；和(e)输出播放的声音信号和声效。
全文摘要
公开了一种用于输出比如音乐的多媒体数据的方法、设备和介质，它能使用惯性传感器识别特定装置的运动，并将与识别出的运动相应的声音与多媒体数据相混合，以输出与该声音相混合的多媒体数据。这种用于通过运动检测来控制并播放声效的设备包括媒体播放单元，读取多媒体数据并播放声音信号；运动传感器，检测所述设备的运动并产生与检测出的运动相应的传感器信号；模式识别单元，接收产生的传感器信号并使用特定的判断标准来识别所述设备的运动；声效播放单元，基于识别结果来播放声效；和输出单元，输出播放的声音信号和声效。
文档编号G10H1/00GK1897103SQ20061009225
公开日2007年1月17日 申请日期2006年6月15日 优先权日2005年7月15日
发明者崔恩硕, 金东润, 方远哲, 赵诚贞, 赵俊基, 黄光一 申请人:三星电子株式会社