专利名称：同步播放语言音节发音及其口形图片的装置及方法
技术领域：
本发明涉及一种可同步播放声音及其它文字或图片资料的装置及方法，尤其涉及一种可同步播放语言音节发音及其口形图片的装置及方法。
背景技术：
在电子信息化产业飞速发展的今天，各类电子消费产品，尤其是很多便于携带式的电子产品的广泛应用，已成为许多人生活中不可缺少的一部份。人们对这类电子消费产品提出了更全面、更实用、更方便的使用要求。另外，面对全球化的趋势，用以沟通的语言显得额外重要，如何能够快速而良好的掌握语言发音，一直是众多语言学习者的重要目的。就拿目前学生学习英语举例，英语作为一门国际间沟通时最常用的语言，许多地方从小学生开始就进行系统的学习。可事实上有许多学生学习了很多年的英语，仍然不能流畅的用英语进行交流和沟通。原因是其发音不够准确，使两个读音相近的词的产生混淆从而造成听和说的困难。“听”、“说”、“读”、“写”是语言学习的四大要素，而“说”是语言学习的最终目的，若“说”不好，那么语言学习效果将大打折扣。
目前市面上众多的语言学习的电子产品如电子辞典等，是以多媒体的表现形式，给学习者提供了对单词或字的音、形、义各方面更形象而直观的学习方法。但在语言的发音拼读学习上，仍只单纯地停留在从“听音”着手，或仅仅显示音标来引导帮助学习者进行发音学习，而忽略了口形的示范。虽然有的电子词典的音标也有同时配以口形图片显示，但音节的发音是瞬间连续性动作，传统的单张图片不能形象和准确地表现出来。
因此，给语言学习者提供一个可同步播放语言音节发音声像资料的方法，此方法可使语言学习者形象学习单词发音，将口型的动画示范动态地穿插到语言单词或单字的拼读中，使口型的演示“活”起来，而不像以往那种静态的口型示范，让语言学习者在学习语言的时候，可以通过口形动画示范来模仿揣摩发音，就成为现在语言学习类电子产品必须解决的问题。
发明内容
本发明的目的之一是提供一种同步播放语言音节发音及其口形图片的装置，其解决了背景技术中提供语言学习的电子产品不能形象和准确地表现瞬间连续性的音节发音的技术问题。
本发明的目的之二是提供一种同步播放语言音节发音及其口形图片的方法，其解决了背景技术中提供语言学习的电子产品无法将口型的动画示范动态地穿插到语言单词的拼读中的技术问题。
本发明的技术解决方案是一种同步播放语言音节发音及其口形图片的装置，其特殊之处是所述装置包括语言单元分割模块6，用来输入语言单元并将其分割成至少一个音节，并将每一个音节分割成至少一个音素；音节储存模块4，用来将该语言单元分割后的包含至少一个音素的音节以一音节为单位进行储存和输出；口形图片储存模块5，用来储存和输出该语言单元分割后的每一个音节的每一个音素所对应的口形图片；发声模块2，用来将音节储存模块4输出的音节以声音方式进行输出；显示模块3，用来将口形图片储存模块5输出的口形图片以图形方式进行输出；中央处理模块1，用来控制语言单元分割模块6进行语言单元的输入及对所输入语言单元进行分割，以及控制音节储存模块4对该语言单元分割后的每一个音节进行储存和输出，以及控制口形图片储存模块5对该语言单元中每一个音节的每一个音素所对应的口形图片进行储存和输出，以及控制发声模块2和显示模块3同步播放语音及对应的口形图片。
上述中央处理模块1包括中央处理器11和数据处理随机存取内存12。
上述语言单元分割模块6包括语言单元分割电路61和功能控制键62。
上述显示模块3包括与中央处理模块1连接的显示驱动电路32和与显示驱动电路32连接的显示装置31。
上述显示装置31为液晶显示屏。
一种同步播放语言音节发音及其口形图片的方法，包括以下步骤201]输入想要练习发音的语言单元；202]将该语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素；203]根据每一个音节所分割的所有音素，取得每一个音素所对应的口形图片；204]建立以一音节为单位的“音素-口形”同步对应表；205]根据“音素-口形”同步对应表，同步播放语音及对应的口形图片。
上述步骤202]具体为中央处理模块1控制语言单元分割模块6将该语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素，并将该语言单元的每一个音节储存在音节储存模块4中；上述步骤203]具体为中央处理模块1根据每一个音节所分割的所有音素，将每一个音素所对应的口形图片储存在口形图片储存模块5中；上述步骤204]具体为中央处理器11将每一个音节中每一个音素所对应的口形图片，依照每一个音节中每一个音素的顺序，建立以一音节为单位的“音素-口形”同步对应表，然后将每一个音节的“音素-口形”同步对应表储存在数据处理随机存取内存12内。
上述步骤205]具体为301]中央处理模块1根据“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片；
302]中央处理模块1通过发声模块2和显示模块3同步播放该语言单元及其对应的每一个口形图片。
上述步骤205]具体为401]使用者利用功能控制键62选择发音一个语言单元的命令；402]中央处理模块1按照该语言单元所分割的所有音节的顺序，根据每一个音节的“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片；403]中央处理模块1通过发声模块2和显示模块3依序同步播放该语言单元及其对应的每一个口形图片。
上述步骤205]具体为501]使用者利用功能控制键62选择发音任意一个音节的命令；502]中央处理模块1根据“音素-口形”同步对应表，自音节储存模块4中取得该音节，自口形图片储存模块5中取得该音节对应的每一个口形图片；503]中央处理模块1通过发声模块2和显示模块3同步播放该音节及其对应的每一个口形图片。
本发明具有如下优点1、声像同步，学习语言更加容易。本发明装置和方法将每一个音素对应一个口形图片，以一个音节为单位，抓取数个口形图片后，以合成动画形式依序显示，将声音和口形动画同步表现出来，进而提供给语言学习者一个声像同步学习单词发音的方法。
2、数据库容量小。以前的提供语言学习的电子产品播放一个动画需要很多张图片组成，利用本发明的装置和方法后，仅需在数据库中储存基本音素的图片或者视频图像等，便可完成所有单词的口形动画，使得电子产品相应数据库的容量最小，可达到事半功倍的效果。
3、动画显示方式灵活。本发明方法提供的口形动画显示方式灵活，可由使用者实时选择显示当前正在发音的音节的口形动画，或选择机动地显示整个单字或语句的发音的口形动画，也可不需使用者选择，由系统直接显示当前正在发音的音节、整个单字或语句的发音的口形动画，使语言单位的发音对照口型的观摩学习模式更加灵活，更利于用户学习语言。
附面说明
图1是同步播放语言音节发音及其口形图片的装置的结构原理示意图；图2是同步播放语言音节发音及其口形图片的方法流程图；图3是图2中步骤205]的第一种具体实现方法流程图；图4是图2中步骤205]的第二种具体实现方法流程图；图5是图2中步骤205]的第三种具体实现方法流程图；图6是本发明决定发音语言单元或者发音一个音节并同步播放对应的口形图片的方法流程图；图7是本发明装置的显示装置所显示的“footer”的字义；图8是本发明装置的显示装置所显示的“footer”英文单词所包含的所有音节，即“1fu”音节和“t”音节；图9是本发明装置的显示装置所显示的“1fu”音节所包含的第一个音素的口形图片；图10是本发明装置的显示装置所显示的“1fu”音节所包含的第二个音素的口形图片；图11是本发明装置的显示装置所显示的“t”音节所包含的唯一音素的口形图片；其中1-中央处理模块；2-发声模块；3-显示模块；4-音节储存模块；5-口形图片储存模块；6-语言单元分割模块；11-中央处理器；12-数据处理的随机存取内存；31-显示装置；32-显示驱动电路；61-语言单元分割电路；62-功能控制键；步骤201]-使用者输入想要练习发音的语言单元；步骤202]-将输入的语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素；
步骤203]-根据每一个音节所分割的所有音素，取得每一个音素所对应的口形图片；步骤204]-建立以一音节为单位的“音素-口形”同步对应表；步骤205]-根据“音素-口形”同步对应表，同步播放语音及对应的口形图片；步骤301]-根据每一个音节所对应的“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片；步骤302]-通过发声模块2和显示模块3同步播放该语言单元及其对应的每一个口形图片；步骤401]-利用功能控制键62选择发音一个语言单元的命令；步骤402]-按照该语言单元所分割的所有音节的顺序，根据每一个音节的“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片；步骤403]-发声模块2和显示模块3同步播放该语言单元及其对应的每一个口形图片；步骤501]-利用功能控制键62选择发音任意一个音节的命令；步骤502]-根据“音素-口形”同步对应表，自音节储存模块4中取得该音节，自口形图片储存模块5中取得该音节对应的每一个口形图片；步骤503]-发声模块2和显示模块3同步播放该音节及其对应的每一个口形图片；步骤601]-选择发音全语言单元；步骤602]-选择播放此语言单元中的任意一个音节音节发音；步骤603]-取得所需发音语言单元的所有音节，并根据分解的音节依序同步显示全部的口形图片；步骤604]-根据分解的该音节同步显示相对应音节的口形图片。
具体实施例方式
参见图1，图1是同步播放语言音节发音及其口形图片的装置的结构原理示意图，本发明装置主要包括中央处理模块1，发声模块2，显示模块3，音节储存模块4，口形图片储存模块5以及语言单元分割模块6。其中中央处理模块1可由中央处理器11(CPU)和数据处理随机存取内存(RAM)12组成；显示模块3包括与中央处理模块1连接的显示驱动电路32和与显示驱动电路32连接的显示装置31，该显示装置31可为液晶显示屏；音节储存模块4可以是只读存储器、闪存、ROM或Flash；图片储存模块5可以是只读存储器、闪存、ROM或Flash；语言单元分割模块6包括语言单元分割电路61以及基于语言单元输入及分割功能的功能控制键62。
首先，使用者输入所想要发音的语言单元，系统软件根据该语言单元的特性，通过中央处理模块1控制语言单元分割模块6将输入的语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素；将该语言单元分割完成后，中央处理模块1会根据每一音节所分割出的所有音素，取得每一音素所对应的口形图片，并以音节为单位将每一音节及与其对应的每一口形图片分别储存于音节储存模块4及口形图片储存模块5中，同时将所取得的每一音节中每一音素相对应的口形图片，按照每一音节中所有音素的顺序，建立以一音节为单位的“音素-口形”同步对应表，并将该“音素-口形”同步对应表储存于数据处理随机存取内存12内，“音素-口形”同步对应表是以一音节为单位，用以依序指出该音节中每一音素对应的口形图片的相关储存位置或该图片的连结路径等。因此在播放该音节时，便可根据该音节的“音素-口形”同步对应表，取得对应的口形图片以同步播放。
在建立每一音节的“音素-口形”同步对应表后，当使用者选择发音该语言单元时，系统软件便会通过中央处理模块1根据构成该语言单元的音节，自音节储存模块4取得所有该语言单元的音节资料，并根据每一音节的同步对应表自口形图片储存模块5中取得对应该音节的每一口形图片，接着通过发声模块2及显示模块3，在播放某一音节时，同步显示该音节对应的每一个口形图片。其中显示模块6是中央处理模块1通过显示驱动电路32控制显示装置31显示，该显示装置31可以是液晶显示屏。
在建立完每一音节的“音素-口形”同步对应表之后，当使用者选择发音该语言单元的一个音节时，软件便会通过中央处理模块1从音节储存模块4中取得该音节资料，并根据该音节的“音素-口形”同步对应表从口形图片储存模块5中取得对应的每一个口形图片，接着通过发声模块2及显示模块3，在播放该音节时，同步显示对应该音节的每一口形图片。
参见图2，图2是本发明同步播放语言音节发音及其口形图片的方法流程图开始时，使用者输入想要练习发音的语言单元(步骤201)，中央处理模块1控制语言单元分割模块6将该语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素，并将该语言单元的每一个音节储存在音节储存模块4中(步骤202)，接着根据每一音节所分割成的所有音素，取得每一个音素所对应的口形图片(步骤203)，中央处理器11将每一个音节中每一个音素所对应的口形图片，依照每一个音节中每一个音素的顺序，建立以一音节为单位的“音素-口形”同步对应表，然后将每一个音节的“音素-口形”同步对应表储存在数据处理随机存取内存12内(步骤204)，根据“音素-口形”同步对应表，同步播放语音及对应的口形图片(步骤205)。
参见图3，图3是步骤205的第一种具体实现方法流程图如果使用者不进行任何选择，希望系统在输入语言单元后直接同步播放语音和相对应的口形图片，此时中央处理模块1根据每一个音节所对应的“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片(步骤301)，并通过发声模块2和显示模块3同步播放该语言单元及其对应的每一个口形图片(步骤302)。
参见图4，图4是步骤205的第二种具体实现方法流程图如果使用者利用功能控制键62选择发音一个语言单元的命令(步骤401)，此时中央处理模块1按照该语言模块所分割的所有音节的顺序，根据每一个音节的“音素-口形”同步对应表，自音节储存模块4中取得该语言单元的每一个音节，自口形图片储存模块5中取得该语言单元的每一个音节对应的每一个口形图片(步骤402)，并通过发声模块2和显示模块3同步播放该语言单元及其对应的每一个口形图片(步骤403)。
参见图5，图5是步骤205的第三种具体实现方法流程图如果使用者利用功能控制键62选择发音任意一个音节的命令(步骤501)，中央处理模块1根据该音节所对应的“音素-口形”同步对应表，自音节储存模块4中取得该音节，自口形图片储存模块5中取得该音节对应的每一个口形图片(步骤502)，并通过发声模块2和显示模块3同步播放该音节及其对应的每一个口形图片(步骤503)。
参见图6，图6是本发明决定发音语言单元或者发音一个音节并同步播放对应的口形图片的方法流程图使用者可利用功能控制键62和显示装置31选择发音全语言单元(步骤601)，或者选择播放此语言单元中任意一个音节发音(步骤602)；如果选择发音全语言单元(步骤601)，则系统取得所需发音语言模块的所有音节，并根据分解的音节依序同步显示全部的口形图片(步骤603)，具体流程图可参见图4中步骤402至步骤403；如果选择播放此语言单元中任意一个音节发音(步骤602)，则根据分解的该音节同步显示相对应音节的口形图片(步骤604)，具体流程图可参见图5中步骤502至步骤503。
以下参考图7至图11，结合本发明在电子辞典中的一种具体装置所显示的英语单词“footer”的使用界面，来说明本发明方法的语音资料及口形动画同步播放的效果及流程图。
在图7中，利用电子辞典的功能控制键输入英语单字“footer”之后，电子辞典的显示装置便会显示所输入“footer”的字义801；图8是本发明装置的显示装置所显示的“footer”英文单词所包含的所有音节，即“1fu”音节和“t”音节，如图8所示，若点选“F1音节发音”802之后，便会显现“footer”英文字母所包含之所有音节，其中可被分成如图9所示的“1fu”音节803及“t”音节804两个音节；即使用者输入”footer”后，装置便进行如图2所述的方法流程，使得“footer”可被分割成“1fu”音节803及“t”音节804两个音节，且分别产生其对应的“音素-口形”同步对应表。此时若点选想要发音的音节使其反白，例如是“1fu”音节，并选择“F2口形动画”805时，则会在播放“1fu”音节803的同时，同步连续地显示图9至图10的口形图片(806，807)，图9是“1fu”音节所包含的第一个音素的口形图片，图10是“1fu”音节所包含的第二个音素的口形图片；即播放“1fu”音节803的同时，会同步显示该“1fu”音节803包含的所有音素对应的口形图片(806，807)，在这个例子中，即“1fu”音节803仅包含两个音素，且每一个音素分别对应图9与图10的口形图片(806，807)。当点选“t”音节804使其反白，并选择”F2口形动画”805时，会在播放“t”音节804的同时，同步地显示图11的图片，即播放“t”音节804的同时，会同步显示该“t”音节804包含的所有音素的对应的口形图片(808)，在这个例子中，即“t”音节804仅包含一个音素，且该音素对应图11的口形图片(808)，图11是“t”音节所包含的唯一音素的口形图片；若同时点选“1fut”使其反白，并选择“F2口形动画”805时，则会连续地播放“1fu”音节803及“t”音节804，并同时连续地显示该“1fu”音节803及“t”音节804包含的所有音素的对应口形图片(806，807，808)，在这个例子中，“1fu”音节803包含两个音素，“t”音节804包含一个音素，且每一个音素分别对应图10、图11及图12的图片(806，807，808)，即连续地播放“1fu”音节803及“t8”音节804的同时，连续地显示图9至图11的图片(806，807，808)，以达到播放语音音节的同时，显示连续口形动画的目的。
本发明原理在软件上要求安装语音和图片检索及显示程序能处理接收到的信息、按照索引表在装置内检索到相应的图片和语音资料并按照一定格式显示的软件。利用一定的软件技术合成相关的图片，在发音时采用口形动画示范的方法，将口形图片以动画形式演示出来，达到真人说话效果，给语言学习者提供一个音像同步学习单词发音的方法。这种口形动画显示方式灵活，可实时选择显示当前正在发音的音节的口形动画，或选择显示整个单字或语句的发音的口形动画，使语言单位的发音对照口型的观摩学习更加灵活，给使用者带来了极为方便的语言学习工具。这种方法与原有技术相比，在制作动画时省时省力，节省成本，而且发音与口形动画的结合与同步显示也给用户带来了语言学习的方便性，使语言单位的发音对照口型的观摩学习更加灵活。
权利要求
1.一种同步播放语言音节发音及其口形图片的装置，其特征在于所述装置包括语言单元分割模块(6)，用来输入语言单元并将其分割成至少一个音节，并将每一个音节分割成至少一个音素；音节储存模块(4)，用来将该语言单元分割后的包含至少一个音素的音节以一音节为单位进行储存和输出；口形图片储存模块(5)，用来储存和输出该语言单元分割后的每一个音节的每一个音素所对应的口形图片；发声模块(2)，用来将音节储存模块(4)输出的音节以声音方式进行输出；显示模块(3)，用来将口形图片储存模块(5)输出的口形图片以图形方式进行输出；中央处理模块(1)，用来控制语言单元分割模块(6)进行语言单元的输入及对所输入语言单元进行分割，以及控制音节储存模块(4)对该语言单元分割后的每一个音节进行储存和输出，以及控制口形图片储存模块(5)对该语言单元中每一个音节的每一个音素所对应的口形图片进行储存和输出，以及控制发声模块(2)和显示模块(3)同步播放语音及对应的口形图片。
2.根据权利要求1所述的同步播放语言音节发音及其口形图片的装置，其特征在于所述的中央处理模块(1)包括中央处理器(11)和数据处理随机存取内存(12)。
3.根据权利要求2所述的同步播放语言音节发音及其口形图片的装置，其特征在于所述的语言单元分割模块(6)包括语言单元分割电路(61)和功能控制键(62)。
4.根据权利要求1或2或3所述的同步播放语言音节发音及其口形图片的装置，其特征在于所述的显示模块(3)包括与中央处理模块(1)连接的显示驱动电路(32和与显示驱动电路(32连接的显示装置(31。
5.根据权利要求4所述的同步播放语言音节发音及其口形图片的装置，其特征在于所述的显示装置(31)为液晶显示屏。
6.一种同步播放语言音节发音及其口形图片的方法，其特征在于该方法包括以下步骤201]输入想要练习发音的语言单元；202]将该语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素；203]根据每一个音节所分割的所有音素，取得每一个音素所对应的口形图片；204]建立以一音节为单位的“音素—口形”同步对应表；205]根据“音素—口形”同步对应表，同步播放语音及对应的口形图片。
7.根据权利要求6所述的同步播放语言音节发音及其口形图片的方法，其特征在于所述步骤202]具体为中央处理模块(1)控制语言单元分割模块(6)将该语言单元分割成至少一个音节，并将每一个音节分割成至少一个音素，并将该语言单元的每一个音节储存在音节储存模块(4)中；所述步骤203]具体为中央处理模块(1)根据每一个音节所分割的所有音素，将每一个音素所对应的口形图片储存在口形图片储存模块(5)中；所述步骤204]具体为中央处理器(11将每一个音节中每一个音素所对应的口形图片，依照每一个音节中每一个音素的顺序，建立以一音节为单位的“音素—口形”同步对应表，然后将每一个音节的“音素—口形”同步对应表储存在数据处理随机存取内存(12)内。
8.根据权利要求6或7所述的同步播放语言音节发音及其口形图片的方法，其特征在于所述步骤205]具体为301]中央处理模块(1)根据“音素—口形”同步对应表，自音节储存模块(4)中取得该语言单元的每一个音节，自口形图片储存模块(5)中取得该语言单元的每一个音节对应的每一个口形图片；302]中央处理模块1通过发声模块(2)和显示模块(3)同步播放该语言单元及其对应的每一个口形图片。
9.根据权利要求6或7所述的同步播放语言音节发音及其口形图片的方法，其特征在于所述步骤205]具体为401]使用者利用功能控制键(62)选择发音一个语言单元的命令；402]中央处理模块(1)按照该语言单元所分割的所有音节的顺序，根据每一个音节的“音素—口形”同步对应表，自音节储存模块(4)中取得该语言单元的每一个音节，自口形图片储存模块(5)中取得该语言单元的每一个音节对应的每一个口形图片；403]中央处理模块(1)通过发声模块(2)和显示模块(3)依序同步播放该语言单元及其对应的每一个口形图片。
10.根据权利要求6或7所述的同步播放语言音节发音及其口形图片的方法，其特征在于所述步骤205]具体为501]使用者利用功能控制键(62)选择发音任意一个音节的命令；502]中央处理模块(1)根据“音素—口形”同步对应表，自音节储存模块(4)中取得该音节，自口形图片储存模块(5)中取得该音节对应的每一个口形图片；503]中央处理模块(1)通过发声模块(2)和显示模块(3)同步播放该音节及其对应的每一个口形图片。
全文摘要
本发明涉及一种可同步播放语言音节发音及其口形图片的装置及方法。该装置包括语言单元分割模块，音节储存模块，口形图片储存模块，发声模块，显示模块和中央处理模块；该方法包括以下步骤输入语言单元；将该语言单元分割成至少一个音素；根据所分割的音素，取得每一个音素所对应的口形图片；建立“音素—口形”同步对应表；根据“音素—口形”同步对应表，同步播放语音及对应的口形图片，其解决了现有提供语言学习的电子产品不能形象和准确地表现瞬间连续性的音节发音以及无法将口型的动画示范动态地穿插到语言单词的拼读中的技术问题。本发明具有声像同步、数据库容量小、动画显示方式灵活的优点。
文档编号G09B5/00GK1808519SQ200510041
公开日2006年7月26日 申请日期2005年1月18日 优先权日2005年1月18日
发明者陈淮琰, 李方, 赵珺 申请人:无敌科技(西安)有限公司