律动图像化方法及系统的制作方法
【技术领域】
[0001]本发明涉及一种律动图像化方法、系统以及电脑可读取记录介质，特别是指根据个人或群体产生的声音或体感信息产生可视化律动图像的方法以及相关系统。
【背景技术】
[0002]个人在听音乐的时候会随着音乐的节奏摇摆，甚至是随着乐音吟唱，现有的技术中，有些音乐播放器播放音乐时，其中会显示随着音乐起伏变化的几何图形，但并无法依据个人的律动或特色来产生个人化的显示图像。
[0003]若处于一个演唱会或是群众聚集的场合，每个人之间可能会随着现场的音乐或是气氛互动，为了凝聚群体气氛，众人可以将手机当成荧光棒，随着现场音乐节奏摆动，藉此拉近表演者与观众的距离。这些可视为多人的律动，目前也未能够将多人的律动来产生群体化的显示图像。
[0004]现有技术并未提出有效的机制，让个人或群众可以将其依据音乐而产生的律动转换成视觉效果，以将律动图像化，进而可将律动图像进行分享或是共享。目前的音乐分享机制多半只是将音乐文件分享、或是提供音乐链接等，缺少个人律动分享的机制，多数情况下仅能播放音乐或显示多媒体画面，也缺乏互动感。
【发明内容】
[0005]有别于现阶段的音乐分享方式仅限于传递音乐文件或链接的方式，本说明书披露一种律动图像化方法、系统以及电脑可读取记录介质，可根据音频和个人的图像特征产生可视化的律动图像的技术，律动图像反映出个人或群体共同的律动，可藉此来显示个人或群体根据音频而产生的情绪、反应或是气氛等。
[0006]根据说明书所载实施例之一，律动图像化方法步骤可取得一个人图像，比如由便携式电子装置拍摄取得，并由个人图像取得其中的个人图像特征，之后将根据图像特征建构一个人化图像。接着可由音频中所取得的音频特征，以从预设的多个律动设定数据中取得对应此音频特征的一个人化律动设定数据。之后，依据音频、个人化图像以及个人化律动设定数据产生一个人化律动图像。
[0007]另一实施例中还可通过便携式电子装置的体感单元取得一体感信号，以能依据前述音频、个人化图像、个人化律动设定数据以及此体感信号产生可以反映出体感动作的个人化律动图像。
[0008]其中，上述的音频和个人化律动设定数据将确定个人化图像的律动方式和律动频率；而体感信号确定个人化图像的显示强度；以及将根据律动方式、律动频率以及显示强度产生个人化律动图像。
[0009]再一实施例中则通过一伺服主机整合了多数个人化律动图像而产生一群体化律动图像。
[0010]相关的律动图像化系统可经由一便携式电子装置来操作，或者由便携式电子装置并配合一远程伺服主机来进行操作。系统的主要元件包括取得图像的图像获取单元、接收音频的音频获取单元、取得个人图像特征或/与音频特征的特征获取单元、运算得出个人化律动图像的运算单元，以及显示个人化律动图像的显示单元。还进一步时可包括取得加速度信号的体感单元。
[0011]为了能更进一步了解本发明为实现既定目的所采取的技术、方法及效果，请参阅以下有关本发明的详细说明、附图，相信本发明的目的、特征以及特点，当可由此得以深入且具体的了解，然而附图与附件仅提供参考与说明，并非用来对本发明加以限制。
【附图说明】
[0012]图1所示为显示于一电子装置的律动图像的实施例示意图；
[0013]图2显示产生群体化律动图像的实施例示意图；
[0014]图3显示本发明另一实施例中产生群体化律动图像化的系统架构示意图；
[0015]图4显示本发明律动图像化系统的第一实施例的示意图；
[0016]图5显示本发明律动图像化系统的第二实施例的示意图；
[0017]图6显示本发明律动图像化系统的第三实施例的示意图；
[0018]图7显示为实现本发明律动图像化方法的架构实施例示意图；
[0019]图8显示本发明律动图像化方法的实施例流程之一；
[0020]图9显示本发明律动图像化方法中建构立体脸部图像的实施例流程之一；
[0021]图10显示本发明律动图像化方法的实施例流程之二 ；
[0022]图11显示本发明律动图像化方法中确定个人化图像对应音频特征的呈现方法的实施例流程之一；
[0023]图12显示本发明律动图像化方法的实施例流程之三。
[0024]【符号说明】
[0025]便携式电子装置10显示屏幕101
[0026]便携式电子装置201、202、203
[0027]显示屏幕20律动图像205
[0028]网络30便携式电子装置301、302、303
[0029]伺服主机32显示屏幕305
[0030]运算单元401显示单元402
[0031]特征获取单元403图像获取单元404
[0032]音频获取单元405
[0033]运算单元501显示单元502
[0034]特征获取单元503存储单元504
[0035]数据库509体感单元505
[0036]音频获取单元506外部音源561
[0037]内部文件562图像获取单元507
[0038]通信单元508
[0039]便携式电子装置61图像获取单元611
[0040]音频获取单元612 显示单元613
[0041]通信单元614伺服主机62
[0042]特征获取单元621 运算单元622
[0043]网络单元623
[0044]摄影机701音乐数据库702
[0045]麦克风703体感检测704
[0046]图像获取705音频特征分析706
[0047]情绪判断707图像特征分析708
[0048]特征模型比对709 人脸图像建构710
[0049]个人化律动图像711 输出712
[0050]脸部图像81音源82
[0051]数据库83
[0052]步骤S801?S809律动图像化方法流程
[0053]步骤S901?S907建构立体脸部图像流程
[0054]步骤SlOl?S108律动图像化方法流程
[0055]步骤Slll?S115确定个人化图像呈现方法流程
[0056]步骤S121?S125律动图像化方法流程
【具体实施方式】
[0057]本说明书提出一种律动图像化方法、系统以及电脑可读取记录介质，其可根据音频和个人的图像特征产生可视化的律动图像的技术，以便反映出个人或群体共同的律动。
[0058]更进一步，律动图像是根据音频和个人或群体产生体感信号所产生可视化的律动图像。举例来说，一个人在聆听音乐时，可经由手持、配戴且具有体感单元可感测律动的电子装置(如智能手机、平板电脑、智能眼镜、智能手表或其他可安装体感单元的电子装置)，与音乐一起摇动，所产生的体感信号可经由本系统来产生个人化的律动图像。又例如，在一个群众聚集的场合，比如演奏会、演唱会、群众活动等，在一音频播放的时间内，群众可能会有一致的情绪或律动，通过此律动图像化方法与系统，可以整合多人的个人化律动图像，产生一个群体化的律动图像，以反映出当时情绪、情境或气氛。
[0059]通过执行本说明书所提出的律动图像化方法后，最终产生的个人化律动图像可呈现于一个具有显示器的便携式电子装置上，如图1所示为显示于一电子装置的律动图像的实施例示意图。以下实施例中所述的连接，可以是经由有线或无线通信网络进行连接，也可以是经由总线、序列数据通信接口(如RS232)或其他方式进行电性连接。
[0060]图1中显示有一便携式电子装置10，比如具有显示屏幕101的手机或平板电脑，优选为其中具有照相机、显示器、体感单元(如加速度传感器、陀螺仪)的移动装置。当使用者手持此便携式电子装置10挥舞、摇动，其中的体感单元将感测到便携式电子装置10产生的体感信号，此体感信号可用来判断出使用者的律动。
[0061]在一些实施例中，本发明的系统可设置于便携式电子装置10中，通过便携式电子装置10中的照相机取得使用者或是特定人的脸部图像，经由此脸部图像取得个人图像特征以及建构一个人化图像，之后当使用者挥舞着便携式电子装置10，通过其中的体感单元体感信号，如一种加速度信号，这个信号可以通过解析取得律动的强度、节奏等信息；便携式电子装置10另外可由本身产生的音乐信号，或是通过麦克风收音的外部音频，解析其中频域信号得出音频特征，例如频率、节奏、音量变化、强度变化、曲风等，找出对应的个人化律动设定数据。依据上述的音乐信号、个人化图像以及个人化律动设定数据，便携式电子装置10可产生个人化律动图像，呈现在显示屏幕101上，例如人脸图像依据一特定频律进行左右晃动。律动图像，还可以通过不同颜色、几何图形改变、图像变化、速度变化、不同律动方式(如旋转、点头、跳动…)等，来反映出个人对于此