基于演唱音频评分的多媒体文件播放方法和装置的制造方法
【技术领域】
[0001]本发明涉及多媒体技术领域，特别涉及一种基于演唱音频评分的多媒体文件播放方法和装置。
【背景技术】
[0002]在以KTV、家庭演唱视听系统等为典型的应用场景，现有的实时演唱打分系统一般由音频采集模块实现实时采集演唱录音，然后通过音频分析、对比标准演唱信息，确定演唱正确与否，并依此打分，给出演唱得分，显示在显示模块上。同时，也会在显示模块上展示当前歌曲歌词、视频背景、五线谱标记的歌曲旋律等交互信息。然而，随着用户对用户体验提升的需求日渐增加，现有技术逐渐显露出如下不足:第一，现有的演唱系统，显示模块上的背景视频与用户当前演唱情况无关，也就是占据显示模块较大面积的背景视频对于人机交互几乎没有贡献；第二，现有的演唱系统，在显示模块上的交互大多采用贴图、动画的方式展现交互信息，例如，在演唱过程中只能发送掌声、口哨声、鬼脸等音频或图片到演唱显示屏上，系统资源占用高，表现方式单一，不够灵活。
【发明内容】
[0003]为此，需要提供一种基于演唱音频评分的多媒体文件播放方法和装置。
[0004]为实现上述目的，发明人提供了一种基于演唱音频评分的多媒体文件播放方法，包括如下步骤:
[0005]对第一视频文件进行分段，所述第一视频文件为歌曲视频文件，包含第一视频信息与第一音频信息；
[0006]播放第一视频文件；
[0007]获取演唱音频信号段落，并对所述演唱音频信号段落进行评分，所述演唱音频信号段落与第一视频文件分段后得到的各段落在时间上相对应；
[0008]根据评分结果，在预设的视频库中选择一视频文件作为第二视频文件，在播放第一视频文件中的下一段落时，播放第二视频文件，所述第二视频文件中包含第二视频信息。
[0009]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，对第一视频文件进行分段的方式包括预设分段方式或动态分段方式；
[0010]所述预设分段方式的分段在播放第一视频文件之前进行；
[0011]所述动态分段方式的分段在播放第一视频文件期间进行。
[0012]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述预设分段方式包括:按歌词句间时长分段、按主歌副歌分段、按歌词句数分段或按时长分段。
[0013]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述动态分段方式包括以下步骤:
[0014]判断当前段是否结束，所述判断当前段是否结束的方法具体包括:以相邻两句演唱得分的句间分数差为依据判断当前段是否结束；以相邻句子演唱得分的分数递增或递减为依据判断当前段是否结束；或以当前段之前的部分段落分数或全部段落分数的数值为依据判断当前段是否结束；
[0015]当判定当前段结束时，将当前段的结束时间点与上一段的结束时间点之间的部分划分为一个段落。
[0016]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，进行评分的方式包括:
[0017]基于音准的评分方式、基于声纹相似度的评分方式，或基于吐字清晰度的评分方式。
[0018]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述评分结果为对上一演唱音频信号段落的评分结果、对以上若干演唱音频信号段落的综合评分结果或对以上所有演唱音频信号段落的综合评分结果。
[0019]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述“在播放第一视频文件中的下一段落时，播放第二视频文件”具体包括:
[0020]在显示界面中以独占方式播放所述第二视频信息的画面；或
[0021]将显示界面划分为两个以上的视频区域，将第二视频信息的画面在其中至少一个视频区域中播放；
[0022]将第二视频信息的画面在另一显示界面中播放；或
[0023]在显示界面中将第二视频信息的画面叠加与第一视频信息的画面之上播放，叠加时第二视频信息的画面全部覆盖或部分覆盖第一视频信息的画面。
[0024]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，在播放第二视频文件中的第二视频信息时加载第一视频文件中的字幕信息，显示于第二视频信息的画面之上。
[0025]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，在显示界面中将第二视频信息的画面叠加于第一视频信息的画面之上播放，叠加时第二视频信息的画面部分覆盖第一视频信息的画面，但未覆盖第一视频信息的画面中的字幕部分。
[0026]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，在播放第二视频文件之前，判断第二视频文件是否包含第二音频信息；
[0027]当判定第二视频文件包含第二音频信息时，屏蔽第二音频信息并继续播放第一音频信息，或者以将第二音频信息与第一音频信息做混音处理后播放。
[0028]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，根据评分结果，并根据用户身份或第一视频文件的属性在预设的视频库中选择一视频文件作为第二视频文件，所述第一视频文件的属性选自以下属性中的一种或多种:歌曲类别，歌曲年代，歌曲风格，歌曲语种，歌曲关联的影视作品、演唱者以及演唱者属性。
[0029]进一步地，所述的基于演唱音频评分的多媒体文件播放方法中，所述预设的视频库位于本地、场所服务器或互联网云端。
[0030]发明人同时还提供了一种基于演唱音频评分的多媒体文件播放装置，包括分段单元、播放单元、音频获取单元、评分单元以及运算单元；
[0031]所述分段单元用于对第一视频文件进行分段，所述第一视频文件为歌曲视频文件，包含第一视频信息与第一音频信息；
[0032]所述播放单元用于播放第一视频文件；
[0033]所述音频获取单元用于获取演唱音频信号段落，并且所述评分单元用于对所述演唱音频信号段落进行评分，所述演唱音频信号段落与第一视频文件分段后得到的各段落在时间上相对应；
[0034]所述运算单元用于根据评分结果，在预设的视频库中选择一视频文件作为第二视频文件，在播放第一视频文件中的下一段落时，播放第二视频文件，所述第二视频文件中包含第二视频信息。
[0035]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，分段单元对第一视频文件进行分段的方式包括预设分段方式或动态分段方式；
[0036]所述预设分段方式的分段在播放单元播放第一视频文件之前进行；
[0037]所述动态分段方式的分段在播放单元播放第一视频文件期间进行。
[0038]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，所述预设分段方式包括:按歌词句间时长分段、按主歌副歌分段、按歌词句数分段或按时长分段。
[0039]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，分段单元进行动态分段的方式包括以下步骤:
[0040]判断当前段是否结束，所述判断当前段是否结束的方法具体包括:以相邻两句演唱得分的句间分数差为依据判断当前段是否结束；以相邻句子演唱得分的分数递增或递减为依据判断当前段是否结束；或以当前段之前的部分段落分数或全部段落分数的数值为依据判断当前段是否结束；
[0041]当判定当前段结束时，将当前段的结束时间点与上一段的结束时间点之间的部分划分为一个段落。
[0042]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，所述评分单元进行评分的方式包括:
[0043]基于音准的评分方式、基于声纹相似度的评分方式，或基于吐字清晰度的评分方式。
[0044]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，所述评分结果为对上一演唱音频信号段落的评分结果、对以上若干演唱音频信号段落的综合评分结果或对以上所有演唱音频信号段落的综合评分结果。
[0045]进一步地，所述的基于演唱音频评分的多媒体文件播放装置中，播放单元在播放第一视频文件中的下一段落时，播放第二视频文件具体包括:
[0046]在显示界面中以独占方式播放所述第二视频信息的画面；或
[0047]将显示界面划分为两个以上的视频区域，将第二视频信息的画面在其中至少一个视频区域中播放；
[0048]将第二视频信息的画面在另一显示界面中播放；或
[0049]在显示界面中将第二视频信息的画面叠加与第一视频信息的画面之上播放，叠加时第二视频信息的画面全部覆盖或部分覆盖第一视频信息的画面。
[0050]进一步地，所