数据处理方法、装置、终端及存储介质与流程

文档序号:16888554发布日期:2019-02-15 22:51阅读:144来源:国知局
数据处理方法、装置、终端及存储介质与流程

本发明涉及数据处理技术领域,特别涉及一种数据处理方法、装置、终端及存储介质。



背景技术:

随着数据处理技术的不断发展,人们对特殊音效的需求越来越高,可以通过对音频数据进行处理,进而得到符合需求的多样化音效。例如,可以对音频数据进行处理,生成一种模仿小黄人或者魔兽说话的音效。

目前,常用的数据处理方法为:基于获取的音频数据,将整个音频数据进行分帧、加窗以及时域变换,生成该音频数据对应的频域数据,对整个频域数据进行算法处理,以改变该整个频域数据对应的幅值等信息,进而改变该音频数据对应的音频波形,以实现对该音频数据添加目标音效。

基于上述数据处理方法,需要对获取的整个音频数据进行处理,以对该音频数据添加一种目标音效,添加的目标音效类型比较单一,无法满足用户对目标音效的多样化需求。



技术实现要素:

本发明实施例提供了一种数据处理方法、装置、终端及存储介质,能够解决对整个音频数据添加的目标音效类型比较单一的问题。所述技术方案如下:

一方面,提供了一种数据处理方法,所述方法包括:

显示音效设置页面,所述音效设置页面具有待编辑视频的时间轴和多个音效控件;

基于对所述时间轴上任一时刻的选中操作,确定起始帧;

当检测到对所述多个音效控件中目标控件的长按操作时,以所述起始帧为起点进行目标音效类型对应的音效处理,直到检测到所述长按操作结束,基于所述长按操作结束时刻对应的结束帧,确定目标音频片段,所述目标音效类型与所述目标控件相对应;

基于所述目标音频片段,生成目标音频数据。

在一种可能实现方式中,所述显示音效设置页面之前,所述方法还包括:

显示视频编辑页面,所述视频编辑页面具有音效设置控件;

当检测到对所述音效设置控件的点击操作时,跳转到所述音效设置页面。

在一种可能实现方式中,当检测到对所述多个音效控件中目标控件的长按操作时,以所述起始帧为起点进行目标音效类型对应的音效处理,直到检测到所述长按操作结束,基于所述长按操作结束时刻对应的结束帧,确定目标音频片段包括:

当检测到对所述多个音效控件中目标控件的长按操作时,获取所述目标控件对应的目标音效类型;

基于所述目标音效类型,对所述起始帧之后的音频帧进行音效处理;

当检测到对所述目标控件的所述长按操作结束时,确定所述长按操作结束时刻对应的结束帧;

基于所述起始帧和所述结束帧,确定所述目标音频片段。

在一种可能实现方式中,所述基于所述目标音效类型,对所述起始帧之后的音频帧进行音效处理包括:

基于所述目标音效类型,对所述起始帧之后的音频帧进行变音算法处理,得到多个目标音频帧,所述多个目标音频帧的音高信息与所述目标音效类型的音高信息相同。

在一种可能实现方式中,所述基于所述起始帧和所述结束帧,确定所述目标音频片段包括:

将所述起始帧和所述结束帧之间的多个目标音频帧合并成所述目标音频片段。

在一种可能实现方式中,进行音效处理过程中,所述方法还包括:

在所述音效设置页面,实时播放进行音效处理完成的多个目标音频帧,同步播放所述多个目标音频帧对应的多个视频帧。

一方面,提供了一种数据处理装置,所述装置包括:

显示模块,用于显示音效设置页面,所述音效设置页面具有待编辑视频的时间轴和多个音效控件;

确定模块,用于基于对所述时间轴上任一时刻的选中操作,确定起始帧;

处理模块,用于当检测到对所述多个音效控件中目标控件的长按操作时,以所述起始帧为起点进行目标音效类型对应的音效处理,直到检测到所述长按操作结束,基于所述长按操作结束时刻对应的结束帧,确定目标音频片段,所述目标音效类型与所述目标控件相对应;

生成模块,用于基于所述目标音频片段,生成目标音频数据。

在一种可能实现方式中,所述装置还包括:

所述显示模块,还用于显示视频编辑页面,所述视频编辑页面具有音效设置控件;

跳转模块,用于当检测到对所述音效设置控件的点击操作时,跳转到所述音效设置页面。

在一种可能实现方式中,所述处理模块包括:

获取单元,用于当检测到对所述多个音效控件中目标控件的长按操作时,获取所述目标控件对应的目标音效类型;

处理单元,用于基于所述目标音效类型,对所述起始帧之后的音频帧进行音效处理;

确定单元,用于当检测到对所述目标控件的所述长按操作结束时,确定所述长按操作结束时刻对应的结束帧;

所述确定单元,还用于基于所述起始帧和所述结束帧,确定所述目标音频片段。

在一种可能实现方式中,所述处理单元还用于:

基于所述目标音效类型,对所述起始帧之后的音频帧进行变音算法处理,得到多个目标音频帧,所述多个目标音频帧的音高信息与所述目标音效类型的音高信息相同。

在一种可能实现方式中,所述确定单元还用于:

将所述起始帧和所述结束帧之间的多个目标音频帧合并成所述目标音频片段。

在一种可能实现方式中,所述装置还包括:

播放模块,用于在所述音效设置页面,实时播放进行音效处理完成的多个目标音频帧,同步播放所述多个目标音频帧对应的多个视频帧。

一方面,提供了一种终端,所述终端包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如上述数据处理方法所执行的操作。

一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如上述数据处理方法所执行的操作。

本发明实施例基于音效设置页面上的时间轴以及多个音效控件,可以确定多个目标音频片段,实现了对整个音频数据的分段处理,可以分别使得每个目标音频片段与相应的目标音效类型对应,从而可以对整个音频数据添加至少一种目标音效,满足了用于对目标音效的多样化需求。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种数据处理方法的流程图;

图2是本发明实施例提供的一种数据处理方法的流程图;

图3是本发明实施例提供的一种视频编辑页面的结构示意图;

图4是本发明实施例提供的一种音效设置页面的结构示意图;

图5是本发明实施例提供的一种数据处理装置的结构示意图;

图6是本发明实施例提供的一种终端的结构框图;

图7是本发明实施例提供的一种服务器的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。

图1是本发明实施例提供的一种数据处理方法的流程图。参见图1,该实施例包括:

101、显示音效设置页面,该音效设置页面具有待编辑视频的时间轴和多个音效控件。

102、基于对该时间轴上任一时刻的选中操作,确定起始帧。

103、当检测到对该多个音效控件中目标控件的长按操作时,以该起始帧为起点进行目标音效类型对应的音效处理,直到检测到该长按操作结束,基于该长按操作结束时刻对应的结束帧,确定目标音频片段,该目标音效类型与该目标控件相对应。

104、基于该目标音频片段,生成目标音频数据。

在一些实施例中,上述显示音效设置页面之前,该方法还包括:

显示视频编辑页面,该视频编辑页面具有音效设置控件;

当检测到对该音效设置控件的点击操作时,跳转到该音效设置页面。

在一些实施例中,当检测到对该多个音效控件中目标控件的长按操作时,以该起始帧为起点进行目标音效类型对应的音效处理,直到检测到该长按操作结束,基于该长按操作结束时刻对应的结束帧,确定目标音频片段包括:

当检测到对该多个音效控件中目标控件的长按操作时,获取该目标控件对应的目标音效类型;

基于该目标音效类型,对该起始帧之后的音频帧进行音效处理;

当检测到对该目标控件的长按操作结束时,确定该长按操作结束时刻对应的结束帧;

基于该起始帧和该结束帧,确定目标音频片段。

在一些实施例中,上述基于该目标音效类型,对该起始帧之后的音频帧进行音效处理包括:

基于该目标音效类型,对该起始帧之后的音频帧进行变音算法处理,得到多个目标音频帧,该多个目标音频帧的音高信息与该目标音效类型的音高信息相同。

在一些实施例中,上述基于该起始帧和该结束帧,确定目标音频片段包括:

将该起始帧和该结束帧之间的多个目标音频帧合并成目标音频片段。

在一些实施例中,进行音效处理过程中,该方法还包括:

在该音效设置页面,实时播放进行音效处理完成的多个目标音频帧,同步播放多个目标音频帧对应的多个视频帧。

上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。

图2是本发明实施例提供的一种数据处理方法的流程图。该数据处理方法可以应用于任一种终端中。参见图2,该实施例包括:

201、终端显示视频编辑页面,该视频编辑页面具有音效设置控件。

在本发明实施例中,该视频编辑页面用于终端播放当前待编辑视频,以及对该待编辑视频所包括的视频数据以及音频数据等进行处理,该待编辑视频可以为终端录制并保存的视频,当然,也可以为服务器向终端发送的视频,本发明实施例在此对该待编辑视频的来源不做限定。终端可以通过相应的应用程序进入该视频编辑页面,并可以将该待编辑视频导入该应用程序中,进而可以在该视频编辑页面显示该待编辑视频。

其中,该视频编辑页面上可以具有音效设置控件,该音效设置控件用于使得该视频编辑页面跳转到音效设置页面,以对该待编辑视频对应的音频数据进行处理。此外,该视频编辑页面上还可以具有其他设置控件,例如,该视频编辑页面上还可以具有视频特效设置控件以及音乐剪辑控件等,本发明实施例在此对该视频编辑页面上的其他设置控件的种类不做限定。

具体地,上述视频编辑页面可以如图3所示,该视频编辑页面中间的主体部分用于播放当前待编辑视频以及经过相关处理的视频,该视频编辑页面的上方可以依次排列有视频特效设置控件、音效设置控件、音乐剪辑控件以及用户主页控件等,该用户主页控件的下方可以具有歌词开关控件。此外,该视频编辑页面的下方可以具有保存控件、发布控件、选择话题控件、允许合演控件以及提醒控件等,上述控件分布用于终端跳转到对应的功能页面,以对该待编辑视频进行进一步的设置以及处理。当然,在其他实施例中,该视频编辑页面的各个控件也可以为其他分布方式,本发明实施例在此对该视频编辑页面的各个控件的分布方式不做限定。

202、当终端检测到对该音效设置控件的点击操作时,跳转到音效设置页面。

在本发明实施例中,基于上述视频编辑页面,用户可以对该视频编辑页面上的任一控件进行点击操作,例如,用户可以对该视频编辑页面上的音效设置控件进行点击操作。当终端检测到对上述音效设置控件的点击操作时,则触发页面跳转指令,该页面跳转指令可以携带音效设置页面标识,且,上述音效设置控件与音效设置页面相关联,因此,终端可以基于该页面跳转指令,跳转到音效设置页面。其中,该音效设置页面用于对该待编辑视频对应的音频数据进行处理,进而,终端可以为该待编辑视频添加音效,此外,该音效设置页面还可以用于播放添加完音效的视频数据和音频数据。

203、终端显示音效设置页面,该音效设置页面具有待编辑视频的时间轴和多个音效控件。

在本发明实施例中,基于步骤202,终端显示的该音效设置页面可以用于对该待编辑视频对应的音频数据添加至少一种音效,为此,该音效设置页面上可以具有多个可操作控件,该多个可操作控件可以包括时间轴和多个音效控件,其中,该时间轴可以用于用户选择当前所要处理的音频片段的起始帧,每个音效控件对应于一种音效类型,该多个音效控件用于用户选择对待编辑视频对应的音频数据添加的目标音效类型,该目标音效类型即为用户想要对该待编辑视频对应的音频数据添加的音效类型。

具体地,该音效设置页面可以如图4所示,该音效设置页面中间的主体部分为预览框,该预览框可以用于终端播放添加完目标音效类型的待编辑视频,该预览框的下方可以具有时间轴以及多个音效控件。其中,该时间轴用于表示上述待编辑视频的音频时长,且,该时间轴上的坐标即为时间刻度,该时间刻度用于表示上述待编辑视频的音频播放时间点。当然,该时间轴可以是带有时间刻度线的线段,也可以不带有时间刻度线,只要该时间轴能够用于表示该待编辑视频的音频时长及其音频播放时间点即可,本发明实施例在此对该时间轴的具体形式不做限定。

进而,在该音效设置页面中,每个音效控件与一个音效类型相关联,如图4所示,与每个音效控件相关联的音效类型可以为魔兽音效、小黄人音效以及留声机音效等,当然,与每个音效控件关联的音效类型也可以为其他音效类型,本发明实施例在此不做限定。

需要说明的是,该音效设置页面中除上述时间轴以及上述多个音效控件之外,还可以具有其他控件,如图4,该音效设置页面中还可以具有保存控件以及音量设置控件等,其中,该保存控件用于对处理完的音频数据以及视频数据进行保存,该音量设置控件用于对上述待编辑视频对应的音量进行调节,本发明实施例在此对该音效设置页面中的多个控件的类型不做限定。此外,除图4所示的该时间轴以及该多个控件的分布位置之外,还可以采用其他方式分布该时间轴以及该多个控件,本发明实施例在此不做限定。

204、终端基于对该时间轴上任一时刻的选中操作,确定起始帧。

在本发明实施例中,基于上述步骤203中的时间轴,该时间轴上还可以具有可移动指针,该可移动指针用于用户对该时间轴上的任一时间刻度进行选中操作,进而,该可移动指针用于终端表示对待编辑视频对应的音频数据进行处理的起始时刻。具体地,用户可以通过任意拖动该可移动指针,来对该时间轴上的任一时间刻度进行选中操作,也即是,用户可以根据需求将该可移动指针拖动到该时间轴上的任一位置。

进一步地,当用户将该可移动指针拖动到该时间轴上的任一位置时,终端可以检测到对该时间轴上的该位置对应的时间刻度的选中操作,进而,终端可以将待编辑视频的音频数据中与该时间刻度对应的位置的音频帧,作为对该待编辑视频对应的音频数据进行处理的起始帧,其中,该起始帧为未经音效处理的音频帧。

在其他实施例中,用户除将该可移动指针拖动到时间轴上的任一位置,来对该时间轴上的任一时刻进行选中操作之外,用户还可以通过其他方式来进行选中操作,进而确定起始帧。例如,用户还可以通过点击该时间轴上的任一位置来进行选中操作,本发明在此对该选中操作的具体实现方式不做限定。

需要说明的是,用户可以对该时间轴上的时间刻度进行多次选中操作,也即是,当终端检测到对该时间轴上的时间刻度进行一次选中操作后,终端基于该选中操作对应的起始帧对音频数据中的一个音频片段完成音效处理之后,用户还可以对该时间轴上的时间刻度再次进行选中操作,以对该待编辑视频对应音频数据的其他音频片段再次进行音效处理,其中,对该其他音频片段添加的音效类型可以与上述一个音频片段对应的音效类型不同,当然也可以相同,本发明实施例在此不做限定。此外,上述一个音频片段与其他音频片段之间互不重叠。

205、当终端检测到对该多个音效控件中目标控件的长按操作时,获取该目标控件对应的目标音效类型。

在本发明实施例中,每个音效控件与相应的音效类型相关联,也即是,该目标控件与目标音效类型相关联。该目标控件为用户根据对目标音效类型的需求所选择的音效控件,该目标音效类型为用户想要对上述起始帧之后的音频片段添加的音效类型,由于每个音效控件都与一个音效类型相关联,因此,用户可以通过长按该目标控件,进而选择符合需求的目标音效类型。具体地,当终端可以检测到用户对该目标控件的长按操作时,可以触发目标音效类型调取指令,进而,终端可以基于该目标音效调取指令,获取与该目标控件相关联的目标音效类型。

需要说明的是,基于上述对目标控件的长按操作,终端可以对待编辑视频的音频数据进行与目标音效类型对应的处理,也即是,该长按操作可以为终端提供对上述音频数据开始处理和结束处理的指令。具体地,当终端检测到对目标控件的长按操作时,则终端开始对起始帧之后的音频帧进行处理,只要终端未检测到长按操作结束,则一直对上述音频帧进行处理,直到终端检测到长按操作结束,则终端停止对上述音频帧进行处理。

进一步地,上述长按操作可以通过用户一直按住目标控件实现,用户松开该目标控件则该长按操作结束,也即是,只要用户一直按住目标控件,终端就对上述起始帧之后的音频帧进行处理。当然,在其他实施例中,也可以通过其他方式来操作该目标控件,使得终端触发开始处理指令和结束处理指令,例如,可以通过用户点击该目标控件,也即是,当用户点击该目标控件时,终端则开始对上述起始帧之后的音频帧进行处理,当用户再次点击该目标控件时,终端则停止对相应的音频帧进行处理,本发明实施例在此对目标控件的操作方式不做限定。

206、终端基于该目标音效类型,对该起始帧之后的音频帧进行变音算法处理,得到多个目标音频帧。

在本发明实施例中,变音算法处理指的是终端对音频帧的音高信息进行处理,使得该音频帧的音调发生变化,进而,终端实现对多个音频帧添加相应的目标音效类型,以得到相应的多个目标音频帧,其中,该多个目标音频帧对应的音高信息与该目标音效类型对应的音高信息相同。

其中,该变音算法可以为变调不变速的算法,具体地,例如在时域上,通过该变调不变速的算法可以改变对应音频帧的基音周期,使得该音频帧的频谱发生改变,进而,改变该音频帧对应的时长,以使得该音频帧的音高信息与上述目标音效类型对应的音高信息相同,也即是,实现了对该音频帧的变调处理。

进一步地,在上述变调的过程中,对应的音速也发生了改变,因此,终端需要对上述音频帧进行重采样,使得对应音频帧的总长度不发生改变,以实现对该音频帧的不变速处理,最终,对起始帧之后的多个音频帧进行上述变调不变速的处理,得到多个目标音频帧。当然,在其他实施例中,终端也可以采用其他变音算法对起始帧之后的多个音频帧进行处理,例如,终端还可以在频域上对上述多个音频帧进行变音算法处理,只要使得得到的目标音频帧的音高信息与目标音效类型的音高信息相同即可,本发明实施例在此不做限定。

上述步骤206即为终端基于目标音效类型,对起始帧之后的音频帧进行音效处理的过程,在其他实施例中,终端还可以对上述音频帧进行其他音效处理,只要能够对上述音频帧添加目标音效类型即可,本发明实施例在此不做限定。

207、终端在该音效设置页面,实时播放进行音效处理完成的多个目标音频帧,并同步播放多个目标音频帧对应的多个视频帧。

在本发明实施例中,基于上述图4中主体部分的预览框,该预览框用于播放上述多个目标音频帧对应的多个视频帧。其中,该预览框对该多个视频帧的播放与终端对上述多个目标音频帧的播放同步进行,且,终端对于该多个目标音频帧的播放与对起始帧之后的音频帧的处理实时进行,也即是,终端对起始帧之后的每个音频帧进行变音算法处理的同时,终端每得到一个目标音频帧,则播放该目标音频帧。

需要说明的是,上述每个目标音频帧的帧长与处理之前的音频帧的帧长相同,因此,每个目标音频帧对应的视频帧与处理之前的音频帧对应的视频帧相同,进而,终端在播放多个目标音频帧的同时,该音效设置页面中的预览框也可以同步播放该多个目标音频帧分别对应的多个视频帧。

进一步地,终端对每一个音频帧进行变音算法处理的时间非常短,通常情况下,终端将一个音频帧处理为对应的目标音频帧的时间在23ms以内,基于该短暂的处理时间,终端在音效设置页面对目标音频帧的播放过程与该目标音频帧的生成过程之间的时间差可以忽略不计,进而,上述生成过程与播放过程可以同步进行。

208、当终端检测到对该目标控件的长按操作结束时,确定该长按操作结束时刻对应的结束帧。

在本发明实施例中,基于步骤205,终端检测到用户对目标控件开始进行长按操作时,终端则开始对该长按操作对应的起始帧之后的音频帧进行音效算法处理,直到终端通过相关检测控件,检测到对该目标控件的长按操作结束时,则触发结束处理命令,终端基于该结束处理命令,结束对音频帧的处理。

其中,上述长按操作结束对应音效设置页面上时间轴的一个时刻,由于该时刻与待编辑视频中的一个音频帧相关联,因此,终端可以将与该时刻相关联的音频帧作为当前目标音效类型所对应的结束帧,该结束帧可以为未经过音效算法处理的音频帧。

此外,用户也可以撤销终端对上述音频帧的处理,例如图4,该音效设置页面上可以具有撤销控件,当终端对一段音频片段进行处理之后,用户可以根据需求自行选择是否保留当前的处理,若用户想要重新对音频片段进行处理,可以对该撤销控件进行点击操作,当终端检测到对该撤销控件的点击操作时,则触发撤销命令,终端基于该撤销命令,撤销对当前音频片段的处理,也即是,对当前添加了目标音效类型的音频片段进行还原。

209、终端将该起始帧和该结束帧之间的多个目标音频帧合并成目标音频片段。

在本发明实施例中,该起始帧和该结束帧都为未经过音效算法处理的音频帧,因此,终端可以基于该起始帧和该结束帧之间的多个目标音频帧,得到目标音频片段,其中,该多个目标音频帧为经过音效算法处理的音频帧。具体地,终端可以将该多个目标音频帧中的每两个相邻目标音频帧首尾相连,也即是,从上述起始帧之后的第一个目标音频帧开始,按照时间顺序,每得到一个目标音频帧,终端则将该目标音频帧的头部与上一个目标音频帧的尾部相连,一直连接到上述结束帧之前的最后一个目标音频帧,从而,终端将该起始帧与该结束帧之间的多个目标音频帧合并成目标音频片段。

上述步骤209即为终端基于该起始帧和该结束帧,确定目标音频片段的过程,当然,在其他实施例中,终端还可以通过其他方式来确定该目标音频片段,本发明实施例在此不做限定。

上述步骤205至步骤209即为当终端检测到对该多个音效控件中目标控件的长按操作时,以该起始帧为起点进行目标音效类型对应的音效处理,直到检测到该长按操作结束,基于该长按操作结束时刻对应的结束帧,确定目标音频片段的过程,上述过程为终端基于一个目标音效类型,确定一个与该目标音效类型对应的目标音频片段的过程,当然,终端确定完一个目标音频片段之后,还可以基于上述过程,再次基于其他目标音效类型,确定其他目标音效片段,也即是,终端可以基于多个目标音效类型,多次进行上述步骤204至步骤209的过程,将待编辑视频的音频数据处理为多个目标音频片段,其中,每个目标音频片段可以对应一种目标音效类型,本发明实施例在此不做限定。

210、终端基于该目标音频片段,生成目标音频数据。

在本发明实施例中,该多个目标音频片段中每两个目标音频片段可以相邻,也可以不相邻。具体地,当每两个目标音频片段相邻时,可以将该每两个相邻的目标音效片段首尾相连,从而,将该多个目标音频片段合并成目标音频数据;当每两个目标音频片段不相邻时,将每个目标音频片段的首部分别和与其相邻的未经音效算法处理的音频片段的尾部相连,同理,将每个目标音频片段的尾部分别和与其相邻的未经音效算法处理的音频片段的首部相连,从而,将该多个目标音频片段与未经音效算法处理的音频片段合并为目标音频数据。

基于上述过程生成目标音频数据之后,可以将该目标音频数据保存至终端的文件夹中,以供后续调用,当然,终端也可以将该目标音频数据上传至服务器中,后续可以从服务器中获取该目标音频数据,本发明实施例在此不做限定。

具体地,如图4,可以通过该音效设置页面上的保存控件对该目标音频数据进行保存,当终端检测到对该保存控件的点击操作时,终端可以跳转到保存页面,用户可以基于该保存页面选择将该目标音频数据存储至本地文件夹或者将该目标音频数据上传至服务器中。当然,也可以通过其他控件来对该目标音频数据进行保存,本发明实施例在此不做限定。

本发明实施例基于音效设置页面上的时间轴以及多个音效控件,可以确定多个目标音频片段,实现了对整个音频数据的分段处理,进而,可以分别使得每个目标音频片段与相应的目标音效类型对应,从而可以对整个音频数据添加至少一种目标音效,满足了用于对目标音效的多样化需求。

上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。

图5是本发明实施例提供的一种数据处理装置的结构示意图。参见图5,该装置包括:显示模块501、确定模块502、处理模块503、生成模块504。

显示模块501,用于显示音效设置页面,该音效设置页面具有待编辑视频的时间轴和多个音效控件;

确定模块502,用于基于对该时间轴上任一时刻的选中操作,确定起始帧;

处理模块503,用于当检测到对该多个音效控件中目标控件的长按操作时,以该起始帧为起点进行目标音效类型对应的音效处理,直到检测到该长按操作结束,基于该长按操作结束时刻对应的结束帧,确定目标音频片段,该目标音效类型与该目标控件相对应;

生成模块504,用于基于该目标音频片段,生成目标音频数据。

在一些实施例中,该装置还包括:

该显示模块501,还用于显示视频编辑页面,该视频编辑页面具有音效设置控件;

跳转模块,用于当检测到对该音效设置控件的点击操作时,跳转到该音效设置页面。

在一些实施例中,该处理模块503包括:

获取单元,用于当检测到对该多个音效控件中目标控件的长按操作时,获取该目标控件对应的目标音效类型;

处理单元,用于基于该目标音效类型,对该起始帧之后的音频帧进行音效处理;

确定单元,用于当检测到对该目标控件的长按操作结束时,确定该长按操作结束时刻对应的结束帧;

该确定单元,还用于基于该起始帧和该结束帧,确定目标音频片段。

在一些实施例中,该处理单元还用于:

基于该目标音效类型,对该起始帧之后的音频帧进行变音算法处理,得到多个目标音频帧,该多个目标音频帧的音高信息与该目标音效类型的音高信息相同。

在一些实施例中,该确定单元还用于:

将该起始帧和该结束帧之间的多个目标音频帧合并成目标音频片段。

在一些实施例中,该装置还包括:

播放模块,用于在该音效设置页面,实时播放进行音效处理完成的多个目标音频帧,并同步播放多个目标音频帧对应的多个视频帧。

本发明实施例基于音效设置页面上的时间轴以及多个音效控件,可以确定多个目标音频片段,实现了对整个音频数据的分段处理,进而,可以分别使得每个目标音频片段与相应的目标音效类型对应,从而可以对整个音频数据添加至少一种目标音效,满足了用于对目标音效的多样化需求。

需要说明的是:上述实施例提供的数据处理装置在数据处理时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的数据处理装置与数据处理方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。

图6是本发明实施例提供的一种终端600的结构框图。该终端600可以是:智能手机、平板电脑、mp3播放器(movingpictureexpertsgroupaudiolayeriii,动态影像专家压缩标准音频层面3)、mp4(movingpictureexpertsgroupaudiolayeriv,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端600还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。

通常,终端600包括有:处理器601和存储器602。

处理器601可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器601可以采用dsp(digitalsignalprocessing,数字信号处理)、fpga(field-programmablegatearray,现场可编程门阵列)、pla(programmablelogicarray,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器601也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称cpu(centralprocessingunit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器601可以在集成有gpu(graphicsprocessingunit,图像处理器),gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器601还可以包括ai(artificialintelligence,人工智能)处理器,该ai处理器用于处理有关机器学习的计算操作。

存储器602可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器602还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器602中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器601所执行以实现本发明中方法实施例提供的数据处理方法。

在一些实施例中,终端600还可选包括有:外围设备接口603和至少一个外围设备。处理器601、存储器602和外围设备接口603之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口603相连。具体地,外围设备包括:射频电路604、触摸显示屏605、摄像头606、音频电路607、定位组件608和电源609中的至少一种。

外围设备接口603可被用于将i/o(input/output,输入/输出)相关的至少一个外围设备连接到处理器601和存储器602。在一些实施例中,处理器601、存储器602和外围设备接口603被集成在同一芯片或电路板上;在一些其他实施例中,处理器601、存储器602和外围设备接口603中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。

射频电路604用于接收和发射rf(radiofrequency,射频)信号,也称电磁信号。射频电路604通过电磁信号与通信网络以及其他通信设备进行通信。射频电路604将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路604包括:天线系统、rf收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路604可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2g、3g、4g及5g)、无线局域网和/或wifi(wirelessfidelity,无线保真)网络。在一些实施例中,射频电路604还可以包括nfc(nearfieldcommunication,近距离无线通信)有关的电路,本发明对此不加以限定。

显示屏605用于显示ui(userinterface,用户界面)。该ui可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏605是触摸显示屏时,显示屏605还具有采集在显示屏605的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器601进行处理。此时,显示屏605还可以用于提供虚拟控件和/或虚拟键盘,也称软控件和/或软键盘。在一些实施例中,显示屏605可以为一个,设置终端600的前面板;在另一些实施例中,显示屏605可以为至少两个,分别设置在终端600的不同表面或呈折叠设计;在再一些实施例中,显示屏605可以是柔性显示屏,设置在终端600的弯曲表面上或折叠面上。甚至,显示屏605还可以设置成非矩形的不规则图形,也即异形屏。显示屏605可以采用lcd(liquidcrystaldisplay,液晶显示屏)、oled(organiclight-emittingdiode,有机发光二极管)等材质制备。

摄像头组件606用于采集图像或视频。可选地,摄像头组件606包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及vr(virtualreality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件606还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。

音频电路607可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器601进行处理,或者输入至射频电路604以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端600的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器601或射频电路604的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路607还可以包括耳机插孔。

定位组件608用于定位终端600的当前地理位置,以实现导航或lbs(locationbasedservice,基于位置的服务)。定位组件608可以是基于美国的gps(globalpositioningsystem,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。

电源609用于为终端600中的各个组件进行供电。电源609可以是交流电、直流电、一次性电池或可充电电池。当电源609包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。

在一些实施例中,终端600还包括有一个或多个传感器610。该一个或多个传感器610包括但不限于:加速度传感器611、陀螺仪传感器612、压力传感器613、指纹传感器614、光学传感器615以及接近传感器616。

加速度传感器611可以检测以终端600建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器611可以用于检测重力加速度在三个坐标轴上的分量。处理器601可以根据加速度传感器611采集的重力加速度信号,控制触摸显示屏605以横向视图或纵向视图进行用户界面的显示。加速度传感器611还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器612可以检测终端600的机体方向及转动角度,陀螺仪传感器612可以与加速度传感器611协同采集用户对终端600的3d动作。处理器601根据陀螺仪传感器612采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变ui)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器613可以设置在终端600的侧边框和/或触摸显示屏605的下层。当压力传感器613设置在终端600的侧边框时,可以检测用户对终端600的握持信号,由处理器601根据压力传感器613采集的握持信号进行左右手识别或快捷操作。当压力传感器613设置在触摸显示屏605的下层时,由处理器601根据用户对触摸显示屏605的压力操作,实现对ui界面上的可操作性控件进行控制。可操作性控件包括控件控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器614用于采集用户的指纹,由处理器601根据指纹传感器614采集到的指纹识别用户的身份,或者,由指纹传感器614根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器601授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器614可以被设置终端600的正面、背面或侧面。当终端600上设置有物理按键或厂商logo时,指纹传感器614可以与物理按键或厂商logo集成在一起。

光学传感器615用于采集环境光强度。在一个实施例中,处理器601可以根据光学传感器615采集的环境光强度,控制触摸显示屏605的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏605的显示亮度;当环境光强度较低时,调低触摸显示屏605的显示亮度。在另一个实施例中,处理器601还可以根据光学传感器615采集的环境光强度,动态调整摄像头组件606的拍摄参数。

接近传感器616,也称距离传感器,通常设置在终端600的前面板。接近传感器616用于采集用户与终端600的正面之间的距离。在一个实施例中,当接近传感器616检测到用户与终端600的正面之间的距离逐渐变小时,由处理器601控制触摸显示屏605从亮屏状态切换为息屏状态;当接近传感器616检测到用户与终端600的正面之间的距离逐渐变大时,由处理器601控制触摸显示屏605从息屏状态切换为亮屏状态。

本领域技术人员可以理解,图6中示出的结构并不构成对终端600的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。

图7是本发明实施例提供的一种服务器的结构示意图,该服务器700可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(centralprocessingunits,cpu)701和一个或一个以上的存储器702,其中,该存储器702中存储有至少一条指令,上述至少一条指令由该处理器701加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。

在示例性实施例中,还提供了一种计算机可读存储介质,例如包括指令的存储器,上述指令可由终端中的处理器执行以完成上述实施例中数据处理方法。例如,该计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,上述程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。

以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1