一种语音增强方法、装置及电子设备与流程

文档序号:17051375发布日期:2019-03-05 20:11阅读:199来源:国知局
一种语音增强方法、装置及电子设备与流程

本发明涉及信号处理技术领域,特别是涉及一种语音增强方法、装置及电子设备。



背景技术:

在一些应用场景中,比如手机通讯、音频监控等场景中,通常需要采集场景中的语音数据。一般来说,采集到的语音数据中大多包含场景噪声,为了提高语音数据的清晰度,通常需要对采集到的语音数据进行增强处理。

现有的语音增强方案中,通常都是利用与当前帧相邻的一帧或几帧数据,对当前帧进行修正,以实现对当前帧的语音增强。这种方案大多应用于噪声较平稳的场景,如果场景中噪声不平稳,比如场景中突然出现了异常噪声,导致相邻帧之间差别较大,比如:获取的当前帧中噪声很大,而当前帧之前的数据帧中噪声较小,或者获取的当前帧中噪声很小,而当前帧之前的数据帧中噪声较大;这种情况下,应用这种方案,利用差别较大的数据帧对当前帧进行修正,效果较差。



技术实现要素:

本发明实施例的目的在于提供一种语音增强方法、装置及电子设备,以提高语音增强效果。

为达到上述目的,本发明实施例提供一种语音增强方法,包括:

获取待增强语音数据,并提取所述语音数据的特征值;

将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值;其中,所述深层神经网络模型为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到;

根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

可选的,所述提取所述语音数据的特征值的步骤,可以包括:

对所述语音数据进行预处理,得到每个数据帧;

将所述每个数据帧由时域转换至频域;

利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;

对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

可选的,所述对所述语音数据进行预处理,得到每个数据帧的步骤,包括:

对所述语音数据进行预加重处理,得到加重后数据;

对所述加重后数据进行分帧处理,得到分帧数据;

利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

可选的,所述对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值的步骤,可以包括:

对滤波后的每个数据帧进行对数域离散余弦变换,得到梅尔频率倒谱系数mfcc值,将所述mfcc值作为所述语音数据的特征值。

可选的,训练得到所述深层神经网络模型的过程可以包括:

对深层神经网络模型的模型参数进行初始化;

利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

根据所述训练后的模型参数,构建所述深层神经网络模型。

可选的,所述对深层神经网络模型的模型参数进行初始化的步骤,可以包括:

利用无监督学习算法,对包含噪声的语音样本进行学习,得到初始化模型参数。

可选的,所述根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据的步骤,可以包括:

将所述增强特征值进行逆离散余弦变换,得到幅度值;

获取所述待增强语音数据的相位值;

将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

为达到上述目的,本发明实施例还提供一种语音增强装置,包括:

获取模块,用于获取待增强语音数据,

提取模块,用于提取所述语音数据的特征值;

输入模块,用于将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值;其中,所述深层神经网络模型为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到;

重构模块,用于根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

可选的,所述提取模块,可以包括:

预处理子模块,用于对所述语音数据进行预处理,得到每个数据帧;

转换子模块,用于将所述每个数据帧由时域转换至频域;

滤波子模块,用于利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;

变换子模块,用于对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

可选的,所述预处理子模块,具体可以用于:

对所述语音数据进行预加重处理,得到加重后数据;

对所述加重后数据进行分帧处理,得到分帧数据;

利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

可选的,所述滤波子模块,具体可以用于:

对滤波后的每个数据帧进行对数域离散余弦变换,得到梅尔频率倒谱系数mfcc值,将所述mfcc值作为所述语音数据的特征值。

可选的,所述装置还包括:

训练模块,用于训练得到所述深层神经网络模型;

所述训练模块,可以包括:

初始化子模块,用于对深层神经网络模型的模型参数进行初始化;

训练子模块,用于利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

构建子模块,用于根据所述训练后的模型参数,构建所述深层神经网络模型。

可选的,所述初始化子模块,具体可以用于:

利用无监督学习算法,对包含噪声的语音样本进行学习,得到初始化模型参数。

可选的,所述重构模块,具体可以用于:

将所述增强特征值进行逆离散余弦变换,得到幅度值;

获取所述待增强语音数据的相位值;

将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

为达到上述目的,本发明实施例还提供一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

存储器,用于存放计算机程序;

处理器,用于执行存储器上所存放的程序时,实现上述任一种语音增强方法。

为达到上述目的,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一种语音增强方法。

应用本发明所示实施例,利用深层神经网络模型进行语音增强,该深层神经网络模型基于大量语音样本(不包含噪声的语音样本及包含噪声的语音样本)训练得到,携带有丰富的语音信息,即使场景中出现异常噪声,语音增强效果不受影响,相比于现有方案,提高了语音增强效果。

当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种语音增强方法的流程示意图;

图2为本发明实施例提供的一种训练深层神经网络模型的流程示意图;

图3为本发明实施例提供的一种深层神经网络模型示意图;

图4为本发明实施例提供的一种语音增强装置的结构示意图;

图5为本发明实施例提供的一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

为了解决上述技术问题,本发明实施例提供了一种语音增强方法、装置及电子设备,该方法可以应用于手机、电脑等各种电子设备,具体不做限定。下面首先对本发明实施例提供的一种语音增强方法进行详细说明。

图1为本发明实施例提供的一种语音增强方法的流程示意图,包括:

s101:获取待增强语音数据。

执行本方案的设备(以下简称本设备)可以具有语音采集功能,该待增强语音数据可以为本设备自身采集的语音数据。或者,本设备也可以从其他语音采集设备中获取待增强语音数据。本设备可以实时地对获取的语音数据进行语音增强,或者,本设备也可以根据用户指令,确定待增强语音数据,仅对所确定的语音数据进行语音增强,这都是合理的。

s102:提取所述语音数据的特征值。

对s101中获取的语音数据进行特征值提取,具体的,可以对所述语音数据进行预处理,得到每个数据帧;将所述每个数据帧由时域转换至频域;利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

上述对语音数据进行预处理的过程可以包括:对所述语音数据进行预加重处理,得到加重后数据;对所述加重后数据进行分帧处理,得到分帧数据;利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

具体的,该预加重处理可以利用高通滤波器对语音数据进行过滤,该高通滤波器可以为:h(z)=1-μz-1,其中,h(z)表示语音数据的系统函数,μ的取值可以介于0.9-1.0之间,具体数值可以根据实际情况来设定。

本领域技术人员可以理解,通过预加重处理,一方面,可以提升语音数据的高频分量,使得语音数据的频谱变得平坦,信噪比的稳定性较好;另一方面,可以降低声带和嘴唇效应造成的影响,补偿语音数据受到发音系统所抑制的高频部分,突出高频的共振峰。

或者,也可以利用其他方式进行预加重处理,具体不做限定。

对经过预加重处理的数据(加重后数据)进行分帧,一般来说,可以将信息分成10ms-30ms一帧,或者,也可以根据实际情况,确定每帧长度。通常情况下,每帧之间可以存在重叠区域,比如,可以采用交叠分段的方法,前一帧和后一帧的交叠部分称为帧移,帧移与帧长的比值一般为0~0.5,这样可以有效避免数据丢失。

经过分帧处理后,再利用预设窗函数对数据进行加窗处理。本领域技术人员可以理解,加窗处理可以使语音数据连续性更好,减少吉布斯效应的影响,加窗处理后,语音数据能够更好地呈现出周期函数的部分特征。具体的窗函数可以根据实际情况来设定,比如,可以选择汉明窗,汉明窗的主瓣宽度较宽,旁瓣衰减较大,具有较平滑的低通特性,能够较好的反应短时信号的频率特性,频谱泄露情况较少。或者,也可以采用其他窗函数,具体不做限定。

经过加窗处理后,便得到了每个数据帧,可以通过傅里叶变换,将每个数据帧由时域转换至频域。

作为一种实施方式,可以对转换至频域的每个数据帧进行滤波,具体的,可以利用mel尺度的三角形滤波器对数据帧进行处理。这样,数据帧便会携带mel尺度特性,而且经过滤波处理后,数据的频谱更平滑,还可以消除谐波,降低方案的运算量。

然后对滤波后的每个数据帧进行离散余弦变换:

第一种实施方式,可以直接对滤波后的每个数据帧进行离散余弦变换,得到特征值。

第二种实施方式,可以对滤波后的每个数据帧进行对数域离散余弦变换,也就是说,获取上述三角形滤波器输出的数据后,先计算该数据的对数,再对得到的对数进行离散余弦变换。

在本实施方式中,在离散余弦变换中加入对数能量,也就是增加了一维特征,可以提高特征值的准确度。经过对数域离散余弦变换,得到梅尔频率倒谱系数mfcc值。

作为一种实施方式,可以将该mfcc值作为s101所获取语音数据的特征值。本领域技术人员可以理解,以mfcc值作为特征值,可以减少语音数据中音调的影响,提高语音增强效果。

或者,作为另一种实施方式,可以进一步确定s101语音数据的对数谱特征等其他特征,将这些其他特征与mfcc值一并作为s101所获取语音数据的特征值。可以理解,特征值的种类越多,准确度越高。

本实施例中,也可以利用其他方式,提取语音数据的其他特征值,具体不做限定。

s103:将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值。

其中,所述深层神经网络模型(deepneuralnetworks,dnn)为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到。

具体的,训练得到该深层神经网络模型的过程可以如图2所示,包括:

s201:对深层神经网络模型的模型参数进行初始化;

s202:利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

s203:根据所述训练后的模型参数,构建所述深层神经网络模型。

上述“包含噪声的语音样本”、以及“不包含噪声的语音样本”可以从一些开源数据库中获取,比如timit数据库等,或者,也可以自行录制,具体不做限定。需要说明的是,该“包含噪声的语音样本”与“不包含噪声的语音样本”存在对应关系,也就是说,该不包含噪声的语音样本为:包含噪声的语音样本对应的干净语音样本。

作为一种实施方式,可以先录制干净语音样本(不包含噪声的语音样本),然后在该干净语音样本中加入一些特定噪声,得到包含噪声的语音样本。可以在每份干净语音样本中分别加入一种特定噪声,比如,针对干净语音样本a,在a中加入枪声,得到包含噪声的语音样本a1,在a中加入机器轰鸣声,得到包含噪声的语音样本a2,在a中加入哭声,得到包含噪声的语音样本a3,等等,也就是说,一份干净语音样本可以对应多份包含噪声的语音样本。

或者,也可以在一份干净语音样本中加入多种混合噪声,比如,在上述干净语音样本a中加入枪声和哭声,得到包含噪声的语音样本a4,在a中加入机器轰鸣声和哭声,得到包含噪声的语音样本a5,在a中加入机器轰鸣声和枪声,得到包含噪声的语音样本a6,在a中加入机器轰鸣声、枪声和哭声,得到包含噪声的语音样本a7,等等。

本领域技术人员可以理解,用于训练的语音样本种类越多,数量越大,训练得到的深层神经网络模型携带的信息越丰富,利用该模型进行语音增强的效果越好。

深层神经网络可以包括很多层级,比如图3中所示,深层神经网络可以包含输入层、多个隐层及输出层,输出层可以通过softmax函数进行分类输出,具体不做限定。其中,网络中的层级、以及层级中的参数可以根据实际情况进行设定。

先对模型中各层参数(模型参数)进行初始化。初始化方式有多种,比如随机初始化,或者,初始化为设定值。作为一种实施方式,可以利用无监督学习算法,对包含噪声的语音样本进行学习训练。无监督学习算法有多种,比如逐层受限玻尔兹曼机(rbm,restrictedboltzmannmachine)算法等,具体不做限定。通过无监督学习,可以得到初始化模型参数。

然后利用神经网络学习算法,比如bp(errorbackpropagation,误差反向传播)算法迭代求解,并采用softmaxloss函数计算分类误差,由底层至顶层反向传播,依次确定各层参数;当平均误差不再下降,或者停留在一个范围内时,停止迭代,得到各层参数,便构建出深层神经网络模型。该神经网络学习算法也可以采用其他算法,具体不做限定。

由上面描述可知,深层神经网络模型是基于包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到的,也可以理解为,深层神经网络模型中携带了包含噪声的语音样本与干净语音样本的对应关系。

s101中获取的语音数据为包含噪声的语音数据,s102中得到的特征值为该“包含噪声的语音数据”的特征值,将该特征值输入至该模型,根据模型中“包含噪声的语音样本与干净语音样本的对应关系”,可以输出增强特征值,也可以理解为干净语音样本的特征值。因此,s103中得到了干净语音样本的特征值。

s104:根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

本领域人员可以理解,波形重构与提取特征值的过程相反。在上述一种实施方式中,s102中提取的特征值为mfcc值,如果s103中将mfcc值输入深层神经网络模型,则输出的增强特征值也为mfcc值。这种实施方式下进行波形重构,可以理解为将深层神经网络模型输出的mfcc值(s103中得到的增强特征值)反变换到语音数据中。

具体的,s104可以包括:将所述增强特征值进行逆离散余弦变换,得到幅度值;获取所述待增强语音数据的相位值;将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

本领域技术人员可以理解,将深层神经网络模型输出的mfcc值进行逆离散余弦变换,可以得到幅度值。另外,提取s101中语音数据的相位值,将该幅度值与该相位值进行叠加,便得到了增强后的语音数据。

在上述另外一些实施方式中,s102中提取的特征值不仅包括mfcc值,还包含对数谱特征等其他特征,这些实施方式中,s103中将mfcc值、及对数谱特征等其他特征输入深层神经网络模型,相对应的,输出的增强特征值也包含mfcc值、对数谱特征等其他特征。这种情况下进行波形重构,可以理解为将深层神经网络模型输出的mfcc值、对数谱特征等其他特征一并反变换到语音数据中。

如果场景中噪声不平稳,比如场景中突然出现了异常噪声,导致相邻帧之间差别较大,比如:获取的当前帧中噪声很大,而当前帧之前的数据帧中噪声较小,或者获取的当前帧中噪声很小,而当前帧之前的数据帧中噪声较大;应用本方案,对添加了该异常噪声的语音样本、以及未添加该异常噪声的语音样本(干净样本)进行训练,得到深层神经网络模型,也可以理解为,该深层神经网络模型中包含“添加了该异常噪声的语音样本”与“未添加该异常噪声的语音样本(干净样本)”的对应关系,获取该场景中的语音数据,该语音数据中包含异常噪声,提取该语音数据的特征值,将该特征值输入至该深层神经网络模型,便可以得到对应的干净样本的特征值(增强特征值),利用该增强特征值,对该语音数据进行波形重构,得到了增强后的语音数据;由此可见,本方案并不会受到场景中异常噪声的影响,语音增强效果较佳。

应用本发明所示实施例,利用深层神经网络模型进行语音增强,该深层神经网络模型基于大量语音样本(不包含噪声的语音样本及包含噪声的语音样本)训练得到,携带有丰富的语音信息,即使场景中出现异常噪声,语音增强效果不受影响,相比于现有方案,提高了语音增强效果。

与上述方法实施例相对应,本发明实施例还提供了一种语音增强装置。

图4为本发明实施例提供的一种语音增强装置的结构示意图,包括:

获取模块401,用于获取待增强语音数据,

提取模块402,用于提取所述语音数据的特征值;

输入模块403,用于将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值;其中,所述深层神经网络模型为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到;

重构模块404,用于根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

作为一种实施方式,提取模块402,可以包括:预处理子模块、转换子模块、滤波子模块和变换子模块(图中未示出),其中,

预处理子模块,用于对所述语音数据进行预处理,得到每个数据帧;

转换子模块,用于将所述每个数据帧由时域转换至频域;

滤波子模块,用于利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;

变换子模块,用于对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

作为一种实施方式,所述预处理子模块,具体可以用于:

对所述语音数据进行预加重处理,得到加重后数据;

对所述加重后数据进行分帧处理,得到分帧数据;

利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

作为一种实施方式,所述滤波子模块,具体可以用于:

对滤波后的每个数据帧进行对数域离散余弦变换,得到梅尔频率倒谱系数mfcc值,将所述mfcc值作为所述语音数据的特征值。

作为一种实施方式,所述装置还可以包括:

训练模块(图中未示出),用于训练得到所述深层神经网络模型;

所述训练模块,可以包括:

初始化子模块,用于对深层神经网络模型的模型参数进行初始化;

训练子模块,用于利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

构建子模块,用于根据所述训练后的模型参数,构建所述深层神经网络模型。

作为一种实施方式,所述初始化子模块,具体可以用于:

利用无监督学习算法,对包含噪声的语音样本进行学习,得到初始化模型参数。

作为一种实施方式,重构模块404,具体可以用于:

将所述增强特征值进行逆离散余弦变换,得到幅度值;

获取所述待增强语音数据的相位值;

将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

应用本发明图4所示实施例,利用深层神经网络模型进行语音增强,该深层神经网络模型基于大量语音样本(不包含噪声的语音样本及包含噪声的语音样本)训练得到,携带有丰富的语音信息,即使场景中出现异常噪声,语音增强效果不受影响,相比于现有方案,提高了语音增强效果。

与上述方法实施例相对应,本发明实施例还提供了一种电子设备,如图5所示,包括处理器501、通信接口502、存储器503和通信总线504,其中,处理器501,通信接口502,存储器503通过通信总线504完成相互间的通信,

存储器503,用于存放计算机程序;

处理器501,用于执行存储器503上所存放的程序时,实现如下步骤:

获取待增强语音数据,并提取所述语音数据的特征值;

将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值;其中,所述深层神经网络模型为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到;

根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

对所述语音数据进行预处理,得到每个数据帧;

将所述每个数据帧由时域转换至频域;

利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;

对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

对所述语音数据进行预加重处理,得到加重后数据;

对所述加重后数据进行分帧处理,得到分帧数据;

利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

对滤波后的每个数据帧进行离散余弦变换,得到梅尔频率倒谱系数mfcc值,将所述mfcc值作为所述语音数据的特征值。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

对深层神经网络模型的模型参数进行初始化;

利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

根据所述训练后的模型参数,构建所述深层神经网络模型。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

利用无监督学习算法,对包含噪声的语音样本进行学习,得到初始化模型参数。

作为一种实施方式,处理器501,还用于执行存储器503上所存放的程序时,实现如下步骤:

将所述增强特征值进行逆离散余弦变换,得到幅度值;

获取所述待增强语音数据的相位值;

将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

上述电子设备提到的通信总线可以是外设部件互连标准(peripheralpomponentinterconnect,简称pci)总线或扩展工业标准结构(extendedindustrystandardarchitecture,简称eisa)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。

通信接口用于上述电子设备与其他设备之间的通信。

存储器可以包括随机存取存储器(randomaccessmemory,简称ram),也可以包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。

上述的处理器可以是通用处理器,包括中央处理器(centralprocessingunit,简称cpu)、网络处理器(networkprocessor,简称np)等;还可以是数字信号处理器(digitalsignalprocessing,简称dsp)、专用集成电路(applicationspecificintegratedcircuit,简称asic)、现场可编程门阵列(field-programmablegatearray,简称fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

应用本发明图5所示实施例,利用深层神经网络模型进行语音增强,该深层神经网络模型基于大量语音样本(不包含噪声的语音样本及包含噪声的语音样本)训练得到,携带有丰富的语音信息,即使场景中出现异常噪声,语音增强效果不受影响,相比于现有方案,提高了语音增强效果。

本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时,实现如下步骤:

获取待增强语音数据,并提取所述语音数据的特征值;

将所述特征值输入至预先训练得到的深层神经网络模型,得到增强特征值;其中,所述深层神经网络模型为:对包含噪声的语音样本及其对应的不包含噪声的语音样本进行训练得到;

根据所述增强特征值,对所述语音数据进行波形重构,得到增强后的语音数据。

作为一种实施方式,还用于实现如下步骤:

对所述语音数据进行预处理,得到每个数据帧;

将所述每个数据帧由时域转换至频域;

利用预设尺度的三角形滤波器,对转换至频域的每个数据帧进行滤波;

对滤波后的每个数据帧进行离散余弦变换,得到所述语音数据的特征值。

作为一种实施方式,还用于实现如下步骤:

对所述语音数据进行预加重处理,得到加重后数据;

对所述加重后数据进行分帧处理,得到分帧数据;

利用预设窗函数对所述分帧数据进行加窗处理,得到每个数据帧。

作为一种实施方式,还用于实现如下步骤:

对滤波后的每个数据帧进行离散余弦变换,得到梅尔频率倒谱系数mfcc值,将所述mfcc值作为所述语音数据的特征值。

作为一种实施方式,还用于实现如下步骤:

对深层神经网络模型的模型参数进行初始化;

利用神经网络学习算法,对包含噪声的语音样本及其对应的不包含噪声的语音样本进行学习训练,得到训练后的模型参数;

根据所述训练后的模型参数,构建所述深层神经网络模型。

作为一种实施方式,还用于实现如下步骤:

利用无监督学习算法,对包含噪声的语音样本进行学习,得到初始化模型参数。

作为一种实施方式,还用于实现如下步骤:

将所述增强特征值进行逆离散余弦变换,得到幅度值;

获取所述待增强语音数据的相位值;

将所述幅度值与所述相位值进行叠加,得到增强后的语音数据。

应用本发明所示实施例,利用深层神经网络模型进行语音增强,该深层神经网络模型基于大量语音样本(不包含噪声的语音样本及包含噪声的语音样本)训练得到,携带有丰富的语音信息,即使场景中出现异常噪声,语音增强效果不受影响,相比于现有方案,提高了语音增强效果。

需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于图4所示的语音增强装置实施例、图5所示的电子设备实施例而言,由于其基本相似于图1、2所示的语音增强方法实施例,所以描述的比较简单,相关之处参见图1、2所示的语音增强方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1