一种语音转换主动防御方法、装置、系统及存储介质

文档序号:36511006发布日期:2023-12-29 10:15阅读:来源:国知局

技术特征:

1.一种语音转换主动防御方法,其特征在于,包括:

2.根据权利要求1所述的语音转换主动防御方法,其特征在于,所述生成器网络包括连接的编码器网络和解码器网络,所述编码器网络对输入的干净样本进行下采样获取隐层向量并将其输入至所述解码器网络,由所述解码器网络根据所述隐层向量生成对抗扰动;

3.根据权利要求1所述的语音转换主动防御方法,其特征在于,所述判别器网络包括连接的一个卷积层、六个跳跃连接平均池化层和一个全连接层,所述跳跃连接平均池化层与全连接层之间使用leaky relu激活函数,所述全连接层还连接有sigmoid激活函数,所述判别器网络在训练时辅助所述生成器网路进行训练,使所述生成器网络生成的对抗样本拟合所述干净样本的数据分布。

4.根据权利要求1所述的语音转换主动防御方法,其特征在于,所述损失函数包括gan损失函数、用于使所述对抗扰动具有攻击性的攻击损失函数和用于使所述对抗扰动不可感知的质量损失函数,所述gan损失函数包括用于衡量所述判别器网络对所述对抗样本和干净样本的判别准确性的判别器损失函数和用于使所述判别器网络无法判别所述对抗样本和干净样本的差异的生成器损失函数,所述判别器损失函数的计算公式为:

5.根据权利要求1所述的语音转换主动防御方法,其特征在于,设置训练参数包括:

6.根据权利要求1所述的语音转换主动防御方法,其特征在于,对所述gan网络中的生成器网络和判别器网络进行训练包括:

7.根据权利要求1所述的语音转换主动防御方法,其特征在于,各所述语音转换模型的输入包括源语音和目标语音,各所述语音转换模型将输入的源语音和目标语音分别解耦成内容特征和声纹特征,并将所述源语音的内容特征和所述目标语音的声纹特征结合,获取转换语音。

8.一种语音转换主动防御装置,其特征在于,包括:

9.一种语音转换主动防御系统,其特征在于,包括处理器及存储介质;

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1~7任一项所述方法的步骤。


技术总结
本发明公开了一种语音转换主动防御方法、装置、系统及存储介质,属于音频主动防御技术领域,方法包括:基于预构建的GAN网络,设置损失函数和训练参数,并对所述GAN网络中的生成器网络和判别器网络进行训练;将读取到的干净样本输入至训练好的生成器网络生成对抗扰动,并将所述对抗扰动加至所述干净样本,获取对抗样本;将所述对抗样本输入至预训练的各语音转换模型进行测试,利用测试好的对抗样本进行语音转换主动防御;其中,所述判别器网络能够判别所述对抗样本和干净样本的差异。该方法能够快速生成对抗扰动,对语音转换模型进行主动防御,保护说话人的隐私。

技术研发人员:陈北京,董仕杭
受保护的技术使用者:南京信息工程大学
技术研发日:
技术公布日:2024/1/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1