音频降噪方法、装置、电子设备及存储介质制造方法及图纸

本申请实施例公开了一种音频降噪方法、装置、电子设备及存储介质。所述方法包括：获取待降噪音频；获取所述待降噪音频对应用户的声纹特征，所述声纹特征为对所述用户的注册音频进行特征提取后得到的；将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。降噪模型结合用户的声纹特征，从待降噪音频中找到与该声纹特征对应的音频，将与该声纹特征对应的音频进行输出，完成了对待降噪音频的降噪，得到了不包含其他用户的干扰音频以及背景噪音的与该声纹特征对应的用户的降噪后的音频，提高了对用户的待降噪音频的降噪效果。音频的降噪效果。音频的降噪效果。

Audio noise reduction method, device, electronic equipment and storage medium

【技术实现步骤摘要】
音频降噪方法、装置、电子设备及存储介质


[0001]本申请属于音频处理
，具体涉及一种音频降噪方法、装置、电子设备及存储介质。

技术介绍

[0002]随着音频处理技术的日益发展，日常生活中音频数据的使用也越发的普遍。在一些情况下，存在多种噪声数据和设备信号的干扰，使得音频质量会受到一定的影响，因此出现了音频降噪技术。但相关的音频降噪方式中，对音频进行降噪的降噪效果还有待提高。

技术实现思路

[0003]鉴于上述问题，本申请提出了一种音频降噪方法、装置、电子设备以及存储介质，以实现改善上述问题。
[0004]第一方面，本申请实施例提供了一种音频降噪方法，应用于电子设备，所述方法包括：获取待降噪音频；获取所述待降噪音频对应用户的声纹特征，所述声纹特征为对所述用户的注册音频进行信息提取后得到的；将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。
[0005]第二方面，本申请实施例提供了一种音频降噪方法，应用于降噪系统，所述降噪系统包括电子设备和服务器，所述方法包括：所述电子设备获取用户的注册音频，并将所述注册音频发送给所述服务器；所述服务器基于所述注册音频，获取所述用户的声纹特征，并向所述电子设备返回所述声纹特征；所述电子设备获取所述用户的待降噪音频；所述电子设备将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。
[0006]第三方面，本申请实施例提供了一种音频降噪装置，运行于电子设备，所述装置包括：第一音频获取单元，用于获取待降噪音频；信息获取单元，用于获取所述待降噪音频对应用户的声纹特征，所述声纹特征为对所述用户的注册音频进行信息提取后得到的；第二音频获取单元，用于将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。
[0007]第四方面，本申请实施例提供了一种音频降噪装置，运行于服务器，所述装置包括：音频发送单元，用于接收电子设备发送的用户的注册音频；信息获取单元，用于基于所述注册音频，获取所述用户的声纹特征；信息返回单元，用于向所述电子设备返回所述用户的声纹特征，所述声纹特征用于所述电子设备获取到所述用户的待降噪音频后，将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。
[0008]第五方面，本申请实施例提供了一种电子设备，包括一个或多个处理器以及存储器；一个或多个程序，其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述的方法。
[0009]第六方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有程序代码，其中，在所述程序代码运行时执行上述的方法。
[0010]第七方面，本申请实施例提供了一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令被处理器执行时实现上述方法的步骤。
[0011]本申请实施例提供了一种音频降噪方法、装置、电子设备及存储介质，通过获取待降噪音频以及待降噪音频对应用户的声纹特征，将待降噪音频和对应的声纹特征输入降噪模型，降噪模型结合用户的声纹特征，从待降噪音频中找到与该声纹特征对应的音频，将与该声纹特征对应的音频进行输出，得到了不包含其他用户的干扰音频以及背景噪音的与该声纹特征对应用户的降噪后的音频，从而完成了对待降噪音频的降噪，提高了对用户的待降噪音频的降噪效果。
附图说明
[0012]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0013]图1示出了本申请实施例提出的相关的音频降噪方法的示意图；
[0014]图2示出了本申请一实施例提出的音频降噪方法的应用场景示意图；
[0015]图3示出了本申请一实施例提出的一种音频降噪方法的流程图；
[0016]图4示出了本申请一实施例中的降噪模型的结构示意图；
[0017]图5示出了本申请另一实施例提出的一种音频降噪方法的流程图；
[0018]图6示出了本申请另一实施例提出的一种音频降噪方法的具体实施方式的示意图；
[0019]图7示出了本申请又一实施例提出的一种音频降噪方法的流程图；
[0020]图8示出了本申请再一实施例提出的一种音频降噪方法的流程图；
[0021]图9示出了本申请再一实施例中步骤S420的流程图；
[0022]图10示出了本申请实施例提出的一种音频降噪装置的结构框图；
[0023]图11示出了本申请实施例提出的一种音频降噪装置的结构框图；
[0024]图12示出了本申请实施例提出的一种音频降噪装置的结构框图；
[0025]图13示出了本申请实施例提出的一种音频降噪装置的结构框图；
[0026]图14示出了本申请实施例提出的一种音频降噪系统的结构框图；
[0027]图15示出了用于执行根据本申请实施例的音频降噪方法的电子设备或服务器的结构框图；
[0028]图16示出了用于保存或者携带实现根据本申请实施例的音频降噪方法的程序代码的存储单元。
具体实施方式
[0029]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0030]在相关的音频降噪方法中，如图1所示，首先会在服务器端准备一个已经训练好的通用降噪模型，然后在用户端通过录音设备获取用户注册音频，并将用户注册音频发送给服务器端，服务器端在接收到用户注册音频后，对用户注册音频进行数据预处理，得到用户定制训练数据，再将用户定制训练数据输入到通用降噪模型中，进行迁移学习，得到个人定制化的降噪模型参数，然后服务器端会将个人定制化的降噪模型参数传给用户端，从而用户端可以加载个人定制化的降噪模型参数和降噪模型的网络结构，得到个人定制化降噪模型。
[0031]在实际使用阶段，当用户在使用个人定制化降噪模型进行音频降噪时，用户可以通过客户端中的录音设备上传用户原始音频，从而客户端可以将用户通过客户端上传的用户原始音频输入到个人定制化降噪模型中，通过个人定制化降噪模型对用户通过客户端上传的用户原始音频进行降噪，得到降噪后的音频。其本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种音频降噪方法，其特征在于，应用于电子设备，所述方法包括：获取待降噪音频；获取所述待降噪音频对应用户的声纹特征，所述声纹特征为对所述对应用户的注册音频进行特征提取后得到的；将所述待降噪音频和对应的所述声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，所述降噪模型用于根据所述声纹特征从所述待降噪音频中得到所述用户对应的降噪后的音频。2.根据权利要求1所述的方法，其特征在于，所述降噪模型包括编码器、时序建模网络以及解码器，所述将所述待降噪音频和对应的声纹特征输入降噪模型，得到所述用户对应的降噪后的音频，包括：将所述待降噪音频和所述声纹特征输入降噪模型，所述编码器用于对所述待降噪音频进行特征提取，得到所述待降噪音频对应的高维特征向量；所述时序建模网络用于将所述高维特征向量与所述声纹特征进行拼接，得到特征向量；所述解码器用于基于所述特征向量，得到降噪后的音频。3.根据权利要求1所述的方法，其特征在于，所述获取待降噪音频之前还包括：获取用户的注册音频；将所述用户的注册音频发送给服务器，以使所述服务器对所述注册音频进行特征提取，得到所述用户的声纹特征；接收并存储所述服务器发送的所述用户的声纹特征；所述获取所述待降噪音频对应用户的声纹特征，包括：从本地读取所述待降噪音频对应用户的声纹特征。4.根据权利要求1所述的方法，其特征在于，所述获取待降噪音频之前还包括：获取用户的注册音频，对所述注册音频进行特征提取，得到所述对应用户的声纹特征。5.根据权利要求1所述的方法，其特征在于，所述获取所述待降噪音频对应用户的声纹特征包括：获取所述待降噪音频对应的用户信息；根据所述用户信息以及预设关联关系获取对应用户的声纹特征。6.根据权利要求1
‑

【专利技术属性】
技术研发人员：杨斌，吴海英，王洪斌，刘敏，蒋宁，
申请(专利权)人：马上消费金融股份有限公司，
类型：发明
国别省市：