音频信号处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:37971094 阅读:9 留言:0更新日期:2023-06-30 09:46
本公开关于一种音频信号处理方法、装置、电子设备及存储介质,该方法应用于音频信号反馈设备,所述方法包括:接收音频信号收录设备收录的待处理音频信号,待处理音频信号至少包括目标对象的声音信号;基于预先训练的音频净化模型对待处理音频信号、待处理音频信号对应的背景音频信号进行处理,得到初始音频信号;基于预设的音频属性处理策略,对初始音频信号进行音频属性处理,得到处理后的目标音频信号;将目标音频信号与背景音频信号进行混音处理,得到混音音频信号,并输出混音音频信号。采用本方法,减少音频信号的损耗,降低音频信号延时。延时。延时。

【技术实现步骤摘要】
音频信号处理方法、装置、电子设备及存储介质


[0001]本公开涉及通信
,尤其涉及音频信号处理方法、装置、电子设备及存储介质。

技术介绍

[0002]随着音频技术的发展以及人们日常生活的娱乐需求,越来越多的用户通过手机或者平板等终端设备上的应用程序开展点歌、K歌等娱乐活动。在用户进行歌唱过程中,用户可以利用麦克风收录唱歌时的声音信号,与此同时,采用外放背景音乐的方式,实现将背景音乐与用户的声音信号进行混合,这样背景音乐会被麦克风同时收录,从而干扰收录的声音信号的清晰度。
[0003]目前,针对音频信号处理的方法,为了避免背景音乐的直接干扰,用户通常采用佩戴耳机的方式,先由麦克风收录用户的声音信号,将声音信号传输至终端设备,由终端设备对用户的声音信号和背景音乐与进行混音,得到混音后的音频信号,再将混音后的音频信号处理至耳机,通过耳机反馈至用户。
[0004]然而,目前的音频信号处理方法中,混音后的音频信号经过多端传输,最终才能通过耳机反馈至用户,传输过程中容易造成音频信号的损耗。

技术实现思路

[0005]本公开提供一种音频信号处理方法、装置、电子设备及存储介质,以至少解决相关技术中音频信号传输损耗、音频信号传输延迟问题。本公开的技术方案如下:
[0006]根据本公开实施例的第一方面,提供一种音频信号处理方法,所述方法应用于音频信号反馈设备,所述方法包括:
[0007]接收音频信号收录设备收录的待处理音频信号,所述待处理音频信号至少包括目标对象的声音信号;
[0008]基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号;
[0009]基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号;
[0010]将所述目标音频信号与所述背景音频信号进行混音处理,得到混音音频信号,并输出所述混音音频信号。
[0011]在一示例性实施例中,所述基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号之前,所述方法还包括:
[0012]根据所述待处理音频信号,确定与所述待处理音频信号对应的背景音频信号;
[0013]根据所述背景音频信号的音频信号标识,向音频存储设备获取所述背景音频信号的音频数据。
[0014]在一示例性实施例中,所述音频净化模型包括卷积层、门控循环单元、全连接层和激活层,所述基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号,包括:
[0015]对所述待处理音频信号和所述待处理音频信号对应的背景音频信号进行预处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征;
[0016]将所述待处理音频特征和所述背景音频特征同时输入至所述音频净化模型中,依次通过所述音频净化模型中的卷积层、门控循环单元、全连接层和激活层对所述待处理音频特征和所述背景音频特征进行相关性比对和音频特征处理,输出所述待处理音频信号的音频净化后的初始音频信号。
[0017]在一示例性实施例中,所述对所述待处理音频信号和所述待处理音频信号对应的背景音频信号进行预处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征,包括:
[0018]对所述待处理音频信号和所述待处理音频信号对应的背景音频信号进行短时傅里叶变换处理,得到处理后频域上的第一转换信号和第二转换信号;
[0019]根据预设的采样策略对频域上的所述第一转换信号和所述第二转换信号进行采样,分别得到第一转换信号对应的多个采样点数据以及所述第二转换信号对应的多个采样点数据;
[0020]对所述第一转换信号对应的多个采样点数据以及所述第二转换信号对应的多个采样点分别进行压缩分带处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征。
[0021]在一示例性实施例中,所述基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号,包括:
[0022]对所述初始音频信号进行音色特征处理和声场特征处理,得到处理后的第三音频信号;
[0023]对所述第三音频信号进行混响处理,得到混响处理后的第四音频信号,并对所述第四音频信号进行音频信号目标幅度范围的动态压缩处理,得到目标音频信号。
[0024]根据本公开实施例的第二方面,提供一种音频信号处理系统,所述系统包括:
[0025]音频信号收录设备,用于收录待处理音频信号,并将所述待处理音频信号处理至音频信号反馈设备,所述待处理音频信号包括目标对象的声音信号和啸叫信号;
[0026]所述音频信号反馈设备,用于接收所述音频信号收录设备收录的待处理音频信号,所述待处理音频信号包括目标对象的声音信号和啸叫信号;基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号;
[0027]基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号;将所述目标音频信号与所述背景音频信号进行混音处理,得到混音音频信号,并输出所述混音音频信号。
[0028]在一示例性实施例中,所述音频信号反馈设备包括均衡器单元、混响单元和动态压缩单元;
[0029]所述均衡器单元,用于对所述初始音频信号进行音色特征处理和声场特征处理,得到处理后的第三音频信号;
[0030]所述混响单元,用于对所述第三音频信号进行混响处理,得到混响处理后的第四音频信号;
[0031]所述动态压缩单元,用于对所述第四音频信号进行音频信号目标幅度范围的动态压缩处理,得到目标音频信号。
[0032]在一示例性实施例中,所述音频信号反馈设备还包括无线传输单元;
[0033]所述无线传输单元,用于与所述音频信号收录设备之间构建无线传输通道,并通过所述无线传输通道接收所述音频信号收录设备传输的所述待处理音频信号。
[0034]根据本公开实施例的第三方面,提供一种音频信号处理装置,所述装置应用于音频信号反馈设备,所述装置包括:
[0035]接收单元,被配置为执行接收音频信号收录设备收录的待处理音频信号,所述待处理音频信号包括目标对象的声音信号和啸叫信号;
[0036]第一处理单元,被配置为执行基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号;
[0037]第二处理单元,被配置为执行基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号;
[0038]混音单元,被配置为执行将所述目标音频信号与所述背景音频信号进行混音处理,得到混音音频信号,并输出所述混音音频信号。
本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种音频信号处理方法,其特征在于,所述方法应用于音频信号反馈设备,所述方法包括:接收音频信号收录设备收录的待处理音频信号,所述待处理音频信号至少包括目标对象的声音信号;基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号;基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号;将所述目标音频信号与所述背景音频信号进行混音处理,得到混音音频信号,并输出所述混音音频信号。2.根据权利要求1所述的音频信号处理方法,其特征在于,所述基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号之前,所述方法还包括:根据所述待处理音频信号,确定与所述待处理音频信号对应的背景音频信号;根据所述背景音频信号的音频信号标识,向音频存储设备获取所述背景音频信号的音频数据。3.根据权利要求1所述的音频信号处理方法,其特征在于,所述音频净化模型包括卷积层、门控循环单元、全连接层和激活层,所述基于预先训练的音频净化模型对所述待处理音频信号、所述待处理音频信号对应的背景音频信号进行处理,得到初始音频信号,包括:对所述待处理音频信号和所述待处理音频信号对应的背景音频信号分别进行预处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征;将所述待处理音频特征和所述背景音频特征同时输入至所述音频净化模型中,依次通过所述音频净化模型中的卷积层、门控循环单元、全连接层和激活层对所述待处理音频特征和所述背景音频特征进行相关性比对和音频特征处理,输出所述待处理音频信号的音频净化后的初始音频信号。4.根据权利要求3所述的音频信号处理方法,其特征在于,所述对所述待处理音频信号和所述待处理音频信号对应的背景音频信号进行预处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征,包括:对所述待处理音频信号和所述待处理音频信号对应的背景音频信号进行短时傅里叶变换处理,得到处理后频域上的第一转换信号和第二转换信号;根据预设的采样策略对频域上的所述第一转换信号和所述第二转换信号进行采样,分别得到第一转换信号对应的多个采样点数据以及所述第二转换信号对应的多个采样点数据;对所述第一转换信号对应的多个采样点数据以及所述第二转换信号对应的多个采样点分别进行压缩分带处理,得到所述待处理音频信号对应的待处理音频特征和所述背景音频信号对应的背景音频特征。5.根据权利要求1所述的音频信号处理方法,其特征在于,所述基于预设的音频属性处理策略,对所述初始音频信号进行音频属性处理,得到处理后的目标音频信号,包括:
对所述初始音频信号进行音色特征处理...

【专利技术属性】
技术研发人员:韩润强吕新亮李楠郑羲光张晨
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1