音频处理方法及装置、电子设备、存储介质制造方法及图纸

技术编号:35027329 阅读:9 留言:0更新日期:2022-09-24 22:59
本公开关于一种音频处理方法及装置、电子设备、存储介质。所述音频处理方法包括:对待处理音频进行音频划分,得到多个候选音频片段,多个所述候选音频片段对应不同的音频标签,所述音频标签是对所述待处理音频进行特征聚类确定的;针对每个所述候选音频片段,确定每个所述候选音频片段在预设音频评价特征上的特征评价结果;根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,将所述目标音频片段作为待使用的音频片段。根据本公开的音频处理方法及装置,可提高目标音频片段的选取准确性。的选取准确性。的选取准确性。

【技术实现步骤摘要】
音频处理方法及装置、电子设备、存储介质


[0001]本公开涉及音视频
更具体地,本公开涉及一种音频处理方法及装置、电子设备、计算机可读存储介质、计算机程序产品。

技术介绍

[0002]高光片段,通常是指音频中最有感染力和吸引力的精彩片段如歌曲的副歌部分。在短视频配乐中,由于时间有限,高光片段通常被用来选做视频的背景音乐。目前一般通过人工选取数小节的歌曲副歌部分作为每首歌的高亮片段,给短视频提供配乐。在人工选取高光片段时,无法精确地选取高光片段。

技术实现思路

[0003]本公开的示例性实施例在于提供一种音频处理方法及装置、电子设备、计算机可读存储介质、计算机程序产品,以至少解决相关技术中的音频处理的问题。
[0004]根据本公开的示例性实施例,提供一种音频处理方法,包括:对待处理音频进行音频划分,得到多个候选音频片段,其中,不同的所述候选音频片段对应不同的音频标签,所述音频标签是对所述待处理音频进行特征聚类确定的;针对每个所述候选音频片段,确定每个所述候选音频片段在预设的音频评价特征上的特征评价结果;根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,将所述目标音频片段作为待使用的音频片段。
[0005]可选地,所述音频评价特征包括多种。所述根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,可包括:根据每个所述候选音频片段的多种所述音频评价特征下的特征评价结果,确定每个所述候选音频片段的目标特征评价结果;对多个所述候选音频片段的所述目标特征评价结果进行比较,选择出符合预设条件的目标特征评价结果;将多个所述候选音频片段中符合所述预设条件的目标特征评价结果对应的候选音频片段,确定为所述目标音频片段。
[0006]可选地,所述音频评价特征可包括平均响度、频谱亮度、鼓点强度中的至少一个。
[0007]可选地,所述从多个所述候选音频片段中确定出目标音频片段,可包括:对每个所述候选音频片段进行声伴分离处理,得到每个所述候选音频片段的内容成分,所述内容成分包括目标对象成分、伴奏成分、无声中的至少一种;从包含所述目标对象成分的所述候选音频片段中,确定出所述目标音频片段。
[0008]可选地,所述对待处理音频进行音频划分,得到多个候选音频片段,可包括:对所述待处理音频进行音频结构划分,得到多个音频结构片段;对多个所述音频结构片段对应的音频特征进行聚类处理,确定每个所述音频结构片段的音频标签;将具有相同音频标签并且相邻的音频结构片段进行合并,得到所述多个候选音频片段。
[0009]可选地,所述对所述待处理音频进行音频结构划分,得到多个音频结构片段,可包括:提取所述待处理音频的梅尔倒谱系数特征谱;基于所述梅尔倒谱系数特征谱确定所述
待处理音频的自相似矩阵;对所述自相似矩阵进行预设处理,得到增强自相似矩阵;确定所述增强自相似矩阵的局部和全局关系;基于所述局部和全局关系确定所述待处理音频的切割点,得到所述多个音频结构片段。
[0010]可选地,所述基于所述局部和全局关系确定所述待处理音频的切割点,可包括:基于所述局部和全局关系确定所述待处理音频的结构变化数据;基于所述结构变化数据确定所述待处理音频的切割点。
[0011]可选地,在所述对待处理音频进行音频划分,得到多个候选音频片段之后,所述音频处理方法还可包括:检测得到所述待处理音频的重拍;基于所述重拍调整所述多个候选音频片段的开头位置和结束位置,得到调整后的多个候选音频片段。所述从多个所述候选音频片段中确定出目标音频片段,可包括:从调整后的多个所述候选音频片段中选择至少一个候选音频片段作为所述目标音频片段。
[0012]根据本公开的示例性实施例,提供一种音频处理装置,包括:片段划分单元,被配置为对待处理音频进行音频划分,得到多个候选音频片段,其中,不同的所述候选音频片段对应不同的音频标签,所述音频标签是对所述待处理音频进行特征聚类确定的;片段评价单元,被配置为针对每个所述候选音频片段,确定每个所述候选音频片段在预设的音频评价特征上的特征评价结果;和片段确定单元,被配置为根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,将所述目标音频片段作为待使用的音频片段。
[0013]可选地,所述音频评价特征可包括多种。所述片段确定单元可被配置为:根据每个所述候选音频片段的多种所述音频评价特征下的特征评价结果,确定每个所述候选音频片段的目标特征评价结果;对多个所述候选音频片段的所述目标特征评价结果进行比较,选择出符合预设条件的目标特征评价结果;将多个所述候选音频片段中符合所述预设条件的目标特征评价结果对应的候选音频片段,确定为所述目标音频片段。
[0014]可选地,所述音频评价特征可包括平均响度、频谱亮度、鼓点强度中的至少一个。
[0015]可选地,所述片段确定单元可被配置为:对每个所述候选音频片段进行声伴分离处理,得到每个所述候选音频片段的内容成分,所述内容成分包括目标对象成分、伴奏成分、无声中的至少一种;从包含所述目标对象成分的所述候选音频片段中,确定出所述目标音频片段。
[0016]可选地,所述片段划分单元可被配置为:对所述待处理音频进行音频结构划分,得到多个音频结构片段;对多个所述音频结构片段对应的音频特征进行聚类处理,确定每个所述音频结构片段的音频标签;将具有相同音频标签并且相邻的音频结构片段进行合并,得到所述多个候选音频片段。
[0017]可选地,所述片段划分单元可被配置为:提取所述待处理音频的梅尔倒谱系数特征谱;基于所述梅尔倒谱系数特征谱确定所述待处理音频的自相似矩阵;对所述自相似矩阵进行预设处理,得到增强自相似矩阵;确定所述增强自相似矩阵的局部和全局关系;基于所述局部和全局关系确定所述待处理音频的切割点,得到所述多个音频结构片段。
[0018]可选地,所述片段划分单元可被配置为:基于所述局部和全局关系确定所述待处理音频的结构变化数据;基于所述结构变化数据确定所述待处理音频的切割点。
[0019]可选地,所述音频处理装置还可包括:片段调整单元,被配置为检测得到所述待处理音频的重拍;基于所述重拍调整所述多个候选音频片段的开头位置和结束位置,得到调
整后的多个候选音频片段。所述片段确定单元可被配置为:从调整后的多个所述候选音频片段中选择至少一个候选音频片段作为所述目标音频片段。
[0020]根据本公开的示例性实施例,提供一种电子设备,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现根据本公开的示例性实施例的音频处理方法。
[0021]根据本公开的示例性实施例,提供一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序被电子设备的处理器执行时,使得电子设备执行根据本公开的示例性实施例的音频处理方法。
[0022]根据本公开的示例性实施例,提供一种计算机程序产品,包括计算机程序/指令,当所述计算机程序/指令被处理器执行时,实现根据本公开的示例本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种音频处理方法,其特征在于,包括:对待处理音频进行音频划分,得到多个候选音频片段,其中,不同的所述候选音频片段对应不同的音频标签,所述音频标签是对所述待处理音频进行特征聚类确定的;针对每个所述候选音频片段,确定每个所述候选音频片段在预设的音频评价特征上的特征评价结果;根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,将所述目标音频片段作为待使用的音频片段。2.根据权利要求1所述的音频处理方法,其特征在于,所述音频评价特征包括多种,所述根据所述特征评价结果,从多个所述候选音频片段中确定出目标音频片段,包括:根据每个所述候选音频片段的多种所述音频评价特征下的特征评价结果,确定每个所述候选音频片段的目标特征评价结果;对多个所述候选音频片段的所述目标特征评价结果进行比较,选择出符合预设条件的目标特征评价结果;将多个所述候选音频片段中符合所述预设条件的目标特征评价结果对应的候选音频片段,确定为所述目标音频片段。3.根据权利要求1所述的音频处理方法,其特征在于,所述音频评价特征包括平均响度、频谱亮度、鼓点强度中的至少一个。4.根据权利要求1所述的音频处理方法,其特征在于,所述从多个所述候选音频片段中确定出目标音频片段,包括:对每个所述候选音频片段进行声伴分离处理,得到每个所述候选音频片段的内容成分,所述内容成分包括目标对象成分、伴奏成分、无声中的至少一种;从包含所述目标对象成分的所述候选音频片段中,确定出所述目标音频片段。5.根据权利要求1所述的音频处理方法,其特征在于,所述对待处理音频进行音频划分,得到多个候选音频片段,包括:对所述待处理音频进行音频结构划分,得到多个音频结构片段;对多个所述音频结构片段对应的音频...

【专利技术属性】
技术研发人员:范欣悦陈联武郑羲光张晨
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1