基频信息的提取方法、装置、设备、存储介质及程序产品制造方法及图纸

技术编号:40970918 阅读:30 留言:0更新日期:2024-04-18 21:20
本申请公开了一种基频信息的提取方法、装置、设备、存储介质及程序产品,属于音频处理技术领域。该方法包括:对音频信号提取特征,得到音频特征;采用基频特征提取器从所述音频特征中提取得到基频特征;对所述基频特征中每个所述音频帧对应的所述音符特征执行基频转化,得到所述音频信号对应的基频序列。通过上述方法,可直接从音频信号中提取出基频特征,在基频特征的基础上执行基频转化,得到每个音频帧对应的基频值,即得到基频序列,无需调用人声伴奏分离算法,降低了基频信息提取的计算复杂度,提高了基频信息提取的效率。

【技术实现步骤摘要】

本申请实施例涉及音频处理,特别涉及一种基频信息的提取方法、装置、设备、存储介质及程序产品


技术介绍

1、随着歌声合成技术的不断发展,其已经衍生出多种多样的应用,这其中就包括提取某一用户实际演唱歌曲时的基频信息。基频信息是指歌曲中人声的基础频率,也称为音高。

2、由于歌曲里除了包含人声之外,通常还包含各种乐器演奏组成的伴奏,有些现场歌曲里还包含有各种背景噪声或混响,这给基频信息的提取带来了较大的挑战。相关技术中,通过人声伴奏分离算法将歌曲中的人声音频分离出来,再通过基频提取模型对人声音频进行处理,得到歌曲中的基频信息。

3、然而,上述方法需要在人声伴奏分离算法的基础上进行基频信息的提取,计算复杂度较高,且提取的基频信息的准确性会受到人声伴奏分离算法的影响。


技术实现思路

1、本申请提供了一种基频信息的提取方法、装置、设备、存储介质及程序产品,所述技术方案如下:

2、根据本申请的一方面,提供了一种基频信息的提取方法,所述方法包括:

3、对音频信号提取特征,得到音频本文档来自技高网...

【技术保护点】

1.一种基频信息的提取方法,其特征在于,所所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述基频特征中每个所述音频帧对应的所述音符特征执行基频转化,得到所述音频信号对应的基频序列,包括:

3.根据权利要求2所述的方法,其特征在于,所述基频判别器包括基频全连接层;

4.根据权利要求1至3任一所述的方法,其特征在于,所述基频特征提取器包括第一递归神经网络层、卷积神经网络层和第二递归神经网络层;

5.根据权利要求4所述的方法,其特征在于,所述将所述音符特征输入至所述第二递归神经网络层中融合所述音符特征,得到所述基频特征,包括:<...

【技术特征摘要】

1.一种基频信息的提取方法,其特征在于,所所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述基频特征中每个所述音频帧对应的所述音符特征执行基频转化,得到所述音频信号对应的基频序列,包括:

3.根据权利要求2所述的方法,其特征在于,所述基频判别器包括基频全连接层;

4.根据权利要求1至3任一所述的方法,其特征在于,所述基频特征提取器包括第一递归神经网络层、卷积神经网络层和第二递归神经网络层;

5.根据权利要求4所述的方法,其特征在于,所述将所述音符特征输入至所述第二递归神经网络层中融合所述音符特征,得到所述基频特征,包括:

6.根据权利要求1至3任一所述的方法,其特征在于,所述对音频信号提取特征,得到音频特征,包括:

7.根据权利要求6所述的方法,其特征在于,所述将所述音频信号输入至音频特征提取网络提取特征,得到所述音频特征,包括:

8.根据权利要求1至3任一所述的方法,其特征在于,所述方法还包括:

9.根据权利要求8所述的方法,其特征在于,所述对所述基频特征中每个所述音频帧对应的所述音符特征执行歌声检测,得到所述音频信号对应的歌声检测结果序列,包括:

10.根据权利要求9所述的方法,其特征在于,所述歌声判别器包括歌声全连接层;

11.一种基频提取模型的训练方法,其特征在于,所述方法包括:

12.根据权利要求11所述的方法,其特征在于,所述对所述样本基频特征中每个所述音频帧对应的所述音符特征执行基频转化,得到所述样本音频信号对应的预测基频序列,包括:

13.根据权利要求12所述的方法,其特征在于,所述基频判别器包括基频全连接层;

14.根据权利要求11至13任一所述的方法,其特征在于,所述基频特征提取器包括第一递归神经网络层、卷积神经网络层和第二递归神经网络层;

15.根据权利要求14所述的方法,其特征在于,所述将所述音...

【专利技术属性】
技术研发人员:罗程方陈传艺
申请(专利权)人:广州酷狗计算机科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1