歌曲生成方法、装置、可读介质及电子设备制造方法及图纸

技术编号:24999318 阅读:25 留言:0更新日期:2020-07-24 18:01
本公开涉及一种歌曲生成方法、装置、可读介质及电子设备,包括:从用户输入的目标语音信息中提取第一频谱数据和第一基频数据;根据第一频谱数据、目标歌曲模板确定目标频谱数据;根据第一基频数据、目标歌曲模板确定目标基频数据;根据目标频谱数据和目标基频数据合成目标语音波形数据,进而与目标歌曲伴奏的模板伴奏信息合成为目标歌曲。这样,能够在接收到用户输入的目标语音信息之后,通过对该目标语音信息中的频谱数据以及基频数据进行一定的处理,不仅无需根据目标歌曲模板对该目标语音信息的内容进行限制,且还能保留目标语音信息中的人声特征,从而使得生成的歌曲中的人声能够与该目标语音信息的人声更加接近。

【技术实现步骤摘要】
歌曲生成方法、装置、可读介质及电子设备
本公开涉及语音合成
,具体地,涉及一种歌曲生成方法、装置、可读介质及电子设备。
技术介绍
在现有技术中,比较常见的语音与语音之间的转换仅仅只能实现将一段语音用特殊的音色简单重复,例如汤姆猫等,并没有能直接将一段语音转换为歌曲演唱出来的技术方案,因此,如何将随机输入的一段语音自动与一段歌曲相结合,使得这段语音作为这一段歌曲的歌词被演唱出来,是现有技术中无法解决的问题。
技术实现思路
提供该
技术实现思路
部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。第一方面,本公开提供一种歌曲生成方法,所述方法包括:接收用户输入的目标语音信息;确定目标歌曲模板;从所述目标语音信息中提取得到第一频谱数据和第一基频数据;根据所述第一频谱数据、所述目标歌曲模板确定目标频谱数据;根据所述第一基频数据、所述目标歌曲模板确本文档来自技高网...

【技术保护点】
1.一种歌曲生成方法,其特征在于,所述方法包括:/n接收用户输入的目标语音信息;/n确定目标歌曲模板;/n从所述目标语音信息中提取得到第一频谱数据和第一基频数据;/n根据所述第一频谱数据、所述目标歌曲模板确定目标频谱数据;/n根据所述第一基频数据、所述目标歌曲模板确定目标基频数据;/n根据所述目标频谱数据和所述目标基频数据合成目标语音波形数据;/n将所述目标语音波形数据与所述目标歌曲模板的模板伴奏信息合成为目标歌曲。/n

【技术特征摘要】
1.一种歌曲生成方法,其特征在于,所述方法包括:
接收用户输入的目标语音信息;
确定目标歌曲模板;
从所述目标语音信息中提取得到第一频谱数据和第一基频数据;
根据所述第一频谱数据、所述目标歌曲模板确定目标频谱数据;
根据所述第一基频数据、所述目标歌曲模板确定目标基频数据;
根据所述目标频谱数据和所述目标基频数据合成目标语音波形数据;
将所述目标语音波形数据与所述目标歌曲模板的模板伴奏信息合成为目标歌曲。


2.根据权利要求1所述的方法,其特征在于,
所述目标歌曲模板中还包括模板基频数据、模板歌词信息和模板音乐信息;
所述目标频谱数据为根据所述第一频谱数据、所述模板歌词信息、所述模板音乐信息所确定;
所述目标基频数据为根据预设映射规则和所述模板基频数据对所述第一基频数据进行映射所得到。


3.根据权利要求2所述的方法,其特征在于,所述根据所述第一频谱数据、所述目标歌曲模板确定目标频谱数据包括:
根据所述模板歌词信息和所述模板音乐信息对所述第一频谱数据进行拉伸,以得到与所述目标歌曲模板的模板时长相同的第二频谱数据;
将所述第二频谱数据和所述模板音乐信息输入预设频谱转换模型中,以得到所述目标频谱数据。


4.根据权利要求3所述的方法,其特征在于,所述根据所述模板歌词信息和所述模板音乐信息对所述第一频谱数据进行拉伸,以得到与所述目标歌曲模板的模板时长相同的第二频谱数据包括:
将所述目标语音信息识别为目标文字信息;
根据所述模板歌词信息和所述模板音乐信息确定所述目标文字信息中每个文字的演唱时长;
根据所述目标文字信息中每个文字的演唱时长对所述第一频谱数据进行拉伸,以得到与所述目标歌曲模板的模板时长相对应的第二频谱数据。


5.根据权利要求4所述的方法,其特征在于,所述根据所述模板歌词信息和所述模板音乐信息确定所述目标文字信息中每个文字的演唱时长包括:
对所述目标文字信息进行文本分析以得到所述目标文字信息中每个文字所包含的音素信息;
根据所述模板歌词信息对所述目标文字信息中的每个文字与所述模板歌词信息中的每个文字进行文字动态匹配,以得到所述目标文字信息中每个文字与所述模板歌词信息中的文字之间的对应关系;
根据所述对应关系和所述模板音乐信息确定所述目...

【专利技术属性】
技术研发人员:殷翔
申请(专利权)人:北京字节跳动网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1