一种歌曲生成方法、装置、设备及存储介质制造方法及图纸

本发明专利技术公开了一种歌曲生成方法、装置、设备及存储介质，该方法包括：接收客户端发送的作曲请求，作曲请求中具有歌词与曲风，歌词具有多个句子；查找属于曲风、且与部分句子匹配的旋律动机；依据旋律动机生成与歌词匹配的曲谱数据；生成内容为歌词、且符合曲谱数据的歌声数据；对歌声数据与曲谱数据执行混音操作，得到歌曲数据。对歌词中部分句子配置属于指定曲风的旋律动机，风格可控，方便应用质量较好的旋律作为旋律动机，以旋律动机为基础生成曲谱数据，提高曲谱数据与歌词的匹配度，保证曲谱数据结构的合理性、符合乐理规则，从而整体上提高曲谱数据的质量，并且，旋律动机多样化，也使得曲谱数据多样化。也使得曲谱数据多样化。也使得曲谱数据多样化。

【技术实现步骤摘要】
一种歌曲生成方法、装置、设备及存储介质


[0001]本专利技术涉及音频处理的
，尤其涉及一种歌曲生成方法、装置、设备及存储介质。

技术介绍

[0002]一首歌曲完整的制作流程，包含作词、作曲、编曲、混音等，如果寻找专业的作曲家作曲，成本较高，因而用户多使用深度学习技术辅助制作歌曲。
[0003]目前主流的深度学习技术之一，是基于序列到序列模型，对用户填写的歌词推理出相应的旋律，并以此生成谱曲。
[0004]但是，序列到序列模型对长序列的学习能力较差，直接基于歌词推理出完整旋律，容易出现谱曲与歌词的匹配度较低、谱曲结构的合理性较差，使得该谱曲的质量较差。

技术实现思路

[0005]本专利技术提供了一种歌曲生成方法、装置、设备及存储介质，以解决如何提高生成谱曲的质量的问题。
[0006]根据本专利技术的一方面，提供了一种歌曲生成方法，包括：
[0007]接收客户端发送的作曲请求，所述作曲请求中具有歌词与曲风，所述歌词具有多个句子；
[0008]查找属于所述曲风、且与部分所述句子匹配的旋律动机；
[0009]依据所述旋律动机生成与所述歌词匹配的曲谱数据；
[0010]生成内容为所述歌词、且符合所述曲谱数据的歌声数据；
[0011]对所述歌声数据与所述曲谱数据执行混音操作，得到歌曲数据。
[0012]根据本专利技术的另一方面，提供了一种歌曲生成装置，包括：
[0013]作曲请求接收模块，用于接收客户端发送的作曲请求，所述作曲请求中具有歌词与曲风，所述歌词具有多个句子；
[0014]旋律动机查找模块，用于查找属于所述曲风、且与部分所述句子匹配的旋律动机；
[0015]曲谱数据生成模块，用于依据所述旋律动机生成与所述歌词匹配的曲谱数据；
[0016]歌声数据生成模块，用于生成内容为所述歌词、且符合所述曲谱数据的歌声数据；
[0017]歌曲数据生成模块，用于对所述歌声数据与所述曲谱数据执行混音操作，得到歌曲数据。
[0018]根据本专利技术的另一方面，提供了一种电子设备，所述电子设备包括：
[0019]至少一个处理器；以及
[0020]与所述至少一个处理器通信连接的存储器；其中，
[0021]所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本专利技术任一实施例所述的歌曲生成方法。
[0022]根据本专利技术的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序用于使处理器执行时实现本专利技术任一实施例所述的歌曲生成方法。
[0023]在本专利技术中，接收客户端发送的作曲请求，作曲请求中具有歌词与曲风，歌词具有多个句子；查找属于曲风、且与部分句子匹配的旋律动机；依据旋律动机生成与歌词匹配的曲谱数据；生成内容为歌词、且符合曲谱数据的歌声数据；对歌声数据与曲谱数据执行混音操作，得到歌曲数据。对歌词中部分句子配置属于指定曲风的旋律动机，风格可控，方便应用质量较好的旋律作为旋律动机，以旋律动机为基础生成曲谱数据，提高曲谱数据与歌词的匹配度，保证曲谱数据结构的合理性、符合乐理规则，从而整体上提高曲谱数据的质量，并且，旋律动机多样化，也使得曲谱数据多样化。
[0024]应当理解，本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征，也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0025]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0026]图1是根据本专利技术实施例一提供的一种歌曲生成方法的流程图；
[0027]图2是根据本专利技术实施例二提供的一种歌曲生成方法的流程图；
[0028]图3A是根据本专利技术实施例二提供的一种旋律数据的示例图；
[0029]图3B是根据本专利技术实施例二提供的一种和弦数据的示例图；
[0030]图4是根据本专利技术实施例三提供的一种歌曲生成装置的结构示意图；
[0031]图5是实现本专利技术实施例四提供的一种电子设备的结构示意图。
具体实施方式
[0032]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。
[0033]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0034]实施例一
[0035]图1为本专利技术实施例一提供的一种歌曲生成方法的流程图，本实施例可适用于离线训练曲风库、第一序列生成网络与第二序列生成网络的情况，该方法可以由歌曲生成装置来执行，该歌曲生成装置可以采用硬件和/或软件的形式实现，该歌曲生成装置可配置于电子设备中。如图1所示，该方法包括：
[0036]步骤101、采集指定曲风下的音乐数据。
[0037]在本实施例中，可以向出版商申请授权使用音乐数据、下载进入公有领域(PublicDomain)的音乐数据、用户上传音乐数据并承诺允许使用等方式采集大量的音乐数据。
[0038]在内容上，这些音乐数据包括纯音乐、歌唱者演唱的歌曲，等等。
[0039]进一步地，考虑到在业务上面向的用户，可以依据用户的偏好对音乐数据进行过滤，使得以此训练的第一序列生成网络、第二序列生成网络偏向用户的偏好，同时降低曲风库的数据量，减少训练第一序列生成网络、第二序列生成网络所占用的资源。
[0040]例如，如果用户以年轻群体为主，则可以过滤并不在年轻群体的用户的偏好内的古典音乐等音乐数据，剩余近代的流行音乐等音乐数据，等等。
[0041]在格式上，这些音乐数据的格式一般为MIDI(MusicalInstrumentDigital Interface，乐器数字接口)，而MIDI有几个变通格式，如RMI(creativemusic format，创意音乐)和CIF(resourceinterchangefilefo本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种歌曲生成方法，其特征在于，包括：接收客户端发送的作曲请求，所述作曲请求中具有歌词与曲风，所述歌词具有多个句子；查找属于所述曲风、且与部分所述句子匹配的旋律动机；依据所述旋律动机生成与所述歌词匹配的曲谱数据；生成内容为所述歌词、且符合所述曲谱数据的歌声数据；对所述歌声数据与所述曲谱数据执行混音操作，得到歌曲数据。2.根据权利要求1所述的方法，其特征在于，所述查找属于所述曲风、且与部分所述句子匹配的旋律动机，包括：对排序在所述歌词中开头的部分所述句子统计第一长度；查询对所述曲风设置的曲风库，所述曲风库中存储了所述曲风下、多个音乐数据的乐句旋律；在所述曲风库中查找符合所述第一长度的乐句旋律，作为旋律动机。3.根据权利要求1所述的方法，其特征在于，所述依据所述旋律动机生成与所述歌词匹配的曲谱数据，包括：加载第一序列生成网络、第二序列生成网络；使用所述第一序列生成网络中将所述旋律动机扩展为与所述歌词匹配旋律数据；使用所述第二序列生成网络生成与所述旋律数据匹配的和声数据；将所述旋律数据与所述和声数据合并为曲谱数据。4.根据权利要求3所述的方法，其特征在于，所述使用所述第一序列生成网络中将所述旋律动机扩展为与所述歌词匹配旋律数据，包括：将位于第一文本信息之后的部分所述句子标记为第二文本信息，其中，所述第一文本信息已配置旋律片段，所述第一文本信息初始为排序在所述歌词中开头的部分所述句子，所述旋律片段初始为所述旋律动机；将对所述第一文本信息配置的旋律片段、所述第二文本信息的第二长度输入所述第一序列生成网络中、为所述第二文本信息生成符合所述第二长度的旋律片段；判断是否为所述歌词中的所有所述句子配置旋律片段；若是，则按照顺序将所有所述旋律片段合并为旋律数据；若否，则将所述第二文本信息更新为新的第一文本信息，返回执行所述将位于第一文本信息之后的部分所述句子标记为第二文本信息。5.根据权利要求4所述的方法，其特征在于，所述使用所述第一序列生成网络中将所述旋律动机扩展为与所述歌词匹配旋律数据，还包括：在所述旋律片段中查找第一目标音符、第二目标音符，所述第一目标音符为位于所述句子结尾处的最后一个音符，所述第二目标音符为所述第一目标音符前一位的音符；若所述第一目标音符持续的时长小于所述第二目标音符持续的时长，则对所述第一目标音符持续的时长设置约束条件，所述约束条件包括所述第一目标音符持续的时长小于预设的第一阈值，所述第一目标音符持续的时长大于所述第二目标音符持续的时长，所述第一目标音符持续的时长与所述第二目标音符持续的时长之间的差值小于或等于预设的第二阈值；
在所述约束条件的约束下，对所述第一目标音符持续的时长进行延长。6.根据权利要求4所述的方法，其特征在于，所述使用所述第二序列生成网络生成与所述旋律数据匹配的和声数据，包括：针对各个所述旋律片段，将所述旋律片段输入所述第二序列生成网络中，生成与所述旋律片段匹配的和声片段；按照顺序将所有所述和声片段合并为和声数据。7.根据权利要求6所述的方法，其特征在于，所述使用所述第二序列生成网络生成与所述旋律数据匹配的和声数据，还包括：在所述旋律片段中查找属于重拍的拍子，作为目标拍子；将与所述旋律片段匹配的所述和声片段的起始点对齐所述目标拍子；若相邻两个所述和声片段存在重叠，则在任一所述和声片段中删除重叠的部分。8.根据权利要求1
‑
7中任一项所述的方法，其特征在于，还包括：采集指定曲风下的音乐数据；将所述音乐数据分离出旋律数据与和声数据；以乐句为单位分别将所述旋律数据分割为乐句旋律、将所述和声数据分割为乐句和声；将所述乐句旋律与所述乐句和声存储至为所述曲风配置的曲风库中；依据所述乐句旋律训练第一序列生成网络，所述第一序列生成网络用于依据所述乐句旋律生成新的乐句旋律；依据所述乐句旋律与所述乐句和声训练第二序列生成网络，所述第二序列生成网络用于依据所述乐句旋律生成乐句和声...

【专利技术属性】
技术研发人员：黄祥康，盘子圣，马金龙，熊佳，焦南凯，徐志坚，谢睿，陈光尧，
申请(专利权)人：广州趣研网络科技有限公司，
类型：发明
国别省市：