基于音乐点的视频生成方法、装置、设备及存储介质制造方法及图纸

技术编号:37976876 阅读:13 留言:0更新日期:2023-06-30 09:52
本申请提供一种基于音乐点的视频生成方法、装置、设备及存储介质,该方法包括:分别获取多个视频对象和音频信息;确定音频信息中的多个初始音乐点以及各初始音乐点的特征信息,特征信息至少包括各初始音乐点的音强和各初始音乐点在音频信息中所在的时刻;根据特征信息,从多个初始音乐点中筛选出目标音乐点;根据目标音乐点和多个视频对象,生成目标视频。本申请提供的基于音乐点的视频生成方法、装置、设备及存储介质用于提高目标视频的丰富性。性。性。

【技术实现步骤摘要】
基于音乐点的视频生成方法、装置、设备及存储介质


[0001]本申请涉及互联网
,尤其涉及一种基于音乐点的视频生成方法、装置、设备及存储介质。

技术介绍

[0002]播放多张图像以及多张图像匹配的一段音乐,可以形成视频。目前,为了增加视频的丰富性,当播放至预设音乐点处时,可以增加渲染效果至图像。
[0003]在相关技术中,通常采用如下方法得到预设音乐点:在播放音乐的过程中,用户将其喜爱的音乐点,设置为预设音乐点。
[0004]在上述相关技术中,用户将其喜爱的音乐点设置为预设音乐点,使得视频的丰富性较差。

技术实现思路

[0005]本申请提供一种基于音乐点的视频生成方法、装置、设备及存储介质,用以解决视频的丰富性较差问题。
[0006]第一方面,本申请提供一种基于音乐点的视频生成方法,包括:
[0007]分别获取多个视频对象和音频信息;
[0008]确定音频信息中的多个初始音乐点以及各初始音乐点的特征信息,特征信息至少包括各初始音乐点的音强和各初始音乐点在音频信息中所在的时刻;
[0009]根据特征信息,从多个初始音乐点中筛选出目标音乐点;
[0010]根据目标音乐点和多个视频对象,生成目标视频。
[0011]在一些实施例中,根据特征信息,从多个初始音乐点中筛选出目标音乐点,包括:判断各初始音乐点的音强是否大于第一预设值;根据音强大于第一预设值的第一音乐点,确定目标音乐点。
[0012]在一些实施例中,根据音强大于第一预设值的第一音乐点,确定目标音乐点,包括:针对任意两个相邻第一音乐点,根据第一音乐点对应的时刻,获取相邻的两个第一音乐点之间的第一时长;若第一时长小于第一预设时长,则删除相邻两个第一音乐点中优先级低的第一音乐点,得到剩余的至少两个第二音乐点;根据至少两个第二音乐点,确定目标音乐点。
[0013]在一些实施例中,多个初始音乐点包括:重拍点、人声点、乐句点、乐段点、音效点、副歌点中的至少两个音乐点。
[0014]在一些实施例中,删除所述相邻两个第一音乐点中优先级低的第一音乐点,包括:按照预设优先级顺序,删除所述相邻两个第一音乐点中优先级低的第一音乐点;所述预设优先级顺序由高到底的排列顺序为:所述副歌点、强音效点、所述乐句点、所述乐段点、所述重拍点、弱音效点、所述人声点、预设点。
[0015]在一些实施例中,根据特征信息,从多个初始音乐点中筛选出目标音乐点,包括:
根据各初始音乐点在音频信息中所在的时刻,确定各初始音乐点的目标得分;根据各初始音乐点的目标得分,确定目标音乐点。
[0016]在一些实施例中,根据各初始音乐点的目标得分,确定目标音乐点,包括:删除目标得分小于第二预设值的初始音乐点,得到剩余的第三音乐点;根据第三音乐点在音频信息中所在的时刻,重新确定各第三音乐点的目标得分,并根据第三音乐点的目标得分,确定目标音乐点。
[0017]在一些实施例中,根据各初始音乐点在音频信息中所在的时刻,确定各初始音乐点的目标得分,包括:根据各初始音乐点在音频信息中所在的时刻,确定相邻两个初始音乐点之间的第二时长,并根据第二时长确定各初始音乐点的第一得分;根据各初始音乐点的权重,确定各初始音乐点的第二得分;根据各初始音乐点在音频信息中所在的时刻,音频信息的起始时刻和终止时刻,确定各初始音乐点的第三得分;根据第一得分、第二得分和第三得分,确定各初始音乐点的目标得分。
[0018]在一些实施例中,根据第二时长确定各初始音乐点的第一得分,包括:根据音频信息的总时长和视频对象的数量,确定第三时长;将第二时长和第三时长的差值的绝对值,确定为第一得分。
[0019]在一些实施例中,根据各初始音乐点在音频信息中所在的时刻,音频信息的起始时刻和终止时刻,确定各初始音乐点的第三得分,包括:根据各初始音乐点在音频信息中所在的时刻、音频信息的起始时刻和第二预设时长,确定第四得分;根据各初始音乐点在音频信息中所在的时刻、音频信息的终止时刻和第二预设时长,确定第五得分;将第四得分和第五得分,确定第三得分。
[0020]在一些实施例中,该方法还包括:根据预设优先级顺序,为各初始音乐点设置对应的权重,权重至少部分和音乐点的优先级相关。
[0021]在一些实施例中,根据目标音乐点和多个视频对象,生成目标视频,包括:将音频信息添加到多个视频对象的音轨中,得到待处理视频;将待处理视频中,目标音乐点所在的时刻对应的视频对象处添加渲染效果,得到目标视频,渲染效果为动画、特效或者转场。
[0022]在一些实施例中,确定音频信息中的多个初始音乐点以及各初始音乐点的特征信息,包括:将音频信息输入音频特征分析模型中,得到音频信息中的多个初始音乐点以及各初始音乐点的特征信息。
[0023]第二方面,本申请提供一种基于音乐点的视频生成装置,包括:处理模块;处理模块用于:
[0024]分别获取多个视频对象和音频信息;
[0025]确定音频信息中的多个初始音乐点以及各初始音乐点的特征信息,特征信息至少包括各初始音乐点的音强和各初始音乐点在音频信息中所在的时刻;
[0026]根据特征信息,从多个初始音乐点中筛选出目标音乐点;
[0027]根据目标音乐点和多个视频对象,生成目标视频。
[0028]在一些实施例中,处理模块具体用于:判断各初始音乐点的音强是否大于第一预设值;根据音强大于第一预设值的第一音乐点,确定目标音乐点。
[0029]在一些实施例中,处理模块具体用于:针对任意两个相邻第一音乐点,根据第一音乐点对应的时刻,获取相邻的两个第一音乐点之间的第一时长;若第一时长小于第一预设
时长,则删除相邻两个第一音乐点中优先级低的第一音乐点,得到剩余的至少两个第二音乐点;根据至少两个第二音乐点,确定目标音乐点。
[0030]在一些实施例中,所述多个初始音乐点包括:重拍点、人声点、乐句点、乐段点、音效点、副歌点中的至少两个音乐点。
[0031]在一些实施例中,删除相邻两个第一音乐点中优先级低的第一音乐点,包括:按照预设优先级顺序,删除所述相邻两个第一音乐点中优先级低的第一音乐点;所述预设优先级顺序由高到底的排列顺序为:所述副歌点、强音效点、所述乐句点、所述乐段点、所述重拍点、弱音效点、所述人声点、预设点。
[0032]在一些实施例中,处理模块具体用于:根据各初始音乐点在音频信息中所在的时刻,确定各初始音乐点的目标得分;根据各初始音乐点的目标得分,确定目标音乐点。
[0033]在一些实施例中,处理模块具体用于:删除目标得分小于第二预设值的初始音乐点,得到剩余的第三音乐点;根据第三音乐点在音频信息中所在的时刻,重新确定各第三音乐点的目标得分,并根据第三音乐点的目标得分,确定目标音乐点。
[0034]在一些实施例中,处理模块具体用于:根据各初始音乐点在音频信息中所在的时刻,确定相邻两个初始音乐点之间的第二时长,并根据第二时长确定各初始音乐点的第本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于音乐点的视频生成方法,其特征在于,包括:分别获取多个视频对象和音频信息;确定所述音频信息中的多个初始音乐点以及各初始音乐点的特征信息,所述特征信息至少包括各所述初始音乐点的音强和各所述初始音乐点在所述音频信息中所在的时刻;根据所述特征信息,从所述多个初始音乐点中筛选出目标音乐点;根据所述目标音乐点和所述多个视频对象,生成目标视频。2.根据权利要求1所述的方法,其特征在于,所述根据所述特征信息,从所述多个初始音乐点中筛选出目标音乐点,包括:判断各所述初始音乐点的音强是否大于第一预设值;根据所述音强大于所述第一预设值的第一音乐点,确定所述目标音乐点。3.根据权利要求2所述的方法,其特征在于,所述根据所述音强大于所述第一预设值的第一音乐点,确定所述目标音乐点,包括:针对任意两个相邻第一音乐点,根据所述第一音乐点对应的时刻,获取相邻的两个第一音乐点之间的第一时长;若所述第一时长小于第一预设时长,则删除所述相邻两个第一音乐点中优先级低的第一音乐点,得到剩余的至少两个第二音乐点;根据所述至少两个第二音乐点,确定所述目标音乐点。4.根据权利要求3所述的方法,其特征在于,所述多个初始音乐点包括:重拍点、人声点、乐句点、乐段点、音效点、副歌点中的至少两个音乐点。5.根据权利要求4所述的方法,其特征在于,所述删除所述相邻两个第一音乐点中优先级低的第一音乐点,包括:按照预设优先级顺序,删除所述相邻两个第一音乐点中优先级低的第一音乐点;所述预设优先级顺序由高到底的排列顺序为:所述副歌点、强音效点、所述乐句点、所述乐段点、所述重拍点、弱音效点、所述人声点、预设点。6.根据权利要求1所述的方法,其特征在于,所述根据所述特征信息,从所述多个初始音乐点中筛选出目标音乐点,包括:根据各初始音乐点在所述音频信息中所在的时刻,确定所述各初始音乐点的目标得分;根据所述各初始音乐点的目标得分,确定所述目标音乐点。7.根据权利要求6所述的方法,其特征在于,所述根据所述各初始音乐点的目标得分,确定所述目标音乐点,包括:删除所述目标得分小于第二预设值的初始音乐点,得到剩余的第三音乐点;根据所述第三音乐点在所述音频信息中所在的时刻,重新确定所述各第三音乐点的目标得分,并根据所述第三音乐点的目标得分,确定所述目标音乐点。8.根据权利要求6或7所述的方法,其特征在于,所述根据各初始音乐点在所述音频信息中所在的时刻,确定所述各初始音乐点的目标得分,包括:根据各初始音乐点在所述音频信息中所在的时刻,确定相邻两个初始音乐点之间的第二时长,并根据所述第二时长确定各初始音乐点的第一得分;根据各初始音乐点的权重,确定所述各初始音乐点的第二得分;
根据各初始音乐点在所述音频信息中所在的时刻,所述音频信息的起始时刻和终止时刻,确定所述各初始音乐点的第三得分;根据所述第一得分、所述第二得分和所述...

【专利技术属性】
技术研发人员:宫伟博靳潇杰沈晓辉
申请(专利权)人:脸萌有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1