一种基于AI模型的歌曲视频合成方法技术

技术编号:37374600 阅读:25 留言:0更新日期:2023-04-27 07:18
本发明专利技术公开了一种基于AI模型的歌曲视频合成方法,属于视频处理技术领域,具体包括建立具有AI模型的歌曲视频合成系统,包括处理服务器,所述处理服务器输出端与语义识别AI模型的输入端通讯连接,所述处理服务器用于对提供服务器进行分析算力处理,所述语义识别AI模型的输入端与视频分析单元的输出端电性连接。本发明专利技术中,通过视频分析单元能够对视频内容进行快速分析,在得到视频中相应的色彩信息以及源音频音轨后,能够基于视频内容进行语义识别分离,从而能够基于视频的内容得到对视频的特征分析,同时能够通过歌曲匹配单元对歌曲内容对快速判断匹配,有利于将歌曲内容与视频充分结合对应,有利于得到优化后的歌曲视频。有利于得到优化后的歌曲视频。有利于得到优化后的歌曲视频。

【技术实现步骤摘要】
一种基于AI模型的歌曲视频合成方法


[0001]本专利技术属于视频处理
,尤其涉及一种基于AI模型的歌曲视频合成方法。

技术介绍

[0002]随着短视频的发展,视频通过剪辑添加相应的背景歌曲,得到更好的表达效果,但如何对视频配合最搭配的歌曲往往需要剪辑人员以及编导的个人素养,导致视频质量不一,影响到处理效果。
[0003]中国专利申请CN113329258A公开了一种歌曲视频合成的方法及播放器,通过对歌曲和歌曲视频进行多种分类,通过AI人工智能曲库的点播,能够根据用户的点播指令,实时清晰的判断用户所点曲目的曲风、节奏、歌曲类型、歌曲中心思想、地区属性、歌手属性、画风类型等多种信息,并将结果反馈至歌曲视频素材中心,实现将多层影音素材叠加在同一平面进行播放完整K歌的过程。通过人工智能实现将不同风格的歌曲,智能适配相应的视频情景素材作为唱歌背景,还能够实现在播放中随着音乐节奏调整情景素材的实时剪辑速度,让音乐与画面更加协调,让用户在演唱歌曲的时候更具有代入感,但在实际使用时,上述方案对视频中的内容判断能力较弱,影响到基于视频内容与歌曲的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于AI模型的歌曲视频合成方法,其特征在于,具体包括建立具有AI模型的歌曲视频合成系统,包括处理服务器(5),所述处理服务器(5)输出端与语义识别AI模型(2)的输入端通讯连接,所述处理服务器(5)用于对提供服务器进行分析算力处理,所述语义识别AI模型(2)的输入端与视频分析单元(1)的输出端电性连接,所述语义识别AI模型(2)用于基于AI模型分析歌曲和视频内容辅助进行快速合成,所述视频分析单元(1)用于对视频信息内容进行分析,所述语义识别AI模型(2)的输入端与数据加密单元(4)的输出端电性连接,所述数据加密单元(4)用于对视频和歌曲内容分析结果进行数据加密,所述语义识别AI模型(2)的输入端与合成拼接单元(3)的输出端电性连接,所述合成拼接单元(3)用于对分析匹配后的视频以及歌曲进行合成,所述处理服务器(5)的输入端与歌曲匹配单元(6)的输出端电性连接,所述歌曲匹配单元(6)用于基于视频内容进行歌曲的匹配,所述处理服务器(5)的输出端与用户点播模块(7)的输入端电性连接,所述用户点播模块(7)用于基于用户点播的歌曲类型进行加权。2.根据权利要求1所述的一种基于AI模型的歌曲视频合成方法,其特征在于,所述处理服务器(5)的输入端与后台审核模块(8)的输出端电性连接,所述后台审核模块(8)用于认证后台管理人员的身份信息后辅助对视频合成内容进行审核判断。3.根据权利要求1所述的一种基于AI模型的歌曲视频合成方法,其特征在于,所述视频分析单元(1)包括视频色彩分析模块(101)、视频数据录入模块(102)和视频音轨源分类模块(103),所述视频色彩分析模块(101)用于对视频色彩以及色温进行判断,所述视频数据录入模块(102)用于记录输入的视频数据,所述视频音轨源分类模块(103)用于对视频中的多重音轨进行分析判断,所述视频数据录入模块(102)的输出端与视频内容分析模块(104)的输入端电性连接。4.根据权利要求3所述的一种基于AI模型的歌曲视频合成方法,其特征在于,所述视频内容分析模块(104)的输出端与视频归类处理模块(105)的输入端电性连接,所述视频内容分析模块(104)用于通过语音识别AI模型(2)对视频中对话内容特征进行分析判断,所述视频归类处理模块(105)用于通过视频识别的数据进行类型归类,所述视频归类处理模块(105)的输出端与音频频率记录模块(106)的输入端电性连接,所...

【专利技术属性】
技术研发人员:邓宇翔李韩刘宁庞文刚刘艾军
申请(专利权)人:联通在线信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1