【技术实现步骤摘要】
一种混剪视频确定方法、装置、设备及存储介质
本公开实施例涉及视频数据处理
,尤其涉及一种混剪视频确定方法、装置、设备及存储介质。
技术介绍
将多个视频混剪成单个视频并配合上流行音乐进行传播是目前短视频应用常见的场景。视频包含丰富的视频特征信息,其在视频混剪中有着非常重要的作用。现有的视频混剪方法通常基于单一视频特征信息。以视频特征信息为色彩丰富度为例,该类视频混剪方法利用背景音乐变化点作为视频切换点,基于视频色彩丰富度确定当前片段下的最优解,最终得到混剪视频。利用该方法得到的混剪视频通常连贯性较差,进而导致用户的视觉体验较差。
技术实现思路
本公开实施例提供一种混剪视频确定方法、装置、设备及存储介质,提高了混剪视频的连贯性以及用户的视觉体验。第一方面,本公开实施例提供了一种混剪视频确定方法,所述方法包括:根据预设背景音频,依序确定各音频片段分别对应的第一视频片段集合;其中,音频片段为根据音频关键点,将所述预设背景音频分割后得到的音频片段;基于第一视频特征,确定各第一视 ...
【技术保护点】
1.一种混剪视频确定方法,其特征在于,包括:/n根据预设背景音频,依序确定各音频片段分别对应的第一视频片段集合;其中,音频片段为根据音频关键点,将所述预设背景音频分割后得到的音频片段;/n基于第一视频特征,确定各第一视频片段集合分别对应的第一视频特征表征数据集合,其中,第一视频特征包括至少两种视频特征;/n根据各所述第一视频特征表征数据集合,确定用于混剪的各第一视频片段,其中,每相邻两个第一视频片段分别属于相邻两个音频片段对应的第一视频片段集合;/n利用视频拼接算法,将各相邻的第一视频片段进行顺次拼接,得到目标混剪视频。/n
【技术特征摘要】 【专利技术属性】
1.一种混剪视频确定方法,其特征在于,包括:
根据预设背景音频,依序确定各音频片段分别对应的第一视频片段集合;其中,音频片段为根据音频关键点,将所述预设背景音频分割后得到的音频片段;
基于第一视频特征,确定各第一视频片段集合分别对应的第一视频特征表征数据集合,其中,第一视频特征包括至少两种视频特征;
根据各所述第一视频特征表征数据集合,确定用于混剪的各第一视频片段,其中,每相邻两个第一视频片段分别属于相邻两个音频片段对应的第一视频片段集合;
利用视频拼接算法,将各相邻的第一视频片段进行顺次拼接,得到目标混剪视频。
2.根据权利要求1所述的方法,其特征在于,在确定与音频片段对应的第一视频片段集合之前,还包括:
分别对每个音频片段对应的原始视频执行如下操作:
根据音频片段的时长,对原始视频进行视频片段提取,得到第一视频片段集合,其中,第一视频片段集合中的每个第一视频片段的时长均等于音频片段时长。
3.根据权利要求1所述的方法,其特征在于,第一视频特征包括美学特征、色彩特征和运动速度特征。
4.根据权利要求3所述的方法,其特征在于,基于第一视频特征,确定第一视频片段集合对应的第一视频特征表征数据集合,包括:
分别对第一视频片段集合中的每个第一视频片段执行如下操作:
将第一视频片段输入预先训练的美学特征深度学习网络,输出第一视频片段的美学特征表征数据;
将每个第一图像中的每个像素点对应的色彩值归一化为色彩特征表征子数据,其中,第一图像为第一视频片段中的图像;
基于色彩特征表征子数据,利用色彩特征表征数据确定规则,确定第一视频片段的色彩特征表征数据;
利用光流算法确定相邻两个第一图像之间的运动速度差值,并将运动速度差值归一化为运动速度表征子数据;
基于运动速度表征子数据,利用运动速度表征数据确定规则,确定第一视频片段的运动速度表征数据;
利用美学特征表征数据、色彩特征表征数据以及运动速度特征表征数据,确定第一视频片段的第一视频特征表征数据;
将每个第一视频特征表征数据作为第一视频特征表征数据集合。
5.根据权利要求1所述的方法,其特征在于,根据所述第一视频特征表征数据集合,确定最终用于混剪的各第一视频片段,包括:
针对各所述第一视频特征表征数据集合,在相应的第一视频片段集合中,确定候选第一视频片段集合;
基于第二视频特征,确定候选第一视频片段对所对应的第二视频特征表征数据,其中,所述候选第一视频片段对中的两个候选视频片段,分别属于相邻两个音频片段对应的两个候选第一视频片段集合,第二视频特征包括运动方向;
根据所述第二视频特征表征数据,确定用于混剪的各第一视频片段。
技术研发人员:杨旭静,靳潇杰,
申请(专利权)人:北京字节跳动网络技术有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。