视频分析方法、装置、电子设备及存储介质制造方法及图纸

技术编号:28037693 阅读:34 留言:0更新日期:2021-04-09 23:20
本申请公开了一种视频分析方法、装置、电子设备及存储介质,涉及人工智能技术领域,该方法包括:获取第一视频和第一视频对应的第一语音,第一视频包括多个第一帧图像,每个第一帧图像包括多个第一关键点;将第一语音输入至视频生成模型,得到第二视频,第二视频包括多个第二帧图像,每个第二帧图像包括多个第二关键点,第二关键点和第一关键点相互对应;获取第一视频中每个第一关键点与第二视频中每个第二关键点之间的第一距离;根据第一距离确定第二视频是否符合预设条件;若符合预设条件,则确定第二视频为第一等级视频。本申请通过利用第一关键点和第二关键点的距离来对生成的第二视频进行准确有效的评价。

【技术实现步骤摘要】
视频分析方法、装置、电子设备及存储介质
本申请涉及人工智能
,更具体地,涉及一种视频分析方法、装置、电子设备及存储介质。
技术介绍
随着计算机技术的发展,很多智能机器学习、深度学习的不同算法被应用于数字人生成上。现有技术在生成数字人时,通常是将语音或者文本等输入至机器学习或者深度学习模型中,以生成与数字人相关的视频,但是现有技术却没有对数字人进行评价的具体方案。因此,如何对生成的第二视频进行评价是亟待解决的问题。
技术实现思路
鉴于上述问题,本申请提出了一种视频分析方法、装置、电子设备及存储介质。第一方面,本申请实施例提供了一种视频分析方法,该方法包括:获取第一视频和所述第一视频对应的第一语音,所述第一视频包括多个第一帧图像,每个所述第一帧图像包括多个第一关键点;将所述第一语音输入至视频生成模型,得到第二视频,所述第二视频包括多个第二帧图像,每个所述第二帧图像包括多个第二关键点,所述第二关键点和所述第一关键点相互对应;获取所述第一视频中每个所述第一关键点与所述第二视频中每个第二关键点之间的第一距离;根据所述第一本文档来自技高网...

【技术保护点】
1.一种视频分析方法,其特征在于,所述方法包括:/n获取第一视频和所述第一视频对应的第一语音,所述第一视频包括多个第一帧图像,每个所述第一帧图像包括多个第一关键点;/n将所述第一语音输入至视频生成模型,得到第二视频,所述第二视频包括多个第二帧图像,每个所述第二帧图像包括多个第二关键点,所述第二关键点和所述第一关键点相互对应;/n获取所述第一视频中每个所述第一关键点与所述第二视频中每个第二关键点之间的第一距离;/n根据所述第一距离确定所述第二视频是否符合预设条件;/n若符合预设条件,则确定所述第二视频为第一等级视频。/n

【技术特征摘要】
1.一种视频分析方法,其特征在于,所述方法包括:
获取第一视频和所述第一视频对应的第一语音,所述第一视频包括多个第一帧图像,每个所述第一帧图像包括多个第一关键点;
将所述第一语音输入至视频生成模型,得到第二视频,所述第二视频包括多个第二帧图像,每个所述第二帧图像包括多个第二关键点,所述第二关键点和所述第一关键点相互对应;
获取所述第一视频中每个所述第一关键点与所述第二视频中每个第二关键点之间的第一距离;
根据所述第一距离确定所述第二视频是否符合预设条件;
若符合预设条件,则确定所述第二视频为第一等级视频。


2.根据权利要求1所述的方法,其特征在于,所述将所述第一语音输入至视频生成模型,得到第二视频之前,包括:
获取第三视频和所述第三视频对应的第三语音;
将所述第三视频和所述第三语音输入至视频生成网络,得到视频生成模型。


3.根据权利要求2所述的方法,其特征在于,所述根据所述第一距离确定所述第二视频是否符合预设条件,包括:
将所述第三语音输入至所述视频生成模型,得到第四视频;
获取所述第三视频中每个第三关键点与所述第四视频中每个第四关键点之间的第二距离;
根据所述第一距离和所述第二距离确定所述第二视频是否符合预设条件。


4.根据权利要求3所述的方法,其特征在于,所述根据所述第一距离和所述第二距离确定所述第二视频是否符合预设条件,包括:
获取所述第一距离和所述第二距离的差值,得到距离差值;
根据所述距离差值确定所述第二视频是否符合预设条件。


5.根据权利要求4所述的方法,其特征在于,所述根据所述距离差值确定所述第二视频是否符合预设条件,包括:
获取所述距离差值与所述第二距离的比值,得到目标参数;
根据所述目标参数确定所述第二视频是否符合预设条件。


6.根据权利要求5所述的方法,其特征在于,所述根据所述目标参数确定所述第二视频是否符合预设条件,包括:
确定所述目标参数是否小于第一预设阈值;
若所述目标参数小于第一预设阈值,则确定所述第二视频符合预设条件。


7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
若所述目标参数大于或者等于第一预设阈值,则确定所述目标参数是否小于第二预设阈值;
若所述目标参数小于第二预设阈值,则确定所述第二视频为第二等级视频,所述第二等级视频的用户满意度低于所述第一等级视频的用户满意度。


8.根据权利要求7所述的方法,其特征在于,所述方法...

【专利技术属性】
技术研发人员:王鑫宇杨国基刘炫鹏陈泷翔刘云峰
申请(专利权)人:深圳追一科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1