视频数据采集方法、视频创作方法及相关产品技术

技术编号:30550479 阅读:11 留言:0更新日期:2021-10-30 13:30
本申请实施例提供一种视频数据采集方法、视频创作方法及相关产品,该基于视频数据采集方法包括:采集原始视频的至少一帧图像的图像数据和位姿数据;根据所述图像数据和所述位姿数据计算目标增强现实AR数据;所述目标AR数据包括平面数据、锚点数据、网格数据中的至少一种;所述目标AR数据用于视频增强现实创作。本申请实施例可以提高视频增强现实的处理效果。申请实施例可以提高视频增强现实的处理效果。申请实施例可以提高视频增强现实的处理效果。

【技术实现步骤摘要】
视频数据采集方法、视频创作方法及相关产品


[0001]本申请涉及视频处理
,具体涉及一种视频数据采集方法、视频创作方法及相关产品。

技术介绍

[0002]近年来,随着移动互联的高度普及,人们的娱乐需求也在不断提升,由最初的简单拍照,美颜拍照,后来的短视频,直播等各种二维形态慢慢融入新的元素。目前市面上的视频编辑或视频创作工具还处于二维处理层面,增强现实的真实感较差。

技术实现思路

[0003]本申请实施例提供一种视频数据采集方法、视频创作方法及相关产品,提高视频增强现实的处理效果。
[0004]本申请实施例的第一方面提供了一种视频数据采集方法,包括:
[0005]采集原始视频的至少一帧图像的图像数据和位姿数据;
[0006]根据所述图像数据和所述位姿数据计算目标增强现实AR数据;所述目标AR数据包括平面数据、锚点数据、网格数据中的至少一种;所述目标AR数据用于视频增强现实创作。
[0007]本申请实施例在视频数据采集时,根据采集的原始视频的至少一帧图像的图像数据和位姿数据计算用于视频增强现实创作的目标AR数据,由于目标AR数据包括平面数据、锚点数据、网格数据,可以根据平面数据确定每一帧图像的可添加素材的平面,根据锚点数据确定每一帧图像中可添加素材的三维锚点坐标和素材朝向,根据网格数据确定每一帧图像的三维网格,使得添加的素材与视频中每一帧图像的结合更加逼真,从而提高视频增强现实的处理效果。
[0008]可选的,所述根据所述图像数据和所述位姿数据计算目标增强现实AR数据,包括:
[0009]根据所述图像数据和所述位姿数据计算初始AR数据;
[0010]根据所述初始AR数据的质量得分对所述初始AR数据进行过滤,保留质量得分大于设定阈值的所述目标AR数据。
[0011]本申请实施例可以通过初始AR数据的质量得分对初始AR数据进行过滤,使得过滤后的目标AR数据的可靠性大大增强,在可靠的目标AR数据上进行视频创作,从而降低出现视频创作的效果失真的概率。
[0012]可选的,所述根据所述图像数据和所述位姿数据计算增强现实目标AR数据之后,所述方法还包括:
[0013]利用所述目标AR数据在所述原始视频中添加三维素材,得到增强现实视频。
[0014]其中,可以在采集图像数据和位姿数据后,利用目标AR数据在原始视频中添加三维素材,得到增强现实视频,使得添加的加三维素材与视频中每一帧图像的结合更加逼真,从而提高视频增强现实的处理效果。
[0015]可选的,所述方法还包括:
[0016]确定视频分类数据,所述视频分类数据包括视频语音关键词、视频文字数据和视频场景数据中的任一种;
[0017]所述根据所述图像数据和所述位姿数据计算目标增强现实AR数据之后,所述方法还包括:
[0018]对所述图像数据、所述目标AR数据和所述至少一帧图像的深度数据进行编码,或者对所述图像数据、所述目标AR数据、所述至少一帧图像的深度数据和所述视频分类数据进行编码,得到编码后的视频文件或视频流数据;
[0019]将所述编码后的视频文件或视频流数据上传至服务器。
[0020]其中,视频分类数据可以作为后续添加三维素材时的参考,避免添加的三维素材的主题与视频内容格格不入,提高视频融合效果。将编码后的视频流数据上传至服务器,服务器可以将视频流数据推送到视频播放客户端进行视频编辑和视频播放,便于后续的视频编辑和视频播放。
[0021]可选的,所述深度数据根据所述图像数据和所述位姿数据计算得到;或者,所述深度数据通过深度摄像头采集的初始深度信息和所述图像数据计算得到,或者所述深度数据通过双目摄像头采集的双目图像计算得到。
[0022]本申请实施例的第二方面提供了一种视频创作方法,包括:
[0023]获取视频文件或视频流数据;
[0024]对所述视频文件或视频流数据进行解码,得到每一帧图像的图像数据、目标增强现实AR数据和深度数据;
[0025]利用所述目标AR数据和所述深度数据在每一帧图像中添加三维素材,将所述三维素材与所述图像数据融合处理,得到增强现实视频。
[0026]在视频创作时,由于目标AR数据包括平面数据、锚点数据、网格数据,可以根据平面数据确定每一帧图像的可添加素材的平面,根据锚点数据确定每一帧图像中可添加素材的三维锚点坐标和素材朝向,根据网格数据确定每一帧图像的三维网格,使得添加的素材与视频中每一帧图像的结合更加逼真,从而提高视频增强现实的处理效果。
[0027]可选的,所述目标AR数据包括平面数据和锚点数据,所述利用所述目标AR数据和所述深度数据在每一帧图像中添加三维素材,包括:
[0028]根据所述深度数据确定每一帧图像的三维空间坐标,根据所述平面数据确定每一帧图像的可添加素材的平面,根据所述锚点数据和所述三维空间坐标确定每一帧图像中可添加素材的三维锚点坐标和素材朝向;
[0029]根据所述可添加素材的平面的尺寸和所述三维锚点坐标确定所述可添加素材的尺寸,根据所述可添加素材的尺寸选择三维素材;
[0030]按照所述素材朝向将所述三维素材添加在所述三维锚点坐标上。
[0031]可选的,所述目标AR数据还包括网格数据,所述目标AR数据还包括网格数据,所述将所述三维素材与所述图像数据融合处理之前,所述方法还包括:
[0032]根据所述网格数据和所述三维空间坐标确定每一帧图像的三维网格,根据所述三维素材与所述三维网格执行碰撞检测,得到碰撞检测结果;
[0033]所述将所述三维素材与所述图像数据融合处理,包括:
[0034]根据所述碰撞检测结果将所述三维素材与所述图像数据融合处理。
[0035]电子设备可以根据三维素材与三维网格执行碰撞检测,得到碰撞检测结果,碰撞检测结果可以用在后续的三维素材与图像数据融合处理中,从而避免三维素材与三维网格发生重合,避免出现三维素材嵌入三维网格的视觉感受,从而提高增强现实视频的显示效果。其中,当三维素材处于运动状态时,三维素材的三维坐标与三维网格的坐标有重合时,即可判断三维素材与三维网格接触,检测到二者发生碰撞,碰撞后可以根据三维素材的运动方向模拟三维素材碰撞后的轨迹。根据三维素材与三维网格执行碰撞检测,可以避免三维素材与三维网格发生重合,避免出现三维素材嵌入三维网格的视觉感受,从而提高增强现实视频的显示效果。
[0036]可选的,所述对所述视频文件或视频流数据进行解码,得到每一帧图像的图像数据、目标AR数据和深度数据之后,所述利用所述目标AR数据和所述深度数据在每一帧图像中添加三维素材,将所述三维素材与所述图像数据融合处理,得到增强现实视频之前,所述方法还包括:
[0037]获取视频分类数据;
[0038]从素材库中选择与所述视频分类数据对应的所述三维素材。
[0039]视频分类数据可以作为添加三维素材时的参考,避免添加的三维素材的主题与视频内容格格不入,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频数据采集方法,其特征在于,包括:采集原始视频的至少一帧图像的图像数据和位姿数据;根据所述图像数据和所述位姿数据计算目标增强现实AR数据;所述目标AR数据包括平面数据、锚点数据、网格数据中的至少一种;所述目标AR数据用于视频增强现实创作。2.根据权利要求1所述的方法,其特征在于,所述根据所述图像数据和所述位姿数据计算目标增强现实AR数据,包括:根据所述图像数据和所述位姿数据计算初始AR数据;根据所述初始AR数据的质量得分对所述初始AR数据进行过滤,保留质量得分大于设定阈值的所述目标AR数据。3.根据权利要求1所述的方法,其特征在于,所述根据所述图像数据和所述位姿数据计算增强现实目标AR数据之后,所述方法还包括:利用所述目标AR数据在所述原始视频中添加三维素材,得到增强现实视频。4.根据权利要求1所述的方法,其特征在于,所述方法还包括:确定视频分类数据,所述视频分类数据包括视频语音关键词、视频文字数据和视频场景数据中的任一种;所述根据所述图像数据和所述位姿数据计算目标增强现实AR数据之后,所述方法还包括:对所述图像数据、所述目标AR数据和所述至少一帧图像的深度数据进行编码,或者对所述图像数据、所述目标AR数据、所述至少一帧图像的深度数据和所述视频分类数据进行编码,得到编码后的视频文件或视频流数据;将所述编码后的视频文件或视频流数据上传至服务器。5.根据权利要求4所述的方法,其特征在于,所述深度数据根据所述图像数据和所述位姿数据计算得到;或者,所述深度数据通过深度摄像头采集的初始深度信息和所述图像数据计算得到,或者所述深度数据通过双目摄像头采集的双目图像计算得到。6.一种视频创作方法,其特征在于,包括:获取视频文件或视频流数据;对所述视频文件或视频流数据进行解码,得到每一帧图像的图像数据、目标增强现实AR数据和深度数据;利用所述目标AR数据和所述深度数据在每一帧图像中添加三维素材,将所述三维素材与所述图像数据融合处理,得到增强现实视频。7.根据权利要求6所述的方法,其特征在于,所述目标AR数据包括平面数据和锚点数据,所述利用所述目标AR数据和所述深度数据在每一帧图像中添加三维素材,包括:根据所述深度数据确定每一帧图像的三维空间坐标,根据所述平面数据确定每一帧图像的可添加素材的平面,根据所述锚点数据和所述三维空间坐标确定每一帧图像中可添加素材的三维锚点坐标和素材朝向;根据所述可添加素材的平面的尺寸和所述三维锚点坐标确定所述可添加素材的尺寸,根据所述可添加素材的尺寸选择三维素材;按照所述素材朝向将所述三维素材添加在...

【专利技术属性】
技术研发人员:周礼
申请(专利权)人:深圳市慧鲤科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1