视频合成方法、装置、设备及存储介质制造方法及图纸

本发明专利技术属于视频合成领域，公开了一种视频合成方法、装置、设备及存储介质。该方法包括：根据相机阵列所拍摄的视频帧构建若干组视频帧序列；提取每组视频帧序列中各视频帧的时空特征，根据所述时空特征从所述若干组视频帧序列中选取关键帧；根据所述关键帧合成目标视频。由于本发明专利技术是根据相机阵列所拍摄的视频帧构建若干组视频帧序列；提取每组视频帧序列中各视频帧的时空特征，根据时空特征从若干组视频帧序列中选取关键帧；根据关键帧合成目标视频。相对于现有的在处理环绕拍摄原始帧序列时，采用同比例画幅降低分辨率的方式，本发明专利技术上述方式不用降低视频帧的分辨率，只根据关键帧合成目标视频，能够增加目标视频的合成效率。率。率。

【技术实现步骤摘要】
视频合成方法、装置、设备及存储介质


[0001]本专利技术涉及视频合成
，尤其涉及一种视频合成方法、装置、设备及存储介质。

技术介绍

[0002]目前在处理4K以上分辨率的超高清环绕拍摄原始帧序列时，为了能够实现实时合成效果预览，一般采用同比例画幅降低分辨率的合成方式。而通过上述方式进行环绕拍摄的视频合成预览，120帧4K环绕合成视频码率约1600Mb/s，等比例缩减画质码率至8Mb/s后，环绕效果预览处理速度约为3
‑
5min，不利于实时环绕合成视频的预览与传输。
[0003]上述内容仅用于辅助理解本专利技术的技术方案，并不代表承认上述内容是现有技术。

技术实现思路

[0004]本专利技术的主要目的在于提供了一种视频合成方法、装置、设备及存储介质，旨在解决现有技术采用同比例画幅降低分辨率的方式处理环绕拍摄原始帧序列导致预览视频的合成效率低的技术问题。
[0005]为实现上述目的，本专利技术提供了一种视频合成方法，所述方法包括以下步骤：
[0006]根据相机阵列所拍摄的视频帧构建若本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频合成方法，其特征在于，所述视频合成方法包括以下步骤：根据相机阵列所拍摄的视频帧构建若干组视频帧序列；提取每组视频帧序列中各视频帧的时空特征，根据所述时空特征从所述若干组视频帧序列中选取关键帧；根据所述关键帧合成目标视频。2.如权利要求1所述的视频合成方法，其特征在于，所述根据所述关键帧合成目标视频的步骤，包括：从所述关键帧中选取相匹配的关键帧对，所述关键帧对中的关键帧由不同的相机拍摄；确定所述关键帧对中关键帧之间的视点差值；根据所述视点差值对所述关键帧对中的任一关键帧进行平移，获得虚拟视点帧；根据所述关键帧和所述虚拟视点帧合成目标视频。3.如权利要求1所述的视频合成方法，其特征在于，所述根据相机阵列所拍摄的视频帧构建若干组视频帧序列的步骤，包括：获取相机阵列所拍摄的视频帧；从所述所拍摄的视频帧中抽取预设数量的目标视频帧，并根据所述目标视频帧构建视频帧序列；统计构建的所述视频帧序列的序列数量，判断所述序列数量是否大于预设视频帧序列数；若否，则执行所述从所述所拍摄的视频帧中抽取预设数量的目标视频帧，并根据所述目标视频帧构建视频帧序列的步骤。4.如权利要求2所述的视频合成方法，其特征在于，所述从所述关键帧中选取相匹配的关键帧对的步骤，包括：对所述关键帧进行遍历，将遍历到的关键帧作为基准视频帧；根据所述关键帧的时间特征和空间特征从所述关键帧中选取与所述基准视频帧相匹配的匹配帧；将所述基准视频帧和所述匹配帧作为关键帧对。5.如权利要求2所述的视频合成方法，其特征在于，所述根据所述关键帧和所述虚拟视点帧合成目标视频的步骤，还包括：根据所述关键帧和所述虚拟视点帧构建关键帧序列；通过预设特征提取网络对所述关键帧序列进行图像帧序列特征化，获得待编码帧序列；对所述待编码帧序列进行编码，获得待合成帧序列以及所述待合成帧序列中各视频帧的帧号和时间戳；根据所述各视频帧的帧号和时间戳...

【专利技术属性】
技术研发人员：陈笑怡，张颖哲，黄舒婷，李乐云，孙翔云，姚少康，孔祥勇，招鑫，熊思博，林晓青，陈丽丽，蒋杰，
申请(专利权)人：咪咕文化科技有限公司中国移动通信集团有限公司，
类型：发明
国别省市：