【技术实现步骤摘要】
一种全景视频的存储优化方法、系统、终端及存储介质
[0001]本专利技术涉及全景视频点播或直播领域,尤其涉及一种全景视频的存储优化方法、系统、终端及存储介质。
技术介绍
[0002]全景视频是一种用3D摄像机进行全方位360度进行拍摄的视频,用户在观看视频的时候,可以随意调节视频上下左右进行观看。全景视频可提供全方位视野,允许用户自由选择任意方向进行观看,提供了身临其境的观影感受。
[0003]现有技术中,在存储全景视频时,由于高质量的全景视频码率很大,当前带宽不足以支持高质量全景视频实时传输,通常将全景视频在时间轴上分割为多段相同时间长度的全景视频块,然后使用多种投影坐标系,将全景视频块内每帧全景图像投影为多面体格式,然后将多面体的各个投影面拼接为单张平面格式的图像,再使用传统的平面视频压缩技术对连续帧进行压缩,例如H256视频编码标准;但是实际投影过程中,单帧全景图像内的车等前景对象会坐落在不同的投影面中,第二行中间两个投影面将汽车割裂;前景对象的空间不连续性不利于平面视频压缩技术的压缩过程,导致其压缩率降低,占 ...
【技术保护点】
【技术特征摘要】
1.一种全景视频的存储优化方法,其特征在于,所述全景视频的存储优化方法包括:获取全景视频中第一全景图像,识别所述第一全景图像中的对象,计算所述对象的运动范围,并将所述全景视频分割成全景视频块;基于所述全景视频块获取第二全景图像,对所述第二全景图像进行分割得到语义分割结果,并对所述语义分割结果进行投影得到投影平面;对所述投影平面进行强化学习处理,并将所述全景视频块投影成平面格式后进行压缩储存。2.根据权利要求1所述的全景视频的存储优化方法,其特征在于,所述获取全景视频中第一全景图像,识别所述第一全景图像中的对象,计算所述对象的运动范围,并将所述全景视频分割成全景视频块,具体包括:对全景视频进行均匀采样以获取数帧的全景图像,对所述全景图像采用对象识别算法识别出每帧全景图像中的对象,并标记连续帧内的相同对象;当对象的中心点作为所述对象的重心时,设定一个时间长度,计算得出每个对象的第一帧到所述时间长度后的一帧之间的重心移动距离;计算出所述重心移动距离的平均值,将所述平均值作为所述时间长度内所有对象的平均运动范围,并设定所述平均范围的阈值;判断所述平均运动范围与所述阈值的大小,若所述平均运动范围等于所述阈值时,则使用所述时间长度在时间轴上分割全景视频为多段全景视频块。3.根据权利要求2所述的全景视频的存储优化方法,其特征在于,所述阈值的大小根据投影格式进行设定。4.根据权利要求2所述的全景视频的存储优化方法,其特征在于,所述判断所述平均运动范围与所述阈值的大小,还包括:若所述平均运动范围大于所述阈值时,则缩短所述时间长度,并重新计算缩短后的时间长度内所有对象的平均运动范围;若所述平均运动范围小于所述阈值时,则增加所述时间长度,并重新计算增加后的时间长度内所有对象的平均运动范围。5.根据权利要求1所述的全景视频的存储优化方法,其特征在于,所述基于所述全景视频块获取第二全景图像,对所述第二全景图像进行分割得到语义分割结果,并对所述语义分割结果进行投影得到投影平面,具体包括:从所述全景视频块中提取出数帧的第二全景图像,将所述第二全景图像输入到语义分割算法中进行分割得到语义分割结果;基于所述语义分割结果的投影格式,选择所述投影格式对应的投影坐标系,使用所述投影坐标系对所述语义分割结果进行投影并得到多个投影平面。6.根据权利要求5所述的全景视频的存储优化方法,其特征在于,所述投影格式包括等距形投影格式和立方体投影格式。7.根据权利要求5所述的全景视频的存储优化方法,其特征在于,所述对所述投影平面进行强化学习处理,并将所述全景视频块投影成平面格式后进行压缩储存,具体包括:将所述投影平面按照时间轴顺序输入至强化学习方法中处理,处理完成后输出多自由度旋转角度;
基于所述多自由度旋转角度完成对所述...
【专利技术属性】
技术研发人员:陈梓豪,邹龙昊,陈作舟,薛雅利,陈昊,王彬彬,陶小峰,
申请(专利权)人:鹏城实验室,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。