基于时空感知的全景视频增强处理方法、装置和电子设备制造方法及图纸

本发明专利技术公开了一种基于时空感知的全景视频增强处理方法，包括：获取输入全景视频图像的纬度权重图像和显著性权重图像；将输入全景视频图像和纬度权重图像、显著性权重图像在颜色通道维度上进行融合，得到预处理全景视频；对预处理全景视频进行采样，获得多个像素块序列；分别对每个像素块序列进行下采样，每个像素块序列得到一个高分辨率像素块序列和低分辨率像素块序列，重建低分辨率像素块序列至高分辨率获得重建像素块序列，与高分辨率像素块序列之间的损失作为损失函数，对深度学习模型进行训练，获得增强模型，由增强模型输出增强处理后的全景视频。本发明专利技术公开的方法，增强了全景视频质量，保证了全景视频沉浸式视觉体验。

【技术实现步骤摘要】

本专利技术涉及一种基于时空感知的全景视频增强处理方法、装置和电子设备，属于热测量控制领域。

技术介绍

1、全景视频(omnidirectional video,odv)，也被称为360°视频或球形视频，覆盖整个空间场景，能够提供沉浸式视觉体验，被广泛应用在虚拟现实和增强现实领域。受采集设备和传输带宽限制，全景视频往往分辨率较低且带有压缩噪声，现有的视频增强处理技术旨在增强低分辨率视频的分辨率，去除压缩噪声。全景视频由于投影变换过程中带来的失真，难以直接使用以往的一般视频增强处理算法对其进行增强处理或增强处理效果较差。

2、通过计算机或头戴式设备，用户观看全景视频时可以身临其境，为实现高质量视觉体验，需要增强处理技术重建全景视频。在实际应用中，全景视频需要投影到二维平面上再处理传输，最常采用的投影格式为等距柱状投影。三维空间到二维平面的投影变换不可避免地引入了失真，对于等距柱状投影来说，两极区域失真尤为严重。

3、传统的处理方法中，直接将一般视频增强处理方法应用到全景视频上，模型会学习失真部分的细节而不是纹理细节，造成纹理重建丢失错乱本文档来自技高网...

【技术保护点】

1.一种基于时空感知的全景视频增强处理方法，其特征在于，包括：

2.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

3.根据权利要求2所述的基于时空感知的全景视频增强处理方法，其特征在于，

4.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

5.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

6.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

7.根据权利要求6所述的基于时空感知的全景视频增强处理方法，其特征在于，

8...

【技术特征摘要】

1.一种基于时空感知的全景视频增强处理方法，其特征在于，包括：

2.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

3.根据权利要求2所述的基于时空感知的全景视频增强处理方法，其特征在于，

4.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

5.根据权利要求1所述的基于时空感知的全景视频增强处理方法，其特征在于，

6...

【专利技术属性】
技术研发人员：张新峰，安泓宇，
申请(专利权)人：中国科学院大学，
类型：发明
国别省市：