基于边缘超分辨率增强的360度视频传输方法、系统技术方案

本发明专利技术涉及属于视频处理技术领域，公开了一种基于边缘超分辨率增强的360度视频传输方法、系统，包括：在云端服务器，获取原始视频，并对所述原始视频进行预处理得到若干不同分辨率的第一瓦片，并通过若干所述第一瓦片训练视频超分辨率模型并存储；在边缘服务器，建立QoE矩阵作为奖励函数；将所述原始视频中的数据块的传输参数作为状态空间；将该数据块在不同传输网络的第一瓦片数量作为动作空间；将所述动作空间、奖励函数、状态空间通过Transformer神经网络模型进行训练，最终得到视频传输模型，并基于所述视频传输模型对云端服务器接收到的360度视频进行传输。能够有效缓解传输360度视频所面临的带宽资源压力和延迟问题。

【技术实现步骤摘要】

本专利技术涉及属于视频处理，具体涉及一种基于边缘超分辨率增强的360度视频传输方法、系统。

技术介绍

1、近年来，视频行业经历了快速增长。根据《2023年报告》，2022年约70％的网络流量来自视频数据，预计到2028年这一比例将达到80％。与此同时，出现了一系列新形式的视频，其中，360度视频是常见的虚拟现实内容的载体之一。360度视频，又称为全景视频、球形视频和全向性视频，通常由全景相机采集获得，是允许用户通过头戴显示器(hmd)或手机等设备，以3自由度(dof)观察周围的媒体。与游戏等高自由度的虚拟现实应用不同，用户观看360度视频时更多为被动地接受信息。但是，比起需要昂贵硬件提供的庞大算力来进行实时三维渲染的应用，360度视频作为主流媒体的一种，用户可以方便地在互联网上下载、存储或在线点播，是用户获得沉浸虚拟现实体验的高效途径。得益于360度视频的特点和优势，其被广泛地用于虚拟现实教育、旅游、新闻、购物、娱乐和医疗等领域，基于html5和webvr的360度视频体验也在逐渐发展和完善，用户从互联网上获取360度视频将越来越方便。此外，影石insta本文档来自技高网...

【技术保护点】

1.一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，包括：

2.根据权利要求1所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，对所述原始视频进行预处理得到若干低分辨率的第一瓦片，并通过若干所述第一瓦片训练视频超分辨率模型并存储，并且，通过所述视频超分辨率模型对部分所述第一瓦片进行超分辨率处理并存储的具体过程为：

3.根据权利要求2所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，

4.根据权利要求3所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，所述QoE矩阵具体为：</p>

5.根据...

【技术特征摘要】

1.一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，包括：

2.根据权利要求1所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，对所述原始视频进行预处理得到若干低分辨率的第一瓦片，并通过若干所述第一瓦片训练视频超分辨率模型并存储，并且，通过所述视频超分辨率模型对部分所述第一瓦片进行超分辨率处理并存储的具体过程为：

3.根据权利要求2所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，

4.根据权利要求3所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，所述qoe矩阵具体为：

5.根据权利要求4所述的一种基于边缘超分辨率增强的360度视频传输方法，其特征在于，所述视频质量的具体公式为：

6.根据权利要求5所述的一种基于边缘...

【专利技术属性】
技术研发人员：刘慧胜，冉泳屹，贺云展，张纪强，雒江涛，
申请(专利权)人：重庆邮电大学，
类型：发明
国别省市：