一种全景视频的图像处理方法、显示设备及服务器技术

本申请实施例提供一种全景视频的图像处理方法、显示设备及服务器，显示设备向服务器发送的播放请求；以使得所述服务器发送播放请求对应的第一视频块至显示设备；所述显示设备还加载所述第一视频块，响应于缺失视频块无法被加载，所述显示设备还发送一替换请求至服务器；显示设备还在所述替换视频块中筛选出与所述缺失视频块相对应的目标视频；所述显示设备还将已加载的所述第一视频块和所述目标视频进行拼接。可见采用本申请实施例示出的技术方案在全景视频FOV传输技术方案中某空间区域的视频块数据缺失，本申请实施例示出技术方案可以在数据缺失时自动寻找替代数据进行嵌套拼接，有效保证全景视频播放的完整性和稳定性，提升全景视频显示效果。

An image processing method, display device and server of panoramic video

【技术实现步骤摘要】
一种全景视频的图像处理方法、显示设备及服务器
本申请涉及显示设备
，尤其涉及一种全景视频的图像处理方法、显示设备及服务器。
技术介绍
全景视频是基于360度全景图像而发展延伸而来的一种新型的多媒体形式，它通过将一系列静态的全景图像连续播放而转化成动态的全景视频。全景视频一般是使用专业的全景摄像机进行全方位360度拍摄拼接而成，使用软件将各个方位的视频图像进行拼合，然后使用专门的播放器进行播放，将平面视频投影为360度全景模式，呈现给观赏者水平方向360度、垂直方向180度全包围的空间视域。观赏者可以通过头部动作、眼球运动、遥控器控制等方式与视频内容进行互动，从而得到身临其境般的体验。作为一种新型异构多媒体业务，全景视频业务流含有音频、视频、文本、交互、控制信令等多种数据类型，具有多样化的QoS(QualityofService)需求。近年来，为了降低全景视频传输对带宽的要求，减少数据冗余，提高可支持的视频分辨率，在全景视频传输方面多采用FOV传输方案。FOV传输方案是基于视角进行有差别传输全景视频画面的方案，主要关注当前视角区域画本文档来自技高网...

【技术保护点】
1.一种全景视频的图像处理方法，所述方法应用于显示设备端，其特征在于，包括：/n所述显示设备被配置为向服务器发送的播放请求；以使得所述服务器发送所述播放请求对应的第一视频块至显示设备；/n所述显示设备还被配置为加载所述第一视频块，响应于所述缺失视频块无法被加载，所述显示设备还被配置为发送一替换请求至服务器，以使得所述服务器发送所述替换请求相对应的替换视频块至显示设备；其中，所述缺失视频块为无法被加载的第一视频块；/n所述显示设备还被配置为在所述替换视频块中筛选出与所述缺失视频块相对应的目标视频；/n所述显示设备还被配置为将已加载的所述第一视频块和所述目标视频进行拼接。/n

【技术特征摘要】
1.一种全景视频的图像处理方法，所述方法应用于显示设备端，其特征在于，包括：
所述显示设备被配置为向服务器发送的播放请求；以使得所述服务器发送所述播放请求对应的第一视频块至显示设备；
所述显示设备还被配置为加载所述第一视频块，响应于所述缺失视频块无法被加载，所述显示设备还被配置为发送一替换请求至服务器，以使得所述服务器发送所述替换请求相对应的替换视频块至显示设备；其中，所述缺失视频块为无法被加载的第一视频块；
所述显示设备还被配置为在所述替换视频块中筛选出与所述缺失视频块相对应的目标视频；
所述显示设备还被配置为将已加载的所述第一视频块和所述目标视频进行拼接。


2.根据权利要求1所述的方法，其特征在于，所述服务器对接收到的全景视频进行多次采样得到采样视频集合，所述采样视频集合中包括多层分辨率不同的采样视频，所述采样视频对应的分辨率越大，相应采样视频对应的层数越大；将所述采样视频进行切割得到视频块，其中每个视频块对应的分辨率相同；在所述采样视频集合中选取分辨率最高的采样视频作为第一全景视频；第一全景视频中出与所述显示设备的显示范围描述信息相对应的视频块为第一视频块；
所述显示设备还被配置为，按照预置优先级规则依次选取L-n层的采样视频作为替换视频层，其中，L-n的数值越大其对应替换视频层的优先级越大；
所述显示设备还被配置为根据所述缺失视频块在第一全景视频中的第一坐标，计算出第二坐标，所述第二坐标为包含所述缺失视频块在所述替换视频层中的坐标；
发送携带有所述第二坐标和所述替换视频层的层数的替换请求至服务器。


3.根据权利要求2所述的方法，其特征在于，根据如下公式计算出所述第二坐标：其中，所述第二坐标包括：包含所述缺失视频块的视频块在替换视频层中对应行数l_r’和包含所述缺失视频块的视频块在替换视频层中对应列数l_c’；

其中，所述l’为所述替换视频层的层数l’＝l-n。


4.根据权利要求1-3任一项所述的方法，其特征在于，所述显示设备还被配置为在所述替换视频块中筛选出与所述缺失视频块相对应的目标视频的步骤包括：
所述显示设备还被配置为将所述替换视频块划分为2*2的四个区域，得到划分后的替换视频块；
所述显示设备还被配置为根据如下的公式计算出缺失视频块在所述划分后的替换视频块中对应的第三坐标，所述第三坐标包括缺失视频块对应的区域在所述划分后的替换视频块中的行数r和所述缺失视频块对应的区域在所述划分后的替换视频块中的列数c；



所述显示设备还被配置为根据如下的公式计算出缺失视频块四个顶点在所述划分后的替换视频块中对应的UV坐标值，所述UV坐标值分别为：
U1，U2，U3，U4，V1，V2，V3，V4：






其中，所述cn＝rn＝2l’；
所述显示设备还被配置为确定所述四个顶点所围成的区域对应的视频为目标视频。


5.一种全景视频的图像处理方法，所述方法应用于服务器端，其特征在于，包括：
所述服务器被配置为接收显示设备发送的播放请求；
所述服务器还被配置为发送所述播放请求对应的第一视频块至显示设备，以使得显示设备加载所述第一视频块，响应于所述缺失视频块无法被加载，显示设备发送一替换请求至服务器，其中，所述缺失视频块为无法被加载的第一视频块；
响应于接收到显示设备发送的替换请求，所述服务器被配置为筛选出与所述替换请...

【专利技术属性】
技术研发人员：任子健，史东平，国廷峰，吴连朋，
申请(专利权)人：聚好看科技股份有限公司，
类型：发明
国别省市：山东;37