数据处理方法技术

本公开涉及一种数据处理方法

【技术实现步骤摘要】
数据处理方法、装置及电子设备


[0001]本公开涉及数据处理
，尤其涉及一种虚拟现实图像的处理方法
、
装置及电子设备
。

技术介绍

[0002]随着虚拟现实
(Virtual Reality
，
VR)
技术的不断发展，
VR
设备的使用越来越流行
。
利用人们的双眼立体视觉，可提供立体全景图像的观看体验
。
[0003]目前，现有方案是可在电脑端
、
或者电视端
、
或者手机端等将单张平面图像先复制为两张相同的左眼和右眼图像数据
。
然后，可采用拼接或者双通道传输的方式传输左右眼图像给
VR
设备进行解析
、
解码
、
并推送给屏幕显示
。
[0004]然而，这种方式会增加虚拟现实图像数据的传输数据量，容易造成网络拥塞的情况发生，也很容易出现传输时延的技术问题
。

技术实现思路

[0005]有鉴于此，本公开提供了一种数据处理方法
、
装置及电子设备，主要目的在于改善目前会增加虚拟现实图像数据的传输数据量，容易造成网络拥塞的情况发生，也很容易出现传输时延的技术问题
。
[0006]第一方面，本公开提供了一种数据处理方法，包括：
[0007]对接收到的图像数据进行解码，得到待处理的平面图像；
[0008]获取用户的视角信息；r/>[0009]根据所述视角信息和所述平面图像，生成同一时间戳下的左眼图像和右眼图像；
[0010]依据所述同一时间戳下的左眼图像和右眼图像，显示虚拟现实图像
。
[0011]第二方面，本公开提供了一种数据处理装置，包括：
[0012]解码模块，被配置为对接收到的图像数据进行解码，得到待处理的平面图像；
[0013]获取模块，被配置为获取用户的视角信息；
[0014]生成模块，被配置为根据所述视角信息和所述平面图像，生成同一时间戳下的左眼图像和右眼图像；
[0015]显示模块，被配置为依据所述同一时间戳下的左眼图像和右眼图像，显示虚拟现实图像
。
[0016]第三方面，本公开提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现第一方面所述的数据处理方法
。
[0017]第四方面，本公开提供了一种电子设备，包括存储介质
、
处理器及存储在存储介质上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现第一方面所述的数据处理方法
。
[0018]借由上述技术方案，本公开提供的一种数据处理方法
、
装置及电子设备，可在
VR
设备端通过用户的视角信息，获取用于全景立体显示的左右眼图像，进而实现平面图像传输，
而
VR
设备端呈现立体显示效果的技术方案
。
具体的，在
VR
设备端对接收到的图像数据进行解码，得到待处理的平面图像；首先获取用户的视角信息；再根据视角信息和该平面图像，生成同一时间戳下的左眼图像和右眼图像；然后依据同一时间戳下的左眼图像和右眼图像，显示虚拟现实图像
。
通过应用本公开的技术方案，无需将一张平面图像先复制为两张相同的左右眼图像数据进行传输，传输的是单张原始平面图像数据
。VR
设备端接收到单张的平面图像后，会根据当前用户的视角信息进行运算，分别得到适用于左右眼视角的图像，最后，在
VR
设备端显示
。
用户体验到的实际效果即为处理后的立体视觉效果
。
与现有技术相比，本公开在保证显示效果的前提下，传输的数据量减少一半，对网络带宽的压力减少一半，减少造成网络拥塞的情况，传输时延也相应减少
。
并且不会出现左右眼不同步的传输问题，整个处理流程得到简化，更为简洁合理
。
[0019]上述说明仅是本公开技术方案的概述，为了能够更清楚了解本公开的技术手段，而可依照说明书的内容予以实施，并且为了让本公开的上述和其它目的
、
特征和优点能够更明显易懂，以下特举本公开的具体实施方式
。
附图说明
[0020]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理
。
[0021]为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图
。
[0022]图1示出了本公开实施例提供的一种数据处理方法的流程示意图；
[0023]图2示出了本公开实施例提供的另一种数据处理方法的流程示意图；
[0024]图3示出了现有技术中的处理过程示意图；
[0025]图4示出了本公开实施例中的处理过程示意图；
[0026]图5示出了本公开实施例提供的总体处理过程的流程示意图；
[0027]图6示出了本公开实施例提供的改进前后对比的流程示意图；
[0028]图7示出了本公开实施例提供的一种数据处理装置的结构示意图
。
具体实施方式
[0029]下面将参照附图更详细地描述本公开的实施例
。
需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合
。
[0030]为了改善目前会增加虚拟现实图像数据的传输数据量，容易造成网络拥塞的情况发生，也很容易出现传输时延的技术问题
。
本实施例提供了一种数据处理方法，如图1所示，可应用于
VR
设备端侧，该方法包括：
[0031]步骤
101、
对接收到的图像数据进行解码，得到待处理的平面图像
。
[0032]在本实施例中，
VR
设备端接收到的图像数据可为视频数据或图片数据等
。
例如，以其中单张平面图像的传输过程为例，在电脑端
、
或者电视端
、
或者手机端等获取到单张平面图像，再将单张平面图像进行编码，然后将编码后的图像数据发送给
VR
设备端
。
具体可通过有线或无线方式发送数据包给
VR
设备端，
VR
设备端对接收到的数据包进行解析，对接收到
的图像数据进行解码，得到该单张平面图像
。
然后对该单张平面图像进行处理，得到适用于左右眼视角的图像，最后，在
VR
设备端显示，具体可执行步骤
102
至...

【技术保护点】

【技术特征摘要】
1.
一种数据处理方法，其特征在于，包括：对接收到的图像数据进行解码，得到待处理的平面图像；获取用户的视角信息；根据所述视角信息和所述平面图像，生成同一时间戳下的左眼图像和右眼图像；依据所述同一时间戳下的左眼图像和右眼图像，显示虚拟现实图像
。2.
根据权利要求1所述的方法，其特征在于，所述获取用户的视角信息，包括：获取用户头部的姿态信息；根据所述用户头部的姿态信息，确定所述用户的视角信息
。3.
根据权利要求2所述的方法，其特征在于，所述视角信息包括：用户的视角矩阵信息；所述根据所述用户头部的姿态信息，确定所述用户的视角信息，具体包括：从所述用户头部的姿态信息中，获取传感器检测到的用户头部的四元数；根据所述用户头部的四元数，确定用户的双眼中心视角矩阵；依据所述双眼中心视角矩阵，确定用户的左右眼视角矩阵；利用所述左右眼视角矩阵，确定左右眼画面中元素的绘制位置
。4.
根据权利要求3所述的方法，其特征在于，所述根据所述用户头部的四元数，确定用户的双眼中心视角矩阵，具体包括：将用户头部的四元数转换成矩阵形式，得到用户的双眼中心旋转矩阵，以及根据双眼中心在世界坐标系中的位置，确定用户的双眼中心偏移矩阵；依据所述双眼中心旋转矩阵和所述双眼中心偏移矩阵，确定所述双眼中心视角矩阵
。5.
根据权利要求4所述的方法，其特征在于，所述依据所述双眼中心旋转矩阵和所述双眼中心偏移矩阵，确定所述双眼中心视角矩阵，具体包括：将所述双眼中心旋转矩阵和所述双眼中心偏移矩阵相乘，得到用户的双眼中心转换矩阵；对所述双眼中心转换矩阵求其逆矩阵，得到所述双眼中心视角矩阵
。6.
根据权利要求3所述的方法，其特征在于，所述依据所述双眼中心视角矩阵，确定用户的左右眼视角矩阵，具体包括：基于用户的瞳距，创建齐次偏移矩阵；根据所述齐次偏移矩阵和所述双眼中心视角矩阵，确定所述左右眼视角矩阵
。7.
...

【专利技术属性】
技术研发人员：李蕾，崔新宇，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：