一种VR视频处理方法及系统技术方案

本申请提供了一种VR视频处理方法及系统，其中，该方法包括如下步骤：根据虚拟现实VR装置播放的当前帧和虚拟现实VR装置传感器获取的姿态参数信息，确定视焦点变化值；在所述视焦点变化值大于第一预定阈值的情况下，根据所述当前帧和所述视焦点变化值，生成过渡帧；在所述当前帧之后播放所述过渡帧。本申请实施例利用视焦点预测模型确定视焦点变化值，在视焦点变化大的情况下插入过渡帧，降低用户观看时画面呈现的延迟，从而在硬件设计达到最优水平的情况下，尽可能降低视焦点大幅度变化给用户带来的眩晕感。

【技术实现步骤摘要】
一种VR视频处理方法及系统
本申请涉及视频处理
，尤其是涉及一种VR视频处理方法及系统。
技术介绍
人在物理世界中会因为身体处于不平衡状态而产生眩晕，这是因为身体中用于判断运动状态的内耳上部的前庭系统向大脑发出了错误信号。当人在旋转时，前庭系统内的内淋巴液沿着身体旋转的方向缓慢运动，内淋巴向大脑发出头部正在旋转的信号。当停止旋转时，内淋巴继续运动并且刺激相反方向的毛细胞，尽管已经停下来了，大脑认定头部还在旋转，这就是眩晕产生的原因。用户在观看虚拟现实(VirtualReality，VR)视频时，由于VR装置检测到头部运动与VR装置播放的画面呈现到人眼之间存在时间差，VR装置播放的画面会产生延迟，因此用户会产生眩晕感。上述延迟是观看者是否感知眩晕的最主要指标。研究表明，上述延迟不能超过20ms，超过就会出现眩晕。现有技术中减低眩晕感的方法，都是通过提升硬件设计来降低眩晕感。但受到硬件设计水平的限制，在硬件设计达到最优水平的情况下，由于对下一时刻画面内容的处理具有滞后性，仍然不可避免的存在时延，因此不可避免的会使观看者产生眩晕感。
技术实现思路
有鉴于此，本申请的目的在于提供一种视频处本文档来自技高网...

【技术保护点】
1.一种VR视频处理方法，其特征在于，包括：根据虚拟现实VR装置播放的当前帧和虚拟现实VR装置传感器获取的姿态参数信息，确定视焦点变化值；在所述视焦点变化值大于第一预定阈值的情况下，根据所述当前帧和所述视焦点变化值，生成过渡帧；在所述当前帧之后播放所述过渡帧。

【技术特征摘要】
1.一种VR视频处理方法，其特征在于，包括：根据虚拟现实VR装置播放的当前帧和虚拟现实VR装置传感器获取的姿态参数信息，确定视焦点变化值；在所述视焦点变化值大于第一预定阈值的情况下，根据所述当前帧和所述视焦点变化值，生成过渡帧；在所述当前帧之后播放所述过渡帧。2.根据权利要求1所述的方法，其特征在于，根据虚拟现实VR装置播放的当前帧和虚拟现实VR装置传感器获取的姿态参数信息，确定视焦点变化值，包括：基于所述当前帧和所述姿态参数信息，以及预先训练的视焦点预测模型，确定所述视焦点变化值。3.根据权利要求2所述的方法，其特征在于，根据以下步骤训练所述视焦点预测模型：对虚拟现实VR视频和虚拟现实VR装置传感器的姿态参数信息进行采样；根据采样的虚拟现实VR视频中的每两个相邻帧，得到多个视焦点变化值；基于所述视焦点变化值、所述视焦点变化值对应的相邻帧中的前一帧和采样的姿态参数信息，进行视焦点预测模型训练。4.根据权利要求3所述的方法，其特征在于，所述根据虚拟现实VR视频中的每两个相邻帧，得到多个视焦点变化值，包括：利用特征提取模型，分别提取两个相邻帧的特征向量；计算两个相邻帧的特征向量的相似度；根据所述相似度，确定所述视焦点变化值。5.根据权利要求2所述的方法，其特征在于，基于所述当前帧和获取的姿态参数信息，以及预先训练的视焦点预测模型，确定所述视焦点变化值，包括：利用特征提取模型，提取所述当前帧的特征向量；将所述特征向量和获取的姿态参数信息输入预先训练的视焦点预测模型，得到所述视焦点变化值。6.根据权利要求5所述的方法，其特征在于，根据以下步骤训练所述特征提取模型：对虚拟现实VR视频进行采样；...

【专利技术属性】
技术研发人员：裴玉奎，
申请(专利权)人：广州土圭垚信息科技有限公司，清华珠三角研究院，
类型：发明
国别省市：广东,44