一种虚拟现实VR场景的视频处理方法及相关设备技术

技术编号:32257953 阅读:32 留言:0更新日期:2022-02-12 19:17
本申请实施例提供一种虚拟现实VR场景的视频处理方法及相关设备,涉及计算机图形学技术。VR场景的视频处理方法可以采用一路流对Tile流进行编码,以降低VR头戴式显示设备的FOV发生改变时,为VR头戴式显示设备传输视频流的网络侧的视频码率。该方法可以包括:服务器可以接收来自电子设备切换至第二视场角的视场角切换请求,视场角切换请求用于请求以第二视场角播放VR场景视频;服务器响应于视场角切换请求,向电子设备发送K个Tile流。其中,K个Tile流中的每个Tile流包括一路视频流,K为正整数。整数。整数。

【技术实现步骤摘要】
一种虚拟现实VR场景的视频处理方法及相关设备


[0001]本申请实施例涉及计算机图形学
,尤其涉及一种虚拟现实VR场景的视频处理方法及相关设备。

技术介绍

[0002]虚拟现实(Virtual Reality,VR)技术是一种可以创建虚拟现实环境的计算机仿真技术,它可以利用计算机生成一种虚拟现实环境(或称为模拟环境)。其中,VR的基本实现方式为计算机获取到创建虚拟现实环境的数据(如,图像、声音等),通过计算机技术将创建虚拟现实环境的数据转换为电子信号,输出设备(如,VR头戴式显示设备)接收该电子信号,则输出设备可以根据电子信号构建虚拟现实环境。
[0003]可以理解的,VR技术中,计算机可以构建出全部视角(或称为视场角)的VR环境。展示VR的输出设备(如,VR头戴式显示设备)在展示VR环境时,仅需要根据当前输出设备的视场角(Field of View,FOV),展示出该FOV内的VR环境。
[0004]VR直播,是VR技术与直播视频的结合。VR头戴式显示设备(或简称为“VR头显”)在展示VR直播视频使用的方案为基于块(Ti本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟现实VR场景的视频处理方法,其特征在于,所述方法包括:服务器接收来自电子设备切换至第二视场角的视场角切换请求;其中,所述视场角切换请求用于请求以所述第二视场角播放VR场景视频,所述VR场景视频包括M个切片Tile流,M为正整数;所述服务器响应于所述视场角切换请求,向所述电子设备发送K个Tile流;其中,所述K个Tile流为所述M个Tile流中、与所述第二视场角对应的Tile流,所述K个Tile流中的每个Tile流包括一路视频流,K为正整数。2.根据权利要求1所述的方法,其特征在于,每个Tile流包括多个分片流,每个分片流包括多个图像组GOP,每个GOP中包括一个关键帧和所述关键帧之后的X个预测帧,X≥2,X为正整数。3.根据权利要求1或2所述的方法,其特征在于,在所述服务器接收来自电子设备的视场角切换请求之前,所述方法还包括:所述服务器接收来自电子设备的VR视频请求,所述VR视频请求用于请求以第一视场角播放所述VR场景视频;所述服务器响应于所述VR视频请求,向所述电子设备发送N个Tile流;其中,所述N个Tile流为所述M个Tile流中、与所述第一视场角对应的Tile流,所述N个Tile流中的每个Tile流包括一路视频流。4.根据权利要求2或3所述的方法,其特征在于,所述响应于所述视场角切换请求,所述服务器向所述电子设备发送K个Tile流,包括:响应于所述视场角切换请求,所述服务器获取所述电子设备播放所述N个Tile流的时间戳;其中,所述时间戳用于指示所述电子设备正在播放所述N个Tile流中的第一视频帧,所述第一视频帧为关键帧或预测帧;所述服务器根据所述时间戳和预设切换时长,确定所述K个Tile流中的第二视频帧;其中,所述第二视频帧为关键帧或预测帧;所述服务器从所述第二视频帧开始,向所述电子设备发送所述K个Tile流。5.根据权利要求4所述的方法,其特征在于,所述方法还包括:若所述第二视频帧是所述预测帧,所述服务器向所述电子设备发送所述第二视频帧所在GOP中的关键帧。6.根据权利要求5所述的方法,其特征在于,所述方法还包括:所述服务器接收来自所述电子设备的视频帧请求,所述视频帧请求包括所述第二视频帧的帧序号和所述第二视频帧所在GOP中的关键帧的帧序号,其中,所述第二视频帧的帧序号用于指示所述第二视频帧在GOP中的标识,所述关键帧的帧序号用于指示所述关键帧所在GOP中的标识;响应于所述视频帧请求,所述服务器向所述电子设备发送所述第二视频帧所在GOP中的所述关键帧和所述第二视频帧。7.根据权利要求4所述的方法,其特征在于,所述方法还包括:若所述第二视频帧是所述关键帧,所述服务器接收来自所述电子设备的视频帧请求,其中,所述视频帧请求包括所述关键帧在GOP中的帧序号,所述关键帧的帧序号用于指示所述关键帧在GOP中的标识;
响应于所述视频帧请求,所述服务器向所述电子设备发送所述关键帧。8.根据权利要求1-7中任一项所述的方法,其特征在于,所述视场角切换请求中包括所述第二视场角,所述第二视场角用于确定与所述第二视场角对应的所述K个Tile流;或者,所述视场角切换请求中包括所述K个Tile流的标识和所述K个Tile流对应的第二视频帧的帧序号,若所述第二视频帧为预测帧,所述视场角切换请求中还包括所述第二视频帧所在GOP中的关键帧的帧序号;其中,所述第二视频帧的帧序号用于指示所述第二视频帧在GOP中的标识,所述关键帧的帧序号用于指示所述关键帧在GOP中的标识。9.一种虚拟现实VR场景的视频处理方法,其特征在于,所述方法包括:电子设备的视场角发生变化时,向服务器发送视场角切换请求,所述视场角切换请求用于请求以第二视场角播放VR场景视频,所述VR场景视频包括M个Tile流,M为正整数;接收来自所述服务器的K个Tile流;其中,所述K个Tile流为所述M个Tile流中、与所述第二视场角对应的Tile流,所述K个Tile流中的每个Tile流包括一路视频流;所述电子设备根据所述K个Tile流,播放所述第二视场角对应的VR场景视频。10.根据权利要求9所述的方法,其特征在于,所述Tile流包括多个分片流,每个分片流包括多个图像组GOP,每个GOP中包括一个关键帧和所述关键帧之后的X个预测帧,X≥2,X为正整数。11.根据权利要求9或10所述的方法,其特征在于,在电子设备的视场角发生变化时,向服务器发送视场角切换请求之前,所述方法还包括:向所述服务器发送VR视频请求;其中,所述VR视频请求用于请求以第一视场角播放所述VR场景视频;所述电子设备接收来自所述服务器的N个Tile流;其中,所述N个Tile流为所述...

【专利技术属性】
技术研发人员:杨军汪学斌张冠华苏敏
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1