信息处理设备、信息处理方法和信息处理系统技术方案

技术编号:37634474 阅读:14 留言:0更新日期:2023-05-20 08:54
本公开涉及一种能够实现更有利的宽范围图像的分发的信息处理设备、信息处理方法和信息处理系统。控制单元执行控制以在图像中以第一分辨率编码与对于显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。例如,本技术可以应用于图像分发系统。本技术可以应用于图像分发系统。本技术可以应用于图像分发系统。

【技术实现步骤摘要】
【国外来华专利技术】信息处理设备、信息处理方法和信息处理系统


[0001]本公开涉及一种信息处理设备、信息处理方法和信息处理系统,更具体地,涉及一种能够实现更有利的宽范围图像的分发的信息处理设备、信息处理方法和信息处理系统。

技术介绍

[0002]通常,在诸如虚拟现实(VR)图像之类的全景图像在诸如头戴式显示器(HMD)或平板计算机终端之类的显示设备上被查看的情况下,仅显示全景图像的部分区域。
[0003]作为分发此类全景图像的高效的方法,使用头部追踪或眼动追踪以高分辨率分发用户的查看区域并以低分辨率分发其他区域的方法是已知的。此方法实现了频带节约和显示设备的负荷减低。
[0004]例如,专利文献1公开了对于包括要向用户呈现的当前呈现区域的部分视频分发高分辨率视频数据并对于其他部分视频分发低分辨率视频数据的视频分发方法。
[0005]引用列表
[0006]专利文献
[0007]专利文献1:日本专利申请特许公开No.2016

167699

技术实现思路

[0008]本专利技术要解决的问题
[0009]然而,在传统的技术中,在一些情况下,当查看方向被改变时无法有利地分发全景图像。
[0010]已经鉴于此类状况进行本公开,并且其目的为实现更有利的宽范围图像的分发。
[0011]问题的解决方案
[0012]根据本公开的第一方面的信息处理设备是一种包括控制单元的信息处理设备,所述控制单元执行控制以在图像中以第一分辨率编码与对于显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。
[0013]根据本公开的第一方面的信息处理方法是一种包括信息处理设备的信息处理方法,所述信息处理设备执行控制以在图像中以第一分辨率编码与对于显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。
[0014]根据本公开的第二方面的信息处理设备是一种包括获取控制单元和显示控制单元的信息处理设备,所述获取控制单元执行控制以从由分发服务器传输的图像中经由不同的传输路径获取以第一分辨率编码与用户的视点对应的视点区域的图像数据和以第二分辨率编码在所述图像中设定的推荐区域的所述图像数据,所述显示控制单元基于所述图像数据显示所述视点区域,其中当所述用户的视点移动到所述推荐区域时,所述显示控制单元显示所述推荐区域代替所述视点区域。
[0015]根据本公开的第二方面的信息处理方法是一种包括信息处理设备的信息处理方法,所述信息处理设备执行控制以从由分发服务器传输的图像中经由不同的传输路径获取以第一分辨率编码与用户的视点对应的视点区域的图像数据和以第二分辨率编码在所述图像中设定的推荐区域的所述图像数据,所述信息处理设备基于所述图像数据显示所述视点区域,并且当所述用户的视点移动到所述推荐区域时,所述信息处理设备显示所述推荐区域代替所述视点区域。
[0016]根据本公开的第三方面的信息处理系统是一种包括分发服务器和显示设备的信息处理系统,其中所述分发服务器包括控制单元,所述控制单元执行控制以在图像中以第一分辨率编码与对于所述显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。
[0017]在本公开的第一和第三方面中,执行控制以在图像中以第一分辨率编码与对于显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。
[0018]在本公开的第二方面中,执行控制以从由分发服务器传输的图像中经由不同的传输路径获取以第一分辨率编码与用户的视点对应的视点区域的图像数据和以第二分辨率编码在所述图像中设定的推荐区域的所述图像数据,基于所述图像数据显示所述视点区域,并且当所述用户的视点移动到所述推荐区域时,显示所述推荐区域代替所述视点区域。
附图说明
[0019]图1是图示了根据本公开的实施例的图像分发系统的概要的图。
[0020]图2是图示了图像分发系统的功能配置示例的框图。
[0021]图3是图示了宽范围图像的各区域的分发的示例的图。
[0022]图4是图示了RWP数据的示例的图。
[0023]图5是图示了包括推荐区域的图像数据的示例的图。
[0024]图6是用于说明显示设备的操作的流程的流程图。
[0025]图7是用于说明分发服务器的操作的流程的流程图。
[0026]图8是图示了推荐区域的示例的图。
[0027]图9是图示了推荐区域的示例的图。
[0028]图10是图示了推荐区域的示例的图。
[0029]图11是图示了图像分发系统的另一个功能配置示例的框图。
[0030]图12是图示了宽范围图像的各区域的分发的示例的图。
[0031]图13是用于说明层次结构数据的图。
[0032]图14是用于解释显示设备的操作的流程的流程图。
[0033]图15是图示了存在多个推荐区域的情况下的处理的示例的图。
[0034]图16是图示了存在多个推荐区域的情况下的处理的示例的图。
[0035]图17是图示了存在多个推荐区域的情况下的处理的示例的图。
[0036]图18是图示了视点区域和推荐区域重叠的情况下的处理的示例的图。
[0037]图19是图示了视点区域和推荐区域重叠的情况下的处理的示例的图。
[0038]图20是图示了视点区域和推荐区域重叠的情况下的处理的示例的图。
[0039]图21是图示了视点区域和推荐区域重叠的情况下的处理的示例的图。
[0040]图22是图示了计算机的硬件配置示例的框图。
具体实施方式
[0041]在下文中,将说明用于实施本公开的模式(以下称为实施例)。注意,将按照以下顺序来给出说明。
[0042]1.图像分发系统的概述
[0043]2.第一实施例(通过一个流的分发)
[0044]3.推荐区域的变体
[0045]4.第二实施例(通过多个流的分发)
[0046]5.根据推荐区域的处理的示例
[0047]6.计算机配置示例
[0048]<1.图像分发系统的概述>
[0049]图1是图示了根据本实施例的图像分发系统的概要的图。
[0050]如图1中所示,图像分发系统1包括分发服务器10和经由网络NW连接到分发服务器10的显示设备20。
[0051]分发服务器10被包括在诸如因特网之类的网络NW上构建的所谓的云计算中。诸如用360度相机通过对真实空间进行成像获得的全方位图像或诸如由计算机图形学(CG)生成的360度CG图像之类的V本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理设备,所述信息处理设备包括控制单元,所述控制单元执行控制以在图像中以第一分辨率编码与对于显示设备的用户的视点对应的视点区域,以第二分辨率编码在所述图像中设定的推荐区域,并以低于所述第一分辨率和所述第二分辨率的第三分辨率编码其他区域。2.根据权利要求1所述的信息处理设备,其中所述第一分辨率高于或等于所述第二分辨率。3.根据权利要求1所述的信息处理设备,其中所述控制单元基于指示所述用户的视点的视点信息或指示所述推荐区域的推荐区域信息中的至少一个,来从通过编码所述图像的各区域获得的多段图像数据中选择对于所述显示设备的传输目标。4.根据权利要求3所述的信息处理设备,其中所述控制单元执行控制以作为一个流传输作为所述传输目标选择的所述图像数据。5.根据权利要求4所述的信息处理设备,其中当所述用户的视点移动到所述推荐区域时,所述控制单元选择以所述第一分辨率编码所述推荐区域的所述图像数据作为所述传输目标。6.根据权利要求4所述的信息处理设备,其中所述图像数据包括通过打包所述图像同时对于每个区域改变分辨率获得的按区域打包(RWP)数据。7.根据权利要求3所述的信息处理设备,其中所述控制单元执行控制以作为多个流传输作为所述传输目标选择的所述图像数据。8.根据权利要求7所述的信息处理设备,其中所述控制单元除了选择以所述第一分辨率编码所述视点区域的所述图像数据作为所述传输目标以外,还选择以所述第一分辨率编码所述推荐区域的所述图像数据作为所述传输目标。9.根据权利要求7所述的信息处理设备,其中所述图像数据包括通过对于每个分辨率使所述图像的各区域层次化获得的层次结构数据。10.根据权利要求7所述的信息处理设备,其中所述图像数据包括通过打包所述图像同时对于每个区域改变分辨率获得的按区域打包(RWP)数据。11.根据权利要求3所述的信息处理设备,其中在存在多个所述推荐区域的情况下,所述控制单元选择基于所述用户的操作、偏好或视线转变中的至少一个选择的所述推荐区域作为最终推荐区域。12.根据权利要求3所述的信息处理设备,其中在所述视点区域和所述推荐区域部分地或完全地重叠的情况下,所述控制单元选择以所述第二分辨率编码至少包括所述视点区域和所述推荐区域的一部分的周围区...

【专利技术属性】
技术研发人员:小仓翔
申请(专利权)人:索尼集团公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1