被配置为在适于接收被利用图块的集合空间地图块化的沉浸式视频的终端处实现的方法以及对应的终端技术

一种适于接收被利用图块的集合空间地图块化的沉浸式视频的终端被配置为根据图块和与用户相关联的视觉体积的交汇来请求图块。与用户相关联的视觉体积的交汇来请求图块。与用户相关联的视觉体积的交汇来请求图块。

【技术实现步骤摘要】
【国外来华专利技术】被配置为在适于接收被利用图块的集合空间地图块化的沉浸式视频的终端处实现的方法以及对应的终端


[0001]本公开主要涉及通过递送网络将基于图块的沉浸式视频(诸如球形视频，所谓的虚拟现实(VR)360
°
视频，或全景视频)流传输到终端设备。

技术介绍

[0002]本部分旨在向读者介绍可能与下面描述和/或要求保护的本公开的各个方面相关的技术的各个方面。相信该讨论有助于向读者提供背景信息，以便于更好地理解本公开的各个方面。因此，应当理解，这些陈述应就此而论来阅读，而不是作为对现有技术的承认。
[0003]球形视频提供沉浸式体验，其中用户可使用VR头戴式显示器(HMD)环视，或者可通过用控制装置(诸如鼠标或遥控器)控制视口来在平面显示器上的场景内自由导航。
[0004]空间导航中的这种自由要求整个360
°
场景被递送给播放器(嵌入在HMD或电视机内)，该播放器被配置为根据观察者的瞄准点在场景内的位置来提取要被可视化的视频部分。在这种情况下，需要高吞吐量来递送视频。
[0005]因此，一个主要问题依赖于以可接受的沉浸式体验质量(即，避免冻结屏幕、块效应、黑屏等)通过带宽受限网络高效传输球形视频。当前，为了以流传输递送球形视频服务，正在寻求沉浸式体验、视频分辨率和内容递送网络的可用吞吐量之间的折衷。
[0006]大多数已知的流传输球形视频的解决方案向终端设备提供完整的360
°
场景，但是仅向用户呈现整个场景的不到10％。由于递送网络具有有限的吞吐量，所以降低视频分辨率以满足带宽约束。
[0007]其它已知的解决方案通过降低360
°
场景的布置在终端设备的当前视口外部的部分的分辨率来减轻视频质量的劣化。然而，当终端设备的视口基于用户的动作被移动到较低分辨率区域时，所显示的视频会遭受突然的降级。
[0008]此外，当目标使用要求所显示的视频总是处于最佳质量时，它防止了在用户的瞄准点变化时使用基于分辨率的过渡性降级的解决方案。因此，所递送的视频必须覆盖场景的足够大的部分以允许用户在没有由于缺少视频数据而造成灾难性的黑色区域显示的风险的情况下进行摇摄。场景的这一部分例如可以包括当前观看的区域(即视口或瞄准点)和周围区域，以防止当用户移动其视口时质量降级。这可以通过利用图块的集合在空间上图块化沉浸式视频的场景并且在时间上将沉浸式视频划分成由多个图块分段定义的多个视频分段来实现，图块覆盖沉浸式视频的场景的一部分并且图块分段与所述图块的集合中的图块相关联。沉浸式视频的一个或多个相关的图块分段(对应于包括视口及其周围的图块(一个或多个))被递送到播放器。
[0009]然而，当用户在场景内导航时，可能需要新的图块(一个或多个)来显示视口，以便对眼睛方向改变作出反应。然后，播放器将请求与当前视野匹配的相应图块。
[0010]本公开是考虑到前述内容而设计的。

技术实现思路

[0011]根据一个或多个实施例，提供了一种终端，其被配置为接收被利用图块的集合空间地图块化的沉浸式视频，图块覆盖沉浸式视频的场景的一部分，
[0012]包括至少一个处理器，其被配置用于：
[0013]-定义界定(bounding)所述图块的集合的图块的表面；
[0014]-获得与视觉体积交汇的所述表面的至少一些表面的交汇比例；
[0015]-根据所获得的交汇比例来选择一个或多个图块。
[0016]根据一个或多个实施例，还提供了一种被配置为在终端处实现的方法，所述终端适于接收被利用图块的集合空间地图块化的沉浸式视频，图块覆盖沉浸式视频的场景的一部分，
[0017]包括：
[0018]-定义界定所述图块的集合的图块的表面；
[0019]-获得与视觉体积交汇的所述表面的至少一些表面的交汇比例；
[0020]-根据所获得的交汇比例来选择一个或多个图块。
[0021]根据一个或多个实施例，提供了一种计算机程序产品，其是可从通信网络下载的和记录在非暂时性计算机可读介质上的中的至少一者，所述非暂时性计算机可读介质可由至少一个计算机读取并且可由处理器执行，所述计算机程序产品包括用于实现方法的程序代码指令，所述方法被配置为在适于接收被利用图块的集合空间地图块化的沉浸式视频的终端处实现，图块覆盖沉浸式视频的场景的一部分，所述方法包括：
[0022]-定义界定所述图块的集合的图块的表面；
[0023]-获得与视觉体积交汇的所述表面的至少一些表面的交汇比例；
[0024]-根据所获得的交汇比例来选择一个或多个图块。
[0025]根据一个或多个实施例，提供了一种能够由计算机读取的非暂时性程序存储设备，其有形地体现可由所述计算机执行的指令的程序，以执行被配置为在终端处实现的方法，所述终端适于接收被利用图块的集合空间地图块化的沉浸式视频，图块覆盖沉浸式视频的场景的一部分，所述方法包括：
[0026]-定义界定所述图块的集合的图块的表面；
[0027]-获得与视觉体积交汇的所述表面的至少一些表面的交汇比例；
[0028]-根据所获得的交汇比例来选择一个或多个图块。
[0029]根据一个或多个实施例的方法可以在可编程装置上的软件中实现。它们可以单独地以硬件或软件或其组合来实现。
[0030]由一个或多个实施例的元件实现的一些过程可以是计算机实现的。因此，这样的元件可以采取完全硬件实施例、完全软件实施例(包括固件、驻留软件、微代码等)、或组合软件和硬件方面的实施例的形式，其可以全部在本文中一般地被称为“电路”、“模块”或“系统”。此外，这样的元件可以采取在任何有形表达介质中体现的计算机程序产品的形式，该有形表达介质具有在该介质中体现的计算机可用程序代码。
[0031]由于元件可以以软件实现，因此实施例的一些方面可以被实现为计算机可读代码，用于在任何适当的载体介质上提供给可编程装置。有形载体介质可以包括存储介质，例如软盘、CD-ROM、硬盘驱动器、磁带设备、或固态存储器设备等。
[0032]因此，一个或多个实施例提供了一种计算机可读程序，其包括计算机可执行指令以使得计算机能够执行上述方法。
[0033]下面阐述与所公开的实施例的范围相当的某些方面。应当理解，这些方面仅被呈现以向读者提供一个或多个实施例可能采取的某些形式的简要概述，并且这些方面不旨在限制本公开的范围。实际上，本公开可以涵盖可能未在下面阐述的各种方面。
附图说明
[0034]通过以下执行示例和实施例，参考附图将更好地理解和说明本公开，但本公开不以任何方式限制，其中：
[0035]图1是其中可以实现一些实施例的示例性客户端-服务器架构的示意图；
[0036]图2示出了根据一些实施例的示例性视觉锥体；
[0037]图3是根据实施例的示例性客户端终端的示意性框图；
[0038]图4是根据实施例的示例性内容服务器的示意性框图；本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种终端，被配置为接收被利用图块的集合空间地图块化的沉浸式视频，图块覆盖所述沉浸式视频的场景的一部分，包括至少一个处理器，其被配置用于：-定义界定所述图块的集合的图块的表面；-获得所述表面的与视觉体积交汇的至少一些表面的交汇比例；-根据所获得的交汇比例来选择一个或多个图块。2.一种被配置为在终端处实现的方法，所述终端适于接收被利用图块的集合空间地图块化的沉浸式视频，图块覆盖所述沉浸式视频的场景的一部分，包括：-定义界定所述图块的集合的图块的表面；-获得所述表面的与视觉体积交汇的至少一些表面的交汇比例；-根据所获得的交汇比例来选择一个或多个图块。3.根据权利要求1所述的终端，或者根据权利要求2所述的方法，其中，界定图块的表面包括所述图块的网格在所述图块的顶点所属的平面上的径向投影。4.根据权利要求1或3所述的终端，其中，所述至少一个处理器进一步被配置用于或者根据权利要求2或3所述的方法包括：-对形成所述视觉体积的射线进行采样，使得所采样的射线彼此在水平和垂直方向上具有恒定的角距离。5.根据权利要求4所述的终端或方法，其中所述视觉体积的所采样的射线与方向矢量相关联。6.根据权利要求1、3或4中任一项所述的终端，其中，所述至少一个处理器进一步被配置用于或者根据权利要求2至4中任一项所述的方法包括：-在所述图块的集合中选择候选图块，使得所述交汇比例仅针对所述候选图块而被获得。7.根据权利要求1、3至6中任一项所述的终端，或者根据权利要求2至6中任一项所述的方法，其中，表面的交汇比例由所述视觉体积的击中所述表面的射线数量来限定。8.根据权利...

【专利技术属性】
技术研发人员：伊冯，
申请(专利权)人：交互数字CE专利控股公司，
类型：发明
国别省市：