分层的增强型娱乐体验制造技术

本公开涉及分层的增强型娱乐体验。访问描述表示于一个或多个多视角未分层图像中的三维(3D)图像空间中的视觉对象的空间定位的空间信息。基于所述空间信息，从所述一个或多个多视角未分层图像生成影院图像层和一个或多个设备图像层。将包括所述影院图像层和所述设备图像层的多层多视角视频信号发送至下游设备以供渲染。备以供渲染。备以供渲染。

【技术实现步骤摘要】
分层的增强型娱乐体验
[0001]本申请是申请日为2018年4月10日、申请号为201880011840.4、专利技术名称为“分层的增强型娱乐体验”的专利技术专利申请的分案申请。
[0002]相关申请的交叉引用
[0003]本申请要求于2017年4月11日提交的美国临时申请号62/484,121的优先权权益，所述美国临时申请通过引用以其全文并入本文。


[0004]本专利技术总体上涉及三维(3D)娱乐体验，并且更具体地涉及分层的增强型3D娱乐体验。

技术介绍

[0005]当观看真实世界场景中的真实世界对象时，人类大脑利用调节过程来控制睫状肌，使位于两只眼睛的瞳孔后方的每只眼睛晶状体调节成特定焦距(或焦度)，以聚焦于真实世界对象上。同时，人类大脑利用聚散过程来控制眼外肌，使两只眼睛同时朝向真实世界对象会聚或发散，以支持将真实世界对象感知为3D对象。
[0006]通过比较，当观看3D图像中描绘的对象时，人类大脑利用调节过程来控制睫状肌，使观看者眼睛的眼睛晶状体固定，以聚焦于(例如，影院等)显示器上，从而支持对于在显示器上渲染的3D图像的清晰视觉，而不论3D图像中所描绘的对象应位于何处。同时，人类大脑利用聚散过程来控制眼外肌，使眼睛同时朝向3D图像中所描绘的对象会聚或发散，以支持将所描绘的对象感知为3D对象。
[0007]如果所描绘的对象具有相对大的负视差(parallax)并且因此在视觉上被感知为相对靠近显示器前方的眼睛，则调节过程仍尝试将眼睛集中于显示器上，同时聚散(vergence)过程试图使眼睛以相对较近的距离向所描绘的对象会聚或发散，从而导致调节与聚散冲突。3D图像观看中的这种调节与聚散冲突容易导致严重的生理不适/疾病；因此，很少使用相对大的负视差，尤其是在影院3D娱乐体验中。
[0008]在这一部分中描述的方法是可以寻求的方法，但不一定是之前已经设想到或寻求的方法。因此，除非另有指明，否则不应认为本节中所述的任何方法仅凭其纳入本节就可称为现有技术。类似地，除非另有指明，否则关于一种或多种方法所认定的问题不应基于本节而认为在任何现有技术中被认定。

技术实现思路

[0009]根据本公开的一个方面，涉及一种方法，包括：接收包括影院图像层中的一个或多个单层影院图像以及一个或多个设备图像层中的一个或多个单层设备图像的多层多视角视频信号，所述影院图像层中的所述单层影院图像和所述一个或多个设备图像层中的所述单层设备图像是之前从一个或多个多视角未分层图像得到的；从所述多层多视角视频信号的所述影院图像层取得所述一个或多个单层影院图像，所述一个或多个单层影院图像描绘
原本通过所述一个或多个多视角未分层图像描绘的多个视觉对象中的一个或多个视觉对象的第一适当子集；从所述多层多视角视频信号的所述一个或多个设备图像层取得所述一个或多个单层设备图像，所述一个或多个设备图像描绘原本通过所述一个或多个多视角未分层图像描绘的所述多个视觉对象中的一个或多个视觉对象的一个或多个第二适当子集；使得在3D空间中的影院显示器上向观看者渲染在所述一个或多个单层影院图像中描绘的视觉对象的第一适当子集；使得在所述3D空间中的设备显示器上向所述观看者同时渲染在所述一个或多个单层设备图像中描绘的视觉对象的一个或多个第二适当子集；其中，在所述影院显示器上渲染的所述视觉对象的第一适当子集和在所述设备显示器上渲染的所述视觉对象的一个或多个第二适当子集共同描绘原本通过所述一个或多个多视角未分层图像描绘的、定位在3D图像空间中的相同空间定位处的所述多个视觉对象；其中，描述所述3D图像空间中的所述多个视觉对象所处的空间定位的空间信息之前用于将原本通过所述一个或多个多视角未分层图像描绘的所述多个视觉对象划分成所述影院图像层和所述一个或多个设备图像层。
[0010]根据本公开的一个方面，涉及一种方法，包括：访问描述在表示于一个或多个多视角未分层图像中的三维(3D)图像空间中的多个视觉对象的空间定位的空间信息，所述一个或多个多视角未分层图像中的每一个包括与多个观看方向相对应的多个单视角未分层图像；基于描述在表示于所述一个或多个多视角未分层图像中的所述3D图像空间中的所述多个视觉对象的所述空间定位的所述空间信息，执行以下操作：从所述一个或多个多视角未分层图像生成影院图像层，所述影院图像层包括一个或多个单层影院图像，所述一个或多个单层影院图像描绘所述多个视觉对象中的一个或多个视觉对象的第一适当子集；从所述一个或多个多视角未分层图像生成一个或多个设备图像层，所述一个或多个设备图像层中的每一个包括一个或多个单层设备图像，所述一个或多个单层设备图像描绘所述多个视觉对象中的一个或多个视觉对象的一个或多个第二适当子集；将包括所述影院图像层中的所述一个或多个单层影院图像以及所述一个或多个设备图像层中的所述一个或多个单层设备图像的多层多视角视频信号发送至一个或多个下游设备以供渲染，其中，使用一个或多个层分离面将表示于所述一个或多个多视角未分层图像中的所述3D图像空间中的所述多个视觉对象分离到所述影院图像层和所述一个或多个设备图像层中，并且其中，所述一个或多个层分离面中没有一个层分离面的空间位置与要用于渲染从所述影院图像层中的所述单层影院图像生成的影院显示图像的影院显示器的空间位置重合。
[0011]根据本公开的一个方面，涉及一种方法，包括：访问描述在表示于一个或多个多视角未分层图像中的三维(3D)图像空间中的多个视觉对象的空间定位的空间信息，所述一个或多个多视角未分层图像中的每一个包括与多个观看方向相对应的多个单视角未分层图像；基于描述在表示于所述一个或多个多视角未分层图像中的所述3D图像空间中的所述多个视觉对象的所述空间定位的所述空间信息，执行以下操作：从所述一个或多个多视角未分层图像生成影院图像层，所述影院图像层包括一个或多个单层影院图像，所述一个或多个单层影院图像描绘所述多个视觉对象中的一个或多个视觉对象的第一适当子集；从所述一个或多个多视角未分层图像生成一个或多个设备图像层，所述一个或多个设备图像层中的每一个包括一个或多个单层设备图像，所述一个或多个单层设备图像描绘所述多个视觉对象中的一个或多个视觉对象的一个或多个第二适当子集；将包括所述影院图像层中的所
述一个或多个单层影院图像以及所述一个或多个设备图像层中的所述一个或多个单层设备图像的多层多视角视频信号发送至一个或多个下游设备以供渲染，其中，所述影院图像层中的所述单层影院图像和所述一个或多个设备图像层中的所述单层设备图像中的至少一个是使用通过张量映射生成的3D像素分布来生成的。
[0012]根据本公开的一个方面，涉及一种装置，所述装置执行根据本公开所述的方法。
[0013]根据本公开的一个方面，涉及一种系统，所述系统执行根据本公开所述的方法。
[0014]根据本公开的一个方面，涉及一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储软件指令，所述软件指令当由一个或多个处理器执行时，使得执行根据本公开所述的方法。
[0015]根据本公开的一个方面，涉及本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种方法，包括：接收包括影院图像层中的一个或多个单层影院图像以及一个或多个设备图像层中的一个或多个单层设备图像的多层多视角视频信号，所述影院图像层中的所述单层影院图像和所述一个或多个设备图像层中的所述单层设备图像是之前从一个或多个多视角未分层图像得到的；从所述多层多视角视频信号的所述影院图像层取得所述一个或多个单层影院图像，所述一个或多个单层影院图像描绘原本通过所述一个或多个多视角未分层图像描绘的第一视觉对象；从所述多层多视角视频信号的所述一个或多个设备图像层取得所述一个或多个单层设备图像，所述一个或多个设备图像描绘原本通过所述一个或多个多视角未分层图像描绘的所述多个视觉对象中的一个或多个第二视觉对象；使得在3D空间中的影院显示器上向观看者渲染在所述一个或多个单层影院图像中描绘的第一视觉对象；使得在所述3D空间中的设备显示器上向所述观看者同时渲染在所述一个或多个单层设备图像中描绘的一个或多个第二视觉对象；其中，描述3D图像空间中的所述多个视觉对象所处的空间定位的空间信息之前用于将原本通过所述一个或多个多视角未分层图像描绘的所述多个视觉对象划分成所述影院图像层和所述一个或多个设备图像层。2.如权利要求1所述的方法，其中，所述设备显示器相对于所述影院显示器以一个或多个自由度在空间上能够移动。3.如权利要求1所述的方法，其中，所述设备显示器被可穿戴设备使用以渲染图像；并且其中，所述设备显示器相对于所述可穿戴设备在空间上固定。4.如权利要求1所述的方法，其中，所述影院显示器是静止显示器，并且其中，所述设备显示器表示由所述观看者使用的可穿戴设备的头戴式显示器。5.如权利要求1所述的方法，其中，所述3D空间中的所述影院显示器用于限定所述3D图像空间中的层分离面；并且其中，至少部分地基于所述多个视觉对象相对于所述层分离面的空间关系将所述多个视觉对象划分成所述第一视觉对象和所述一个或多个第二视觉对象。6.如权利要求5所述的方法，其中，基于距所述层分离面的空间距离从所述多个视觉对象当中选择所述一个或多个第二视觉对象。7.如权利要求5所述的方法，其中，所述多个视觉对象当中的至少一个视觉对象跨过所述层分离面；其中，所述第一视觉对象包括所述至少一个视觉对象的一部分；并且其中，所述一个或多个第二视觉对象包括所述至少一个视觉对象的其余部分。8.如权利要求1所述的方法，其中，所述影院显示器表示所述3D空间中具有零视差的空间面；其中，由影院显示图像描绘为位于所述影院显示器后方的视觉对象具有正视差；其中，由所述影院显示图像描绘为位于所述影院显示器前方的视觉对象具有负视差；并且其中，基于所述多个视觉对象中的个体视觉对象的个体视差将所述多个视觉对象划分成所述第一视觉对象和所述一个或多个第二视觉对象。9.如权利要求8所述的方法，其中，如果所述一个或多个第二视觉对象将通过在所述影
...

【专利技术属性】
技术研发人员：A，
申请(专利权)人：杜比实验室特许公司，
类型：发明
国别省市：