360度多视口系统技术方案

方法的一些实施例可以包括：接收指示沉浸式视频的哪个部分对应于在第一显示器上显示的沉浸式视频的第一视口的元数据；跟踪第二显示器相对于所述第一显示器的取向；基于所述元数据和所述第二显示器相对于所述第一显示器的取向，确定在时间和取向上相对于在所述第一显示器上显示的所述沉浸式视频同步的所述沉浸式视频的第二视口；以及在所述第二显示器上显示所述第二视口。显示所述第二视口。显示所述第二视口。

【技术实现步骤摘要】
【国外来华专利技术】360度多视口系统
[0001]相关申请的交叉引用
[0002]本申请是由2018年4月27日提交的名称为“360多视图故事讲述”的美国临时专利申请序列号62/663,915的非临时提交并且根据35 U.S.C.
§
119(e)要求所述临时专利申请的权益，所述临时专利申请通过引用整体结合于此。

技术介绍

[0003]360度视频越来越受欢迎。内容变得更容易用消费者级记录设备来产生。许多由多相机设置组成的高端设备支持高清晰度视频流，实现新的用户体验。许多社交媒体和内容供应商提供360度媒体内容，用户能够利用增强现实设备或者通过在屏幕上滑动和旋转视图来消费该媒体内容。例如，存在虚拟旅行服务和具有同步耳机的基于VR的360度剧院，诸如在AltspaceVR中你可以做什么的网站上描述的那些，Altvr,www.altvr.com/what-can-you-do-in-altspacevr/(最后一次访问在2018年4月20日)。
[0004]360度内容可以作为若干相机视图和多麦克风空间音频流的合成而被下载或流传送到接收机。媒体播放器可以创建用于立体耳机或2D显示器的2D视图。用户可以与所设置的相机记录装置一起移动，并且交互地观察周围环境。

技术实现思路

[0005]根据一些实施例的示例方法可以包括：接收指示360度视频的哪个部分对应于在固定显示器上显示的360度视频的第一视口的元数据；跟踪移动设备相对于所述固定显示器的取向；基于所述元数据和所述移动设备相对于所述固定显示器的所述取向，确定在时间和取向上相对于在所述固定显示器上显示的所述360度视频同步的所述360度视频的第二视口；以及在所述移动设备上显示所述第二视口。
[0006]在示例方法的一些实施例中，确定第二视口可以包括：根据所述移动设备相对于所述固定显示器的所述取向确定第一角度；根据在所述固定显示器上显示的所述360度视频的所述第一视口的中心确定第二角度；以及针对第二角度，对在时间和空间上同步的360度视频进行定向以生成第二视口。
[0007]在示例方法的一些实施例中，确定360度视频的第二视口可以包括确定360度视频的虚拟镜像视口。
[0008]在示例方法的一些实施例中，确定360度视频的第二视口可以包括选择与固定显示器上显示的360度视频的部分相对应的虚拟镜像的位置。
[0009]在示例方法的一些实施例中，显示360度视频的第二视口可以包括渲染360度视频的与虚拟镜像的位置相对应的部分。
[0010]示例方法的一些实施例进一步可以包括：记录来自移动设备的前置相机的图像以生成记录的图像；以及将所述记录的图像覆盖在第二视口上以生成更新的第二视口，其中显示第二视口显示了更新的第二视口。
[0011]示例方法的一些实施例进一步可以包括：记录来自移动设备的前置相机的图像以
生成记录的图像；以及在移动设备上将所记录的图像显示为第二视口上的覆盖图。
[0012]在示例方法的一些实施例中，第二视口是第一视口的虚拟镜像。
[0013]示例方法的一些实施例进一步可以包括：选择所述360度视频的所述第二视口内的对象作为虚拟镜像对象，其中显示所述第二视口可包括将所述虚拟镜像对象替换为所述360度视频的所述第一视口的部分。
[0014]示例方法的一些实施例进一步可以包括：选择360度视频内的对象作为虚拟镜像对象；以及将虚拟镜像对象替换为360度视频的第一视口的部分，其中显示第二视口可以包括显示替换为360度视频的第一视口的部分的虚拟镜像对象。
[0015]在示例方法的一些实施例中，第二视口是第一视口的虚拟镜像。
[0016]示例方法的一些实施例进一步可以包括：记录来自移动设备的前置相机的图像以生成记录的图像；确定记录的图像中的用户的边界以生成所述用户的形状；通过跟踪所述用户的形状来裁剪所述记录的图像以生成裁剪后的图像；以及在移动设备上将裁剪后的图像显示为第二视口上的覆盖图。
[0017]在示例方法的一些实施例中，确定360度视频的第二视口可以包括：捕获在固定显示器上显示的360度视频的图像以生成捕获的图像；确定所述捕获的图像被捕获的第一时刻；确定显示与捕获的图像相对应的360度视频的第一部分的第二时刻；将时间延迟确定为第一时刻和第二时刻之间的差；基于所述时间延迟来对所述第二视口进行时间调整以生成经时间调整的视口；以及在移动设备上显示经时间调整的视口。
[0018]在示例方法的一些实施例中，跟踪移动设备相对于固定显示器的取向可以包括：当所述固定显示器在第一时间平行于所述移动设备时，确定所述移动设备的第一方向；确定所述移动设备在第二时间的第二方向；确定所述第一方向与所述第二方向之间的航向差；以及将所述航向差存储为所述移动设备相对于所述固定显示器的所述取向。
[0019]在示例方法的一些实施例中，跟踪移动设备相对于固定显示器的取向可以包括：确定所述移动设备在第一时间相对于所述固定显示器的第一方向；确定所述移动设备在第二时间相对于所述固定显示器的第二方向；确定所述第一方向与所述第二方向之间的航向差；以及将所述航向差存储为所述移动设备相对于所述固定显示器的所述取向。
[0020]在示例方法的一些实施例中，元数据可以包括媒体呈现描述文件。
[0021]根据一些实施例的示例装置可以包括：处理器；以及存储指令的非暂时性计算机可读介质，所述指令在由处理器执行时可操作用于执行上文列出的方法中的任何方法。
[0022]根据一些实施例的另一示例方法可以包括：接收在第一显示器上利用第一视口显示的沉浸式视频；接收指示所述沉浸式视频的所述第一视口的元数据；跟踪所述第一显示器与第二显示器之间的相对取向；使所述沉浸式视频的第二视口的取向相对于所述第一视口同步，以生成用于所述第二视口的同步的沉浸式视频；基于所述第一视口和所述相对取向来确定所述同步的沉浸式视频的修改的视口；以及在第二显示器上显示修改的视口。
[0023]在示例方法的一些实施例中，跟踪第一显示器和第二显示器之间的相对取向可以包括：确定第二显示器在第一时间相对于第一显示器的第一方向；确定第二显示器在第二时间相对于第一显示器的第二方向；确定所述第一方向与所述第二方向之间的航向差；以及将航向差存储为第一显示器与第二显示器之间的相对取向。
[0024]在示例方法的一些实施例中，确定沉浸式视频的修改的视口可以包括选择与在第
一显示器上显示的沉浸式视频的部分相对应的虚拟镜像的位置。
[0025]在示例方法的一些实施例中，显示沉浸式视频的修改的视口可以包括渲染沉浸式视频的与虚拟镜像的位置相对应的部分。
[0026]根据一些实施例的示例装置可以包括：处理器；以及存储指令的非暂时性计算机可读介质，所述指令在由处理器执行时可操作用于执行上文列出的方法中的任何方法。
[0027]根据一些实施例的另一示例方法可以包括：接收元数据，所述元数据指示沉浸式视频的哪个部分对应于在第一显示器上显示的沉浸式本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：接收指示360度视频的哪个部分对应于在固定显示器上显示的所述360度视频的第一视口的元数据；跟踪移动设备相对于所述固定显示器的取向；基于所述元数据和所述移动设备相对于所述固定显示器的所述取向，确定在时间和取向上相对于在所述固定显示器上显示的所述360度视频同步的所述360度视频的第二视口；以及在所述移动设备上显示所述第二视口。2.根据权利要求1所述的方法，其中，确定所述第二视口包括：根据所述移动设备相对于所述固定显示器的所述取向确定第一角度；根据在所述固定显示器上显示的所述360度视频的所述第一视口的中心确定第二角度；以及针对所述第二角度，对在时间和空间上同步的所述360度视频进行定向以生成所述第二视口。3.根据权利要求1-2中任一项所述的方法，其中，确定所述360度视频的所述第二视口包括确定所述360度视频的虚拟镜像视口。4.根据权利要求1-3中任一项所述的方法，其中，确定所述360度视频的所述第二视口包括选择与在所述固定显示器上显示的所述360度视频的部分相对应的虚拟镜像的位置。5.根据权利要求4所述的方法，其中，显示所述360度视频的所述第二视口包括渲染所述360度视频的与所述虚拟镜像的所述位置相对应的部分。6.根据权利要求1-5中任一项所述的方法，进一步包括：记录来自移动设备的前置相机的图像以生成记录的图像；以及将所述记录的图像覆盖在所述第二视口上以生成更新的第二视口，其中，显示所述第二视口显示了所述更新的第二视口。7.根据权利要求1-6中任一项所述的方法，进一步包括：记录来自移动设备的前置相机的图像以生成记录的图像；以及在所述移动设备上将所述记录的图像显示为所述第二视口上的覆盖图。8.根据权利要求7所述的方法，其中，所述第二视口是所述第一视口的虚拟镜像。9.根据权利要求1-8中任一项所述的方法，进一步包括：选择所述360度视频的所述第二视口内的对象作为虚拟镜像对象，其中显示所述第二视口包括将所述虚拟镜像对象替换为所述360度视频的所述第一视口的部分。10.根据权利要求1-9中任一项所述的方法，进一步包括：选择所述360度视频内的对象作为虚拟镜像对象；以及将所述虚拟镜像对象替换为所述360度视频的所述第一视口的部分，其中，显示所述第二视口包括显示被替换为所述360度视频的所述第一视口的所述部分的所述虚拟镜像对象。11.根据权利要求1-10中任一项所述的方法，其中，所述第二视口是所述第一视口的虚拟镜像。
12.根据权利要求1-11中任一项所述的方法，进一步包括：记录来自移动设备的前置相机的图像以生成记录的图像；确定所述记录的图像中的用户的边界以生成所述用户的形状；通过跟踪所述用户的所述形状来裁剪所述记录的图像以生成裁剪后的图像；以及在所述移动设备上将所述裁剪后的图像显示为所述第二视口上的覆盖图。13.根据权利要求1-12中任一项所述的方法，其中，确定所述360度视频的所述第二视口包括：捕获在所述固定显示器上显示的所述360度视频的图像以生成捕获的图像；确定所述捕获的图像被捕获的第一时刻；确定与所述捕获的图像相对应的所述360度视频的第一部分被显示的第二时刻；将时间延迟确定为所述第一时刻和所述第二时刻之间的差；基于所述时间延迟来对所述第二视口进行时间调整以生成经时间调整的视口；以及在所述移动设备上显示所述经时间调整的视口。14.根据权利要求1-13中任一项所述的方法，其中，跟踪所述移动设备相对于所述固...

【专利技术属性】
技术研发人员：帕西，
申请(专利权)人：PCMS控股公司，
类型：发明
国别省市：