用于对虚拟现实视频内容进行颜色分级的方法和系统技术方案

本公开涉及用于在虚拟现实视频内容的色彩分级中向色彩师提供辅助(或协助或帮助)的方法，该虚拟现实视频内容被称为VR内容，该方法包括以下步骤：‑接收(100)正在被颜色分级站分级的VR内容；‑接收(110)表示色彩师的至少一只手相对于所述颜色分级站的位置的位置信息；‑基于所述位置信息生成(120)视觉控制信息，该视觉控制信息示出色彩师的所述至少一只手相对于颜色分级站的至少一个分级控制元件的位置；‑将所述视觉控制信息与分级的VR内容一起显示(130)在由所述色彩师携带的头戴式显示器上，以便帮助色彩师操纵所述至少一个分级控制元件。

Method and system for color grading of virtual reality video content

【技术实现步骤摘要】
【国外来华专利技术】用于对虚拟现实视频内容进行颜色分级的方法和系统
本公开总体上涉及产生虚拟现实(VR)内容的领域，更具体地，涉及VR内容的颜色分级。
技术介绍
本章节旨在向读者介绍可能与下面描述和/或要求保护的本公开的各个方面相关的技术的各个方面。相信该讨论有助于向读者提供背景信息，以促进更好地理解本公开的各个方面。因此，应当理解，这些陈述应从这个角度来阅读，而非作为对现有技术的承认。在产生虚拟现实内容领域中，色彩师(colorist)可能必须对360°VR内容进行分级。从事为胶片进行颜色分级的色彩师通常使用专用的颜色分级站，例如“DaVinciResolve”颜色分级站。这样的站为色彩师提供对颜色分级软件的参数和控制的快速访问，使得他们可以修改内容而不必操纵不同的按钮、滑块或菜单或屏幕。对于典型的颜色分级区段，色彩师需要能够访问在站上可用的多个控件以执行颜色编辑，同时将对内容的修改的效果可视化在专用显示屏上或他们前方的投影仪上。当对VR内容进行分级时，可以主要使用相同的设置来执行分级，对例如从360°VR内容发出的关键帧进行操作。然而，在这种情况下，在颜色分级时的可视化状况将与通过VR头戴式显示器(HMD)观看内容的最终状况完全不同。色彩师应当能够在可视化的实际状况下利用HMD验证最终的渲染并且调整VR内容的分级。不幸的是，利用HMD，色彩师不再能看到颜色分级站，并且因此将不能够容易地访问用于修改图像的控件。因此，当前需要他们在传统设置上进行颜色分级，在HMD上进行验证，并且进行反复直到获得期望的结果，这是一个冗长的过程。这是特别成问题的，因为每次他们需要戴上或摘下VRHMD时，需要短期的适应来确保他们很好地适应不同的观看环境(正常屏幕或HMD)。
技术实现思路
本公开的目的是提出使色彩师的工作更容易的方法和系统。更具体地，提出了这样的方法和系统，其帮助色彩师在将他的调整可视化在HMD中的同时使用当前分级站和控制站，而不必通过重复地戴上和摘下HMD进行反复。色彩师可以在360°VR内容中导航以在尽可能接近最终可视化状况的视觉状况下对内容进行分级。该系统可以是添加到用于常规胶片分级的当前分级设置的附加特征。这样，色彩师将不必使用用于VR分级的专用站，而是可以使用与用于传统胶片的工具相同的工具。本公开涉及用于在被称为VR内容的虚拟现实视频内容的色彩分级中向色彩师提供辅助(或协助或帮助)的方法，该方法包括以下步骤：-接收正在被颜色分级站分级的VR内容，-接收表示色彩师的至少一只手相对于所述颜色分级站的位置的位置信息，-基于所述位置信息生成视觉控制信息，该视觉控制信息示出色彩师的所述至少一只手相对于颜色分级站的至少一个分级控制元件的位置，-将所述视觉控制信息与分级的VR内容显示在由所述色彩师携带的头戴式显示器上，以便帮助色彩师操纵所述至少一个分级控制元件。因此，关于色彩师的手和颜色分级站的视觉信息被集成到VR视图中，从而为色彩师提供了在HMD中可视化内容的同时与其颜色分级站进行交互的可能性。因此，本公开解决了在VR内容中导航的同时能够访问颜色分级站的问题。根据特定实施例，视觉控制信息被显示在正在被分级的VR内容旁边。VR内容被显示在HMD的第一区域中，而视觉控制信息被显示在HMD的第二区域中，第二区域不同于第一区域。在这种情况下，HMD中专用于VR内容的视场被减小以显示视觉控制信息。在一变体中，VR内容和视觉控制信息被显示在头戴式显示器的同一区域中，视觉控制信息叠加在VR内容上。在特定实施例中，VR内容被全屏显示，并且视觉控制信息以覆盖在VR内容上的半透明模式显示。在特定实施例中，位置信息基于由置于颜色分级站上方的相机捕获的视频图像。在特定实施例中，视觉控制信息是色彩师的手和颜色分级站的分级控制元件的虚拟图像。在特定实施例中，色彩师的手相对于颜色分级站的位置是通过检测由置于颜色分级站上方的相机捕获的视频图像中的肤色来估计的。在特定实施例中，色彩师的手相对于颜色分级站的位置是通过置于色彩师的手上的专用标记来估计的。对于该实施例，色彩师戴着例如具有所述专用标记的手套。在一变体中，该方法还包括例如通过使用置于颜色分级站的分级控制元件上的专用标记来估计颜色分级站的分级控制元件的位置的步骤。在特定实施例中，头戴式显示器被布置为估计佩戴所述头戴式显示器的色彩师的物理旋转，该方法还包括用于将虚拟现实视频内容中的旋转(称为内容旋转)映射到所述物理旋转的步骤，所述内容旋转大于所述物理旋转，虚拟现实视频内容与所述内容旋转一起被显示在所述头戴式显示器上。该特征允许提高色彩师在360°VR内容中导航的能力。在真实观看状况下，通常可以通过移动用户的头部或用户整体移动来旋转HMD以探索360°内容。为了例如在游戏应用中操纵内容的各个方面，用户通常将在他们的手中持有诸如游戏控制器之类的控制器，该控制器可以随他们一起移动。然而，在颜色分级的当前用例中，色彩师所使用的颜色分级站被固定在适当的位置，并且移动颜色分级站可能是不切实际的或甚至是不可能的。这样，色彩师必须能够访问其前方的他的物理分级控制元件，同时能够探索全部360°的VR内容。为了解决这一点，上述映射操作将物理旋转压缩为较小旋转，使得HMD的较小旋转角度对应于VR内容本身的较大旋转角度。利用该映射，HMD不需要旋转完整的180°来访问用户的视点后面的内容。这样，色彩师可以例如将他的头部从左60°旋转到右60°以访问整个360°内容。在特定实施例中，内容旋转与物理旋转之间的比率是大于1的恒定值。该比率例如大体上等于3，使得色彩师可将他的头部从左60°旋转到右60°以访问从-180°到+180°的VR内容。本公开还涉及用于在被称为VR内容的虚拟现实视频内容的颜色分级中向色彩师提供辅助的处理设备，所述处理设备被配置为·接收正在被颜色分级站分级的VR内容，·接收表示色彩师的至少一只手相对于所述颜色分级站的位置的位置信息，·基于所述位置信息生成视觉控制信息，该视觉控制信息示出色彩师的所述至少一只手相对于颜色分级站的至少一个分级控制元件的位置，以及·生成包括所述视觉控制信息和所述分级的VR内容的视频流，所述视频流被布置为由所述色彩师携带的头戴式显示器显示，使得所述视觉控制信息与所述分级的VR内容一起被显示，以便帮助色彩师操纵所述至少一个分级控制元件。处理设备的全部或部分可以被并入到颜色分级站和/或头戴式显示器中，或者该处理设备可以是外部设备。本公开还涉及用于对虚拟现实视频内容进行颜色分级的系统，该系统包括：-颜色分级站，用于对所述虚拟现实视频内容进行分级，所述颜色分级站包括用于控制虚拟现实视频内容的分级的控制元件，-相机，用于捕获使用所述颜色分级站的色彩师的至少一只手的视频图像，以及生成表示色彩师的至少一只手相对于颜色分级站的位置的位置信息，以及-处理设备，其被配置为：<本文档来自技高网...

【技术保护点】
1.一种用于对虚拟现实视频内容进行颜色分级的方法，所述虚拟现实内容被称为VR内容，所述方法由头戴式显示器执行，所述头戴式显示器由对所述VR内容进行颜色分级的色彩师佩戴，并且所述方法包括：/n接收(100)正在被外部颜色分级站分级的所述VR内容，所述外部颜色分级站被所述色彩师用于对所述VR内容进行颜色分级，所述外部颜色分级站包括用于控制所述VR内容的分级的分级控制元件，/n接收(110)表示所述色彩师的至少一只手相对于所述颜色分级站的位置信息，所述位置信息包括所述色彩师的所述手在所述颜色分级站上方的位置和所述颜色分级站的所述分级控制元件的位置，/n基于所接收的位置信息，生成(120)视觉控制信息，所述视觉控制信息示出所述色彩师的所述至少一只手的位置和靠近所述手的所述颜色分级站的至少一个分级控制元件的位置，/n将所述视觉控制信息与所分级的VR内容一起显示(130)，以便帮助所述色彩师操纵所述至少一个分级控制元件。/n

【技术特征摘要】
【国外来华专利技术】20171124 EP 17306636.61.一种用于对虚拟现实视频内容进行颜色分级的方法，所述虚拟现实内容被称为VR内容，所述方法由头戴式显示器执行，所述头戴式显示器由对所述VR内容进行颜色分级的色彩师佩戴，并且所述方法包括：
接收(100)正在被外部颜色分级站分级的所述VR内容，所述外部颜色分级站被所述色彩师用于对所述VR内容进行颜色分级，所述外部颜色分级站包括用于控制所述VR内容的分级的分级控制元件，
接收(110)表示所述色彩师的至少一只手相对于所述颜色分级站的位置信息，所述位置信息包括所述色彩师的所述手在所述颜色分级站上方的位置和所述颜色分级站的所述分级控制元件的位置，
基于所接收的位置信息，生成(120)视觉控制信息，所述视觉控制信息示出所述色彩师的所述至少一只手的位置和靠近所述手的所述颜色分级站的至少一个分级控制元件的位置，
将所述视觉控制信息与所分级的VR内容一起显示(130)，以便帮助所述色彩师操纵所述至少一个分级控制元件。


2.根据权利要求1所述的方法，其中，所述视觉控制信息被显示在正在被分级的所述VR内容旁边。


3.根据权利要求1所述的方法，所述VR内容和所述视觉控制信息被显示在所述头戴式显示器的相同区域中，所述视觉控制信息叠加在所述VR内容上。


4.根据权利要求3所述的方法，其中，所述VR内容是全屏显示的，并且所述视觉控制信息以覆盖在所述VR内容上的半透明模式显示。


5.根据前述权利要求中任一项所述的方法，其中，所述位置信息是基于由置于所述颜色分级站上方的相机捕获的视频图像的。


6.根据前述权利要求中任一项所述的方法，其中，所述视觉控制信息是所述色彩师的所述手和所述颜色分级站的所述分级控制元件的虚拟图像。


7.根据前述权利要求中任一项所述的方法，其中，所述色彩师的所述手相对于所述颜色分级站的位置是通过检测由置于所述颜色分级站上方的相机捕获的视频图像中的肤色来估计的。


8.根据权利要求1至6中任一项所述的方法，其中，所述色彩师的所述手相对于颜色分级站的位置是通过置于所述色彩师的所述手上的专用标记来估计的。


9.根据前述权利要求中任一项所述的方法，其中，所述头戴式显示器被布置为估计所述色彩师的物理旋转，所述方法还包括用于使所述VR内容中的旋转映射到所述物理旋转的步骤，所述VR内容中的旋转被称为内容旋转，所述V...

【专利技术属性】
技术研发人员：西尔万·蒂埃博，塔尼亚·波利，
申请(专利权)人：汤姆逊许可公司，
类型：发明
国别省市：法国;FR