消费沉浸内容项时激励观看者转向参考方向的方法和装置制造方法及图纸

本公开涉及用于激励消费沉浸式内容的用户在感兴趣区域的方向上旋转沉浸式呈现设备的方法、装置或系统。根据本原理，在用户的视场中插入代表角色的对象。该角色以从其在沉浸式内容中的位置在感兴趣区域的方向上查看的方式被计算。此外，角色的面部和身体姿势可以反映与感兴趣区域相关联的情绪，例如恐惧、高兴或感兴趣。用户将自然被激励在由所插入的角色指示的方向上查看。

【技术实现步骤摘要】
消费沉浸内容项时激励观看者转向参考方向的方法和装置
本公开涉及激励消费沉浸式内容的用户在感兴趣的方向上查看的领域，例如利用头戴式显示器(HMD)或TV机或诸如平板或智能电话之类的移动设备。
技术介绍
沉浸式内容项是使其在用户周围显示的内容项，使得用户具有在内容的中间的感觉。沉浸式内容可以是三维计算机图形影像内容(3DCGI)、体视频(volumetricvideo)或映射到诸如球体、立方体或圆柱体之类的三维凸面的视频。此外，例如通过裁剪，用户只能看到其一部分的大型二维图像也是沉浸式内容；用户必须控制呈现设备，以便看到内容的未实际显示的部分。由沉浸式呈现设备来呈现沉浸式内容项。例如，头戴式显示器(HMD)是戴在头上或作为头盔的一部分的显示设备，其具有在一只眼睛(单眼HMD)或每只眼睛(双眼HMD)前面的小型显示光学器件。它们有利地被适配为消费沉浸式内容项。在这样的设备中，只显示视频的一部分。通过例如集成的运动单元测量(包括陀螺仪)和/或使用例如相机的姿势估计系统，根据用户头部姿势来更新视频内容的显示部分。智能电话或平板也可以呈现沉浸式内容。显示部分根据取向被更新，并且最终根据设备的位置被更新。这样的设备的出现允许用户通过运动、例如头部旋转来观看4π球面度内容。如果这样的特征可能在内容的沉浸方面看起来是真正的改进，由于用户只观看内容的一部分，所以他可能不会查看他在给定时刻应该查看的方向。实际上，由于用户可以注视他的周围，所以他可能因为他在叙述性事件发生时正在观看内容的另一部分而错过叙述的一些重要的突出部分。根据
技术介绍
，已知的是，促使虚拟相机摇拍以使用户看向他必须看去的方向是非常有效的解决方案。然而，众所周知的是，该解决方案具有使用户不舒服的缺点，并因此降低用户的体验质量。在要避免的方向上使内容降级的伪触觉方法是已知的。他们具有使呈现的图像降级的缺点，并且因此修改作者的作品并改变用户的体验。控制由用户的移动所控制的设备的瞄准方向与捕获要呈现的场景的部分的虚拟相机的瞄准方向之间的差异的方法也是现有解决方案。它们具有限制用户可以看去的可能方向的缺点。缺乏一种解决方案，其友好地激励用户看向感兴趣的方向(或区域)，而不限制他不跟随激励的自由并且不使他的观看体验降级。
技术实现思路
本公开涉及一种鼓励用户看向沉浸式内容内的参考方向的方法，而不限制他不跟随激励的自由，并且不使他的观看体验降级。根据本原理，在沉浸式呈现设备处，在用户的视场中插入友好角色(character)。当用户在参考方向(例如感兴趣的方向)上查看时，角色看向用户或者例如将其后背转向用户，并且具有中性表达。在变型中，当用户看向参考方向时，不显示角色。在另一变型中，修改、例如减小角色的大小，并且它可以呈现在屏幕的角落中。角色也可以闭上其眼睛。当某事发生并且参考方向离开用户的视场时，角色在向用户指示参考方向的方向上查看。根据内容中发生的事件的类型，角色可以改变其面部表达，例如看起来害怕或惊讶，使得用户被激励以查看角色正在注视之处。在变型中，角色具有加强激励效果的身体表达。本公开涉及一种由呈现设备呈现沉浸式内容的方法。该方法包括：-获得沉浸式内容内的感兴趣的参考方向和与所述参考方向相关联的情绪数据；-在所述沉浸式内容内的位置处插入代表具有至少一只眼睛的角色的对象，所述位置被包围在由所述呈现设备呈现的沉浸式内容的一部分中；并且其中，根据所述位置和所述参考方向来确定所述对象的至少一只眼睛的注视方向，并且其中将所述对象确定为反映所述情绪数据。根据本原理的一方面，将所述注视方向计算为使所述角色从所述沉浸式内容内的所述对象的位置在所述参考方向的方向上查看。在实施例中，情绪数据与参考方向相关联，并且角色的面部被动画化以代表该情绪。根据本原理的另一方面，角色除了其头部之外还包括身体部位，该身体部位被动画化以加强对注视方向的指示。在实施例中，根据对象在被显示的沉浸式内容的第一部分中的投影的屏幕空间位置和大小来计算对象的位置。根据本原理的另一方面，从对沉浸式内容进行编码的数据流获得参考方向。在实施例中，通过分析沉浸式内容以检测感兴趣的区域来获得参考方向，并且参考方向是从观看者在沉浸式内容中的位置开始指向感兴趣的区域的矢量。本公开还涉及一种呈现设备，其包括与至少一个处理器相关联的存储器，所述处理器被配置为：-获得沉浸式内容内的感兴趣的参考方向和与所述参考方向相关联的情绪数据；-在所述沉浸式内容内的位置处插入代表具有至少一只眼睛的角色的对象，所述位置被包围在由所述呈现设备呈现的沉浸式内容的一部分中；并且其中，根据所述位置和所述参考方向来确定所述对象的至少一只眼睛的注视方向，并且其中将所述对象确定为反映所述情绪数据。附图说明在阅读以下描述时将更好地理解本公开，并且将显现其他特定特征和优点，该描述参考附图，附图中：图1图示了根据本原理的特定实施例的消费由沉浸式呈现设备(例如戴在头上的HMD)呈现的沉浸式内容项的用户的示例；图2a示出了根据本原理的特定实施例的在获得参考方向之前消费所呈现的沉浸式内容项的图1的用户；图2b示出了根据本原理的特定实施例的在获得参考方向时消费所呈现的沉浸式内容项的图1的用户；图2c示出了根据本原理的特定实施例的在用户已经如图2b的角色所激励的旋转他的头部时消费由沉浸式呈现设备呈现的沉浸式内容项的图1的用户；图3图示了根据本原理的特定实施例的具有包括身体和手臂的角色的如图2b的图像的显示图像；图4图示了根据本原理的特定实施例的具有仅包括一只眼睛的角色的如图3的图像的显示图像；图5示意性地示出了根据非限制性有利实施例的在诸如图6的设备之类的处理设备中实现的方法的实施例；图6示出了根据本原理的特定实施例的可以被配置为实现结合图5描述的方法的设备的示例性架构。具体实施方式现在参考附图描述主题，其中相同的参考数字始终用于指代相同的元素。在下面的描述中，为了解释的目的，阐述许多特定细节以便提供对主题的透彻理解。要理解，可以在没有这些特定细节的情况下实践主题实施例。为了清楚起见，图1、图2a、图2b和图2c图示了二维下的示例并且涉及唯一的“偏航”角度(即围绕Z轴的旋转)。要理解，本原理可扩展到第三维度并且扩展到“俯仰”角度(即围绕Y轴的旋转)和扩展到“滚动”角度(即围绕X轴的旋转)。图1图示了消费由沉浸式呈现设备、例如戴在头上的HMD呈现的沉浸式内容项的用户11的示例。例如，虚拟相机12捕获沉浸式内容10的部分14的图像，该图像显示在HMD的至少一个屏幕上。在HMD的情况下，在用户的每只眼睛前面呈现一个图像。这可以是相同的图像(即，单呈现)或两个不同的图像(即立体呈现)。沉浸式内容可以是三维计算机图形影像场景(3DCGI场景)，其中对象的3D模型定位在参考系中。在另一实施例中，沉浸式内容可以是映射在三维凸面(例如球体、圆柱体、立方体、金字塔或这些3D形状的一部分)上的视频。用户通过移动沉浸式呈现设备、例如通过在HMD的示例中旋转他的头部来控制沉浸式内容10的显示部分14。用户在方向13上查看，例如查看图1的磨坊。由沉浸式呈现设备根据方向13和限定视场的设备的硬件配置(例如HMD的透镜和/或屏幕的宽度)来确定显示部分14。根据本原理，获得参考方向15。可以通过分本文档来自技高网...

【技术保护点】
1.一种由呈现设备呈现沉浸式内容的方法，所述方法包括：‑获得沉浸式内容内的感兴趣的参考方向和与所述参考方向相关联的情绪数据；‑在所述沉浸式内容内的位置处插入代表具有至少一只眼睛的角色的对象，所述位置被包围在由所述呈现设备呈现的沉浸式内容的一部分中；并且其中，根据所述位置和所述参考方向来确定所述对象的至少一只眼睛的注视方向，并且其中将所述对象确定为反映所述情绪数据。

【技术特征摘要】
2017.06.06 EP 17305660.71.一种由呈现设备呈现沉浸式内容的方法，所述方法包括：-获得沉浸式内容内的感兴趣的参考方向和与所述参考方向相关联的情绪数据；-在所述沉浸式内容内的位置处插入代表具有至少一只眼睛的角色的对象，所述位置被包围在由所述呈现设备呈现的沉浸式内容的一部分中；并且其中，根据所述位置和所述参考方向来确定所述对象的至少一只眼睛的注视方向，并且其中将所述对象确定为反映所述情绪数据。2.根据权利要求1所述的方法，其中将所述注视方向确定为使所述角色从所述沉浸式内容内的所述位置在所述参考方向的方向上查看。3.根据权利要求1或2所述的方法，其中将所述对象动画化为反映所述情绪。4.根据权利要求1至2之一所述的方法，其中所述角色包括身体部位，所述身体部位被动画化以加强所述注视方向的指示。5.根据权利要求1至2之一所述的方法，其中根据所述对象在所述沉浸式内容的呈现部分中的投影的屏幕空间位置和屏幕空间大小来确定所述位置。6.根据权利要求1至2之一所述的方法，其中从对所述沉浸式内容进行编码的数据流获得所述参考方向。7.根据权利要求1至2之一所述的方法，其中通过分析所述沉浸式内容以检测感兴趣的区域来获得所述参考方向。8.根据权利要求1至2之一所述...

【专利技术属性】
技术研发人员：QKN董，J西罗特，G马昆德，CH德马尔蒂，
申请(专利权)人：汤姆逊许可公司，
类型：发明
国别省市：法国,FR