基于用户触觉空间（HapSpace）提供触觉反馈和交互的方法和装置制造方法及图纸

在特定实现方式中，提出了用于触觉反馈和交互的用户环境空间(HapSpace)。在一个实施例中，HapSpace是附于用户的虚拟空间，并且通过用户的身体可以到达的最大距离来定义。HapSpace可以随用户移动而移动。也可以在HapSpace中定义触觉对象和触觉设备以及关联触觉属性。为了描述HapSpace而定义新的描述符，诸如实现精确定位和用户与触觉对象/设备之间的链接的那些描述符。

A method and device for providing tactile feedback and interaction based on the user's tactile space (HapSpace)

In a specific implementation, a user environment space (HapSpace) for tactile feedback and interaction is proposed. In one example, HapSpace is a virtual space attached to the user and is defined by the maximum distance that the user's body can reach. HapSpace can move as the user moves. It is also possible to define tactile objects and tactile devices and associated tactile attributes in HapSpace. In order to describe HapSpace, new descriptors are defined, such as those descriptors that implement accurate positioning and links between the user and the tactile object / device.

【技术实现步骤摘要】
【国外来华专利技术】基于用户触觉空间(HapSpace)提供触觉反馈和交互的方法和装置
本专利技术涉及提供触觉反馈和交互的方法和装置，更具体而言，本专利技术涉及基于用户触觉空间提供触觉反馈和交互的方法和装置。
技术介绍
新技术的发展使创建越来越多的沉浸式多媒体系统成为可能。3D图像和声音空间化现在存在于用户的生活空间中。这些系统通常与两种感觉、即视觉和听觉的刺激有关。此外，虚拟现实的研究已经表明，触觉感知似乎与沉浸感有很强的联系，这导致对新的科学领域、考虑触觉感知和视听(A/V)内容二者的HAV(触觉视听)领域的定义。
技术实现思路
根据本原理的一方面，提出了一种传送触觉效果的方法，包括：定义包括用户可访问的至少一个触觉对象的空间；指定与所述至少一个触觉对象相关联的触觉属性；将与所述至少一个触觉对象相关联的触觉属性编码到比特流中；以及经由通信接口传送比特流。本实施例还提供了一种用于执行这些步骤的装置。根据本原理的另一方面，提出了一种提供触觉反馈的方法，包括：定义包括用户可访问的至少一个触觉对象的空间；从比特流解码与所述至少一个触觉对象相关联的触觉属性；以及响应于经解码的与所述至少一个触觉对象相关联的触觉属性向用户提供触觉反馈。本实施例还提供了一种用于执行这些步骤的装置。根据本原理的另一方面，信号被格式化为包括：包括用户可访问的至少一个触觉对象的空间；空间中的用户接收触觉效果的位置，通过三个笛卡尔坐标来指定该位置；以及与所述至少一个触觉对象相关联的触觉属性。本实施例还提供了一种计算机可读存储介质，具有存储在其上的指令，用于根据以上描述的方法来传送或提供触觉效果。本实施例还提供了一种计算机可读存储介质，具有存储在其上的根据以上描述的方法生成的比特流。根据本原理的一方面，一种传送比特流的方法，所述比特流包括表示触觉效果的数据，所述方法包括：将表示空间的原点的定位的第一描述符编码到所述比特流中；将表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符编码到所述比特流中；传送所述比特流。根据实施例，该方法还包括将表示触觉设备关于所述空间的定位的第三描述符编码到所述比特流中。根据本原理的一方面，一种对表示触觉效果的信息进行解码的方法，所述方法包括：接收比特流；从所述比特流解码表示空间的原点的定位的第一描述符；从所述比特流解码表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符。根据实施例，该方法还包括从所述比特流解码表示触觉设备关于所述空间的定位的第三描述符。根据本原理的一方面，一种被配置为传送比特流的设备，所述比特流包括表示触觉效果的数据，所述设备包括：编码器，其被配置为将表示空间的原点的定位的第一描述符编码到所述比特流中，并且将表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符编码到所述比特流中；以及传送所述比特流的传送器。根据本原理的一方面，一种被配置为传送比特流的设备，所述比特流包括表示触觉效果的数据，所述设备包括：用于将表示空间的原点的定位的第一描述符编码到所述比特流中的部件；用于将表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符编码到所述比特流中的部件；以及用于传送所述比特流的部件。根据本原理的一方面，一种被配置为对表示触觉效果的信息进行解码的设备，所述设备包括：接收比特流的接收器；解码器，其被配置为从所述比特流解码表示空间的原点的定位的第一描述符，并且从所述比特流解码表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符。根据本原理的一方面，一种被配置为对表示触觉效果的信息进行解码的设备，所述设备包括：用于接收比特流的部件；用于从所述比特流解码表示空间的原点的定位的第一描述符的部件；以及用于从所述比特流解码表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符的部件。根据本原理的一方面，一种至少携带分组的信号，所述分组包括表示触觉效果的数据，其中所述信号还携带表示空间的原点的定位的第一描述符和表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符。根据本原理的一方面，一种非临时性处理器可读介质，具有存储在其中的指令，用于使处理器至少执行传送方法的步骤。根据本原理的一方面，一种非临时性处理器可读介质，具有存储在其中的指令，用于使处理器至少执行解码方法的步骤。附图说明图1图示了示例性HAV系统的工作流程。图2图示了定位模型。图3图示了根据本原理的实施例的示例性HapSpace。图4图示了身体部位位置。图5图示了示例性创作工具(H-STUDIO)。图6图示了根据本原理的实施例的制作与视听内容一起的触觉效果的示例性方法。图7图示了根据本原理的实施例的描述HapSpace内的触觉效果的示例性方法。图8图示了根据本原理的实施例的呈现(render)与视听内容一起的触觉效果的示例性方法。图9图示了根据本原理的实施例的解释HapSpace内的触觉效果的示例性方法。图10图示了其中可以实现本原理的示例性实施例的各方面的示例性系统的框图。图11图示了描绘可以以一个或多个实现方式使用的视频处理系统的示例的框图。图12图示了描绘可以以一个或多个实现方式使用的视频处理系统的另一示例的框图。具体实施方式图1图示了提供触觉效果和视听效果二者的示例性HAV系统100的工作流程，其包括三个主要部分：制作(110)、呈现(130)和分发(120)。触觉数据的制作/创建(110)可以使用不同技术来完成内容的制作，即与视听内容同步的触觉效果的创建和生成。例如，如图1所示，可以通过以下来执行触觉效果制作：-捕获和处理(111)从传感器(例如，惯性运动单元、GPS)采集的数据，-来自视听媒体的一个或多个组分(114，例如，从图像、音频或注释)的自动提取(112)，和/或-触觉效果的手动创作(113)，例如，使用图形用户界面(GUI)。制作方法的选择取决于应用和创建意图二者。要注意，当使用从传感器采集的数据(111)或使用来自视听媒体的自动提取(113)而生成触觉效果(115)时，制作通常仍然通过创作工具(113)来合成触觉效果。有不同类型的触觉感知能力，例如但不限于触知、动觉和本体感受，并且要创建的触觉效果可以分为：温度、振动、压力、移动、力和身体运动，如表1所示。在本申请中，我们可互换地使用术语“触觉效果”和“触觉反馈”。表1呈现触觉反馈(130)大多数现有的提供与视听内容一起的触觉反馈的工作依赖于振动触知设备的使用，该振动触知设备可以是独立的设备或者被集成到椅子或力反馈设备中。大多数振动触知座椅将低频声音转换成振动。像低音音箱一样，这种类型的座椅插在低频音频通道上，但是传递振动而不是实际的声音。这种类型的座椅可以全部振动，或者具有嵌入的多个振动电机。在最近开发的振动触知椅中，在椅背中嵌入具有12个振动触知致动器的阵列，并且通过触知幻觉来控制用户的感觉，该触知幻觉在致动器处于离散定位时使用户感到连续刺激。一般而言，由振动触知设备提供的触觉效果相对简单，其通常提供仿真的振动模式或抽象的力反馈。呈现运动通常比以上讨论的呈现振动更复杂。运动模拟器是被设计为使用户感到运动的众所周知的设备。它们广泛用于针对学习目的的驾驶或飞行模拟器中或者游乐园中。它们中的大多数基于斯图尔特平台，其为使用六个液压缸的六自由度(DOF本文档来自技高网...

【技术保护点】
一种传送比特流的方法，所述比特流包括表示触觉效果的数据，所述方法包括：‑将表示空间的原点的定位的第一描述符编码到所述比特流中；(第8页，[0042]，[0040])‑将表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符编码到所述比特流中；(第8页，[0041]，[0062])‑传送所述比特流。

【技术特征摘要】
【国外来华专利技术】2015.07.13 EP 15306156.91.一种传送比特流的方法，所述比特流包括表示触觉效果的数据，所述方法包括：-将表示空间的原点的定位的第一描述符编码到所述比特流中；(第8页，[0042]，[0040])-将表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符编码到所述比特流中；(第8页，[0041]，[0062])-传送所述比特流。2.根据权利要求1所述的方法，还包括将表示触觉设备关于所述空间的定位的第三描述符编码到所述比特流中。(第8页，[0041]，[0062])3.一种对表示触觉效果的信息进行解码的方法，所述方法包括：-接收比特流；-从所述比特流解码表示空间的原点的定位的第一描述符；-从所述比特流解码表示具有关联触觉属性的虚拟对象关于所述空间的定位的第二描述符。4.根据权利要求3所述的方法，还包括从所述比特流解码表示触觉设备关于所述空间的定位的第三描述符。5.根据权利要求1、2、3和4之一所述的方法，其中所述第二描述符指示所述虚拟对象所位于的用户的身体的部位。(第9页，[0045])6.根据权利要求2或4所述的方法，其中所述第三描述符指示所述触觉设备所位于的用户的身体的部位。(第9页，[0045])7.根据权利要求1或3所述的方法，其中所述第一描述符对应于第一坐标，并且所述第二描述符对应于第二坐标。8.根据权利...

【专利技术属性】
技术研发人员：P圭洛特尔，F达尼奥，J弗勒雷奥，D杜扬，
申请(专利权)人：汤姆逊许可公司，
类型：发明
国别省市：法国,FR