本申请涉及计算机图形学与视觉技术领域，特别涉及一种高自由度互动方法、装置、可穿戴设备、采集设备及系统，其中，方法包括：采集用户的交互状态数据；发送交互状态数据至采集设备，其中，采集设备根据交互状态数据采集目标区域内互动对象的二维图像和深度图像，并传输给可穿戴设备；根据二维图像和深度图像三维重建得到互动对象，并在可穿戴设备的显示区域内显示互动对象。由此，解决了关技术中远程视频只能看到对方指定区域，真实感和自由度较低等问题。问题。问题。
【技术实现步骤摘要】
高自由度互动方法、装置、可穿戴设备、采集设备及系统
[0001]本申请涉及计算机图形学与视觉
，特别涉及一种高自由度互动方法、装置、可穿戴设备、采集设备及系统。
技术介绍
[0002]随着人们生活水平的提高，外出旅游变得越来越普遍，但是却无法与亲友进行很好的共享。另外，随着社会分工的细化，外出打工的工人越来越多，留守儿童和老人的数量也在不断增加，碍于距离和时间因素，现代工人无法经常和家人团聚，进行实时的互动。
[0003]虽然现在视频电话可以实现和家人、朋友的实时通话，但是目前的远程视频方案只能看到对方指定的区域，没有身临其境的真实感和自由度，并且因为时间开销以及客观因素，无法持续进行远程视频。
技术实现思路
[0004]本申请提供一种高自由度互动方法、装置、可穿戴设备、采集设备及系统，以解决相关技术中远程视频只能看到对方指定区域，真实感和自由度较低等问题。
[0005]本申请第一方面实施例提供一种高自由度互动方法，所述方法应用于可穿戴设备，所述可穿戴设备与设置于目标区域的采集设备进行远程通信，其中，所述方法包括以下步骤：采集用户的交互状态数据；发送所述交互状态数据至所述采集设备，其中，所述采集设备根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，并传输给所述可穿戴设备；根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。
[0006]可选地，所述采集用户的交互状态数据，包括：通过陀螺仪采集用户的自由度状态；通过眼球追踪技术获取用户视线和用户焦点，并测量用户瞳距。
[0007]本申请第二方面实施例提供一种高自由度互动方法，所述方法应用于采集设备，所述采集设备设置于目标区域，并与可穿戴设备进行远程通信，其中，所述方法包括以下步骤：接收所述可穿戴设备发送的交互状态数据；根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像；传输所述二维图像和所述深度图像给所述可穿戴设备，其中，所述可穿戴设备根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。
[0008]可选地，所述交互状态数据包括用户的自由度状态、用户视线、用户焦点和用户瞳距，所述根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，包括：根据所述用户的自由度状态调整所述采集设备的自由度状态；根据所述用户瞳距配置所述采集设备的双摄像头位置；根据所述用户视线和所述用户焦点调整所述双摄像头的采集状态，采集用户视线和所述用户焦点对应的互动对象的二维图像和深度图像。
[0009]本申请第三方面实施例提供一种高自由度互动装置，所述装置应用于可穿戴设备，所述可穿戴设备与设置于目标区域的采集设备进行远程通信，其中，所述装置包括：第
一采集模块，用于采集用户的交互状态数据；发送模块，用于发送所述交互状态数据至所述采集设备，其中，所述采集设备根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，并传输给所述可穿戴设备；重建模块，用于根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。
[0010]可选地，所述第一采集模块进一步用于：通过陀螺仪采集用户的自由度状态；通过眼球追踪技术获取用户视线和用户焦点，并测量用户瞳距。
[0011]本申请第四方面实施例提供一种高自由度互动装置，所述装置应用于采集设备，所述采集设备设置于目标区域，并与可穿戴设备进行远程通信，其中，所述装置包括：接收模块，用于接收所述可穿戴设备发送的交互状态数据；第二采集模块，用于根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像；传输模块，用于传输所述二维图像和所述深度图像给所述可穿戴设备，其中，所述可穿戴设备根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。
[0012]可选地，所述交互状态数据包括用户的自由度状态、用户视线、用户焦点和用户瞳距，所述第二采集模块进一步用于：根据所述用户的自由度状态调整所述采集设备的自由度状态；根据所述用户瞳距配置所述采集设备的双摄像头位置；根据所述用户视线和所述用户焦点调整所述双摄像头的采集状态，采集用户视线和所述用户焦点对应的互动对象的二维图像和深度图像。
[0013]本申请第五方面实施例提供一种可穿戴设备，包括如上述实施例所述的高自由度互动装置。
[0014]本申请第六方面实施例提供一种采集设备，包括如上述实施例所述的高自由度互动装置。
[0015]本申请第七方面实施例提供一种高自由度互动系统，包括：可穿戴设备和采集设备，所述可穿戴设备与设置于目标区域的所述采集设备进行远程通信；所述可穿戴设备采集用户的交互状态数据，发送所述交互状态数据至所述采集设备；所述采集设备根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，并传输给所述可穿戴设备；所述可穿戴设备根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。
[0016]本申请第八方面提供一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行，以用于实现如上述实施例所述的高自由度互动方法。
[0017]由此，本申请至少具有如下有益效果：
[0018]本申请实施例可以结合二维成像、三维重建、眼球视线追踪以及陀螺仪感知技术，使得用户能够获得具备真实感和高自由度的实时互动和场景共享，不受时间和空间的影响，适用领域广泛，仅需一台设备便可用于多人同时在线进行高自由度互动和场景互享等有益效果。由此，解决了相关技术中远程视频只能看到对方指定区域，真实感和自由度较低等技术问题。
[0019]本申请附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
[0020]本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
[0021]图1为根据本申请实施例提供的高自由度互动方法的流程图；
[0022]图2为根据本申请另一个实施例提供的高自由度互动方法的流程图；
[0023]图3为根据本申请实施例提供的高自由度互动装置的方框示意图；
[0024]图4为根据本申请另一个实施例提供的高自由度互动装置的方框示意图；
[0025]图5为根据本申请实施例提供的高自由度互动系统的示意图。
具体实施方式
[0026]下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。
[0027]下面参考附图描述本申请实施例的高自由度互动方法、装置、可穿戴设备、本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种高自由度互动方法，其特征在于，所述方法应用于可穿戴设备，所述可穿戴设备与设置于目标区域的采集设备进行远程通信，其中，所述方法包括以下步骤：采集用户的交互状态数据；发送所述交互状态数据至所述采集设备，其中，所述采集设备根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，并传输给所述可穿戴设备；根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。2.根据权利要求1所述的高自由度互动方法，其特征在于，所述采集用户的交互状态数据，包括：通过陀螺仪采集用户的自由度状态；通过眼球追踪技术获取用户视线和用户焦点，并测量用户瞳距。3.一种高自由度互动方法，其特征在于，所述方法应用于采集设备，所述采集设备设置于目标区域，并与可穿戴设备进行远程通信，其中，所述方法包括以下步骤：接收所述可穿戴设备发送的交互状态数据；根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像；传输所述二维图像和所述深度图像给所述可穿戴设备，其中，所述可穿戴设备根据所述二维图像和所述深度图像三维重建得到所述互动对象，并在所述可穿戴设备的显示区域内显示所述互动对象。4.根据权利要求3所述的高自由度互动方法，其特征在于，所述交互状态数据包括用户的自由度状态、用户视线、用户焦点和用户瞳距，所述根据所述交互状态数据采集所述目标区域内互动对象的二维图像和深度图像，包括：根据所述用户的自由度状态调整所述采集设备的自由度状态；根据所述用户瞳距配置所述采集设备的双摄像头位置；根据所述用户视线和所述用户焦点调整所述双摄像头的采集状态，采集用户视线和所述用户焦点对应的互动对象的二维图像和深度图像。5.一种高自由度互动装置，其特征在于，所述装置应用于可穿戴设备，所述可穿戴设备与设置于目标区域的采集设备进行远程通信，...
【专利技术属性】
技术研发人员：徐枫，于涛，杜春，
申请(专利权)人：西藏大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。