一种应用虚拟展示系统的体感交互方法技术方案

一种应用虚拟展示系统的体感交互方法，虚拟展示系统包括一虚拟现实建模处理设备以及至少一体感控制装置；将体感控制装置以及虚拟现实建模处理设备进行无线连接配对；所需展示产品的信息进行收集建模处理后在系统内部展示；体感控制装置感测、获取人体动作数据；将人体动作数据传输至虚拟现实建模处理设备进行体感交互处理；虚拟现实建模处理设备根据该人体动作数据识别实际动作并发出相应指令以执行相应操作。本发明专利技术提供的方法，使用户脱离鼠标键盘、触摸屏、遥控器等交互硬件，达到一种自然交互的方式。

A somatosensory interaction method for the application of virtual display system

An application of virtual exhibition system somatosensory interactive method, virtual display system includes a virtual reality modeling processing device and at least one control device; the somatosensory control device and virtual reality modeling processing equipment for wireless connection pair; required to display product information collected after modeling processing within the system display; somatosensory control device for sensing, acquiring human motion data; the human motion data to the virtual reality modeling processing equipment for somatosensory interactive processing; virtual reality modeling processing equipment according to the actual identification of human action data movement and send corresponding commands to execute corresponding operations. The method provided by the invention enables users to escape from the interactive hardware such as the mouse keyboard, the touch screen, the remote control, and so on to achieve a natural interaction.

【技术实现步骤摘要】
一种应用虚拟展示系统的体感交互方法
本专利技术涉及虚拟现实展示领域，尤其涉及一种应用虚拟展示系统的体感交互方法。
技术介绍
虚拟展示技术是虚拟现实技术的一个重要的分支，利用计算机三维建模技术，将产品进行数字化建模，再利用虚拟现实技术将产品的模型载入到一个虚拟的空间中，使用户不仅可以近细致地观察该产品模型，获取模型信息，并且可以通过视觉、听觉、触觉等方式与产品进行交互。一个产品，尤其是工业产品以三维的表现形式全方位地展现给用户，有着传统的二维图像所不能比拟的优势。虚拟展示技术在近几年中发展迅速，应用于建筑、工业、医学、教育、航天、电子商务等领域，有着十分广泛的研究意义和应用价值。用户在虚拟展示系统中的交互方式多为触摸屏、遥控器、手套等方式，影响用户的交互体验。
技术实现思路
本专利技术的目的是：针对上述不足，提供一种应用虚拟展示系统的体感交互方法，用户可以更加自然地与产品模型进行互动。为了实现该目的，本专利技术的技术方案是：一种应用虚拟展示系统的体感交互方法，所述虚拟展示系统包括一虚拟现实建模处理设备以及至少一体感控制装置，所述虚拟现实建模处理设备与所述至少一体感控制装置无线连接配对；所述虚拟现实建模处理设备用于对产品信息进行收集建模处理并在系统内部得以展示；所述体感控制装置包括Kinect体感设备，所述体感控制装置用于感测、获取人体动作数据并进行体感交互；所述体感交互方法包括：S1：将所述体感控制装置以及所述虚拟现实建模处理设备进行无线连接配对；S2：信息收集呈现，所需展示产品的信息进行收集建模处理后在系统内部展示；S3：所述体感控制装置感测、获取人体动作数据；S4：将所述人体动作数据传输至所述虚拟现实建模处理设备，进行体感交互处理；S5：所述虚拟现实建模处理设备根据该人体动作数据识别实际动作，根据该识别的实际动作发出相应指令以执行相应操作。作为本专利技术的进一步改进，所述人体动作数据主要通过对手的跟踪来完成产品的选取操作。作为本专利技术的进一步改进，所述人体动作数据包括两只手之间的动作缩放、移动和旋转。作为本专利技术的进一步改进，所述人体动作数据传输至所述虚拟现实建模处理设备后预先进行滤波处理以进一步滤除杂讯。作为本专利技术的进一步改进，所述体感交互处理的具体步骤包括：（1）在所述虚拟现实建模处理设备中绑定KinectManager脚本；（2）在所述虚拟现实建模处理设备中绑定KinectGestures脚本；（3）创建一个新的脚本GestureListener，绑定在所述虚拟现实建模处理设备中，主要用来对用户的姿势进行识别；（4）在所述虚拟现实建模处理设备中创建一个GUIText，以文字的方式用来显示用户操作的方法及用户在交互时的状态，包括用户是否进入Kinect体感设备采集范围，用户所使用的姿势、用户是否离开采集范围；（5）创建一个新的脚本，绑定在需要进行交互的模型上。当用户做出的姿势被Kinect准确的识别之后，通过该脚本使模型进行相对应的操作。本专利技术的有益效果为：使用户通过体感控制装置与虚拟现实建模处理设备中的产品模型进行交互，从而脱离鼠标键盘、触摸屏、遥控器等交互硬件，达到一种自然交互的方式。用户动作与虚拟角色动作同步，用户能通过身体动作与虚拟环境进行交互。附图说明图1：为一种应用虚拟展示系统的体感交互方法的流程图。图2：为体感交互处理步骤流程图。具体实施方式下面通过具体实施方式，并结合其附图，对本专利技术进行阐述。如图1所示，本专利技术是一种应用虚拟展示系统的体感交互方法，虚拟展示系统包括一虚拟现实建模处理设备以及至少一体感控制装置，虚拟现实建模处理设备与至少一体感控制装置无线连接配对；虚拟现实建模处理设备用于对产品信息进行收集建模处理并在系统内部得以展示；体感控制装置包括Kinect体感设备，体感控制装置用于感测、获取人体动作数据并进行体感交互；体感交互方法包括：S1：将体感控制装置以及虚拟现实建模处理设备进行无线连接配对；S2：信息收集呈现，所需展示产品的信息进行收集建模处理后在系统内部展示；S3：体感控制装置感测、获取人体动作数据；S4：将人体动作数据传输至虚拟现实建模处理设备，进行体感交互处理；S5：虚拟现实建模处理设备根据该人体动作数据识别实际动作，根据该识别的实际动作发出相应指令以执行相应操作。人体动作数据主要通过对手的跟踪来完成产品的选取操作。人体动作数据包括两只手之间的动作缩放、移动和旋转。人体动作数据传输至所述虚拟现实建模处理设备后预先进行滤波处理以进一步滤除杂讯。体感交互处理步骤流程图，如图2所示，体感交互处理的具体步骤包括：（1）在虚拟现实建模处理设备中绑定KinectManager脚本；KinectManager脚本主要用于在虚拟现实建模处理设备中检测Kinect体感设备是否正确地运行。以及对Kinect体感设备中RGB图像及深度图像的采集接口是否打开。只有在虚拟现实建模处理设备中驱动Kinect体感设备，该系统之后的工作才能顺利进行。（2）在虚拟现实建模处理设备中绑定KinectGestures脚本；其主要功能是对用户姿势的识别，在该脚本中定义了Kinect体感设备默认的人体姿势，只需要在新建的脚本中对其进行调用，就可以通过相对应的姿势完成在虚拟场景中的操作。（3）创建一个新的脚本GestureListener，绑定在所述虚拟现实建模处理设备中，主要用来对用户的姿势进行识别；在本专利技术使用的系统中使用了Kinect默认姿势中的ZoomIn、ZoomOut和Wheel姿势，ZoomIn和ZoomOut姿势分别用来控制模型的缩小和放大，Wheel姿势用来控制模型的旋转。在脚本中，首先对上述几个动作进行定义，随后对用户的姿势进行识别，如果没有达到Kinect默认姿势的标准动作，或者在动作完成后改变了动作，则对正在进行的动作进行取消。其次，定义姿势的单位因数，用来计算用户姿势的状态对模型交互的影响。最后，在用户离开Kinect体感设备的采集范围后，对之前采集的数据进行删除，以保证系统的内存。（4）在虚拟现实建模处理设备中创建一个GUIText，以文字的方式用来显示用户操作的方法及用户在交互时的状态，包括用户是否进入Kinect体感设备采集范围，用户所使用的姿势、用户是否离开采集范围。（5）创建一个新的脚本，绑定在需要进行交互的模型上。当用户做出的姿势被Kinect准确的识别之后，通过该脚本使模型进行相对应的操作。用户姿势的数据以深度图像的形式显示在程序界面的右下角。本方案提供的一种应用虚拟展示系统的体感交互方法，使用户通过体感控制装置与虚拟现实建模处理设备中的产品模型进行交互，从而脱离鼠标键盘、触摸屏、遥控器等交互硬件，达到一种自然交互的方式。用户动作与虚拟角色动作同步，用户能通过身体动作与虚拟环境进行交互。以上所述只是本专利技术的优选实施方式，对于本
的普通技术人员来说，在不脱离本专利技术原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也被视为本专利技术的保护范围。本文档来自技高网...

【技术保护点】
一种应用虚拟展示系统的体感交互方法，其特征在于，所述虚拟展示系统包括一虚拟现实建模处理设备以及至少一体感控制装置，所述虚拟现实建模处理设备与所述至少一体感控制装置无线连接配对；所述虚拟现实建模处理设备用于对产品信息进行收集建模处理并在系统内部得以展示；所述体感控制装置包括Kinect体感设备，所述体感控制装置用于感测、获取人体动作数据并进行体感交互；所述体感交互方法包括：S1：将所述体感控制装置以及所述虚拟现实建模处理设备进行无线连接配对；S2：信息收集呈现，所需展示产品的信息进行收集建模处理后在系统内部展示；S3：所述体感控制装置感测、获取人体动作数据；S4：将所述人体动作数据传输至所述虚拟现实建模处理设备，进行体感交互处理；S5：所述虚拟现实建模处理设备根据该人体动作数据识别实际动作，根据该识别的实际动作发出相应指令以执行相应操作。

【技术特征摘要】
1.一种应用虚拟展示系统的体感交互方法，其特征在于，所述虚拟展示系统包括一虚拟现实建模处理设备以及至少一体感控制装置，所述虚拟现实建模处理设备与所述至少一体感控制装置无线连接配对；所述虚拟现实建模处理设备用于对产品信息进行收集建模处理并在系统内部得以展示；所述体感控制装置包括Kinect体感设备，所述体感控制装置用于感测、获取人体动作数据并进行体感交互；所述体感交互方法包括：S1：将所述体感控制装置以及所述虚拟现实建模处理设备进行无线连接配对；S2：信息收集呈现，所需展示产品的信息进行收集建模处理后在系统内部展示；S3：所述体感控制装置感测、获取人体动作数据；S4：将所述人体动作数据传输至所述虚拟现实建模处理设备，进行体感交互处理；S5：所述虚拟现实建模处理设备根据该人体动作数据识别实际动作，根据该识别的实际动作发出相应指令以执行相应操作。2.根据权利要求1所述的一种应用虚拟展示系统的体感交互方法，其特征在于，所述人体动作数据主要通过对手的跟踪来完成产品的选取操作。3.根据权利要求1或2所述的一种应用虚拟展示系统的...

【专利技术属性】
技术研发人员：衡振兴，杨承杰，吴婷婷，
申请(专利权)人：苏州普恩特信息技术有限公司，
类型：发明
国别省市：江苏,32