一种基于视觉的增强现实系统装置制造方法及图纸

本发明专利技术公开一种基于视觉的增强现实系统装置。装置包括虚拟场景发生器、透视式头盔显示器、用于实现用户观察视线跟踪的头部方位跟踪设备、用于实现虚拟场景与真实场景对准的定位设备和交互设备，在系统中，虚拟场景发生器采用OpenGL三维图形库负责虚拟场景的建模、管理、绘制；选用透视式头盔显示器作为将虚拟环境与真实环境融合的显示设备；头部方位跟踪设备采用计算机视觉的方法，通过对采集到的图象进行处理与识别跟踪用户视线变化，实现用户观察坐标系与虚拟场景坐标系的匹配。采用本发明专利技术的装置能够进行实时交互，具有极高的交互灵敏性，具有极佳的投影表现力。

A Vision-based Augmented Reality System Device

The invention discloses an augmented reality system device based on vision. The device includes a virtual scene generator, a perspective helmet-mounted display, a head azimuth tracking device used to track the user's observation line of sight, a positioning device and an interactive device used to align the virtual scene with the real scene. In the system, the virtual scene generator uses OpenGL three-dimensional graphics library to model, manage and draw the virtual scene; and a perspective helmet-mounted display is selected. As a display device that integrates virtual environment and real environment, head azimuth tracking device uses computer vision method to process and recognize the captured image and track the change of user's line of sight, so as to realize the matching between user's observation coordinate system and virtual scene coordinate system. The device according to the present invention can interact in real time, has high interaction sensitivity and excellent projection performance.

【技术实现步骤摘要】
一种基于视觉的增强现实系统装置
本专利技术涉及互动投影领域，特别是涉及一种基于视觉的增强现实系统装置。
技术介绍
随着当今社会信息科学技术的快速发展和普及，传媒形式和载体都得到了极大的丰富，人们对此的要求越来越高，传统展示平台因展示形式的单一性以及交互性的匮乏正逐渐被消费者和众多商家淘汰，而新媒体逐渐成为了艺术展现与商业展示的主要方式，并展现了强劲的发展潜力。采用新媒体技术更能主动吸引消费者目光，实现用户交互体验的新媒体艺术展示平台。传统传媒形式单一，操作复杂使用者只能通过视觉听觉来获取信息，大大影响了展示宣传的效果。而现有的新媒体装置大多不具备交互性或交互性很差，参与感不强，严重影响用户的使用体验。
技术实现思路
本专利技术的目的是提供一种基于视觉的增强现实系统装置，能够使用户达到极佳的视觉表现力和体验感。为实现上述目的，本专利技术提供了如下方案：一种基于视觉的增强现实系统装置，所述装置包括：虚拟场景发生器、透视式头盔显示器、头部方位跟踪设备、定位设备、交互设备和摄像机；所述虚拟场景发生器，分别与所述头部方位跟踪设备、所述定位设备和所述交互设备连接，用于获取所述头部方位跟踪设备采集的追踪头部的运动位置信息和状态信息、所述定位设备采集的人体在整个场景中的位置信息，并根据所述头部的运动位置信息和状态信息和所述人体在整个场景中的位置信息得到虚拟场景图像信息；所述虚拟场景发生器，与所述摄像机连接，用于接收所述摄像机捕获的用户在场景的现实环境图像信息，并将所述虚拟场景图像信息和所述现实环境图像信息进行匹配得到处理后的场景信息；所述透视式头盔显示器，与所述虚拟场景发生器连接，用于显示所述处理后的场景信息。可选的，所述虚拟场景发生器为运行的OpenGL、Directx三位图形库的一种PC。可选的，所述透视式头盔显示器为视频透视式头盔显示器、光学透视式头盔显示器中的一种。可选的，所述头部方位跟踪设备为电容式显示屏、电阻式显示屏、液晶显示屏中的一种。可选的，所述定位设备为基于WiFi、蓝牙、RFID、UWB技术实现定位的模块或系统中的一种。可选的，所述交互设备为空中鼠标、语音识别模块中的一种。可选的，所述头部方位跟踪设备采用计算机视觉的方法获取用户观察视线。可选的，所述虚拟场景发生器分别与所述头部方位跟踪设备、所述定位设备、所述交互设备和所述摄像机采用无线或有线的方式连接。可选的，所述透视式头盔显示器与所述虚拟场景发生器采用有线或无线方式连接。根据本专利技术提供的具体实施例，本专利技术公开了以下技术效果：本专利技术提供一种基于视觉的增强现实系统装置，包括：虚拟场景发生器、透视式头盔显示器、头部方位跟踪设备、定位设备、交互设备和摄像机。采用本专利技术的装置能够通过对采集到的图象进行处理与识别跟踪用户视线变化，实现用户观察坐标系与虚拟场景坐标系的匹配，从而实现虚拟场景与现实场景的实时交互，具有极高的交互灵敏性，具有极佳的投影表现力。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例基于视觉的增强现实系统装置组成图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术的目的是提供一种基于视觉的增强现实系统装置，能够使用户达到极佳的视觉表现力和体验感。为使本专利技术的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本专利技术作进一步详细的说明。图1为本专利技术实施例基于视觉的增强现实系统装置组成图。如图1所示，一种基于视觉的增强现实系统装置，所述装置包括：虚拟场景发生器1、透视式头盔显示器2、头部方位跟踪设备3、定位设备4、交互设备5和摄像机6；所述虚拟场景发生器1，分别与所述头部方位跟踪设备3、所述定位设备4和所述交互设备5连接，用于获取所述头部方位跟踪设备3采集的追踪头部的运动位置信息和状态信息、所述定位设备4采集的人体在整个场景中的位置信息，并根据所述头部的运动位置信息和状态信息和所述人体在整个场景中的位置信息得到虚拟场景图像信息；所述虚拟场景发生器1，与所述摄像机6连接，用于接收所述摄像机6捕获的用户在场景的现实环境图像信息，并将所述虚拟场景图像信息和所述现实环境图像信息进行匹配得到处理后的场景信息；所述透视式头盔显示器2，与所述虚拟场景发生器1连接，用于显示所述处理后的场景信息，即透视式头盔显示器2作为将虚拟环境和现实环境融合的显示设备。交互设备5作为场景中的用户参与到整个装置中的媒介。所述虚拟场景发生器1为运行的OpenGL、Directx三位图形库的一种PC。所述透视式头盔显示器2为视频透视式头盔显示器、光学透视式头盔显示器中的一种。所述头部方位跟踪设备3为电容式显示屏、电阻式显示屏、液晶显示屏中的一种。所述定位设备4为基于WiFi、蓝牙(iBeacon)、RFID、UWB技术实现定位的模块或系统中的一种。所述交互设备5为空中鼠标、语音识别模块中的一种。通过摄像机6对场景中的相关图像进行采集，由通讯线缆传输到PC，采用虚拟场景发生器1对虚拟场景进行建模、绘制，头部方位跟踪设备3、定位设备4、交互设备5采集的数据经无线(蓝牙、wifi等)/有线方式传输到虚拟场景发生器1，采用机器视觉的方法，根据摄像机6拍摄的一幅或多幅图象，标定摄像机与目标间的相对位置和方向，实时地检测出用户头部与真实环境中物体间的相对位置和视线方向，根据这些信息确定所要添加的虚拟物体在真实空间坐标中的映射，所有的计算工作在PC机上完成，并将PC处理后的这些信息经有线/无线的方式传输到透视式头盔显示器2进行显示，实时显示在头盔显示器的正确位置，使用户能够享受到身临其境的真实视觉体验。采用本专利技术的装置可实时交互，交互灵敏性极高，同时采用具有立体效果的虚拟场景成像技术，具有极佳的视觉表现力和体验。本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。本文中应用了具体个例对本专利技术的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本专利技术的系统及其核心思想；同时，对于本领域的一般技术人员，依据本专利技术的思想，在具体实施方式及应用范围上均会有改变之处。综上所述，本说明书内容不应理解为对本专利技术的限制。本文档来自技高网...

【技术保护点】
1.一种基于视觉的增强现实系统装置，其特征在于，所述装置包括：虚拟场景发生器、透视式头盔显示器、头部方位跟踪设备、定位设备、交互设备和摄像机；所述虚拟场景发生器，分别与所述头部方位跟踪设备、所述定位设备和所述交互设备连接，用于获取所述头部方位跟踪设备采集的追踪头部的运动位置信息和状态信息、所述定位设备采集的人体在整个场景中的位置信息，并根据所述头部的运动位置信息和状态信息和所述人体在整个场景中的位置信息得到虚拟场景图像信息；所述虚拟场景发生器，与所述摄像机连接，用于接收所述摄像机捕获的用户在场景的现实环境图像信息，并将所述虚拟场景图像信息和所述现实环境图像信息进行匹配得到处理后的场景信息；所述透视式头盔显示器，与所述虚拟场景发生器连接，用于显示所述处理后的场景信息。

【技术特征摘要】
1.一种基于视觉的增强现实系统装置，其特征在于，所述装置包括：虚拟场景发生器、透视式头盔显示器、头部方位跟踪设备、定位设备、交互设备和摄像机；所述虚拟场景发生器，分别与所述头部方位跟踪设备、所述定位设备和所述交互设备连接，用于获取所述头部方位跟踪设备采集的追踪头部的运动位置信息和状态信息、所述定位设备采集的人体在整个场景中的位置信息，并根据所述头部的运动位置信息和状态信息和所述人体在整个场景中的位置信息得到虚拟场景图像信息；所述虚拟场景发生器，与所述摄像机连接，用于接收所述摄像机捕获的用户在场景的现实环境图像信息，并将所述虚拟场景图像信息和所述现实环境图像信息进行匹配得到处理后的场景信息；所述透视式头盔显示器，与所述虚拟场景发生器连接，用于显示所述处理后的场景信息。2.根据权利要求1所述的基于视觉的增强现实系统装置，其特征在于，所述虚拟场景发生器为运行的OpenGL、Directx三位图形库的一种PC。3.根据权利要求1所述的基于视觉的增强现实系统装置，其特征在于，所述透...

【专利技术属性】
技术研发人员：许恒深，苏鹏华，高秀敏，彭雅珮，
申请(专利权)人：深圳珑璟光电技术有限公司，
类型：发明
国别省市：广东,44