可交互立体混合现实的装置及应用该装置的虚拟现实头盔制造方法及图纸

本实用新型专利技术提供了一种可交互立体混合现实的处理装置，包括移动处理设备、立体摄像机模组、头部定位与运动传感模块、立体图像运动编码模块、低速与高速存储模块、图像信息识别模块、应用处理器与液晶显示模块。本实用新型专利技术还提供了一种应用该处理装置的虚拟现实头盔，结构简单，成本较低，现实环境的视频与虚拟场景视频流混合后的效果也更为逼真，将图像延迟时间降低到视神经无法感知的范围内，画面具有较好的实时性，使用时舒适度较高。

【技术实现步骤摘要】

本技术涉及虚拟现实
，尤其涉及一种可交互立体混合现实的装置及应用该装置的虚拟现实头盔。
技术介绍
虚拟现实技术是现在比较热门的研宄领域之一，主要通过将真实的环境虚拟化，应用于相应的科研活动和娱乐中。目前，虚拟现实比较成熟的技术有头盔式显示器，即在头盔的前部设置有与头盔连接的显示器，通过利用头部跟踪来改变图像的视角，使用者的视觉系统和运动感知系统之间就可以联系起来，当使用者带上头盔以后，就可以通过眼前的显示器观察显示器中图像，从而给使用者身临其境的体验，使用者不仅可以通过双目立体视觉去认识环境，而且可以通过头部的运动去观察环境，进而在人造环境中，使用者可通过自身的位置和头(眼)的方向来确定所看到的景象。授权公告号为CN202351792U的专利文献中，公开了一种用于虚拟现实模拟环境中的头盔装置，包括头盔与设置于头盔前方与头盔相连的显示器，头盔的上部和侧面设置有定位发送装置，系统还包括定位接收装置，定位接收装置设置于头盔的上方和头盔四周，其中，定位发送装置为红外线发送装置，定位接收装置为红外线接收装置，定位接收装置将收到的头盔位置信息发送给处理器，由处理器控制经显示器显示的图像。使用者带上头盔后，显示器便位于使用者眼部的前方，开始显示图像，同时头盔上的红外线发送装置发送的红外线被红外线接收装置所接收，当使用者转动、抬起或者低下头部时，随着头盔的位置的变化，发送的红外线照射到红外线接收装置上的位置也发送变化，形成位置变化信号，这种位置变化信号又传递给头盔内置的处理器，处理器由此改变显示器上的图像的内容。现有技术中的头盔装置结构复杂，操作不便，成本高昂，不具有便捷性，同时也不利于工业生产与技术推广。另外，现有技术中的头盔装置在使用时，使用者的视线受到显示器的遮挡，而且使用者自身的肢体动作无法被识别出来与虚拟现实数字世界进行交互，不能够给使用者带来更好的逼真效果；高清视频编码时需耗费部分时间，显示器所显示的画面很难在保证较高刷新速率的同时生成高质量的图像，造成图像延迟而影响使用时的舒适度。因此，如何能够对现有技术中的可交互立体混合现实的处理装置以及虚拟头盔进行改进，是本领域技术人员有待解决的技术难题。
技术实现思路
本技术提供了一种可交互立体混合现实的装置及应用该装置的虚拟现实头盔，可交互立体混合现实的处理装置中，现实环境的视频与虚拟场景视频流混合后的效果也更为逼真，将图像延迟时间降低到视神经无法感知的范围内，画面具有较好的实时性，应用该处理装置的虚拟现实头盔的结构简单，成本较低，使用时舒适度较高。本技术的技术方案如下:一种可交互立体混合现实的处理装置，适用于虚拟现实头盔，包括用于捕捉视屏信息的立体摄像机模组，该处理装置还包括用于感知和预测头部运动轨迹的头部定位与运动传感模块，以及与立体摄像机模组相连的图像信息识别模块，所述和头部定位与运动传感模块均连接于用于修正视屏信息的立体图像运动编码模块，所述立体图像运动编码模块连接有用于储存与输出视屏信息的低速与高速存储模块，所述低速与高速存储模块的输出端连接有应用处理器，所述应用处理器的输出端连接有液晶显示模块。本技术的可交互立体混合现实的处理装置，通过立体摄像机模组来捕捉图像信息，经图像信息识别模块识别图像信息，头部定位与运动传感模块可以追踪使用者头部的运动，通过对使用者头部位置和运动的计算，根据运动惯性的原理，提前预测出头部的运动轨迹，进而可预测使用者下一个瞬间的视场；采用立体图像运动编码模块，可将现实空间格子化划分为若干个视场，将每个视场的图像数据预先存储在低速与高速存储模块中，使用者随着头部转动，在移动下一个视场位置之前，头部定位与运动传感模块已经提前预测出该位置的视场，立体图像运动编码模块发出控制低速与高速存储模块输出的信号，对应视场图像信息输入到应用处理器与其他信息混合，避免了由于即时视屏编码造成的图像延迟，将图像延迟时间降低到视神经无法感知的范围内，给使用者提供了更好的使用体验，同时也提高了使用时的舒适度。为了提高显示的逼真效果，识别真实的外界环境与肢体动作图像信息，作为优选，所述图像信息识别模块包括分别与立体图像运动编码模块相连立体图像识别单元与手部图像识别单元，所述立体图像识别单元用于识别真实环境的图像信息，所述手部图像识别单元用于识别肢体动作的图像信息。为方便融入虚拟场景图像，利于使用者与虚拟场景之间进行交互，作为优选，所述应用处理器的输入端外接有用于输出虚拟场景图像的移动处理设备。为混入真实的外界声音信息，加强用户体验，优选的，所述应用处理器的输入端还连接有用于捕捉外界声音信息的立体麦克风模块。为拓展虚拟头盔装置的适用范围，优选的，所述移动处理设备为移动终端、智能电视、计算机或基于云计算的信息服务平台。外界声音信息、肢体动作图像信息、对应视场的外界环境图像信息与虚拟场景图像信息在应用处理器内进行融合后，进行视频与音频的输出。本技术另一方面还公开了一种虚拟现实头盔，所述头盔包括壳体以及设于壳体内的可交互立体混合现实的处理装置，所述处理装置采用上述可交互立体混合现实的处理装置。优选的，所述壳体由前壳、后壳以及连接前壳和后壳的固定框构成，固定框的前侧固定有基板，所述基板的前端中下方设有图像信号识别模块，上方设有立体摄像机模组；基板的后面还设头部定位与运动传感模块，且头部定位与运动传感模块的后端设有应用处理器和低速与高速存储模块集成的板卡；所述前壳设有安装液晶显示模块的液晶屏，所述后壳的形状配合人体眼部周边轮廓设置。进一步优选的，所述立体摄像机模组包括有沿水平向居中的2个红外摄像头、以及设于两端的立体摄像机和麦克风。红外摄像头用于捕捉肢体动作图像信息，立体摄像机用于捕捉真实环境图像信息，麦克风用于捕捉外界声音信息，更加准确的反应了外界环境以及使用者自身的真实情况，提尚了用户体验。本技术的有益效果:本技术的一种可交互立体混合现实的处理装置及应用该处理装置的虚拟现实头盔，可交互立体混合现实的处理装置中，通过图像信息识别模块与立体摄像机模组的设置，能够在立体的虚拟显示数字环境中实时融合周边现实环境空间的视觉，同时可以实时观测肢体动作，现实环境的立体视频无延迟的与虚拟场景视频流混合，在立体图像运动编码模块和低速与高速存储模块，以及头部定位与运动传感模块的配当前第1页1 2 本文档来自技高网...

【技术保护点】
一种可交互立体混合现实的处理装置，适用于虚拟现实头盔，包括用于捕捉视屏信息的立体摄像机模组，其特征在于，该处理装置还包括用于感知和预测头部运动轨迹的头部定位与运动传感模块(20)，以及与立体摄像机模组相连的图像信息识别模块(10)，所述图像信息识别模块(10)和头部定位与运动传感模块(20)均连接于用于修正视屏信息的立体图像运动编码模块(30)，所述立体图像运动编码模块(30)连接有用于储存与输出视屏信息的低速与高速存储模块(40)，所述低速与高速存储模块(40)的输出端连接有应用处理器(50)，所述应用处理器(50)的输出端连接有液晶显示模块(60)。

【技术特征摘要】

【专利技术属性】
技术研发人员：刘宛平，陈治，
申请(专利权)人：刘宛平，
类型：新型
国别省市：北京;11