一种基于集群和渲染的裸眼3D系统技术方案

本发明专利技术公开了一种基于集群和渲染的裸眼3D系统，包括光学采集模块、人机交互模块和裸眼3D显示模块，还包括集群服务器和三维渲染模块，所述人机交互模块连接至所述三维渲染模块；所述光学采集模块和三维渲染模块共同连接至集群服务器；所述裸眼3D合成模块连接至裸眼3D显示模块。人机交互模块与三位渲染模块协同工作，为渲染提供出发指令和响应指令，三维渲染模块中存储了三维虚拟物体和场景渲染图像，渲染图像为带透明通道的渲染纹理，即纹理中没有虚拟物体或场景则为透明通道，这便于后续与相机图像的叠加，集群服务器中存储有光学采集模块所采集的相机图像，在渲染模块将渲染图像传送至集群服务器后，集群服务器开始对图像进行处理并合成。

【技术实现步骤摘要】
一种基于集群和渲染的裸眼3D系统
本专利技术属于裸眼3D领域，具体涉及一种基于集群和渲染的裸眼3D系统。
技术介绍
人类生活在一个立体的世界中，利用立体视觉机制来感知这个立体世界。为了表达这个世界，人们已提出并发展了很多方式，其中图像是最直观的表达方式。然而，目前大多数显示设备只能实现2D(二维)显示，可表达出场景的内容却忽略了深度信息，因此人们只能通过平时生活中所累积的经验以及2D图像中的阴影等信息去判断物体间的前后位置关系。在信息化、数字化的时代，随着社会的发展，2D显示逐渐不能满足人类的需求，3D(三维)显示已成为显示研究人员的新研究目标，成为显示领域的新发展趋势。随着人们对3D显示的研究不断深入，已提出各种技术实现了多种3D显示方式。其中，多视点光栅式3D显示器可让多名观看者在较大观看视角内同时裸眼观看到立体图像，感受震撼的视觉体验，从而备受关注。相比于助视3D显示器，它摆脱了助视设备的限制；相比于其他裸视3D显示器，它具有结构简单、亮度高、数据量相对较小以及与现有的平板显示器兼容等优点。光栅3D显示根据所采用的光栅材料的不同分为狭缝光栅3D显示和柱透镜光栅3D显示，前者是基于狭缝光栅不透光部分对光线的遮挡作用来使得左右眼分别看到对应的左右视差图像，后者则是利用柱透镜的折射作用使得左右眼分别看到左右视差图像。随着计算机技术的发展，增强现实技术(AugmentedReality，简称为AR)能够将计算机生成的物体叠加到现实景物上，以便使它们一起出现在使用者的视场中。AR技术在军事、机械、游戏娱乐、医疗，教育和文化遗产复原等领域均具有更广阔的发展前景。但是，目前的裸眼3D技术对计算机的要求较高，负载会比较大，若计算机的性能不够好会导致卡顿甚至3D画面模糊不清晰的情况出现而让用户体验变得极差，再提升计算机等硬件设备的性能会导致成本大量增加。
技术实现思路
本专利技术的目的在于：针对上述的裸眼3D技术中硬件成本高并且对计算机要求较高而容易出现卡顿和模糊导致用户体验差的问题，提出一种基于集群和渲染的裸眼3D系统。本专利技术采用的技术方案如下：一种基于集群和渲染的裸眼3D系统，包括光学采集模块、人机交互模块和裸眼3D显示模块，还包括集群服务器和三维渲染模块，所述人机交互模块连接至所述三维渲染模块；所述光学采集模块和三维渲染模块共同连接至集群服务器；所述裸眼3D合成模块连接至裸眼3D显示模块。人机交互模块与三位渲染模块协同工作，为渲染提供出发指令和响应指令，三维渲染模块中存储了三维虚拟物体和场景渲染图像，渲染图像为带透明通道的渲染纹理，即纹理中没有虚拟物体或场景则为透明通道，这便于后续与相机图像的叠加，集群服务器中存储有光学采集模块所采集的相机图像，在渲染模块将渲染图像传送至集群服务器后，集群服务器开始对图像进行处理并合成，当渲染为透明通道时候则显示相机图像，当渲染为非透明通道时显示渲染图像，处理结束后将最终图像发送至裸眼3D显示模块进行显示。优选地，所述光学采集模块包括多目相机，所述多目相机与所述集群服务器相连，多目相机从不同的角度拍摄裸眼3D显示模块正前方的实际场景，从而获取不同视角的相机图像，这样在合成时图像更清晰，更立体。优选地，所述多目相机的硬件参数与软件参数均保持一致；所述硬件参数包括芯片、相机电路和镜头的参数；所述软件参数包括分辨率、曝光时间，参数保持一致只要是为了让各个角度的图像的像素、色彩等各种影响图像的因素都一致，避免各个角度的图像色彩或是像素不一致而导致各个角度的图像之间出现明显的对比度，以致最终合成的图像会有明显的色差而影响用户体验。优选地，所述多目相机各个镜头的光心位于同一水平面，并且相邻的相机的间距相等，等间距采集图像便于区分各个角度的采集图像之间的重叠部分，若不等距各个重叠部分的大小也会不一样，会导致图像在合成的过程中非常容易出现混乱的情况。优选地，所述裸眼3D显示模块包括2D显示屏和光栅，裸眼3D显示模块将不同视差图像的光线在空间中进行分开，并使其在最佳观看距离处进行会聚，来实现不同视差图像的空间分离，当观看者的左右眼分别看到不同视差图像时，根据大脑的融合作用，便会在大脑中形成立体视觉。优选地，所述人机交互模块包括红外投影仪、红外摄像头和分析处理器；所述红外投影仪和红外摄像头分别连接至分析处理器，通过与三维渲染模块连接协同工作，给三维渲染模块提供触发和响应指令；分析处理器对红外投影仪的光源进行控制编码；红外投影仪主动投射近红外光谱，照射到观看者和实际场景中，光谱发生扭曲，形成随机的反射斑点；红外摄像头采集红外影像；分析处理器分析红外摄像头采集的红外影像，然后逐帧生成准确的场景深度影像，并计算出人物的骨骼节点信息；分析处理器通过信号传输线连接至三维渲染模块，根据观看者所处位置、姿势或动作，对三维渲染模块发布触发指令或操控指令发送至三维渲染模块响应。综上所述，由于采用了上述技术方案，本专利技术的有益效果是：1、本专利技术中，在光学采集模块采用多目相机，拍摄得到实际场景的多角度的相机图像，人机交互模块根据观看者所处位置、姿势或动作，对三维渲染模块发布触发和操控指令，三维渲染模块存储三维虚拟物体和场景的渲染图像，并与相机图像一起传输至集群服务器，进行图像叠加，得到相机图像与渲染图像的混合图像作为视差图像，输出至裸眼3D显示模块中进行三维显示。2、本专利技术中，观看者就能从裸眼3D显示模块上看到自己及所处的实际场景的三维立体显示效果，不仅如此，还混合着三维虚拟物体与实际场景的叠加，大大增加了裸眼3D显示模块的趣味性，更容易吸引人们的注意力。3、本专利技术中，实现无需佩戴助视设备，便能看到三维的虚拟与现实的融合，并可以借助互动模块，使观看者能与裸眼3D显示模块中的展示的三维虚拟物体进行交互，极大增加了显示设备的趣味性和吸引性。4、本专利技术中，采用集群服务器来处理3D信息的合成，集群服务器将多个基础的计算机连接到一起共同完成同样的任务，这样降低了3D技术对计算机的要求，并且反应变得更快，而且画面更清晰立体，用户体验更高的同时节约了成本。附图说明图1是本专利技术的结构组成框图；图2为本专利技术的多目相机的排列结构示意图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。如图1和2所示，一种基于集群和渲染的裸眼3D系统，包括光学采集模块、人机交互模块和裸眼3D显示模块，还包括集群服务器和三维渲染模块，所述人机交互模块连接至所述三维渲染模块；所述光学采集模块和三维渲染模块共同连接至集群服务器；所述裸眼3D合成模块连接至裸眼3D显示模块。人机交互模块包括红外投影仪、红外摄像头和分析处理器，采集观察者的信息比如位置、动作等信息然后将这些数据发送到三维渲染模块，这时三维渲染模块会根据人机交互模块传过来的信息对光学采集模块所采集到的各个角度的图像进行渲染，然后将渲染结果和光学采集模块所采集的数据共同发送至集群服务器，进群服务器将这些数据进行处理并合成，然后输出到裸眼3D显示模块进行显示，其包括2D显示屏和光栅，将不同视差图像的光线在空间中进行分开，并使其在最佳观看距离处进行会聚，来实现不同视差图像的空间本文档来自技高网...

【技术保护点】
一种基于集群和渲染的裸眼3D系统，包括光学采集模块、人机交互模块和裸眼3D显示模块，其特征在于：还包括集群服务器和三维渲染模块，所述人机交互模块连接至所述三维渲染模块；所述光学采集模块和三维渲染模块共同连接至集群服务器；所述集群服务器连接至裸眼3D显示模块。

【技术特征摘要】
1.一种基于集群和渲染的裸眼3D系统，包括光学采集模块、人机交互模块和裸眼3D显示模块，其特征在于：还包括集群服务器和三维渲染模块，所述人机交互模块连接至所述三维渲染模块；所述光学采集模块和三维渲染模块共同连接至集群服务器；所述集群服务器连接至裸眼3D显示模块。2.根据权利要求1所述基于集群和渲染的裸眼3D系统，其特征在于：所述光学采集模块包括多目相机，所述多目相机与所述集群服务器相连。3.根据权利要求2所述基于集群和渲染的裸眼3D系统，其特征在于：所述多目相机的硬件参数与软件参数均保...

【专利技术属性】
技术研发人员：巩瑞华，赵赟，翟晓斐，张鹏，
申请(专利权)人：河南新汉普影视技术有限公司，
类型：发明
国别省市：河南,41