一种基于人眼追踪的立体显示系统技术方案

本发明专利技术公开了一种基于人眼追踪的立体显示系统，包括人眼追踪摄像头

【技术实现步骤摘要】
一种基于人眼追踪的立体显示系统


[0001]本专利技术涉及人眼追踪
，具体为一种基于人眼追踪的立体显示系统
。

技术介绍

[0002]裸眼
3D
显示的原理一般是通过光栅或透镜将显示器显示的图像进行分光，从而使人眼接收到不同的图像，这样便实现了
3D
显示
。
[0003]专利号为：
CN113259650A
的专利公开一种基于人眼追踪立体影像显示方法
、
装置
、
介质及系统，获取待展示立体影像的至少三个视图构成的视图集合；根据预设的静态提取规则或者预设的动态提取规则，从视图集合中提取两个目标视图；获取观看者的人眼空间坐标，根据人眼空间坐标对待展示立体影像的两个目标视图进行显示
。
本技术方案，通过提取立体影像的视图集合中的两个目标视图，可以实现基于人眼追踪多视图的立体影像的显示
。3D
显示效果好，可视区域大，且观看者不需要寻找观看角度或保持观看角度，提升了观看者的体验性
。
[0004]针对目前
3D
视频片源稀少的状况，将现有丰富的
2D
片源转换成
3D
片源成为主流的解决方案，图像信号源无法对原始图像进行筛选或者处理，使得图像无法进行裸眼
3D
或者偏光
3D
实时渲染
。

技术实现思路

[0005](
一
)
解决的技术问题
[0006]针对现有技术的不足，本专利技术提供了一种基于人眼追踪的立体显示系统，解决了上述所提出的问题
。
[0007](
二
)
技术方案
[0008]为实现以上目的，本专利技术通过以下技术方案予以实现：一种基于人眼追踪的立体显示系统，包括人眼追踪摄像头
、FPGA
模块
、
显示屏
、
存储模块
、
图像信号源
、
云端，所述
FPGA
模块上连接有串口线，所述
FPGA
模块采用串口线与人眼追踪摄像头建立数据连接，所述
FPGA
模块上连接有信号输出线，且
FPGA
模块采用信号输出线与显示屏建立数据连接，所述人眼追踪摄像头包括纯构光
、TOF、
红外
、
超声波
、
可见光；
[0009]所述
FPGA
模块与存储模块相连接，所述
FPGA
模块与图像信号源建立数据连接，所述显示屏可以为裸眼
3D
屏
、
偏光
3D
屏
、
普通屏；
[0010]所述
FPGA
模块上连接有云端，所述信号输出线包括
RGB、LVDS、MIPI、eDP、HDMI、mini
‑
LVDS、V
‑
By
‑
One
数据线，所述图像信号源包括但不局限于
2D
内窥镜和相机，
3D
内窥镜和相机，
2D
显微镜相机
3D
显微镜和相机，以及其他可以输出
2D
与
3D
图像的设备
。
[0011]优选的，所述
FPGA
模块的底部设置有
2D/3D
切换按钮
、3D
参数微调转钮
、
图像输入格式调整模块
、
分辨率调整按钮，所述
2D/3D
切换按钮用于对
2D/3D
模式进行切换；
[0012]所述
3D
参数微调转钮用于对
3D
参数进行微调；
[0013]所述图像输入格式调整模块为
RGB
输入端，也可以为
YCBCR
输入端
、YUV
输入端
。
[0014]优选的，所述
FPGA
模块上设置有语音识别模块
、
表情识别模块
、
手势识别模块，所述语音识别模块
、
表情识别模块
、
手势识别模块分别对语音
、
表情
、
手势进行识别，图像信号源可根据所属的语音
、
表情
、
手势以及其它指令信息对本地或者网络的
2D
原始图像进行本地的立体转换或者云端智能立体转换，确保最终传输给
FPGA
的是满足要求的立体图像信息
。
[0015]优选的，所述
FPGA
模块内置有本地的裸眼
3D
和偏光立体显示算法，所述本地算法会根据人眼追踪传入的坐标信息实时修正，所述
FPGA
模块硬件和软件支持单路立体信号
、
双路立体信号甚至多路立体图像信号源的输入
。
信号输入源包括但不局限于网络
3D
视频流
、3D
显微镜
、3D
相机
、3D
内窥镜以及本地
3D
图像或者视频，所述本地算法由深度图超平滑算法
、
深度图超平滑模块构成，所述深度图超平滑算法有像素相关度和平滑滤波器组成，深度图超平滑模块用于对原图像为
RGB
图像进行处理，需要对
R、G、B
信号分别处理
。
第一
、
二行存器处理
R
分量，第三
、
四行寄存器处理
G
分量，第五
、
六行寄存器处理
B
分量
。
计算相关度时需要对中心像素点上下左右四个方向进行计算，考虑到中心像素与其下面和右面的像素点的相关度是一致的，平滑滤波时可直接使用其下面和右面像素点的相关度值，本算法用
Verilog
硬件编程语言实现
。
[0016]优选的，所述立体显示算法为
web3D
技术
。
[0017]优选的，所述云端用于对大数据进行存储和对云端算法搭建
。
[0018](
三
)
有益效果
[0019]本专利技术提供了一种基于人眼追踪的立体显示系统
。
具备以下有益效果：图像信号源包括立体显微镜
、
立体相机
、
云端大数据模型以及本地图像存储器，在接收到语音
、
手势
、
预设程序等自定义需求指令后，图像信号源可以对原始图像进行筛选或者处理，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于人眼追踪的立体显示系统，其特征在于：包括人眼追踪摄像头
(1)、FPGA
模块
(2)、
立体显示屏
(3)、
存储模块
(4)、
图像信号源
(5)、
云端
(6)
，所述
FPGA
模块
(2)
上连接有串口线
(26)
，所述
FPGA
模块
(2)
采用串口线
(26)
与人眼追踪摄像头
(1)
建立数据连接，所述
FPGA
模块
(2)
上连接有信号输出线
(25)
，且
FPGA
模块
(2)
采用信号输出线
(25)
与立体显示屏
(3)
建立数据连接；所述
FPGA
模块
(2)
与存储模块
(4)
相连接，所述
FPGA
模块
(2)
与图像信号源
(5)
建立数据连接；所述
FPGA
模块
(2)
上连接有云端
(6)。2.
根据权利要求1所述的一种基于人眼追踪的立体显示系统，其特征在于：所述
FPGA
模块
(2)
的底部设置有
2D/3D
切换按钮
(21)、3D
参数微调转钮
(22)、
图像输入格式调整模块
(23)、
分辨率调整按钮
(24)
，所述
2D/3D
切换按钮
(21)

【专利技术属性】
技术研发人员：宋晓燕，
申请(专利权)人：联访智能科技无锡有限公司，
类型：发明
国别省市：