一种基于眼动仪的混合现实显示装置制造方法及图纸

本发明专利技术提供了一种基于眼动仪的混合现实显示装置，包括：眼动仪、红外测距设备、信息处理单元、光学系统调整单元、图像生成单元、光学系统和图像承载设备；所述眼动仪和红外测距设备分别与所述信息处理单元无线连接或有线连接，所述信息处理单元与所述光学系统调整单元无线连接，所述信息处理单元与所述图像生成单元无线连接，所述光学系统调整单元和所述图像生成单元分别与所述图像承载设备无线连接；光学系统调整单元用来对光学元件中的各光学镜面角度及镜面间距离进行调整；图像承载设备用来显示图像信息。本发明专利技术的有益效果是：实现了现实场景与别的位置的数字信息能够同时清晰查看的功能，且避免了数字信息遮挡视觉中心视线的问题出现。

A hybrid reality display device based on eye tracker

【技术实现步骤摘要】
一种基于眼动仪的混合现实显示装置
本专利技术涉及平视显示器领域，尤其涉及一种基于眼动仪的混合现实显示装置。
技术介绍
平视显示器(英语：HeadUpDisplay，缩写HUD)是一种目前普遍运用在航空器上的飞行辅助仪器。HUD是利用光学反射的原理，将重要的飞行相关资讯投射在一片玻璃上面。这片玻璃位于座舱前端，文字和影像被投射在镀膜镜片(析光镜)并平衡反射进飞行员的眼睛。飞行员透过HUD往前方看的时候，能够轻易的将外界的景象与HUD显示的资料融合在一起。由于反射进眼睛中的影像永远与飞机的中轴平衡，所以飞行员的身高不会对俯仰角或目视瞄准造成偏差。HUD设计的用意是让飞行员不需要低头查看仪表的显示与资料，始终保持抬头的姿态，降低低头与抬头之间忽略外界环境的快速变化以及眼睛焦距需要不断调整产生的延迟与不适。HUD投射的资料主要与飞行安全有重要关系，譬如飞行高度，飞行速度，航向，垂直速率变化，飞机倾斜角度等等。使用于战斗环境时，还会加上目标资料，武器，目视瞄准器与发射的相关资料，预估命中点等等。这些显示的资料能够根据不同状况而变换。但是还存在着对不同距离物体需要调整焦距和在固定屏幕上时固定的成像会存在阻挡视线的情况的问题，不能同时看到现实场景和反射图像生成单元产生的数字信息的场景。
技术实现思路
为了解决上述问题，本专利技术提供了一种基于眼动仪的混合现实显示装置，该混合现实显示装置包括：眼动仪、红外测距设备、信息处理单元、光学系统调整单元、图像生成单元、光学系统和图像承载设备；所述眼动仪的输出端和所述红外测距设备的输出端分别与所述信息处理单元的输入端连接，所述信息处理单元的输出端分别与所述眼动仪的输入端、所述红外测距设备的输入端、光学系统调整单元的输入端和图像生成单元的输入端连接，所述信息处理单元的输出端与图像生成单元的输入端连接，所述光学系统的输入端分别与光学系统调整单元的输出端和图像生成单元的输出端连接，所述光学系统的输出端与所述所述图像承载设备的输入端连接；所述眼动仪用来实时采集人眼的视线信息，并将所述视线信息实时发送至所述信息处理单元；所述视线信息包括总注视次数、注视持续时间、注视方向、注视点序列和第一次视线到达目标兴趣区的时间；所述信息处理单元将接收到的注视方向信息发送至所述红外测距设备，所述红外测距设备根据所述注视方向信息，实时测量目标物与该红外测距设备的距离信息，并将该距离信息实时反馈至所述信息处理单元；所述信息处理单元将所述视线信息及所述距离信息共同处理后，分别发送图像生成指令和调整指令至所述图像生成单元和所述光学系统调整单元，所述图像生成单元根据所述图像生成指令生成目标物的图像信息，并将生成的目标物的图像信息发送至所述光学系统，所述光学系统调整单元根据所述调整指令调整所述光学系统中各光学元件的镜面角度及各镜面间的距离，使得所述目标物的图像信息经过调整后的光学系统后，在所述图像承载设备上呈现的图像信息，所述图像承载设备由透射材质制成，以便用户无障碍的同时查看目标物信息和用户前方场景。进一步地，所述眼动仪采用的是眼动追踪技术。进一步地，所述注视持续时间不少于100ms。进一步地，所述注视方向信息包括注视路线及注视的目标点，根据所述目标点确定所述目标物。进一步地，所述红外测距设备是通过红外线进行测距的。进一步地，所述光学系统调整单元中的光学元件包括球面镜和非球面镜。进一步地，所述光学系统调整单元中的光学元件为除了球面镜和非球面镜外的其他光学元件中的一种或多种的组合。进一步地，所述光学系统用于调整数字信息显示的大小和区域。本专利技术提供的技术方案带来的有益效果是：实现了现实场景与别的位置的数字信息能够同时清晰查看的功能，且避免了数字信息遮挡视觉中心视线的问题出现。附图说明下面将结合附图及实施例对本专利技术作进一步说明，附图中：图1是本专利技术实施例中一种基于眼动仪的混合现实显示装置的流程图。具体实施方式为了对本专利技术的技术特征、目的和效果有更加清楚的理解，现对照附图详细说明本专利技术的具体实施方式。本专利技术的实施例提供了一种基于眼动仪的混合现实显示装置，该混合现实显示装置运用了AR技术、眼动追踪技术、红外测距技术和图像显示技术。请参考图1，图1是本专利技术实施例中一种基于眼动仪的混合现实显示装置的流程图，具体包括：眼动仪、红外测距设备、信息处理单元、光学系统调整单元、图像生成单元、光学系统和图像承载设备；所述眼动仪和红外测距设备分别与所述信息处理单元无线连接或有线连接，所述信息处理单元与所述光学系统调整单元无线连接或有线连接，所述信息处理单元与所述图像生成单元无线连接或有线连接，所述光学系统调整单元和所述图像生成单元分别与所述图像承载设备无线连接或有线连接；所述眼动仪的输出端和所述红外测距设备的输出端分别与所述信息处理单元的输入端连接，所述信息处理单元的输出端分别与所述眼动仪的输入端、所述红外测距设备的输入端、光学系统调整单元的输入端和图像生成单元的输入端连接，所述信息处理单元的输出端与图像生成单元的输入端连接，所述光学系统的输入端分别与光学系统调整单元的输出端和图像生成单元的输出端连接，所述光学系统的输出端与所述所述图像承载设备的输入端连接；所述眼动仪用来实时采集人眼的视线信息，并将所述视线信息实时发送至所述信息处理单元；所述视线信息包括总注视次数、注视持续时间、注视方向、注视点序列和第一次视线到达目标兴趣区的时间；所述信息处理单元将接收到的注视方向信息发送至所述红外测距设备，所述红外测距设备根据所述注视方向信息，实时测量目标物与该红外测距设备的距离信息，并将该距离信息实时反馈至所述信息处理单元；所述信息处理单元将所述视线信息及所述距离信息共同处理后，分别发送图像生成指令和调整指令至所述图像生成单元和所述光学系统调整单元，所述图像生成单元根据所述图像生成指令生成目标物的图像信息，并将所述目标物的图像信息发送至所述光学系统，所述光学系统调整单元根据所述调整指令调整所述光学系统中各光学元件的镜面角度及各镜面间的距离，使得所述目标物的图像信息经过调整后的光学系统后，在所述图像承载设备上呈现的图像信息显示最佳，所述最佳是指人眼看到的图像是清晰的，即通过光学系统的镜组，调整合适的焦距，在图像承载设备上显示出来的清晰虚像为最佳；所述图像承载设备由透射材质制成，以便用户无障碍的同时查看目标物信息和用户前方场景。所述眼动仪采用的是眼动追踪技术。根据不同视线结果体现不同效果，其中注视只是一种形式，这种技术一共有三种形式分别是：注视、跳动、平滑尾随跟踪。主要参数为：总注视次数、注视持续时间、注视方向、注视点序列和第一次视线到达目标兴趣区的时间。总注视次数主要用于空闲时数字信息显示位置的确定。注视持续时间主要用于确定数字信息在当前位置显示时长的确定。注视方向用于预测使用者注视方向下一步更有可能向那个方向进行转移，引导数字信息进行提前的微动，进行微交互。注视点序列用于研究数据信息层级，本文档来自技高网...

【技术保护点】
1.一种基于眼动仪的混合现实显示装置，其特征在于：包括：眼动仪、红外测距设备、信息处理单元、光学系统调整单元、图像生成单元、光学系统和图像承载设备；/n所述眼动仪的输出端和所述红外测距设备的输出端分别与所述信息处理单元的输入端连接，所述信息处理单元的输出端分别与所述眼动仪的输入端、所述红外测距设备的输入端、光学系统调整单元的输入端和图像生成单元的输入端连接，所述信息处理单元的输出端与图像生成单元的输入端连接，所述光学系统的输入端分别与光学系统调整单元的输出端和图像生成单元的输出端连接，所述光学系统的输出端与所述图像承载设备的输入端连接；/n所述眼动仪用来实时采集人眼的视线信息，并将所述视线信息实时发送至所述信息处理单元；所述视线信息包括总注视次数、注视持续时间、注视方向、注视点序列和第一次视线到达目标兴趣区的时间信息；/n所述信息处理单元将接收到的注视方向信息发送至所述红外测距设备，所述红外测距设备根据所述注视方向信息，实时测量目标物与该红外测距设备的距离信息，并将该距离信息实时反馈至所述信息处理单元；所述信息处理单元将所述视线信息及所述距离信息共同处理后，分别发送图像生成指令和调整指令至所述图像生成单元和所述光学系统调整单元，所述图像生成单元根据所述图像生成指令生成目标物的图像信息，并将生成的目标物的图像信息发送至所述光学系统，所述光学系统调整单元根据所述调整指令调整所述光学系统中各光学元件的镜面角度及各镜面间的距离，使得所述目标物的图像信息经过调整后的光学系统后，在所述图像承载设备上呈现的图像信息，所述图像承载设备由透射材质制成，以便用户无障碍的同时查看目标物信息和用户前方场景。/n...

【技术特征摘要】
1.一种基于眼动仪的混合现实显示装置，其特征在于：包括：眼动仪、红外测距设备、信息处理单元、光学系统调整单元、图像生成单元、光学系统和图像承载设备；
所述眼动仪的输出端和所述红外测距设备的输出端分别与所述信息处理单元的输入端连接，所述信息处理单元的输出端分别与所述眼动仪的输入端、所述红外测距设备的输入端、光学系统调整单元的输入端和图像生成单元的输入端连接，所述信息处理单元的输出端与图像生成单元的输入端连接，所述光学系统的输入端分别与光学系统调整单元的输出端和图像生成单元的输出端连接，所述光学系统的输出端与所述图像承载设备的输入端连接；
所述眼动仪用来实时采集人眼的视线信息，并将所述视线信息实时发送至所述信息处理单元；所述视线信息包括总注视次数、注视持续时间、注视方向、注视点序列和第一次视线到达目标兴趣区的时间信息；
所述信息处理单元将接收到的注视方向信息发送至所述红外测距设备，所述红外测距设备根据所述注视方向信息，实时测量目标物与该红外测距设备的距离信息，并将该距离信息实时反馈至所述信息处理单元；所述信息处理单元将所述视线信息及所述距离信息共同处理后，分别发送图像生成指令和调整指令至所述图像生成单元和所述光学系统调整单元，所述图像生成单元根据所述图像生成指令生成目标物的图像信息，并将生成的目标物的图像信息发送至所述光学系统，所述光学系统调整单元根据所述调整指令调整所述光学...

【专利技术属性】
技术研发人员：郜禹铖，
申请(专利权)人：中国地质大学武汉，
类型：发明
国别省市：湖北;42