基于头戴显示设备的图像校正方法、装置及设备制造方法及图纸

本发明专利技术公开了基于头戴显示设备的图像校正方法、装置及设备，该方法包括：获取通过第一相机采集的第一图像和通过第二相机采集的第二图像；根据第一图像对所述第二图像进行立体校正，获得校正后的第二图像；根据第一相机的光轴和与第一相机对应的透镜的光轴之间的旋转角度信息，对第一图像和校正后的第二图像进行转换，获得转换后的第一图像和第二图像。

【技术实现步骤摘要】
基于头戴显示设备的图像校正方法、装置及设备
本公开实施例涉及图像处理
，更具体地，本公开实施例涉及一种基于头戴显示设备的图像校正方法、一种图像校正装置、以及一种头戴显示设备。
技术介绍
混合现实技术(MixedReality，MR)是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。目前，在虚拟现实或者混合现实领域，通过头戴显示设备外置两个可见光摄像头实时捕捉外部的环境信息。具体地，通过对两个可见光摄像头采集两张图像进行立体视觉匹配，进一步对匹配后的图像进行对渲染处理得到外部环境信息，并通过头戴显示设备将外部环境信息呈现给用户。但是，在头戴显示设备的装配过程中存在安装误差，会造成两个可见光摄像头的光轴不完全平行，从而导致渲染得到的图像出现扭曲变形。特别是，当用户在左右摆头、上下抬头低头或者前后移动时，渲染得到的图像和人眼的视觉差存在明显差异，给用户带来明显的眩晕感和图像不清晰感。因此，有必要提供一种新的基于头戴显示设备的图像校本文档来自技高网...

【技术保护点】
1.一种基于头戴显示设备的图像校正方法，其特征在于，所述方法包括：/n获取通过第一相机采集的第一图像和通过第二相机采集的第二图像；/n根据所述第一图像对所述第二图像进行立体校正，获得校正后的第二图像；/n根据所述第一相机的光轴和与所述第一相机对应的透镜的光轴之间的旋转角度信息，对所述第一图像和所述校正后的第二图像进行转换，获得转换后的第一图像和第二图像。/n

【技术特征摘要】
1.一种基于头戴显示设备的图像校正方法，其特征在于，所述方法包括：
获取通过第一相机采集的第一图像和通过第二相机采集的第二图像；
根据所述第一图像对所述第二图像进行立体校正，获得校正后的第二图像；
根据所述第一相机的光轴和与所述第一相机对应的透镜的光轴之间的旋转角度信息，对所述第一图像和所述校正后的第二图像进行转换，获得转换后的第一图像和第二图像。


2.根据权利要求1所述的方法，根据所述第一图像对所述第二图像进行立体校正，获得校正后的第二图像的步骤包括：
将所述第一图像与所述第二图像进行双目立体匹配，确定所述第二图像中与所述第一图像中的每个待匹配像素点相匹配的目标像素点；
使用所述待匹配像素点的像素值代替相匹配的所述目标像素点的像素值，获得校正后的第二图像。


3.根据权利要求2所述的方法，将所述第一图像与所述第二图像进行双目立体匹配，确定所述第二图像中与所述第一图像中的每个待匹配像素点相匹配的目标像素点的步骤包括：
基于归一化互相关匹配算法，确定所述第一图像中的待匹配像素点在所述第二图像上的初始匹配块；
针对所述第一图像中的待匹配像素点，对所述初始匹配块进行亚像素匹配，确定与所述待匹配像素点相匹配的目标像素点。


4.根据权利要求3所述的方法，基于归一化互相关匹配算法，确定所述第一图像中的待匹配像素点在所述第二图像上的初始匹配块的步骤包括：
在所述第一图像中构建以所述待匹配像素点为中心的第一窗口；
确定所述待匹配像素点在所述第二图像中投影的极线，并对所述极线上的每一个像素点构建与所述第一窗口大小相同的第二窗口；
对所述第一窗口和对应的多个所述第二窗口进行相关度计算，得到与所述第一窗口相关度最高的初始匹配块。


5.根据权利要求3所述的方法，针对所述第一图像中的待匹配像素点，对所述初始匹配块进行亚像素匹配，确定与所述待匹配像素点相匹配的目标像素点的步骤包括：
在所述第二...

【专利技术属性】
技术研发人员：吴涛，
申请(专利权)人：青岛小鸟看看科技有限公司，
类型：发明
国别省市：山东;37