System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于MR眼镜的目标定位显示方法、系统及设备技术方案_技高网

一种基于MR眼镜的目标定位显示方法、系统及设备技术方案

技术编号:40074988 阅读:6 留言:0更新日期:2024-01-17 00:58
本发明专利技术公开了一种基于MR眼镜的目标定位显示方法、系统及设备,方法包括:通过双目摄像头采集MR眼镜视野范围内的图像;对采集的图像进行矫正处理,得到双目矫正图像;基于双目矫正图像进行目标识别,并获取视野中心点距离;根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正;将矫正后的目标识别框和视野中心点距离投射到MR眼镜的镜片上进行显示。本发明专利技术对摄像头采集的图像进行识别处理后,只将处理结果的虚拟信息投射到MR眼镜的镜片上,使其和人眼透过眼镜看到的真实场景相叠加,而不需要在镜片上显示拍摄场景的虚拟画面,不会出现目标场景的虚拟画面和现实画面的混叠,视觉效果好。

【技术实现步骤摘要】

本专利技术涉及图像处理,尤指一种基于mr眼镜的目标定位显示方法、系统及设备。


技术介绍

1、混合现实(mr)指的是通过合并现实场景和虚拟环境而产生新的可视化环境。目前mr的应用技术主要有两种:一种是通过mr眼镜上携带的摄像头采集图像后,将采集的图像画面直接投射于镜片上,并将对采集的图像进行识别处理后的结果作为虚拟信息叠加到镜片上进行显示,这种做法实际上是将镜片作为显示屏,将虚拟信息叠加在摄像头拍摄到的影像中投影到镜片上,没有结合用户透过镜片看到的真实视野,脱离了真实环境,严格意义上并不能称之为mr技术,而是更倾向于vr技术的延伸;另一种是通过mr眼镜上携带的摄像头采集到图像后,只对采集的图像进行识别处理,将处理结果作为虚拟信息简单地叠加在用户透过眼镜看到的镜片后面的真实场景中,但由于摄像头视野与眼镜视野存在偏差,会造成虚拟信息与现实场景匹配不准确的问题,影响目标定位的准确性和叠加显示的视觉效果。


技术实现思路

1、为了解决上述技术问题,本专利技术提供一种基于mr眼镜的目标定位显示方法,将目标识别处理结果进行视野矫正后投射到镜片上进行显示,叠加在用户透过镜片看到的真实场景上,实现精确的目标定位、标记及显示。

2、具体的,本专利技术的技术方案如下:

3、按照本专利技术的一个方面,提供一种基于mr眼镜的目标定位显示方法,包括以下步骤:

4、s100:通过双目摄像头采集mr眼镜视野范围内的图像;

5、s200:对采集的图像进行矫正处理,得到双目矫正图像;

6、s300:基于双目矫正图像进行目标识别,并获取视野中心点距离;

7、s400:根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正;

8、s500:将矫正后的目标识别框和视野中心点距离投射到mr眼镜的镜片上进行显示。

9、进一步的,s200所述对采集的图像进行矫正处理,得到双目矫正图像具体包括:

10、s201:根据双目摄像头的内参矩阵和畸变系数对采集的图像进行去畸矫正;

11、s202:根据双目摄像头的外参矩阵对去畸矫正后的图像进行双目匹配对齐。

12、进一步的,所述双目摄像头的内参矩阵、外参矩阵和畸变系数通过对双目摄像头采用张正友标定法进行标定来确定。

13、进一步的,s400所述根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正具体包括:

14、s401:通过测试量化摄像头视野与眼镜视野之间的误差;

15、s402:建立视野误差与距目标距离之间的线性关系;

16、s403:结合视野中心点距离,将基于摄像头视野获得的目标识别框矫正到眼镜视野中。

17、按照本专利技术的另一个方面,提供一种基于mr眼镜的目标定位显示系统,包括mr眼镜和边缘计算装置,所述mr眼镜通过自组网与所述边缘计算装置通讯连接,

18、所述mr眼镜上搭载有双目摄像头,所述双目摄像头用于采集mr眼镜视野范围内的图像;

19、所述边缘计算装置包括图像处理模块、目标识别模块、测距模块、视野矫正模块、显示控制模块,

20、所述图像处理模块,用于对采集的图像进行矫正处理,得到双目矫正图像;

21、所述目标识别模块,用于对双目矫正图像进行目标识别;

22、所述测距模块,用于根据双目矫正图像获取视野中心点距离;

23、所述视野矫正模块,用于根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正;

24、所述显示控制模块,用于将矫正后的目标识别框和视野中心点距离投射到mr眼镜的镜片上进行显示。

25、进一步的,所述边缘计算装置还包括:

26、定位角模块,用于标绘方位角并投射到mr眼镜的镜片上进行显示。

27、进一步的,所述边缘计算装置还包括:

28、目标点标记模块,用于接收侦查设备传输的目标经纬度信息,通过坐标转换得到摄像头坐标系下的目标点,将目标点进行视野矫正后,投射到mr眼镜的镜片上进行标记显示。

29、进一步的,所述边缘计算装置还包括:

30、鹰眼模块,用于绘制鹰眼地图并投射到mr眼镜的镜片上进行显示。

31、按照本专利技术的第三个方面,提供一种电子设备,包括存储器和处理器,所述存储器上存储有计算机程序,所述计算机程序由所述处理器加载并执行以实现如上所述的基于mr眼镜的目标定位显示方法。

32、按照本专利技术的第四个方面,提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时用于实现如上所述的基于mr眼镜的目标定位显示方法。

33、与现有技术相比,本专利技术至少具有以下一项有益效果:

34、1、本专利技术对双目摄像头采集的图像进行识别处理后,只将目标识别框、视野中心距离等处理结果的虚拟信息投射到眼镜镜片上,使其和用户透过眼镜看到的真实目标场景相叠加,而不需要在镜片上显示拍摄目标场景的虚拟画面,使得用户可裸眼感受镜片上显示的虚拟信息与透过镜片看到的真实目标场景的补充叠加,而不会出现目标场景的虚拟画面和现实画面的混叠,视觉效果好。

35、2、本专利技术通过测试量化眼镜视野与摄像头视野之间的误差,以及建立视野误差与距离之间的关系,对基于摄像头视野获得的目标识别框和目标标记点进行了视野矫正,将虚拟信息准确地叠加到真实场景图像中,使得投射到镜片上的虚拟信息可以和用户透过眼镜看到的真实场景目标位置精准匹配。

本文档来自技高网...

【技术保护点】

1.一种基于MR眼镜的目标定位显示方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于MR眼镜的目标定位显示方法,其特征在于,S200所述对采集的图像进行矫正处理,得到双目矫正图像具体包括:

3.根据权利要求2所述的基于MR眼镜的目标定位显示方法,其特征在于,所述双目摄像头的内参矩阵、外参矩阵和畸变系数通过对双目摄像头采用张正友标定法进行标定来确定。

4.根据权利要求1所述的基于MR眼镜的目标定位显示方法,其特征在于,S400所述根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正具体包括:

5.一种基于MR眼镜的目标定位显示系统,其特征在于,包括MR眼镜和边缘计算装置,所述MR眼镜通过自组网与所述边缘计算装置通讯连接,

6.根据权利要求5所述的基于MR眼镜的目标定位显示系统,其特征在于,所述边缘计算装置还包括:

7.根据权利要求5所述的基于MR眼镜的目标定位显示系统,其特征在于,所述边缘计算装置还包括:

8.根据权利要求7所述的基于MR眼镜的目标定位显示系统,其特征在于,所述边缘计算装置还包括:

9.一种电子设备,其特征在于,包括存储器和处理器,所述存储器上存储有计算机程序,所述计算机程序由所述处理器加载并执行以实现权利要求1-4任一项所述的基于MR眼镜的目标定位显示方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时用于实现权利要求1-4任一项所述的基于MR眼镜的目标定位显示方法。

...

【技术特征摘要】

1.一种基于mr眼镜的目标定位显示方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于mr眼镜的目标定位显示方法,其特征在于,s200所述对采集的图像进行矫正处理,得到双目矫正图像具体包括:

3.根据权利要求2所述的基于mr眼镜的目标定位显示方法,其特征在于,所述双目摄像头的内参矩阵、外参矩阵和畸变系数通过对双目摄像头采用张正友标定法进行标定来确定。

4.根据权利要求1所述的基于mr眼镜的目标定位显示方法,其特征在于,s400所述根据视野误差与距离之间的关系,结合视野中心点距离,对目标识别框进行视野矫正具体包括:

5.一种基于mr眼镜的目标定位显示系统,其特征在于,包括mr眼镜和边缘计算装置,所述mr眼镜通过自组网与所述边缘计算装置通讯连接...

【专利技术属性】
技术研发人员:梁立正王明真刘文广李国光于庆冰余翔宇李强
申请(专利权)人:湖北空间智能技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1