基于高精度定位技术的混合现实的导览方法、系统及MR设备技术方案

本发明专利技术提供了一种基于高精度定位技术的混合现实的导览方法、系统及MR设备，包括：步骤S1：利用MR眼镜上的双目摄像头在室内做360

【技术实现步骤摘要】
基于高精度定位技术的混合现实的导览方法、系统及MR设备


[0001]本专利技术涉及虚拟
，具体地，涉及基于高精度定位技术的混合现实的导览方法及系统，更为具体地，涉及基于高精度定位技术的混合现实的博物馆导览方法及系统。

技术介绍

[0002]MR(混合现实)系统是与现实场景紧密结合的AR(增强现实)系统。MR与普通AR的区别在于，在MR中虚拟景物与现实场景精准契合，融为一体，给用户更好的沉浸体验，为了实现这一效果，MR系统要使用达到厘米级精度定位技术。本专利技术使用基于点云的室内视觉定位技术和基于RTK的增强GNSS室外高精度定位技术。博物馆参观者佩戴MR眼镜进入博物馆，在MR眼镜中显示的虚拟景物和博物馆的现实环境紧密结合。
[0003]本专利技术可以为参观者在MR眼镜端提供导览路线指引、小地图实时定位、MR导览内容自动触发、MR手势交互等功能。相较于传统语音导览器，本专利技术不仅能提供语音导览的全部功能，还能提供各种3D多媒体功能。
[0004]相较于VR(虚拟现实)游览，VR眼镜与实景无法结合，佩戴者活动受限，本专利技术使用MR眼镜，是虚拟与现实相结合的，参观者可以佩戴眼镜在现实博物馆中进行畅游，同时感受虚拟3D景物带来的全新体验。
[0005]相较于手机导览系统，手机导览虽然也能体验部分定位、导航、3D虚拟，但这些功能在手机上的体验远远无法达到在MR眼镜中的沉浸式体验。
[0006]专利文献CN111467789A(申请号：202010362566.4)公开了一种基于HoloLens的混合现实交互系统，包括：HoloLens显示设备，用于建立全息影像；交互单元，用于使用手势输入及与全息影像交互；共享坐标建立单元，用于建立具有公共参考点的坐标系；头像显示单元，用于将播放机影像附加到坐标系中；位置共享单元，用于根据玩家的位置信息，通过全息影像映射至坐标系中；真实物理共享单元，用于共享炮弹，并显示在全息影像中；位置跟踪单元，用于及时更新玩家、炮弹在全息影像中的共享位置。

技术实现思路

[0007]针对现有技术中的缺陷，本专利技术的目的是提供一种基于高精度定位技术的混合现实的导览方法、系统及MR设备。
[0008]根据本专利技术提供的一种基于高精度定位技术的混合现实的导览方法，包括：
[0009]步骤S1：利用MR眼镜上的双目摄像头在室内做360
°
拍摄，并将室内拍摄与定位服务器内存储的室内平面图基于ROS的3D点云地图建模技术进行匹配，完成室内定位地图建模；
[0010]步骤S2：在室内运行过程中，MR眼镜把摄像头拍摄到的画面回传到定位服务器，定位服务器使用定位算法基于特征的方法的图像配准定位技术把图像和定位地图进行匹配，计算出当前MR眼镜位置；
[0011]步骤S3：定位服务器将MR眼镜当前位置信息传递到MR眼镜和控制后台。
[0012]优选地，还包括：当在室外场地运行时，MR眼镜上的RTK和/或GNSS定位模块获取GNSS卫星的定位信号以及RTK基准站发出的数据，计算当前MR眼镜位置。
[0013]优选地，还包括：根据MR眼镜当前位置，服务器向MR眼镜推送运行行程路线，根据MR眼镜的移动进行实时导航，通过MR眼镜中存储的小地图提示当前实时位置、各目标点的位置以及同伴的位置。
[0014]优选地，所述控制后台包括：后台监控、后台数据收集以及后台控制软件；
[0015]所述后台监控包括：通过当前位置信息以及MR眼镜位置以及播放情况，了解实时了解室内场地或室外场地的整体情况以及运行者的状态；
[0016]所述后台数据收集包括：收集在运行过程中的数据；
[0017]所述后台控制软件包括：接收或发送控制后台与服务器间消息。
[0018]优选地，还包括：当运行者佩戴MR眼镜到达场地预设位置时，根据预先设置，服务器向MR眼镜发送触发事件请求，MR眼镜进行相应操作。
[0019]根据本专利技术提供的一种基于高精度定位技术的混合现实的导览系统，包括：
[0020]模块M1：利用MR眼镜上的双目摄像头在室内做360
°
拍摄，并将室内拍摄与定位服务器内存储的室内平面图基于ROS的3D点云地图建模技术进行匹配，完成室内定位地图建模；
[0021]模块M2：在室内运行过程中，MR眼镜把摄像头拍摄到的画面回传到定位服务器，定位服务器使用定位算法基于特征的方法的图像配准定位技术把图像和定位地图进行匹配，计算出当前MR眼镜位置；
[0022]模块M3：定位服务器将MR眼镜当前位置信息传递到MR眼镜和控制后台。
[0023]优选地，还包括：当在室外场地运行时，MR眼镜上的RTK和/或GNSS定位模块获取GNSS卫星的定位信号以及RTK基准站发出的数据，计算当前MR眼镜位置。
[0024]优选地，还包括：根据MR眼镜当前位置，服务器向MR眼镜推送运行行程路线，根据MR眼镜的移动进行实时导航，通过MR眼镜中存储的小地图提示当前实时位置、各目标点的位置以及同伴的位置。
[0025]优选地，所述控制后台包括：后台监控、后台数据收集以及后台控制软件；
[0026]所述后台监控包括：通过当前位置信息以及MR眼镜位置以及播放情况，了解实时了解室内场地或室外场地的整体情况以及运行者的状态；
[0027]所述后台数据收集包括：收集在运行过程中的数据；
[0028]所述后台控制软件包括：接收或发送控制后台与服务器间消息。
[0029]优选地，还包括：当运行者佩戴MR眼镜到达场地预设位置时，根据预先设置，服务器向MR眼镜发送触发事件请求，MR眼镜进行相应操作。
[0030]本专利技术提供的一种MR设备，包括：控制器；所述控制器包括上述所述的基于高精度定位技术的混合现实的导览系统。
[0031]与现有技术相比，本专利技术具有如下的有益效果：
[0032]1、本专利技术通过高精度定位技术特征，实现文物原件虚拟修复效果，通过MR眼镜可以看到在文物原件上高精度显示文物复原后的3D形象；
[0033]2、本专利技术通过高精度定位技术特征，还能实现静态展品的动态展示效果，通过MR眼镜可以看到在静态展品上的动态演示，例如会眨眼的蒙娜丽莎。
附图说明
[0034]通过阅读参照以下附图对非限制性实施例所作的详细描述，本专利技术的其它特征、目的和优点将会变得更明显：
[0035]图1为基于高精度定位技术的混合现实的导览系统示意图。
[0036]图2为基于高精度定位技术的混合现实的导览系统示意图。
具体实施方式
[0037]下面结合具体实施例对本专利技术进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本专利技术，但不以任何形式限制本专利技术。应当指出的是，对本领域的普通技术人员来说，在不脱离本专利技术构思的前提下，还可以做出若干变化和改进。这些都属于本专利技术的保护范围。
[0038]实施例1
[0039]根据本专利技术提供的一种基本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于高精度定位技术的混合现实的导览方法，其特征在于，包括：步骤S1：利用MR眼镜上的双目摄像头在室内做360
°
拍摄，并将室内拍摄与定位服务器内存储的室内平面图基于ROS的3D点云地图建模技术进行匹配，完成室内定位地图建模；步骤S2：在室内运行过程中，MR眼镜把摄像头拍摄到的画面回传到定位服务器，定位服务器使用定位算法基于特征的方法的图像配准定位技术把图像和定位地图进行匹配，计算出当前MR眼镜位置；步骤S3：定位服务器将MR眼镜当前位置信息传递到MR眼镜和控制后台。2.根据权利要求1所述的基于高精度定位技术的混合现实的导览方法，其特征在于，还包括：当在室外场地运行时，MR眼镜上的RTK和/或GNSS定位模块获取GNSS卫星的定位信号以及RTK基准站发出的数据，计算当前MR眼镜位置。3.根据权利要求1所述的基于高精度定位技术的混合现实的导览方法，其特征在于，还包括：根据MR眼镜当前位置，服务器向MR眼镜推送运行行程路线，根据MR眼镜的移动进行实时导航，通过MR眼镜中存储的小地图提示当前实时位置、各目标点的位置以及同伴的位置。4.根据权利要求1所述的基于高精度定位技术的混合现实的导览方法，其特征在于，还包括：当运行者佩戴MR眼镜到达场地预设位置时，根据预先设置，服务器向MR眼镜发送触发事件请求，MR眼镜进行相应操作。5.一种基于高精度定位技术的混合现实的导览系统，其特征在于，包括：模块M1：利用MR眼镜上的双目摄像头在室内做360
°
拍摄，并将室内拍摄与定位服务器内存储的室内平面图基于ROS的3D点云地图建模技术进行匹配，完成室内定位地...

【专利技术属性】
技术研发人员：罗江，龚铭，沈鑫，王玉洁，
申请(专利权)人：上海极赫信息技术有限公司，
类型：发明
国别省市：