导航、视觉定位以及导航地图构建方法和电子设备技术

本申请实施例提供了一种导航、视觉定位及导航地图构建方法和电子设备，应用于数据处理领域。该导航方法包括：首先，获取用户在增强现实AR地图中输入的位置搜索信息，位置搜索信息包括以下至少一种：文本、语音或图像；接着，基于位置搜索信息，在预设的多模态信息中进行多模态搜索，以确定位置搜索信息匹配的位置搜索结果；随后，根据位置搜索结果进行AR视觉导航。这样，相对于现有技术仅能输入文本进行导航而言，本申请可以支持用户输入多种模态的位置搜索信息，导航搜索的输入方式多样，能够提高用户导航体验。

【技术实现步骤摘要】

本申请实施例涉及数据处理领域，尤其涉及一种导航、视觉定位以及导航地图构建方法和电子设备。

技术介绍

1、ar(augmentedreality，增强现实)地图是基于空间计算技术的商业应用之一，可以提供全息信息展示(可以让用户看到各类虚实融合的信息标牌及其详细介绍)，智能搜索(可以让用户能轻松找到传说中的网红打卡点、最近的洗手间等)，ar视觉导航(可以让用户实时直观地看到ar效果的导航)以及ar交互(可以让用户与虚拟角色合影、在ar世界中参与丰富多彩的虚拟活动等)等等功能。

2、目前，在使用ar地图进行智能搜索的过程中，只能输入文本进行搜索，如输入景点名称(如**公园)，商店名称(如**黄金)，建筑名称(如**大厦)等等；搜索的输入方式单一，用户体验不佳。

技术实现思路

1、为了解决上述技术问题，本申请提供一种导航、视觉定位以及导航地图构建方法和电子设备。在该导航方法中，可以支持用户输入多模态位置搜索信息，然后根据用户在ar地图中输入的多模态的位置搜索信息，为用户提供ar视觉导航；这样，能够增加导航本文档来自技高网...

【技术保护点】

1.一种导航方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述多模态信息包括多个实体的实体标识信息，所述实体标识信息包括实体标识文本和/或实体标识图像；

3.根据权利要求1或2所述的方法，其特征在于，

4.根据权利要求2所述的方法，其特征在于，所述确定所述多个实体标识信息分别对应的第二特征，与所述第一特征之间的第一特征距离，包括：

5.根据权利要求1至4任一项所述的方法，其特征在于，所述根据所述位置搜索结果进行AR视觉导航，包括：

6.根据权利要求5所述的方法，其特征在于，所述进行视觉定位，以确定目...

【技术特征摘要】

1.一种导航方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述多模态信息包括多个实体的实体标识信息，所述实体标识信息包括实体标识文本和/或实体标识图像；

3.根据权利要求1或2所述的方法，其特征在于，

4.根据权利要求2所述的方法，其特征在于，所述确定所述多个实体标识信息分别对应的第二特征，与所述第一特征之间的第一特征距离，包括：

5.根据权利要求1至4任一项所述的方法，其特征在于，所述根据所述位置搜索结果进行ar视觉导航，包括：

6.根据权利要求5所述的方法，其特征在于，所述进行视觉定位，以确定目标位姿，包括：

7.根据权利要求6所述的方法，其特征在于，所述根据所述第一文本、第一全局特征向量以及预设的多张第二图像中的第二文本和所述多张第二图像的第二全局特征向量进行图像检索，以从所述多张第二图像中选取所述第一图像匹配的第三图像，包括：

8.根据权利要求6或7所述的方法，其特征在于，所述提取所述第一图像的第一全局特征向量，包括：

9.根据权利要求6至8任一项所述的方法，其特征在于，

10.根据权利要求9所述的方法，其特征在于，所述根据所述k张第一图像分别对应的n个候选位姿和所述n个候选位姿分别对应的单帧置信度，确定所述目标位姿，包括：

11.根据权利要求10所述的方法，其特征在于，所述方法还包括：

12.根据权利要求6至8任一项所述的方法，其特征在于，所述基于所述第一图像和所述第三图像，确定所述目标位姿，包括：

13.根据权利要求5至12任一项所述的方法，其特征在于，所述方法还包括：

14.根据权利要求6至13任一项所述的方法，其特征在于，所述方法还包括：

15.根据权利要求14所述的方法，其特征在于，所述方法还包括：

16.一种视觉定位方法，其特征在于，所述方法包括：

17.根据权利要求16所述的方法，其特征在于，所述基于所述第一文本、所述第一全局特征向量以及预设的多张第二图像中的第二文本和所述多张第二图像的第二全局特征向量进行图像检索，以从所述多...

【专利技术属性】
技术研发人员：冯文森，何庭波，李江，张朋，葛建阁，唐少华，刘进学，曾继平，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：