虚实融合展示方法及装置、电子设备和存储介质制造方法及图纸

本公开涉及一种虚实融合展示方法及装置、电子设备和存储介质，应用于第一电子设备，包括：接收第二电子设备发送的视觉定位请求，视觉定位请求中包括第二电子设备所在的环境图像和第二电子设备的第一地理位置；查找与第一地理位置对应的第一点云地图，以及根据第一点云地图和所述环境图像，确定第二电子设备的视觉定位结果，视觉定位结果包括第二电子设备的第二地理位置和姿态信息；查找与第一点云地图对应的虚拟场景地图，以及根据虚拟场景地图和第二地理位置，确定待展示的虚拟内容；向第二电子设备发送第二地理位置、姿态信息和虚拟内容，以使第二电子设备根据第二地理位置和姿态信息在显示界面的实景图像中展示虚拟内容。信息在显示界面的实景图像中展示虚拟内容。信息在显示界面的实景图像中展示虚拟内容。

【技术实现步骤摘要】
虚实融合展示方法及装置、电子设备和存储介质


[0001]本公开涉及计算机
，尤其涉及一种虚实融合展示方法及装置、电子设备和存储介质。

技术介绍

[0002]在公共场所中，信息的显示通常采用固定展示设施进行展示的方式。由于展示设施相对较少且位置固定，用户需要前往展示设施所在的位置才能查看到相关信息，导致用户的信息获取过程耗时较长。

技术实现思路

[0003]本公开提出了一种虚实融合展示方法及装置、电子设备和存储介质的技术方案。
[0004]根据本公开的一方面，提供了一种虚实融合展示方法，所述方法应用于第一电子设备，所述方法包括：接收第二电子设备发送的视觉定位请求，其中，所述视觉定位请求中包括所述第二电子设备所在的环境图像和所述第二电子设备的第一地理位置；查找与所述第一地理位置对应的第一点云地图，以及根据所述第一点云地图和所述环境图像，确定所述第二电子设备的视觉定位结果，所述视觉定位结果包括所述第二电子设备的第二地理位置和姿态信息；查找与所述第一点云地图对应的虚拟场景地图，以及根据所述虚拟场景地图和所述第二地理位置，确本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚实融合展示方法，其特征在于，所述方法应用于第一电子设备，所述方法包括：接收第二电子设备发送的视觉定位请求，其中，所述视觉定位请求中包括所述第二电子设备所在的环境图像和所述第二电子设备的第一地理位置；查找与所述第一地理位置对应的第一点云地图，以及根据所述第一点云地图和所述环境图像，确定所述第二电子设备的视觉定位结果，所述视觉定位结果包括所述第二电子设备的第二地理位置和姿态信息；查找与所述第一点云地图对应的虚拟场景地图，以及根据所述虚拟场景地图和所述第二地理位置，确定待展示的虚拟内容；向所述第二电子设备发送所述第二地理位置、所述姿态信息和所述虚拟内容，以使所述第二电子设备根据第二地理位置和所述姿态信息在显示界面的实景图像中展示所述虚拟内容。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：对目标区域进行三维空间重建，得到所述目标区域对应的第一点云地图和第一几何网格地图，其中，所述目标区域为包括所述第一地理位置的空间区域；根据所述第一几何网格地图，构建与所述目标区域对应的虚拟场景地图，其中，所述虚拟场景地图与所述第一点云地图之间具有第一映射关系；确定所述第一点云地图与大地坐标系之间的第二映射关系。3.根据权利要求2所述的方法，其特征在于，所述第一地理位置为所述大地坐标系下的地理位置；所述查找与所述第一地理位置对应的第一点云地图，包括：根据所述第二映射关系，查找与所述第一地理位置所在的所述目标空间区域对应的所述第一点云地图。4.根据权利要求2或3所述的方法，其特征在于，所述查找与所述第一点云地图对应的虚拟场景地图，包括：根据所述第一映射关系，查找与所述第一点云地图对应的所述虚拟场景地图。5.根据权利要求1至4中任意一项所述的方法，其特征在于，所述根据所述第一点云地图和所述环境图像，确定所述第二电子设备的视觉定位结果，包括：提取所述环境图像的特征信息；根据所述环境图像的特征信息以及所述第一点云地图，对所述第二电子设备进行视觉定位，确定所述第二电子设备的所述视觉定位结果。6.根据权利要求2至5中任意一项所述的方法，其特征在于，所述对目标区域进行三维空间重建，得到所述目标区域对应的第一点云地图和第一几何网格地图，包括：根据所述目标区域对应的二维地图，构建局部坐标系；对所述目标区域进行三维空间重建，得到所述目标区域对应的第二点云地图和第二几何网格地图；基于所述局部坐标系，将所述第二点云地图、所述第二几何网格地图与所述二维地图进行数据对齐，得到所述第一点云地图和所述第一几何网格地图。7.根据权利要求6所述的方法，其特征在于，所述基于所述局部坐标系，将所述第二点
云地图、所述第二几何网格地图与所述二维地图进行数据对齐，得到所述第一点云地图和所述第一几何网格地图，包括：基于所述局部坐标系，确定所述第二点云地图与所述二维地图之间的第一空间变换矩阵，以及确定所述第二几何网格地图与所述二维地图之间的第二空间变换矩阵；根据所述第一空间变换矩阵对所述第二点云地图进行空间变换操作，得到所述第一点云地图；根据所述第二空间变换矩阵对所述第二几何网格地图进行空间变换操作，得到所述第一几何网格地图。8.根据权利要求6或7所述的方法，其特征在于，所述根据所述第一几何网格地图，构建与所述目标区域对应的虚拟场景地图，包括：根据所述第一几何网格地图，在所述局部坐标下确定虚拟内容编辑空间；在所述虚拟内容编辑空间中进行虚拟内容编辑操作，得到所述虚拟场景地图，其中，所述虚拟场景地图中包括所述第二电子设备在所述第二地理位置时显示界面的实景图像中待展示的虚拟内容。9.根据权利要求6至8中任意一项所述的方法，其特征在于，所述确定所述第一点云地图与大地坐标系之间的第二映射关系，包括：确定所述局部坐标系与所述大地坐标系之间的第三空间变换矩阵；根据所述第三空间变换矩阵，确定所述第二映射关系。10.根据权利要求9所述的方法，其特征在于，所述确定所述局部坐标系与所述大地坐标系之间的第三空间变换矩阵，包括：确定所述目标区域中至少三个第一位置点在所述大地坐标系下的第一坐标信息；确定至少三个所述第一位置点在所述局部坐标系下的第二坐标信息；根据至少三个所述第一位置点在所述大地坐标系下的第一坐标信息，以及至少三个所述第一位置点在所述局部坐标系下的第二坐标信息，确定所述第三空间变换矩阵。11.根据权利要求7至10中任意一项所述的方法，其特征在于，所述基于所述局部坐标系...

【专利技术属性】
技术研发人员：盛崇山，章国锋，
申请(专利权)人：深圳市慧鲤科技有限公司，
类型：发明
国别省市：