一种MR/AR/VR购物和检索场景控制方法、移动终端与可读存储介质技术

一种MR/AR/VR购物和检索场景控制方法、移动终端与可读存储介质通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别相应的物品种类，在网络数据库和内置数据库中检索关联的信息，通过智能眼镜的成像装置进行关联信息的成像，通过实时获取视野中的直观的图像进行数据关联和绑定，省去了用手机进行检索的繁琐以及检索不精确的问题。机进行检索的繁琐以及检索不精确的问题。机进行检索的繁琐以及检索不精确的问题。

【技术实现步骤摘要】
一种MR/AR/VR购物和检索场景控制方法、移动终端与可读存储介质


[0001]本申请涉及增强现实
，具体涉及一种MR/AR/VR购物和检索场景控制方法、移动终端与可读存储介质。

技术介绍

[0002]目前，基于元宇宙的VR眼镜迎来了一波热潮，越来越多的公司和企业宣布加入元宇宙的行列进行相关产品的研发。VR眼镜作为元宇宙的主流产品主打沉浸式和全虚拟，但该类产品由于打造的是全虚拟的世界平台容易让使用者沉迷虚拟世界，逃离现实世界，易于产生降低人均生产效率和生产价值的不良影响。
[0003]同时，在现实生活中经常出现构想或设计的实际复现成本较大且建设周期较长的情况，并且由于现实世界中缺少互动性和趣味性而让越来越多的人选择在网上畅游，并且在现实世界中的行动成本和检索成本较高而让越来越多的人选择在网上购物、点外卖，上述现象都是由于现实世界与虚拟世界还未实现互联互通所导致的。
[0004]因此，将虚拟世界与现实世界在同一个平台上进行融合的系统和方法不仅能预防用户沉浸于虚拟世界，而且降低了现实世界的实现成本提高了现实世界的趣味性、互动性和针对性，该项技术、系统与应用能够真正让人们在体验真实生活的同时享受虚拟生活的便利。

技术实现思路

[0005]一种MR/AR/VR购物场景控制方法包括如下步骤：
[0006]S1.通过在智能眼镜上的界面切换或选择进入购物场景的增强现实界面；
[0007]S2.通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别相应的物品种类；<br/>[0008]S3.在网络数据库和内置数据库中搜索物品种类所关联的信息，通过智能眼镜的成像装置进行关联信息的成像。
[0009]所述的关联信息建模步骤如下：
[0010]S4.通过PC端口、移动端口、智能眼镜端口建立物品的三维模型，包括但不限于物品的三维结构、物理特性等；
[0011]S5.通过端口设置启用该三维模型的特征图像信息，同时设置操作该三维模型的特定手势信息。
[0012]所述的三维模型控制步骤如下：
[0013]S6.通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别相应的物品；
[0014]S7.通过智能眼镜的成像装置对相应的物品进行三维模型的呈现，通过智能眼镜的感知模块获取视野内的图像，识别图像中是否有特征图像信息或特定手势信息，若有特
征图像信息，根据特征图像信息，三维模型根据所设置的物理特性完成尺寸和状态的调整，将调整后的三维模型通过成像装置叠加至特征图像上进行关键适配点的匹配和贴合完成三维模型的使用；若有特定手势信息，根据预先设置的特定手势完成三维模型尺寸、外形、颜色及显示位置的调整。
[0015]所述的S3中所述的通过智能眼镜的成像装置进行关联信息的成像前对相关信息进行筛选，筛选步骤如下：
[0016]S8.通过后置摄像头对眼球信息进行捕捉，获取当下时刻眼球的光学焦点，将该焦点投射至感知模块所获取到的图像上，确定焦点是否在识别出的物体范围内；
[0017]S9.若焦点在识别出的某一物体范围内，且焦点停留时间超过设定阈值，通过成像装置对该物体的关联信息进行显示，否则不显示相关物体的关联信息。
[0018]所述的关联信息的成像选择包括如下步骤：通过感知模块所获取的图像信息完成识别物品在真实世界中是三维物体还是二维物体的识别，若识别物品为三维物体则进行物品信息的成像，若识别物品为二维物体则进行三维模型的成像。
[0019]所述的关联信息的成像选择包括如下步骤：通过感知模块所获取的图像信息完成物品识别，若所识别的物品被系统标注为不可接触使用的物品或被系统标注为内部构造需被观看的物品，则优先进行三维模型的成像。
[0020]一种MR/AR/VR检索场景控制方法包括如下步骤：
[0021]S10.通过在智能眼镜上的界面切换或选择进入检索场景的增强现实界面；
[0022]S11.通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别图像中的特征点并完成特征对象的锁定，通过通信模块将该特征对象数据上传至服务器；
[0023]S12.将服务器中网络数据库和内置数据库存储的特征对象所关联的信息通过通信模块回传至智能眼镜，通过智能眼镜的成像装置进行关联信息的成像。
[0024]所述的关联信息包括其他用户对特征对象所上传的文字数据、语音数据、图像数据，其他端口对特征对象所上传的文字数据、语音数据、图像数据。
[0025]一种移动终端，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现控制方法的步骤。
[0026]一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现所述的控制方法的步骤。
附图说明
[0027]图1为本申请基于增强现实的智能眼镜系统硬件逻辑框图；
[0028]图2为本申请与手机互联的智能眼镜系统硬件逻辑框图；
[0029]图3为本申请实施例一内部逻辑图；
[0030]图4为本申请实施例一外部呈现图；
[0031]图5为本申请实施例二界面呈现图；
[0032]图6为本申请实施例二外部框架图；
[0033]图7为本申请实施例二内部逻辑图；
[0034]图8为本申请实施例三界面呈现图；
[0035]图9为本申请实施例三外部框架图；
[0036]图10为本申请实施例四内部逻辑图；
[0037]图11为本申请实施例五内部逻辑图。
具体实施方式
[0038]下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。
[0039]如图1所示，一种基于增强现实的智能眼镜系统硬件包括若干VR/AR/MR智能眼镜接入设备、服务器以及基于服务器的若干多层互联网区域，其中所述的VR/AR/MR智能眼镜接入设备通过无线通讯与服务器相连，所述的服务器上运行着所述的若干多层互联网区域，所述的互联网区域可视为某一虚拟世界的切片，所述的若干切片可以叠加以特定数量组合成新的切片，用户可通过所述的VR/AR/MR智能眼镜接入设备选择某一切片进行投射。在VR/AR/MR智能眼镜接入设备对所述的互联网区域进行数据获取，即进行信息检索和信息交互功能时：所述的服务器将根据所选切片所对应的目标信息数据对所述的VR/AR/MR智能眼镜接入设备所上传的实时数据进行筛选和分类，保留特定数据，所述的VR/AR/MR智能眼镜接入设备与所述的服务器上的该切片完成特定信息数据的关联和交互，所述的服务器上的该切片根据特定信息数据的确认将该信息数据所对应的多维数据传输至所述的VR/AR/MR智能眼镜接入设备进行投射。所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种MR/AR/VR购物场景控制方法，其特征在于包括如下步骤：S1.通过在智能眼镜上的界面切换或选择进入购物场景的增强现实界面；S2.通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别相应的物品种类；S3.在网络数据库和内置数据库中搜索物品种类所关联的信息，通过智能眼镜的成像装置进行关联信息的成像。2.根据权利要求1所述的控制方法，其特征在于所述的关联信息建模步骤如下：S4.通过PC端口、移动端口、智能眼镜端口建立物品的三维模型，包括但不限于物品的三维结构、物理特性等；S5.通过端口设置启用该三维模型的特征图像信息，同时设置操作该三维模型的特定手势信息。3.根据权利要求2所述的控制方法，其特征在于所述的三维模型控制步骤如下：S6.通过智能眼镜的感知模块获取视野内的图像，通过算法对图像进行识别，识别相应的物品；S7.通过智能眼镜的成像装置对相应的物品进行三维模型的呈现，通过智能眼镜的感知模块获取视野内的图像，识别图像中是否有特征图像信息或特定手势信息，若有特征图像信息，根据特征图像信息，三维模型根据所设置的物理特性完成尺寸和状态的调整，将调整后的三维模型通过成像装置叠加至特征图像上进行关键适配点的匹配和贴合完成三维模型的使用；若有特定手势信息，根据预先设置的特定手势完成三维模型尺寸、外形、颜色及显示位置的调整。4.根据权利要求1所述的控制方法，其特征在于所述的S3中所述的通过智能眼镜的成像装置进行关联信息的成像前对相关信息进行筛选，筛选步骤如下：S8.通过后置摄像头对眼球信息进行捕捉，获取当下时刻眼球的光学焦点，将该焦点投射至感知模块所获取到的图像上，确定焦点是否在识别出的物体范围内；S9.若焦点在识别出的某一物体范围内，且焦点停留时间超过设定阈值，通过成像装置对...

【专利技术属性】
技术研发人员：王雪燕，黄正宗，王亮，陈霖，张玉江，蔡雍稚，
申请(专利权)人：浙江科顿科技有限公司，
类型：发明
国别省市：