一种基于增强现实技术的无人超市购物协助方法及系统技术方案

本发明专利技术提供的一种基于增强现实技术的无人超市购物协助方法及系统，其中该方法包括：对增强现实眼镜定位并实时更新位置；接收输入的语音信息并进行语义识别得到商品信息；根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。本发明专利技术通过语音识别以及AR导航使得用户说出想要的商品信息则可以被增强现实眼镜通过AR导航至相应的地点，相较于现有技术中依靠导航指示牌或导购人员带领，本发明专利技术不仅能实现无人导航，并且能够使用户“沉浸”到该环境中，让购物消费者拥有更加清晰和沉浸式的导航服务和购物体验。

【技术实现步骤摘要】
一种基于增强现实技术的无人超市购物协助方法及系统
本专利技术涉及增强现实
，尤其涉及一种基于增强现实技术的无人超市购物协助方法及系统。
技术介绍
目前以及未来，大型超市复杂的室内场所，上万种超市商品、图书馆众多的书籍等，并且在人们的生活中会出现越来越多的种类。在这些复杂的室内环境中，人们为了找到所需目标，很快找到自己希望采购的种类或品牌，现有技术是求助于墙壁上的室内规划图，或者向营业员或者陌生人打听方位以及自己的寻找。尤其在未来的大型无人超市，一般情况下，零售业做为最末端销售，主要依靠服务价值品牌+情感价值+产品的价格的形式展开销售模式。大部分消费者对销售价格比较敏感，假如说销售的价格相对差不多的情况下，想要消费者心动，产生购买意愿的主要因素是现场服务价值品牌+情感价值，而这部分正是无人超市缺失的部分。超市及超级市场，顾客自我服务，初期的超市和无人超市只有少量的货品，目前的超市有五金，食品，服装，化妆品等等达到几万种商品，内设咖啡厅，电影院等等一系类服务。无人超市是指超市里没有营业员，购物、付款全部由顾客自助完成。普通超市是指有营业员介绍商品的名称，价格，用法，用途等，并且有人工结账。增强现实技术：增强现实技术(AugmentedReality，简称AR)，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。目前的成功产品有微软Hololens,Meta公司的Meta2。基于RFID的定位系统：RFID系统由RFID标签和RFID阅读器以及他们之间的通信组成。每个RFID标签具有唯一的标识符，即唯一的ID，他连接到某个对象上。用户用他的RFID阅读器读取RFID标签的唯一ID，使用户能够识别与RFID标签所连接的对象。将射频识别技术用于室内定位领域是目前RFID的一个热点。然而，目前，复杂的室内场所，上万种超市商品、图书馆众多的书籍等，并且在人们的生活中会出现越来越多的种类。在这些复杂的室内环境中，人们为了找到所需目标，很快找到自己希望采购的种类或品牌，现有技术是求助于墙壁上的室内规划图，或者向营业员或者陌生人打听方位以及自己的寻找。尤其在未来的大型无人超市，一般情况下，零售业做为最末端销售，主要依靠服务价值品牌+情感价值+产品的价格的形式展开销售模式。大部分消费者对销售价格比较敏感，假如说销售的价格相对差不多的情况下，想要消费者心动，产生购买意愿的主要因素是现场服务价值品牌+情感价值，而这部分正是无人超市缺失的部分。
技术实现思路
本专利技术提供了一种基于增强现实技术的无人超市购物协助方法及系统，给消费者提供了清晰、实时的购物导航路线，同时进行商品介绍。本专利技术提供的一种基于增强现实技术的无人超市购物协助方法，包括：对增强现实眼镜定位并实时更新位置；接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至服务器；根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。优选地，所述接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中之后还包括：获取商品的二维码信息，并根据二维码信息从服务器下载对应的商品介绍视频进行播放。优选地，所述对增强现实眼镜定位并实时更新位置具体包括：通过RFID读写器对位于增强显示眼镜上的RFID标签进行识别处理；将识别后的RFID数据信息中转到ZIGBEE无线传输基站再传输到定位数据处理中心；通过定位算法进行数据定位处理计算出增强现实眼镜的位置、实时更新位置并储存相关数据。优选地，所述获取商品的二维码信息，并根据二维码信息从服务器下载对应的商品介绍视频进行播放之前还包括：根据增强现实眼镜位置信息和商品位置信息确定增强现实眼镜与商品的距离小于预设的阈值。优选地，所述根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径具体为：根据商品信息匹配商品位置数据库中的商品三维位置信息，并根据增强现实眼镜三维位置信息、商品三维位置信息和数据库中的超市三维空间布局图规划出最优三维路径并实时更新三维路径。本专利技术提供的一种基于增强现实技术的无人超市购物协助系统，包括：增强现实眼镜、服务器、室内定位跟踪系统；所述增强现实眼镜与所述服务器通信连接；所述室内定位跟踪系统与所述服务器通信连接；所述室内定位跟踪系统用于对增强现实眼镜定位并实时更新位置；所述增强现实眼镜用于接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至服务器；所述服务器用于根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；所述增强现实眼镜还用于接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。优选地，所述增强现实眼镜还用于获取商品的二维码信息，并根据二维码信息从服务器下载对应的商品介绍视频进行播放。优选地，所述室内定位跟踪系统具体包括：RFID数据采集系统，用于通过RFID读写器对位于增强显示眼镜上的RFID标签进行识别处理；ZIGBEE无线传输基站，用于从所述RFID数据采集系统接收识别后的RFID数据信息再传输到定位数据处理中心；定位数据处理中心，用于通过定位算法进行数据定位处理计算出增强现实眼镜的位置、实时更新位置并储存相关数据；所述RFID数据采集系统与所述ZIGBEE无线传输基站通信连接，所述ZIGBEE无线传输基站与所述定位数据处理中心通信连接。优选地，所述增强现实眼镜包括：语义识别模块，用于接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至所述服务器；AR模块，用于接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中；RFID标签，用于被识别检测实现定位；摄像机，用于拍摄图像和获取商品的二维码信息；通信模块，用于与所述服务器通信并根据二维码信息从服务器下载对应的商品介绍视频；显示模块，用于显示AR图像及商品介绍视频；所述增强现实眼镜还包括眼镜本体，所述语义识别模块、AR模块、RFID标签、摄像机、通信模块和所述显示模块安装在所述眼镜本体上。优选地，所述服务器还用于根据增强现实眼镜位置信息和商品位置信息确定增强现实眼镜与商品的距离小于预设的阈值。从以上技术方案可以看出，本专利技术具有以下优点：本专利技术提供的一种基于增强现实技术的无人超市购物协助方法及系统，其中该方法包括：对增强现实眼镜定位并实时更新位置；接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至服务器；根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。本专利技术通过语音识别以及AR导航使得用户说出想要的商品信息则可以被增强现实眼镜通过A本文档来自技高网...

【技术保护点】
1.一种基于增强现实技术的无人超市购物协助方法，其特征在于，包括：对增强现实眼镜定位并实时更新位置；接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至服务器；根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。

【技术特征摘要】
1.一种基于增强现实技术的无人超市购物协助方法，其特征在于，包括：对增强现实眼镜定位并实时更新位置；接收输入的语音信息并进行语义识别，将识别后的包含商品信息的语义信息发送至服务器；根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径；接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中。2.根据权利要求1所述的一种基于增强现实技术的无人超市购物协助方法，其特征在于，所述接收路径信息并根据路径信息生成导航图像通过增强现实技术叠加到AR图像中之后还包括：获取商品的二维码信息，并根据二维码信息从服务器下载对应的商品介绍视频进行播放。3.根据权利要求1所述的一种基于增强现实技术的无人超市购物协助方法，其特征在于，所述对增强现实眼镜定位并实时更新位置具体包括：通过RFID读写器对位于增强显示眼镜上的RFID标签进行识别处理；将识别后的RFID数据信息中转到ZIGBEE无线传输基站再传输到定位数据处理中心；通过定位算法进行数据定位处理计算出增强现实眼镜的位置、实时更新位置并储存相关数据。4.根据权利要求2所述的一种基于增强现实技术的无人超市购物协助方法，其特征在于，所述获取商品的二维码信息，并根据二维码信息从服务器下载对应的商品介绍视频进行播放之前还包括：根据增强现实眼镜位置信息和商品位置信息确定增强现实眼镜与商品的距离小于预设的阈值。5.根据权利要求1所述的一种基于增强现实技术的无人超市购物协助方法，其特征在于，所述根据商品信息匹配商品位置数据库中的商品位置信息，并根据增强现实眼镜位置信息、商品位置信息和数据库中的超市三维空间布局图规划出最优路径并实时更新路径具体为：根据商品信息匹配商品位置数据库中的商品三维位置信息，并根据增强现实眼镜三维位置信息、商品三维位置信息和数据库中的超市三维空间布局图规划出最优三维路径并实时更新三维路径。6.一种基于增强现实技术的无人超市购物协助系统，其特征在于，包括：增强现实眼镜、服务器、室内定位跟踪系统；所述增强现实眼镜与所述服务器通信连接；所述室内定位跟踪系统与所述服务器通信连接；所述室内定位跟踪系统用于对所述增强现实眼镜定位并实时更新位置；所述增强现...

【专利技术属性】
技术研发人员：李志，胡孝义，
申请(专利权)人：广东工业大学，
类型：发明
国别省市：广东,44