辅助盲人购物的方法及装置制造方法及图纸

本申请公开了一种辅助盲人购物的方法及装置。其中，盲人的穿戴设备中设置有摄像模块，该方法包括：基于摄像模块判断摄像模块感知图像是否有完整的物体边框信息；若没有完整的物体边框信息，且在盲人未确定决定购买的商品的情况下，生成距离商品过近的提醒，以使盲人在提醒下调整位置，从而确定商品的完整信息。本申请可使盲人在购物场所自行挑选喜欢的商品。申请可使盲人在购物场所自行挑选喜欢的商品。申请可使盲人在购物场所自行挑选喜欢的商品。

【技术实现步骤摘要】
辅助盲人购物的方法及装置


[0001]本申请涉及导购
，特别是涉及一种辅助盲人购物的方法及装置。

技术介绍

[0002]目前，针对盲人去大型超市购物这一诉求主要的解决方案是在他们家人的陪同下，或者是在商场导购以及服务人员的帮助下指导盲人获得想要的商品种类，完成整个购物流程。盲人自行去超市享受沉浸式购物体验的方法目前还不完善，存在较多缺点与不足之处，而且受外界影响因素较大，实现起来难度也比较大。

技术实现思路

[0003]本申请提供一种辅助盲人购物的方法及装置，可以使盲人在购物场所自行挑选喜欢的商品。
[0004]为达到上述目的，本申请提供一种辅助盲人购物的方法，盲人的穿戴设备中设置有摄像模块，该方法包括：
[0005]基于摄像模块判断摄像模块感知图像是否有完整的物体边框信息；
[0006]若没有完整的物体边框信息，且在盲人未确定决定购买的商品的情况下，生成距离商品过近的提醒，以使盲人在提醒下调整位置，从而确定商品的完整信息。
[0007]其中，该方法还包括：
[0008]若没有完整的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种辅助盲人购物的方法，其特征在于，所述盲人的穿戴设备中设置有摄像模块，所述方法包括：基于所述摄像模块判断所述摄像模块感知图像是否有完整的物体边框信息；若没有完整的物体边框信息，且在所述盲人未确定决定购买的商品的情况下，生成距离商品过近的提醒，以使所述盲人在所述提醒下调整位置，从而确定所述商品的完整信息。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：若没有完整的物体边框信息，利用局部区域检测算法检测所述商品的感兴趣区域，并对所述感兴趣区域进行特征提取比对，以确定所述商品的信息。3.根据权利要求2所述的方法，其特征在于，所述利用局部区域检测算法检测所述商品的感兴趣区域的步骤包括：利用Harris
‑
Laplace算法提取所述摄像模块采集的商品图像中的角点，对提取的角点进行聚类连接，以确定所述商品的感兴趣区域。4.根据权利要求3所述的方法，其特征在于，所述利用Harris
‑
Laplace算法提取所述摄像模块采集的商品图像中的角点的步骤包括：利用下述的Laplace特征提取算子公式提取所述商品图像中的边缘特征和角点特征；|σ2(I
xx
(X,σ))+L
yy
(X,σ)|；其中，所述σ是尺度，I
xx
和L
yy
是所述商品图像的二阶导数。5.根据权利要求2所述的方法，其特征在于，所述生成距离商品过近的提醒的步骤之后包括：在所述盲人基于所述提醒将位置调整至所述摄像模块感知图像内具有完整的物体边框信息的情况下，对所述摄像模块感知图像的每一个物体边框内的商品图像进行光学字符识别，以确定所述商品的完整信息。6.根据权利要求5所述的方法，其特征在于，所述方法还包括：通过语音设备播放所确定的所述商品的信息；基于所述语音设备采集的所述盲人语音确定所述盲人决定购买的商品；基于所述摄像模块确定所述盲人手部和所述决定购买的商品之间的相对位置，利用所述语音设备并基于所述相对位置动态提示所述盲人，直至所述盲人拿取到所述决定购买的商品。7.根据权利要求1所述的方法，其特征在于，所述穿戴设备为手套，所述基于所述摄像模块判断所述摄像模块感知图像是否有完整的物体边框信息，包括：基于所述手套上的摄像模块实时判断所述摄像模块感知图像是否有完整的物体边框信息；若有完整的物体边框信息，对所述摄像模块感知图像的每一个物体边框内的商品图像进行光学字符识别，以确定所述摄像模块感知图像内每一个商品的完整信息，并通过语音设备播放所述摄像模块感知图像的所有商品的信息。8.根据权利要求1所述的方法，其特征在于，所述基于所述摄像模块判断所述摄像模块感知图像是否有完整的物体边框信息的步骤之前包括：通过语音设备确定所述盲人拟定购买的商品的...

【专利技术属性】
技术研发人员：吕万杰，徐桢，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：