基于OpenCV图像识别的盲人拐杖控制系统及方法技术方案

本发明专利技术公开了一种基于OpenCV图像识别的盲人拐杖控制系统及方法，所述基于OpenCV图像识别的盲人拐杖控制系统设置有：路况检测模块，用于实现对前方未知路况的检测，当遇到前方的障碍物，做出相应的响应提醒盲人用户；紧急呼叫模块，采用SIM900A通信模块，用于盲人用户实现在通过控制智能拐杖上的按键向指定好的电话号码拨打电话，实现了一键拨打电话；人员定位模块，利用Wi‑Fi定位技术，通过检测Wi‑Fi信号强度，结合KNN算法来实现定位，并将该位置信息以短信的形式发送给家人。本发明专利技术基于OpenCV图像识别技术来实现其路况识别的功能，实时帮助盲人用户了解前方的路况；有效地保证盲人的出行安全问题。

【技术实现步骤摘要】

本专利技术属于图像识别
，尤其涉及一种基于OpenCV图像识别的盲人智能拐杖控制系统及方法。
技术介绍
图像识别技术是人工智能的一个重要领域，是利用计算机对图像进行处理、分析和理解，以识别各种不同模式的目标和对象的技术。图像识别经历了三个发展阶段：文字识别、数字图像处理与识别和物体识别。文字识别的研究始于1950年，应用于字母、数字和符号的识别，以及从印刷文字到手工文字的识别；数字图像处理与识别的研究始于1965年，数字图像相比于模拟图像具有存储方便可压缩、传输不易失真等优势，为图像识别技术的发展提供强大的动力；物体的识别主要是指对三维世界的客体和环境的感知及认识，属于高级的计算机视觉范畴，它是以数字图像处理与识别为基础，结合人工智能、系统学等学科的研究方向，其研究成果被广泛应用在各种工业及探测机器人上。目前，市场上盲人使用的最多的就是传统的导盲拐杖和导盲犬，由于导盲犬的训练周期长、成本较高、动物习性不好控制等诸多问题，所以更多的人选择拐杖。然而传统意义上的盲人拐杖的结构简单，实现的功能也比较普通，存在很多的不足，诸如不能对前方将要靠近的障碍物进行语音提醒、不能在盲人遇到紧急状况下向家人求助等。国内学者研制的随身便携式导盲仪，虽然其体积小，轻便好用，但没有辅助支撑功能，对身有残疾以及腿脚不便的人，仍然需要拐杖辅助行走等技术不足。综上所述，针对目前市场上盲人智能拐杖安全性低、功能单一，无法实现较好的导盲效果这一问题，结合图像识别技术，提出了一种基于OpenCV图像识别的盲人拐杖控制系统。
技术实现思路
本专利技术的目的在于提供一种基于OpenCV图像识别的盲人拐杖控制系统及方法，旨在解决目前市场上智能拐杖安全性低、功能单一，无法实现较好的导盲效果的这一问题。本专利技术是这样实现的，一种基于OpenCV图像识别的盲人拐杖控制系统，所述基于OpenCV图像识别的盲人拐杖控制系统设置有：路况检测模块，用于实现对前方未知路况的检测，当遇到前方的障碍物时，系统会做出相应的响应提醒盲人用户；紧急呼叫模块，采用SIM900A通信模块，用于盲人用户实现在通过控制智能拐杖上的按键向指定好的电话号码拨打电话，实现了一键拨打电话；人员定位模块，利用Wi-Fi定位技术，通过检测Wi-Fi信号强度，结合KNN算法来实现定位。进一步，所述路况检测模块包括：模型构建模块，利用SURF算法进行特征值的提取，使用OpenCV来检测特征点，并抽取其特征点描述符，把提取出来的特征值传递给OpenCV进行训练，得到预先指定数量的类别；统计出每张图像样本的特征点在各个类别中出现的频率，构造出每张图片的bagofwords；训练分类模块，利用SVM分类器进行分类，对每一个类别都训练一个二元分类器；对于待分类图片的特征向量，使用每一个分类器计算分在该类的可能性，选择可能性最高的类别作为这个特征向量的类别；实时场景输入模块，通过按键来对当前画面进行捕捉，对其进行模型的构建，并将其特征向量作为系统的输入数据进行识别分类，最终以语音播报的形式反馈给盲人用户。进一步，所述基于OpenCV图像识别的盲人拐杖控制方法的模型构建模块包括：(1)通过对大数据样本进行图像预处理，主要是对原图像样本进行归一化处理，使得图像的一些特征在特定变换下具有不变的性质，进而对每个图像样本进行SURF特征点提取，SURF整体思想流程等同于SIFT，而整个过程中采用了与SIFT不同的方法，为了实现尺度不变性的特征点检测与匹配，SURF算法利用Hessian矩阵确定候选点，生成尺度空间，然后用非极大值抑制初步确定特征点和精确定位特征点，确并定特征点的主方向，最后构造SURF特征点描述算子，从而可以得到每个样本的特征值；(2)利用K-means算法将提取的每个样本的特征值划分成k个聚类，以空间中k(本系统中目标分类的类别k分别为：树、台阶、汽车和人行横道)个点为中心进行聚类，对最靠近他们的对象归类。通过迭代的方法，逐次更新各聚类中心的值，直至得到最好的聚类结果，以达到同一聚类中的对象相似度较高，不同聚类中的对象相似度较小，从而得到k组向量，每个向量都代表某个类别的feature的中心点；(3)构造BagOfWords模型，即图像中所有图像块的特征向量得到的直方图，BOW是用来表示图像的描述特征的。统计这K个聚类在每个样本特征值中所占的比例，通过K-means聚类算法后，得到k个新的聚类中心，即得到了特征直方图的一个基，然后将图像的特征点聚类到k个已经生成的词典(即n个聚类中心)中，并且统计落入每个词典中的特征点的个数。最终可以得到一幅图像的特征直方图，这样就可以将每张图片表示成K维数值向量。本专利技术的另一目的在于提供一种所述基于OpenCV图像识别的盲人拐杖控制系统的基于OpenCV图像识别的盲人拐杖控制方法，所述紧急呼叫模块采用SIM900A通信模块，安装SIM卡，插上耳机和耳麦后通过控制智能拐杖上的按键向指定好的电话号码拨打电话。本专利技术的另一目的在于提供一种所述基于OpenCV图像识别的盲人拐杖控制系统的基于OpenCV图像识别的盲人拐杖控制方法，所述人员定位模块通过检测Wi-Fi信号强度，结合KNN算法来实现定位。进一步，所述基于OpenCV图像识别的盲人拐杖控制方法的人员定位方法包括：1)、通过Wi-FiInfo获取当前位置附近的RSSI信息，利用开源的WiFiManager类库，可以使应用程序方便地实现Wi-Fi连接，其中封装好的Wi-Fi扫描函数可轻松扫描设备通信范围内的所有AP热点，同时可显示接入点的SSID、MAC地址、IP和经量化处理的RSSI；2)、利用机器学习相关的匹配算法，对实测数据与储存在程序中的数据进行对比，搜索到一组和测量典型匹配的数据。通过待测点接收到来自第j个AP的RSSI和第i个参考点接收到来自第j个AP的RSSI值算出欧几里得距离dis。每个参考点都有两个参数第一个是在该位置某一时刻接收Wi-Fi1的信号强度，第二个是在该位置另一时刻接收Wi-Fi2的信号强度。然后利用KNN算法在dis中从小到大选择K个参考点，通过参考点的实际坐标使用均值法计算出待测点的坐标，进而估算出待测点的位置。本专利技术的另一目的在于提供一种安装有所述基于OpenCV图像识别的盲人拐杖控制系统的拐杖。本专利技术提供的基于OpenCV图像识别的盲人拐杖控制系统及方法，基于OpenCV图像识别技术来实现其路况识别的功能，实时帮助盲人用户了解前方的路况；有效地保证盲人的出行安全问题。本专利技术与现有技术相比，具有以下优势：(1)本专利技术没有借助外界的超声波等辅助硬件即可实现识别功能，实用性强，开发成本低，能耗少。本专利技术基于VisualStudio2013并使用C++语言在Windows平台下进行开发，因此开发成本低。(2)本专利技术采用了SURF特征提取算法进行特征值的提取，安全性高，效率相对较高，SURF特征提取算法是实质上是改进板的SIFT算法，一般来说，SURF算法的效率是SIFT算法的3倍左右，而检测出的特征点的个数是SIFT算法的1/3左右，当然也和图像大小、纹理复杂程度、算法参数设置有关；对于SURF算法，它采用Hessian矩阵确定候选点，然后进行非极大抑制，降低了计算复杂度。本文档来自技高网...

【技术保护点】
一种基于OpenCV图像识别的盲人智能拐杖控制系统，其特征在于，所述基于OpenCV图像识别的盲人拐杖控制系统设置有：路况检测模块，用于实现对前方未知路况的检测，当遇到前方的障碍物时，系统会对前方的障碍物识别分类，将识别结果以语音播报的形式告知盲人；紧急呼叫模块，采用SIM900A通信模块，用于盲人用户实现在通过控制智能拐杖上的按键向指定好的电话号码拨打电话，实现了一键拨打电话；人员定位模块，利用Wi‑Fi定位技术，通过检测Wi‑Fi信号强度，结合KNN算法来实现定位，并将该位置信息以短信的形式发送给家人。

【技术特征摘要】
1.一种基于OpenCV图像识别的盲人智能拐杖控制系统，其特征在于，所述基于OpenCV图像识别的盲人拐杖控制系统设置有：路况检测模块，用于实现对前方未知路况的检测，当遇到前方的障碍物时，系统会对前方的障碍物识别分类，将识别结果以语音播报的形式告知盲人；紧急呼叫模块，采用SIM900A通信模块，用于盲人用户实现在通过控制智能拐杖上的按键向指定好的电话号码拨打电话，实现了一键拨打电话；人员定位模块，利用Wi-Fi定位技术，通过检测Wi-Fi信号强度，结合KNN算法来实现定位，并将该位置信息以短信的形式发送给家人。2.如权利要求1所述的基于OpenCV图像识别的盲人拐杖控制系统，其特征在于，所述路况检测模块包括：模型构建模块，利用SURF算法进行特征值的提取，使用OpenCV来检测特征点，并抽取其特征点描述符，把提取出来的特征值传递给OpenCV进行训练，得到预先指定数量的类别；统计出每张图像样本的特征点在各个类别中出现的频率，构造出每张图片的bagofwords；训练分类模块，利用SVM分类器进行分类，对每一个类别都训练一个二元分类器；对于待分类图片的特征向量，使用每一个分类器计算分在该类的可能性，选择可能性最高的类别作为这个特征向量的类别；实时场景输入模块，通过按键来对当前画面进行捕捉，对其进行模型的构建，并将其特征向量作为系统的输入数据进行识别分类，最终以语音播报的形式反馈给盲人用户。3.如权利要求1所述的基于OpenCV图像识别的盲人拐杖控制...

【专利技术属性】
技术研发人员：郑东，赵旭康，张美玲，张应辉，
申请(专利权)人：西安邮电大学，
类型：发明
国别省市：陕西;61