【技术实现步骤摘要】
本专利技术涉及计算机应用领域，尤其涉及一种基于在线交互和场景识别的导盲系统。
技术介绍
1、传统的盲杖是视障人士出行的主要认知手段，通过使用盲杖与地面和周围物体进行碰撞探测，实现了对前方障碍物的感知，从而建立对当前环境和前方路径的认知。但是在人多、场景复杂的场所，很容易因为场景开阔、道路相似等问题，丧失方向感。
2、目前基于信息化技术实现的智能化导盲系统，使用了包括gps定位、导航、图像识别、声音辅助等技术，可以初步实现传统盲杖的功能替代，为视障人士的出行提供了更为广泛的选择。
3、目前大多数的智能导盲系统，可以实现障碍物检测、斑马线检测、路径规划、路线指示等功能，但是其频繁的提示可能干扰视障人士对当前场景的判断；并且在面对复杂场景丧失方向感的时候，也无法针对性地为视障人士提供当前的场景，无法使其重建方向感。
4、针对上述问题，本专利技术通过按键和语音交互的方式，结合后台系统辅助的在线交互，实现视障人士对周围环境的感知，为其重建方向感和寻找路径提供帮助。
技术实现思路
1、本专利技术提供一种基于在线交互和场景识别的导盲系统，包括：
2、（1）装在眼镜上的摄像头：带电池和无线网络，可以将当前图像传到后端的智能手机；
3、（2）无线耳机：带电池和蓝牙，可以将智能手机发出的声音信息传递到使用者耳朵；
4、（3）带按键和震动装置的盲杖：带电池和无线网络，可以根据智能手机的震动指令产生震动，并使用盲杖上的按键与智能手机和
5、（4）智能手机：带卫星导航定位功能，带无线方式连接摄像头、无线耳机和盲杖；带无线网络连接互联网；其上部署实现本专利技术功能的本地软件；
6、（5）本地软件：部署在使用者身上的智能手机端的软件，通过无线方式连接所述摄像头、所述无线耳机、所述盲杖；通过无线网络连接互联网；
7、（6）后台系统：部署在互联网上的后端软件，可通过与所述本地软件的连接，获取本地软件保存的检测信息、用户交互信息、所述摄像头的实时画面。
8、所述一种基于在线交互和场景识别的导盲系统，还包括：
9、（1）使用者通过本地软件中的电子地图实现到目的地的步行路径规划，获得详细路线，并将路线区分为路径点和路径线两种类型；包括：
10、路径点是一个有边界的封闭区域，可以用多边形或圆形近似；
11、路径线是一个有宽度的封闭区域，可以用有宽度的线段表示；
12、所有路径点和路径线相连，构成全路径；
13、路径点或路径线连入下一路径线的连接部分，称为路径入口点；
14、（2）在路径规划完成后，本地软件将详细路线信息通过语音播报的方式传递给使用者，并上传到所述后台系统；
15、（3）使用者在行走时，打开卫星导航定位功能进行实时定位，并按照本地软件规划的详细路线前进；
16、（4）当行走在路线中类型为路径线的路线上时，自动检测前方场景和当前方向，并上传后台系统；
17、（5）当行走在当行走在路线中类型为路径点的路线上时，自动检测周围场景和当前方向，以及前方路径入口点，并上传后台系统；
18、（6）当迷失方向时，通过按键询问本地软件当前的场景和方向，获取前进方向、前方路径入口点信息；并根据设置的提示级别和当前危险程度进行提示，包括：
19、自动模式：当前检测到的情形属于危险状态时，给与语音和震动提示；
20、手动模式：将存储的检测结果，在按动按钮时，通过语音进行播报；
21、不同的检测内容，可以设置不同的提示模式；
22、（7）当本地软件的回应不能满足要求时，通过按键呼叫后台系统进行在线交互，获得前进方向、前方路径入口点信息；并根据设置的提示级别和当前危险程度进行提示；
23、在线交互时，后台系统可以获取所述摄像头拍摄的实时视频信息；
24、后台系统可以让使用者原地转动一圈，获得所述摄像头拍摄的周围场景实时视频信息；
25、后台系统可以获取本地软件获取的所有信息，从而为使用者提供前进方向、前方路径入口点信息；
26、后台系统可以是人工模式，也可以是人工智能ai模式；
27、（8）本地软件以及后台系统的回应，可以通过语音、震动的方式提示用户。
28、通过上述检测和提示，可增加视障人士在行进中的方向感，更加方便地在规划路径上行走；从而完成在规划路径上的步行导航。
29、本专利技术通过卫星定位导航系统实现定位，通过电子地图实现路径规划和导航，通过在行进过程中的实时场景检测；本地软件在行进过程中可进行实时场景检测，使用者可通过按键与本地系统进行交互；在需要时通过与远端的后台系统进行在线交互，让后台系统也可以清楚和直观地获得当前态势，从而指导使用者进行前进，从而更加增强了对前方或周围场景的感知能力，实现了对盲杖功能增强的目的；本专利技术在使用过程中尽管需要后端计算支持，但是仅仅是一种增强和辅助手段，使用离线方式也可以完成步行导航，具有结构简单、使用方便的优点。
本文档来自技高网...【技术保护点】
1.一种基于在线交互和场景识别的导盲系统，其特征在于，包括：
【技术特征摘要】
1.一种基于在线交互和场景识别...
【专利技术属性】
技术研发人员：冯子亮，张炬，冉旭松，林青峰，陈礼浩，李硕涵，
申请(专利权)人：四川大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。