【技术实现步骤摘要】
一种基于RGB-D相机和立体声的视障人士障碍物预警眼镜
本专利技术属于视障人士辅助技术、双目视觉技术、三维环境感知技术、立体声交互
本专利技术包含一种基于RGB-D相机和立体声的视障人士障碍物预警眼镜,涉及一种利用利用红外投射器投射不可见的近红外静态散斑,利用两个红外相机和一个RGB相机采集图像,小型处理器对采集的图像进行处理,获取深度图像,并对深度图像进行分块,最后将分块的深度信息,转化为立体声信号,最后利用骨传导耳机传递给视障人士进行辅助的障碍物预警眼镜。
技术介绍
根据世界健康组织统计,全世界有2.85亿视觉障碍人士。视障人士损失了正常的视觉,对颜色、形状、距离、运动的理解都很困难,他们的生活在起居、出行等方面都受到了巨大的影响。传统的视障人士辅助工具比如盲人手杖,视障人士需要反复移动手杖,才能获知面前的情况,既费时也费力。盲人手杖的探测距离有限,只能检测脚边的障碍物,也无法反映远处和空中的状况。导盲犬可以为视障人士提供帮助,但是导盲犬的训练和养护费用是高昂的,普通家庭难以承担。有些场合,导盲犬不能陪同盲人进入,比如公交车和火车站,因此导盲犬的辅助是有局限性的。仿生眼可以帮助视障人士恢复部分视觉,但仿生眼的植入需要手术,费用高昂。仿生眼只适用于视网膜色素变性或老年性黄斑变性导致失明的盲人。视觉神经损坏的视障人士无法通过植入仿生眼来恢复部分视觉。电子式的视障辅助工具主要运用超声波技术、激光测距技术、双目视觉技术、激光散斑编码技术、激光雷达技术、毫米波雷达技术、热成像技术、全球定位系统(GPS)。基于超声波技术和激光测距技术的测距范围有限,只能实 ...
【技术保护点】
一种基于RGB‑D相机和立体声的视障人士障碍物预警眼镜,所述眼镜包含眼镜本体、一个红外投射器,两个相同的红外相机,一个彩色相机,一个USB集线器,一个小型处理器,一个骨传导耳机模块,两个骨传导震动模块,一个电池模块。所述一个红外投射器,两个相同的红外相机,一个彩色相机,一个USB集线器,一个小型处理器,一个骨传导耳机模块,两个骨传导震动模块,一个电池模块均固定在镜架上,其中,两个相同的红外相机,一个彩色相机的光轴彼此平行,两个相同的红外相机分别固定在两个镜片的正上方,彩色相机和红外投射器均安装在两个红外相机之间;两个骨传导震动模位于两个镜脚中间偏后处,贴合盲人耳朵前方颅骨处;USB集线器和小型处理器嵌于一个镜脚内;骨传导耳机模块和电池模块嵌于另一个镜脚内;红外投射器、两个红外相机、彩色相机通过USB集线器与小型处理器相连,电池模块与小型处理器相连;两个骨传导震动模块均通过骨传导耳机模块与小型处理器相连。彩色相机和红外投射器位于两个红外相机之间。两个红外相机、彩色相机的光轴彼此平行。小型处理器控制红外投射器向前方三维场景投射不可见的静态近红外散斑,两个红外相机实时地采集经投射后的三维场景 ...
【技术特征摘要】
1.一种基于RGB-D相机和立体声的视障人士障碍物预警眼镜,所述眼镜包含眼镜本体、一个红外投射器,两个相同的红外相机,一个彩色相机,一个USB集线器,一个小型处理器,一个骨传导耳机模块,两个骨传导震动模块,一个电池模块。所述一个红外投射器,两个相同的红外相机,一个彩色相机,一个USB集线器,一个小型处理器,一个骨传导耳机模块,两个骨传导震动模块,一个电池模块均固定在镜架上,其中,两个相同的红外相机,一个彩色相机的光轴彼此平行,两个相同的红外相机分别固定在两个镜片的正上方,彩色相机和红外投射器均安装在两个红外相机之间;两个骨传导震动模位于两个镜脚中间偏后处,贴合盲人耳朵前方颅骨处;USB集线器和小型处理器嵌于一个镜脚内;骨传导耳机模块和电池模块嵌于另一个镜脚内;红外投射器、两个红外相机、彩色相机通过USB集线器与小型处理器相连,电池模块与小型处理器相连;两个骨传导震动模块均通过骨传导耳机模块与小型处理器相连。彩色相机和红外投射器位于两个红外相机之间。两个红外相机、彩色相机的光轴彼此平行。小型处理器控制红外投射器向前方三维场景投射不可见的静态近红外散斑,两个红外相机实时地采集经投射后的三维场景的两幅红外图像,彩色相机实时地采集三维场景的彩色图像。USB集线器将两幅红外图像和一幅彩色图像传给小型处理器。小型处理器对获取的两幅红外图像、一幅彩色图像进行处理,获取三维场景的深度图像。小型处理器对深度图像进行分块,并将分块后的深度信息转化为立体声信号,并传给骨传导耳机模块。骨传导耳机模块将立体声信号转为骨传导震动信号,传给两个骨传导震动模块。两个骨传导震动模块,传递骨传导震动信号给视障用户,实现障碍物预警。2.根据权利要求1所述的眼镜,其特征在于,通过以下方法实现障碍物预警:(1)对两个红外相机进行一次双目相机标定,获取两个红外相机的焦距fIR,左红外相机的主点位置(cIR-x,cIR-y),两个红外相机的基线距离BIR-IR。(2)对彩色相机进行一次相机标定,获取彩色相机的焦距fcolor,主点位置(cCOLOR-x,cCOLOR-y)。(3)对彩色相机和左侧的红外相机进行一次双目相机标定,获取左红外相机与彩色相机的基线距离BIR-COLOR。(4)红外投射器实时地投射不可见的静态近红外散斑到三维场景中。(5)两个红外相机采集三维场景的两张红外图像IRleft和IRright。(6)彩色相机三维场景的彩色图像Color。(7)USB集线器将两幅红外图像IRleft和IRright,一幅彩色图像Color传给小型处理器。(8)小型处理器对两张红外图像IRleft和IRright提取Sobel边缘,获取两张Sob...
【专利技术属性】
技术研发人员:于红雷,胡伟健,孙俊伟,
申请(专利权)人:杭州视氪科技有限公司,
类型:发明
国别省市:浙江,33
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。