【技术实现步骤摘要】
本专利技术涉及脑科学、人工智能、关键点检测领域,具体来说涉及一种基于脑机接口和脸部关键点识别的机器手控制方法。
技术介绍
1、脑机接口(brain computer interface,bci),指在人或动物大脑与外部设备之间创建的直接连接,实现脑与设备的信息交换。ssvep是一种通过视觉刺激引发大脑电活动的方法;在ssvep中,用户通过注视闪烁频率不同的光源或图案,从而引发特定频率的电位响应,运动想象是指通过想象特定的运动动作来激活大脑区域。
2、深度神经网络在模式识别、智能机器人、自动控制、预测估计、生物、医学、经济等领域已成功地解决了许多现代计算机难以解决的实际问题,表现出了良好的智能特性。
3、关键点检测,人脸关键点检测是指在给定的人脸图像中,自动定位并标记出人脸的关键点。这些关键点通常包括眉毛、眼睛、鼻子、嘴巴和脸部轮廓等部位的点。
4、目前的脑控机器手大多采用运动想象控制,其抓取目标选择到目标放置过程需要用户高度集中并重复想象,抓取效率低下,且无法做到针对放置位置选择的快速响应。
< ...【技术保护点】
1.基于SSVEP-MI和脸部关键点检测的机器手控制方法,其特征在于:该控制方法包括如下步骤:
2.根据权利要求1所述基于SSVEP-MI和脸部关键点检测的机器手控制方法,其特征在于:所述SSVEP刺激范式设计使用目标检测算法中的目标检测模型OWL-VIT来检测和跟踪具体物品,通过接收图像和具体物品描述,并输出具体物品的分割遮罩,对识别的具体物品通过LED显示叠加不同SSVEP刺激范式,并让用户专注于具体物品8到10秒钟,
3.根据权利要求2所述基于SSVEP-MI和脸部关键点检测的机器手控制方法,其特征在于:SSVEP刺激范式为6Hz、7.5
...【技术特征摘要】
1.基于ssvep-mi和脸部关键点检测的机器手控制方法,其特征在于:该控制方法包括如下步骤:
2.根据权利要求1所述基于ssvep-mi和脸部关键点检测的机器手控制方法,其特征在于:所述ssvep刺激范式设计使用目标检测算法中的目标检测模型owl-vit来检测和跟踪具体物品,通过接收图像和具体物品描述,并输出具体物品的分割遮罩,对识别的具体物品通过led显示叠加不同ssvep刺激范式,并让用户专注于具体物品8到10秒钟,
3.根据权利要求2所述基于ssvep-mi和脸部关键点检测的机器手控制方法,其特征在于:ssvep刺激范式为6hz、7.5hz、9hz 、11hz中的其中一种。
4.根据权利要求3所述基于ssvep-mi和脸部关键点检测的机器手控制方法,其特征在于:基于asm的脸部动作控制机器手使用摄像头搜集用户脸部样本构建形状向量,<...
【专利技术属性】
技术研发人员:宋军,沈杰,张群煜,钟骏佳,宋嘉欢,齐家伟,任乘乘,何舒平,
申请(专利权)人:安徽大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。