脑机接口的检测方法、装置、存储介质及系统制造方法及图纸

本发明专利技术提供一种脑机接口的检测方法、装置、存储介质及系统，脑机接口的检测方法包括：当用户预进行第一指令操作时，基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体；其中，所述第一特征与所述第一指令操作对应；当查找到的所述第一特征激活到所述用户的P300脑电信号时，提取所述增强现实眼镜中缓存的第一图像并处理，以得到所述第一特征；基于所述第一特征，输出所述第一指令操作以执行第一指令内容。本发明专利技术的脑机接口的检测方法能够从环境图像信息中获取物体的特征，不必使用显示器确定指令，提高了系统的易用性和便携性；并且不完全抢占大脑的注意力资源，可方便应用到实际生产生活中，提高系统的可用性和操作的安全性。作的安全性。作的安全性。

【技术实现步骤摘要】
脑机接口的检测方法、装置、存储介质及系统


[0001]本专利技术涉及脑机接口的通信与计算领域，特别是涉及一种脑机接口的检测方法、装置、存储介质及系统。

技术介绍

[0002]脑机接口是一种新型的通过翻译从人体头颅表面采集的脑电信号实现不同于正常的语言通路，行为通路的信息的输出方式。脑机接口按照脑电信号的实现方式分为P300脑机接口，运动想象脑机接口和稳态视觉诱发电位(Steady
‑
state visual evoked potential，SSVEP)脑机接口等。
[0003]现有技术中的P300脑机接口依赖于外部媒介呈现感官刺激，比如，在典型的P300脑机接口中需要一台显示器来呈现交替闪烁的虚拟键盘，这样的设定大大降低了P300脑机接口的便携性，限制了使用场景，增加了使用成本；即使有改进的基于听觉的P300脑机接口范式的出现，由于不同声音刺激是按照预先确定的顺序出现，导致其调制效率明显降低；并且由于听觉注意会调动并占用大脑非常客观的注意力资源，使得在使用该脑机接口进行交流或控制时，受试者无法进行其他行为操作，如对视觉信息进行有效加工和反馈、进一步的生活作业等，从而在一定程度上限制了P300脑机接口的实际应用。
[0004]因此，如何灵活、方便地进行脑机接口检测是一个亟待解决的问题。

技术实现思路

[0005]鉴于以上所述现有技术的缺点，本专利技术的目的在于提供一种脑机接口的检测方法、装置、存储介质及系统，用于解决现有技术中无法灵活、方便地进行脑机接口检测的问题。<br/>[0006]为实现上述目的及其他相关目的，本专利技术提供一种脑机接口的检测方法，包括以下步骤：当用户预进行第一指令操作时，基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体；其中，所述第一特征与所述第一指令操作对应；当查找到的所述第一特征激活到所述用户的P300脑电信号时，提取所述增强现实眼镜中缓存的第一图像并处理，以得到所述第一特征；基于所述第一特征，输出所述第一指令操作以执行第一指令内容。
[0007]于本专利技术的一实施例中，所述第一图像为查找到所述第一特征的时间之前X秒内的图像。
[0008]于本专利技术的一实施例中，所述基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体，包括：基于所述环境图像信息，提取所述环境图像信息中物体的第二特征；当所述第二特征与所述第一特征相同时，确定所述物体包含有所述第一特征。
[0009]于本专利技术的一实施例中，所述输出所述第一指令操作之前，还包括：连续处理得到的特征均为第一特征，且连续处理的次数大于等于预设阈值时，进行输出所述第一指令操作。
[0010]于本专利技术的一实施例中，所述用户预进行第一指令操作之前，还包括：预先设定特
征和指令操作的对应关系，并将所述对应关系告知所述用户。
[0011]于本专利技术的一实施例中，所述特征包括形状特征、颜色特征。
[0012]于本专利技术的一实施例中，所述特征的数量可扩展；基于扩展数量后的特征，所述特征和所述指令操作的对应关系的数量可扩展。
[0013]对应地，本专利技术提供一种脑机接口的检测装置，包括：第一处理模块，用于当用户预进行第一指令操作时，基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体；其中，所述第一特征与所述第一指令操作对应；确定模块，用于当查找到的所述第一特征激活到所述用户的P300脑电信号时，提取所述增强现实眼镜中缓存的第一图像并处理，以得到所述第一特征；第二处理模块，用于基于所述第一特征，输出所述第一指令操作以执行第一指令内容。
[0014]本专利技术提供一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述的脑机接口的检测方法。
[0015]本专利技术提供一种脑机接口的检测系统，包括增强现实眼镜、脑电采集仪以及计算单元；所述增强现实眼镜，与所述脑电采集仪连接；用于获取环境图像信息；所述计算单元，设置在所述增强现实眼镜和所述脑电采集仪中的任一个中，用于基于所述环境图像信息查找包含有第一特征的物体；其中，所述第一特征用于与所述第一指令操作对应；所述脑电采集仪，用于当查找到的所述第一特征激活到所述用户的P300脑电信号时进行信号采集；所述计算单元，还用于在激活到所述P300脑电信号时，提取所述增强现实眼镜中缓存的第一图像并处理，以得到所述第一特征；并基于所述第一特征，输出所述第一指令操作以执行第一指令内容。
[0016]如上所述，本专利技术的脑机接口的检测方法、装置、存储介质及系统，具有以下有益效果：
[0017](1)从环境图像信息中获取物体的特征，将特征和指令操作对应，不必使用显示器确定指令，提高了系统的易用性和便携性。
[0018](2)不完全抢占大脑的注意力资源，可方便应用到实际生产生活中，提高系统的可用性和操作的安全性。
附图说明
[0019]图1显示为本专利技术的脑机接口的检测方法于一实施例中的流程图。
[0020]图2显示为本专利技术的脑机接口的检测方法于一实施例中的信号流动图。
[0021]图3显示为本专利技术的脑机接口的检测装置于一实施例中的结构示意图。
[0022]图4显示为本专利技术的脑机接口的检测装置于一实施例中的脑机接口的检测系统图。
[0023]图5显示为本专利技术的脑机接口的检测装置于一实施例中的脑机接口的实物图。
[0024]元件标号说明
[0025]31
ꢀꢀꢀꢀꢀꢀꢀꢀ
第一处理模块
[0026]32
ꢀꢀꢀꢀꢀꢀꢀꢀ
确定模块
[0027]33
ꢀꢀꢀꢀꢀꢀꢀꢀ
第二处理模块
[0028]41
ꢀꢀꢀꢀꢀꢀꢀꢀ
增强现实眼镜
[0029]42
ꢀꢀꢀꢀꢀꢀꢀꢀ
脑电采集仪
[0030]43
ꢀꢀꢀꢀꢀꢀꢀꢀ
计算单元
具体实施方式
[0031]以下通过特定的具体实例说明本专利技术的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本专利技术的其他优点与功效。本专利技术还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本专利技术的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。
[0032]需要说明的是，以下实施例中所提供的图示仅以示意方式说明本专利技术的基本构想，遂图式中仅显示与本专利技术中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
[0033]本专利技术的脑机接口的检测方法、装置、存储介质及系统，能够从环境图像信息中获取物体的特征，将特征和指令操作对应，不必使用显示器确定指令，提高了系统的易用性和便携性；不完全抢占大脑的注意力资源，可方便应用到实际生产生活中，提高系统的可用性和操作的安全性。
[0034本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种脑机接口的检测方法，其特征在于，所述脑机接口的检测方法包括以下步骤：当用户预进行第一指令操作时，基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体；其中，所述第一特征与所述第一指令操作对应；当查找到的所述第一特征激活到所述用户的P300脑电信号时，提取所述增强现实眼镜中缓存的第一图像并处理，以得到所述第一特征；基于所述第一特征，输出所述第一指令操作以执行第一指令内容。2.根据权利要求1所述的方法，其特征在于，所述第一图像为查找到所述第一特征的时间之前X秒内的图像。3.根据权利要求1所述的方法，其特征在于，所述基于增强现实眼镜获取环境图像信息，且查找包含有第一特征的物体，包括：基于所述环境图像信息，提取所述环境图像信息中物体的第二特征；当所述第二特征与所述第一特征相同时，确定所述物体包含有所述第一特征。4.根据权利要求3所述的方法，其特征在于，所述输出所述第一指令操作之前，还包括：连续处理得到的特征均为第一特征，且连续处理的次数大于等于预设阈值时，进行输出所述第一指令操作。5.根据权利要求1所述的方法，其特征在于，所述用户预进行第一指令操作之前，还包括：预先设定特征和指令操作的对应关系，并将所述对应关系告知所述用户。6.根据权利要求5所述的方法，其特征在于，所述特征包括形状特征、颜色特征。7.根据权利要求5所述的方法，其特征在于，所述特征的数量可扩展；基于扩展...

【专利技术属性】
技术研发人员：周婷，王振宇，赵建龙，吕潇潇，
申请(专利权)人：上海前瞻创新研究院有限公司，
类型：发明
国别省市：