一种搭载图形界面的可交互式脑机接口方法和装置制造方法及图纸

本发明专利技术提出一种搭载图形界面的可交互式脑机接口方法和装置，提供一站式的相关服务。本发明专利技术针对光学脑机接口的各实验阶段，设计了高效的用户图形界面，同时也整合了目前该领域常用的热点工具，能够有效减少研究员进行光学脑机接口实验的时间成本，提高实验效率。本发明专利技术还针对光学脑机接口实验进行了普适性调整，可适用于大部分离线、在线实验，且操作灵活简便，运行稳定，可以在光学脑机接口领域广泛使用。用。用。

【技术实现步骤摘要】
一种搭载图形界面的可交互式脑机接口方法和装置


[0001]本专利技术涉及光学脑机接口领域，特别涉及一种搭载图形界面的可交互式脑机接口方法和装置。

技术介绍

[0002]近年来，光学脑机接口成为脑机接口领域极具潜力的一个分支。它通过钙成像的方式观察脑内神经元活动情况，可以做到对单细胞的长时间活动追踪，为脑部机理研究提供了强有力的支撑。针对光学脑机接口实验，国内外学者开发了许多工具箱，主要包括：发表在《Elife》上的《CaImAn an open source tool for scalable calcium imaging data analysis》；发表在《Frontiers in Neural Circuits》上的《EZcalcium: Open
‑
Source Toolbox for Analysis of Calcium Imaging Data》；以及发表在《Biorxiv》上的《Suite2p: beyond 10,000 neurons with standard two
‑
photon microscopy》。以上几种工具箱在采集和离线数据分析方面给研究员提供了很大便利，是近期学者们广泛选择使用的工具。
[0003]然而，这些工具箱并没有配置用户图形界面，只能够在代码层面运行，使得用户需要具备一定编程知识才可以使用。在实际使用过程中，用户往往会因为环境搭建、代码阅读、参数调试等问题耗费大量时间。因此，如何提升使用效率是一个待解决的问题。
专利技术内容
[0004]本专利技术的目的在于提供一种搭载图形界面的可交互式脑机接口方法和装置，以克服现有技术中的不足。
[0005]为实现上述目的，本专利技术提供如下技术方案：本申请公开了一种搭载图形界面的可交互式脑机接口方法，具体包括如下步骤：S1、采集包含神经元活动的钙成像实验数据，所述实验数据包括测试数据和训练数据；S2、对实验数据进行预处理，并进行感兴趣区域和荧光轨迹的提取，得到脑内神经元发放信号；S3、通过训练数据的脑内神经元发放信号对解码器进行训练；S4、使用训练好的解码器解析测试数据的脑内神经元发放信号，完成被试者脑活动至行为的解析。
[0006]作为优选，步骤S1具体包括如下子步骤：S11、根据实验需求，调整摄像头的画面参数；S12、通过摄像头捕捉钙成像画面并显示在图像界面中。
[0007]作为优选，步骤S11中画面参数包括曝光值、增益值、LED灯光强度以及显示帧率。
[0008]作为优选，步骤S2具体包括如下子步骤：S21、对实验数据进行运动校正处理，在图像界面中重新加载校正后的数据；
S22，选取感兴趣区域，并在图像界面上显示标注；S23，对感兴趣区域进行荧光轨迹提取，并显示在图像界面上。
[0009]作为优选，步骤S21中运动校正过程具体如下：遍历整个实验数据获取模板，通过模板逐帧对实验数据进行校正。
[0010]作为优选，步骤S22中选取感兴趣区域包括自动选取和手动选取，自动选取的算法与参数由用户指定。
[0011]作为优选，步骤S23中荧光轨迹提取具体过程包括：提取各感兴趣区域内的荧光值，并以曲线的形式绘制在图像界面上。
[0012]本申请还公开了一种搭载图形界面的可交互式脑机接口装置，包括图像用户界面，用于与各模块进行交互；项目管理模块，用于管理整个项目的运行状态；采集模块，用于采集实验数据；离线解析模块，用于对实验数据进行预处理，并提取感兴趣区域中的数据；在线解析模块，用于实时获取并处理实验数据，提取感兴趣区域中的数据；解码模块，用于对提取好的实验数据进行训练或解析。
[0013]本专利技术的有益效果：1、本专利技术提供一个可交互式的图形界面，免除了用户因代码技能不足而无法高效利用相关工具的问题。
[0014]2、本专利技术提供一站式服务，保证了各个步骤切换时的数据一致性，避免因各工具包输入输出不同导致的格式切换问题。
[0015]3、本专利技术同时支持离线与在线实验本专利技术的特征及优点将通过实施例结合附图进行详细说明。
附图说明
[0016]图1为本专利技术整体结构的示意图；图2为本专利技术中采集模块实施步骤示意图；图3为本专利技术中离线模块实施步骤示意图；图4为本专利技术中在线模块实施步骤示意图；图5为本专利技术中解码模块实施步骤示意图。
具体实施方式
[0017]为使本专利技术的目的、技术方案和优点更加清楚明了，下面通过附图及实施例，对本专利技术进行进一步详细说明。但是应该理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限制本专利技术的范围。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本专利技术的概念。
[0018]本专利技术一种搭载图形界面的可交互式脑机接口方法，具体包括如下步骤：S1、采集包含神经元活动的钙成像实验数据，所述实验数据包括测试数据和训练数据；S2、对实验数据进行预处理，并进行感兴趣区域和荧光轨迹的提取，得到脑内神经元发放信号；S3、通过训练数据的脑内神经元发放信号对解码器进行训练；
S4、使用训练好的解码器解析测试数据的脑内神经元发放信号，完成被试者脑活动至行为的解析。
[0019]在一种可行的实施例中，步骤S1具体包括如下子步骤：S11、根据实验需求，调整摄像头的画面参数；S12、通过摄像头捕捉钙成像画面并显示在图像界面中。
[0020]在一种可行的实施例中，步骤S11中画面参数包括曝光值、增益值、LED灯光强度以及显示帧率。
[0021]在一种可行的实施例中，步骤S2具体包括如下子步骤：S21、对实验数据进行运动校正处理，在图像界面中重新加载校正后的数据；S22，选取感兴趣区域，并在图像界面上显示标注；S23，对感兴趣区域进行荧光轨迹提取，并显示在图像界面上。
[0022]在一种可行的实施例中，步骤S21中运动校正过程具体如下：遍历整个实验数据获取模板，通过模板逐帧对实验数据进行校正。
[0023]在一种可行的实施例中，步骤S22中选取感兴趣区域包括自动选取和手动选取，自动选取的算法与参数由用户指定。
[0024]在一种可行的实施例中，步骤S23中荧光轨迹提取具体过程包括：提取各感兴趣区域内的荧光值，并以曲线的形式绘制在图像界面上。
[0025]实施例：图1为本申请实例公开的整体结构示意图，包括：项目管理模块、采集模块、离线解析模块、在线解析模块和解码模块；其中，项目管理模块用于管理整个项目的运行状态，例如项目的设置、保存与加载等；采集模块、离线解析模块和解码模块共同支持离线光学脑机接口实验流程；采集模块用于采集实验数据。离线解析模块用于对实验数据进行预处理，并提取感兴趣区域中的数据。解码模块用于对提取好的实验数据进行训练或解析。在线解析模块、解码模块共同支持在线光学脑机接口实验流程；其中在线解析模块用于实时获取并处理实验数据，提取感兴趣区域中的数据；解码模块功能与上述相同。
[0026]图2为本专利技术中采集模本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种搭载图形界面的可交互式脑机接口方法，其特征在于，具体包括如下步骤：S1、采集包含神经元活动的钙成像实验数据，所述实验数据包括测试数据和训练数据；S2、对实验数据进行预处理，并进行感兴趣区域和荧光轨迹的提取，得到脑内神经元发放信号；S3、通过训练数据的脑内神经元发放信号对解码器进行训练；S4、使用训练好的解码器解析测试数据的脑内神经元发放信号，完成被试者脑活动至行为的解析。2.如权利要求1所述的一种搭载图形界面的可交互式脑机接口方法，其特征在于，步骤S1具体包括如下子步骤：S11、根据实验需求，调整摄像头的画面参数；S12、通过摄像头捕捉钙成像画面并显示在图像界面中。3.如权利要求2所述的一种搭载图形界面的可交互式脑机接口方法，其特征在于，步骤S11中画面参数包括曝光值、增益值、LED灯光强度以及显示帧率。4.如权利要求1所述的一种搭载图形界面的可交互式脑机接口方法，其特征在于，步骤S2具体包括如下子步骤：S21、对实验数据进行运动校正处理，在图像界面中重新加载校正后的数据；S22，选取感兴趣区域，并在图像...

【专利技术属性】
技术研发人员：冯琳清，姜思逸，魏依娜，唐弢，田琪，朱琴，周津润，朱楠，李雅清，
申请(专利权)人：之江实验室，
类型：发明
国别省市：