一种基于脑皮层表面模型的自然场景视觉重建方法、系统、设备及介质技术方案

技术编号:42129212 阅读:12 留言:0更新日期:2024-07-25 00:44
一种基于脑皮层表面模型的自然场景视觉重建方法、系统、设备及介质,方法包括:先通过刺激图像获取功能性磁共振成像(fMRI)数据,并对fMRI数据进行预处理,再提取刺激图像的特征,并对预处理后的fMRI数据进行低级别图像重建,同时通过预处理后的fMRI数据及提取的刺激图像特征训练模型,并通过训练的模型得到CLIP空间的fMRI特征,最后基于重建的低级别图像及CLIP空间的fMRI特征对刺激图像进行重建;系统、设备及介质用于实现一种基于脑皮层表面模型的自然场景视觉重建方法;本发明专利技术能够从复杂的fMRI数据中准确提取出对图像重建至关重要的信息,增强了图像生成的质量和准确性。

【技术实现步骤摘要】

本专利技术涉及神经科学和计算机视觉交叉,具体涉及一种基于脑皮层表面模型的自然场景视觉重建方法、系统、设备及介质


技术介绍

1、功能性磁共振成像(functional magnetic resonance imaging,简称fmri)技术是神经科学研究中的关键工具,特别是在监测大脑对特定刺激的响应方面。它利用血氧水平依赖(blood oxygenation level dependent,简称bold)对比来观察大脑活动,提供了一种非侵入性的方式来获取高空间分辨率的大脑活动图像。随着时间的推移,研究者开始尝试利用fmri数据来解码和重建个体的视觉体验,从简单的几何形状到复杂的自然场景图像。早期尝试虽然取得了进步,但主要采用简化的分析方法和面临数据分辨率低、数据量少的限制,这在处理复杂视觉场景时显得力不从心。

2、随着7t超高场mri技术的发展和大数据量数据集的出现,如自然场景数据集(nsd),研究者有了更高分辨率和更大数据量的支持,这显著提升了从复杂视觉刺激中解析大脑活动模式的能力。尤其是深度学习技术,如transformer模型的应用,为从本文档来自技高网...

【技术保护点】

1.一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤1具体包括以下步骤:

3.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤2具体为:

4.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤3具体包括以下步骤:

5.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤4具体包括以下步骤:p>

6.根据权...

【技术特征摘要】

1.一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤1具体包括以下步骤:

3.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤2具体为:

4.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特征在于,所述的步骤3具体包括以下步骤:

5.根据权利要求1所述的一种基于脑皮层表面模型的自然场景视觉重建方法,其特...

【专利技术属性】
技术研发人员:孙建成张宝刚戴利云
申请(专利权)人:江西财经大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1