一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法技术

本发明专利技术涉及肿瘤分层结构的三维重建方法，具体涉及一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法，以解决现有皮肤肿瘤分层结构三维重建技术的成像速度较慢，且对浸润较深的组织成像效果不佳的技术问题。该方法包括：1、采集多组皮肤肿瘤组织的图谱分层实验数据，获取实验数据集；2、设置皮肤肿瘤组织分层数n；3、根据实验数据集，对n个分层训练分类模型，得到n个三维卷积神经网络模型；4、将待测皮肤肿瘤组织的n层数据输入对应的三维卷积神经网络模型，得到的分类输出结果进行图像化后按顺序合成，得到待测皮肤肿瘤组织的三维重建结构。本发明专利技术的三维重建方法信息准确，精准度高。精准度高。精准度高。

【技术实现步骤摘要】
一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法


[0001]本专利技术涉及肿瘤分层结构的三维重建方法，具体涉及一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法。

技术介绍

[0002]近年来在皮肤肿瘤诊疗领域中，得益于医学影像学和计算机软件技术的共同发展，使利用一系列二维图像信息进行不规则体的三维重建成为可能，如利用磁共振或断层扫描技术重建机体内的三维解剖结构，利用超声血管造影技术重建冠状动脉，利用电镜或共聚焦扫描显微技术重建细胞核或粒子等微观结构等。
[0003]三维重建技术能够提供更加清晰准确的皮肤病灶体现，据此能做出更加合理的诊疗方案，有利于精准手术的实施。皮肤组织的结构决定了其生理功能和病理过程，三维可视化突破了传统组织形态学二维显示组织精细结构的局限，有助于深入研究组织器官的生理过程、探讨疾病的发病机制并为寻找治疗方法提供新思路。
[0004]皮肤组织结构的三维重建有三个关键点：首先对成像的分辨率要求较高；其次是在成像时和成像后均能精确定位，便于三维重建和观察；最后是重建结果能够应用于临床实践和研究工作，实现重建价值。在现有技术中，常见的技术包括组织连续切片光镜成像、激光共聚焦显微镜成像、光学相干断层扫描、三维超声成像等技术。
[0005]组织连续切片光镜成像后三维重建是最早被发展起来的，随着样本制备、染色方法、摄像器材及计算机图像处理方法的不断完善，该技术重建图像的清晰度也随之提高。目前该技术仍是显微结构重建的常用方法，但其样本必须为离体组织，连续超薄切片制备过程中的真空工作环境容易破坏抗原或目标结构，且连续超薄切片对技术要求过高，工作量大。在切片制作，图像采集与配准，实时处理等方面都存在较大的挑战性。
[0006]激光共聚焦显微镜成像技术是对荧光标记的活体生物样本行光学断层扫描，图像叠加后直接构成样本的三维结构图像，用于动态观察活体生物样本的组织或细胞变化。无须制作切片，可对目标结构定量分析并无损活体组织或细胞。该技术缺点是因深层组织荧光无法穿透，仅适用于体浅表结构的三维重建，在重建组织的厚度方向成像有一定程度的限制。
[0007]光学相干断层扫描技术(OCT)通过傅立叶探测技术，可生成组织的三维立体图像，且分辨率达1
‑
2μm。临床上主要用于眼底疾病诊断及随访等，近几年也用于检测人体皮肤。该技术无创、快速，可实时监测，可重复且方便便宜。但其穿透深度仅1.5mm，扭曲的血管形态也会影响其成像。
[0008]三维超声成像分为三个阶段，即三维数据采集、三维重建和三维图像可视化。三维数据采集是三维超声成像的第一步，也是影响三维图像质量的关键一步，其与探头技术和扫描方式有较强关系。皮肤高频超声二维图像序列的采集是其三维重建的基础与关键，扫描精度、图像采集质量都会直接影响到重建结果。三维超声成像能够提供皮肤等浅表器官直观详细的三维信息，更好的显示皮肤等浅表器官的空间信息和解剖结构，但成像速度较
慢，且对浸润较深的组织成像效果不佳。高频超声三维成像是三维超声成像的一种，因其超常的分辨力，在皮肤及眼部等浅表器官疾病诊断方面具有十分重要的意义，但也因为高频超声精细的成像特点，使其在临床检查时不易了解病灶的全貌。针对皮肤瘤手术切除，也需要一种清晰、准确、快速的皮肤组织结构的三维重建技术，以利于医生进行精准切除，有效避免漏切多切等情况出现。

技术实现思路

[0009]本专利技术目的在于解决现有皮肤肿瘤分层结构三维重建技术中三维超声成像的成像速度较慢，且对浸润较深的组织成像效果不佳的技术问题，提出一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法，通过高光谱信息逐层反演，不同波段图像提供不同深度的皮肤结构信息，并对不同分层结构模型训练，最终反馈完成皮肤肿瘤组织的三维模型重构。
[0010]本专利技术的技术方案为：
[0011]一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法，其特殊之处在于，包括以下步骤：
[0012]S1、采用高光谱成像技术采集多组皮肤肿瘤组织的图谱分层实验数据，所述图谱分层实验数据包括同一个皮肤肿瘤组织的在体高光谱图谱数据和离体高光谱图谱数据；
[0013]将所述离体皮肤肿瘤组织切片并进行标号，对各个切片进行病理标记，所述切片数为m，m≥8；
[0014]根据病理标记结果提取各个切片对应的离体高光谱图谱数据；
[0015]在体高光谱图谱数据和各个切片对应的离体高光谱图谱数据构成实验数据集；
[0016]S2、根据皮肤肿瘤组织类型设置分层数n，其中n为整数且6≤n≤10，n≤m；
[0017]S3、根据实验数据集，对n个分层训练分类模型，得到三维卷积神经网络模型；
[0018]S3.1、从实验数据集中提取第i层离体高光谱图谱数据的训练样本，作为标准训练样本，其中i小于等于n；从实验数据集中提取第i层在体高光谱图谱数据的在体训练样本，将中心在体训练样本点的邻域w
×
w
×
b作为模型输入，其中w
×
w为邻域窗口，b为谱段数；
[0019]S3.2、根据标准训练样本和模型输入，执行卷积操作和池化操作，将模型输入减小至1
×
1，得到第i层的三维卷积神经网络模型；
[0020]S3.3、重复与步骤S3.1和S3.2相同内容的操作，对其余各层训练分类模型，得到其余n
‑
1个三维卷积神经网络模型；
[0021]S4、将待测皮肤肿瘤组织的在体高光谱图谱数据的各层中心训练样本点的邻域w
×
w
×
b输入对应的n个三维卷积神经网络模型，得到各层分类输出结果；
[0022]S5、将分类输出结果图像化，得n个深度的分层皮肤重构图像，将n个深度的分层皮肤重构图像依照顺序合成，得到待测皮肤肿瘤组织的三维重建结构。
[0023]进一步地，步骤S1中，所述图谱分层实验数据包含平面特性信息和深度特性光谱信息。
[0024]进一步地，步骤S1中，所述病理标记包括癌变状态、癌细胞浸润深度及癌变细胞的周边范围。
[0025]进一步地，步骤S3.2中，所述卷积操作采用小卷积核操作。
[0026]进一步地，步骤S2中，根据皮肤肿瘤组织类型设置分层数为8。
[0027]进一步地，步骤S1中，所述高光谱成像技术覆盖波段范围为300
‑
1000nm。
[0028]本专利技术的有益效果：
[0029]1、本专利技术提出基于高光谱图像的皮肤肿瘤分层结构三维重建方法，采用的高光谱成像技术具有多谱段、高分辨率的特点，通过皮肤肿瘤组织的高光谱图谱数据分层深度信息的研究实现三维模型重建，不但能精确地显示皮肤瘤复杂三维结构，还可通过旋转剖切等操作获取任意切面的结构信息参数，有助于对病情做出更加合理的判断，有利于精准手术的实施。
[0030]2、皮肤肿瘤组织的图谱分层实验数据不仅包括了丰富的平面特性信息，同时包含深度特性光谱信息，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于高光谱图像的皮肤肿瘤分层结构三维重建方法，其特征在于，包括以下步骤：S1、采用高光谱成像技术采集多组皮肤肿瘤组织的图谱分层实验数据，所述图谱分层实验数据包括同一个皮肤肿瘤组织的在体高光谱图谱数据和离体高光谱图谱数据；将所述离体皮肤肿瘤组织切片并进行标号，对各个切片进行病理标记，所述切片数为m，m≥8；根据病理标记结果提取各个切片对应的离体高光谱图谱数据；在体高光谱图谱数据和各个切片对应的离体高光谱图谱数据构成实验数据集；S2、根据皮肤肿瘤组织类型设置分层数n，其中n为整数且6≤n≤10，n≤m；S3、根据实验数据集，对n个分层训练分类模型，得到三维卷积神经网络模型；S3.1、从实验数据集中提取第i层离体高光谱图谱数据的训练样本，作为标准训练样本，其中i小于等于n；从实验数据集中提取第i层在体高光谱图谱数据的在体训练样本，将中心在体训练样本点的邻域w
×
w
×
b作为模型输入，其中w
×
w为邻域窗口，b为谱段数；S3.2、根据标准训练样本和模型输入，执行卷积操作和池化操作，将模型输入减小至1
×
1，得到第i层的三维卷积神经网络模型；S3.3、重复与步骤S3.1和S3.2相同内容的操作，对其余各层训练分类模型，得到其余n
‑...

【专利技术属性】
技术研发人员：杜剑，张周锋，陶成龙，刘嘉诚，于涛，胡炳樑，
申请(专利权)人：中国科学院西安光学精密机械研究所，
类型：发明
国别省市：