一种多模态融合辅助干眼诊断和分型的方法、装置及系统制造方法及图纸

本申请涉及一种多模态融合辅助干眼诊断和分型的方法、装置及系统，包括以下步骤：获取图像、视频和受检者的干眼症状相关指标；根据受检者的睑板腺红外照相和睑缘照相，获取受检者的睑板腺特征、泪河特征、睑缘形态特征以及泪河高度；根据睑缘形态特征进行睑缘异常的分类；获取受检者的泪膜形态特征及泪膜破裂时间；将睑板腺特征、泪河高度、睑缘形态特征、泪膜形态特征、泪膜破裂时间及干眼症状相关指标输入多模态融合干眼诊断模型中，明确受检者是否存在干眼及干眼的分型。本申请减少了以往干眼指标评估过程中医生人为因素对结果准确性的干扰，同时提高了各项干眼指标的评估速度，辅助人工来完成干眼的多模态快速自动化诊断，并指导治疗方案。并指导治疗方案。并指导治疗方案。

【技术实现步骤摘要】
一种多模态融合辅助干眼诊断和分型的方法、装置及系统


[0001]本申请涉及医疗设备
，尤其是涉及一种多模态融合辅助干眼诊断和分型的方法、装置及系统。

技术介绍

[0002]干眼是最常见的眼表疾病之一，干眼患病与地区干燥的气候、强风沙、强紫外线等地理气候因素密切相关，而这些地区往往幅员辽阔，人口密度相对较低且医疗资源分布不平衡且交通不便，导致了患者就医率较低，干眼诊断率低。患者患病后不予重视，常导致错过最佳治疗时机，干眼发展至严重影响正常生活，乃至失明等不可挽回的严重后果，极大的影响了我国新疆等西部地区人民群众的健康，将对医疗卫生投入和国民经济发展造成较大的负担。
[0003]为了便于区分干眼病，2020年中国干眼专家共识提出了干眼的全新诊断指标，符合以下两条，即可诊断为干眼：（1）有干涩感、异物感、烧灼感、疲劳感、不适感、眼红、视力波动等主观症状之一，中国干眼问卷量表≥7分或OSDI≥13分；（2）符合以下两点之一：a、TFBUT（泪膜破裂时间）≤5秒或NIBUT（非侵入性泪膜破裂时间）<10秒或SchirmerI（本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多模态融合辅助干眼诊断和分型的方法，其特征在于，包括以下步骤：获取视频和受检者的干眼症状相关指标，其中，所述视频包括所述受检的图像；将所述视频内的至少一帧图像输入到预设的第一检测模型，获取受检者的睑板腺特征；将所述视频内的至少一帧图像输入到预设的第二检测模型，获取图像信息中的泪河特征及睑缘形态特征；根据所述泪河特征计算获得泪河高度，根据睑缘形态特征进行睑缘异常的分类；将所述视频输入到预设的第三检测模型，获取所述受检者的泪膜形态特征及泪膜破裂时间；将所述睑板腺特征、泪河高度、睑缘形态特征、泪膜形态特征、泪膜破裂时间以及干眼症状相关指标输入到多模态融合干眼诊断模型中，得到对所述受检者的干眼诊断及干眼分型结果。2.根据权利要求1所述的一种多模态融合辅助干眼诊断和分型的方法，其特征在于，在获取视频和受检者的干眼症状相关指标中，还包括以下步骤：通过5G网络获取视频和受检者的干眼症状相关指标。3.根据权利要求1所述的一种多模态融合辅助干眼诊断和分型的方法，其特征在于：其中干眼分型结果包括水液缺乏型、脂质异常型、黏蛋白异常型、泪液动力学异常型、混合型。4.根据权利要求1所述的一种多模态融合辅助干眼诊断和分型的方法，其特征在于，在将图像信息输入到预设的第二检测模型，获取图像信息中的泪河特征以及睑缘形态特征，包括以下步骤：通过第二检测模型对图像信息进行分割处理，分割出睑缘图像区域和泪河图像区域；选择睑缘图像区域和泪河图像区域；获取泪河图像区域中的泪河特征，其中，泪河特征包括泪河上下缘、泪河长轴；获取睑缘图像区域中的睑缘形态特征，其中，睑缘形态特征包括睑缘充血或新生血管、睑缘形态不规则、睑板腺开口堵塞、黏膜交界处前后移位。5.根据权利要求4所述的一种多模态融合辅助干眼诊断和分型的方法，其特征在于，在选择睑缘图像区域和泪河图像区域中，包括以下步骤：对睑缘图像区域和泪河图像区域进行二值化处理，根据二值图像的最大连通区域选择睑缘图像区域和泪河图像区域。6.根据权利要求1所述的一种多模态融合辅助干眼诊断和分型的方法，其特征在于，训练所述多模态融合干眼诊断模型的方法包括以下步骤：获取训练数据，训练数据包括第一特征数据、第二特征数据以及干眼分类结果、干眼特征影像数据，其中第一特征数据包括泪膜形态特征、睑板腺特征，第二特征数据包括泪膜破裂时间、泪河高度、睑缘形态特征以及上传的干眼症状相关指标；对第一特征数据、第二特征数据进行编码，并将第二特征数据的特征编码变换为与第一特征数据的特征编码相同的维度；特征融...

【专利技术属性】
技术研发人员：戴琦，张文杰，傅亚娜，张祖辉，于新新，
申请(专利权)人：温州医科大学附属眼视光医院，
类型：发明
国别省市：