一种融合人脸表情与行为步态数据的帕金森智能评估方法技术

本发明专利技术涉及数据处理技术领域，特别涉及一种融合人脸表情与行为步态数据的帕金森智能评估方法，包括三个步骤：第一，对帕金森病患者的行为步态视频进行数据清洗，并使用YOLOv8模型将患者从视频中分割出来，再利用HRNet提取骨骼关键点，使用STGCN++获取特征；第二，使用StyleGAN生成保留患者身份信息的病前图像，将训练多个深度学习模型用于将收集到的每人的六种基本情绪的面部表情图像进行面部表情分类，并使用效果最好的预训练模型，用于提取患者面部表情的特征；第三，将提取到的步态特征和面部表情特征进行多模态特征融合，用于帕金森病预测。本发明专利技术方法显著提高了诊断的准确性，减少漏诊误诊的问题。

【技术实现步骤摘要】

本专利技术涉及数据处理，特别涉及一种融合人脸表情与行为步态数据的帕金森智能评估方法。

技术介绍

1、帕金森病(parkinson’s disease，pd)是一种慢性的进展性疾病，目前已经成为流行性仅次于阿尔兹海默的神经退行性疾病，被称为“永不停歇的震颤”，帕金森病在人群中的平均发病年龄为60岁左右，发病人群大部分处于中老年，尽管帕金森病的患病率不高，但其具有快速进展和高度致残的特征，因此需要进行早期筛查，以尽早介入治疗和管理。虽然，针对帕金森病还没有能够预防或根治帕金森病的有效方案，但左旋多巴等相关药物可有效改善疾病症状，提高患者的生活质量。

2、帕金森病的诊断一种为借助于国际运动障碍学会(mds)统一帕金森病评价量表(mds-updrs)，然而，该评估工具无法捕捉运动功能的微小变化，此外，mds-updrs的评估过程依赖于患者的主观自述和医生的经验判断，存在客观性和量化性方面的缺陷，这使得帕金森病的筛查误诊率较高。另一种常用的帕金森诊断方式为体内诊断，主要依赖于专业医学成像技术，并根据帕金森病的影像学特征对患者进行诊断和鉴别。这种方法需要患本文档来自技高网...

【技术保护点】

1.一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于：步骤S1.3中，如果关键点可见则为1，否则为0，表示Kronecker delta函数，如vi>0则为1，否则为0；最终的OKS值在0到1之间，越接近1表示预测的关键点越接近真实关键点；这里使用的关键点为COCO17的标准。

3.根据权利要求1所述的一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于：步骤S2.2中，StyleGAN的另一个特点是使用了渐进层，层和分辨率越低，它...

【技术特征摘要】

1.一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于：步骤s1.3中，如果关键点可见则为1，否则为0，表示kronecker delta函数，如vi>0则为1，否则为0；最终的oks值在0到1之间，越接近1表示预测的关键点越接近真实关键点；这里使用的关键点为coco17的标准。

3.根据权利要求1所述的一种融合人脸表情与行为步态数据的帕金森智能评估方法，其特征在于：步骤s2.2中，stylegan的另一个特点是使用了渐进层，层和分辨率越低，它所影响的特征...

【专利技术属性】
技术研发人员：庞孟，徐寅轩，周崟涛，李正宇，黄静，黄伟，
申请(专利权)人：南昌大学，
类型：发明
国别省市：