一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法技术

技术编号:43001256 阅读:37 留言:0更新日期:2024-10-15 13:28
本发明专利技术属于人工智能与模式识别领域,公开了一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法。利用智能手机在无任何外部设备的条件下,通过远程、居家的方式获得多模态数据,包括行走数据、敲击数据和语音数据。通过将惯性传感器数据、语音数据均转换为包含丰富特征信息的图像,并采用计算机视觉技术对其进行处理,有效的提取了关键特征信息。本发明专利技术提出了一种融合多模态数据特征的分类模型,解决了特征提取不充分、容易过拟合的问题,实现了对轻型帕金森综合征行为的准确评估。

【技术实现步骤摘要】

本专利技术属于人工智能与模式识别领域,涉及一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法


技术介绍

1、随着老龄化社会的进一步发展,潜在帕金森综合征患者的数量还在迅速增加。根据世界卫生组织的统计,帕金森综合征的发病率在过去的二十五年中翻了一番。帕金森综合征患者数量的增加,极大的增加了神经科医生的工作负担。在低收入国家,每十万人中不足一名神经科医生,而在高收入国家,每十万人中也只有不到五名神经科医生。此外,确诊的帕金森综合征患者每四到六个月需要到医院复诊一次,这进一步增加了对神经科医生的数量需求。帕金森综合征患者通常表现为行走缓慢、声音震颤、平衡能力差等症状,漫长的发病周期不仅导致患者生理和心理上的压力,还增加了家庭经济负担和社会医疗压力。

2、智能手机内嵌了多种传感器,如加速度计、陀螺仪、麦克风、摄像头、气压计、触摸屏等。这些传感器的配备为多模态数据的采集创造了条件,同时智能手机作为一种普适性设备为后续推广使用奠定了基础。在行走过程中,智能手机可以通过加速度计捕获加速度、通过陀螺仪记录旋转速率;在语音任务中,智能手机可以通过麦克风录本文档来自技高网...

【技术保护点】

1.一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法,其特征在于,在自注意力特征融合模块中,输入特征首先经过一维卷积层生成查询向量、键向量和值向量;然后计算查询向量和键向量的点积来衡量查询和键之间的相似度,将点积结果除以一个缩放因子并将缩放结果通过归一化指数函数转化为概率分布,得到注意力权重;随后将注意力权重对值向量进行加权求和,得到最终的输出;

3.根据权利要求1所述的一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法,其特征在于,所述的自...

【技术特征摘要】

1.一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种基于智能手机多模态数据的轻型帕金森综合征行为评估方法,其特征在于,在自注意力特征融合模块中,输入特征首先经过一维卷积层生成查询向量、键向量和值向量;然后计算查询向量和键向量的点积来衡量查询和键之间的相似度,将点积结...

【专利技术属性】
技术研发人员:陈俊鑫
申请(专利权)人:大连理工大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1