一种自闭症谱系障碍的智能训练方法、设备及介质技术

技术编号:35595685 阅读:18 留言:0更新日期:2022-11-16 15:14
本说明书实施例公开了一种自闭症谱系障碍的智能训练方法、设备及介质,涉及辅助训练技术领域,应用于智能训练系统,包括:面孔注意力引导模块和辅助训练模块,方法包括:向患者展示交互素材,并通过面孔注意力引导模块,确定患者的眼动注视点,以便于在眼动注视点处生成引导注视点,基于面部核心区域,设置引导注视点的移动轨迹,按照移动轨迹,将患者的注视位置引导至面部核心区域,对患者进行引导训练,计算患者的响应时延;当响应时延满足预设阈值时,通过辅助训练模块,采集患者与交互素材的交互视频,并对患者的交互视频进行分析,确定患者的表情类型;当患者的表情类型与预先获取的交互素材中的表情类型一致时,完成对患者的表情训练。者的表情训练。者的表情训练。

【技术实现步骤摘要】
一种自闭症谱系障碍的智能训练方法、设备及介质


[0001]本说明书涉及辅助训练
,尤其涉及一种自闭症谱系障碍的智能训练方法、设备及介质。

技术介绍

[0002]自闭症谱系障碍是一种被归类为神经发育障碍的疾病。患有自闭症谱系障碍的个体通常会出现两种类型的症状:社交沟通或社交互动中的问题,以及行为、兴趣或活动的受限或重复模式。自闭症患者长期存在包括创建和保持社会交往关系方面的困难,以及维护工作以及执行日常任务的困难。临床表现主要有语言障碍、社会交往障碍、兴趣范围狭窄、刻板的行为模式和智能障碍。
[0003]目前治疗药物类侧重于疾病与功能损伤的治疗,康复辅具主要聚焦于自闭症谱系障碍的相关基本功能训练,例如空间感知、环境感知、运动控制等功能。但自闭症谱系障碍对患者的社会认知功能也存在较大影响,例如与其他社会成员的日常交往、社会交流、非语言情感交流等认知功能存在障碍。现有技术的康复训练中,尚未关注到自闭症谱系障碍的社会性认知功能的康复训练。

技术实现思路

[0004]本说明书一个或多个实施例提供了一种自闭症谱系障碍的智能训练方法、设备及介质,用于解决如下技术问题:现有技术的康复训练中,尚未关注到自闭症谱系障碍的社会性认知功能的康复训练。
[0005]本说明书一个或多个实施例采用下述技术方案:
[0006]本说明书一个或多个实施例提供一种自闭症谱系障碍的智能训练方法,应用于智能训练系统,所述系统包括:面孔注意力引导模块和辅助训练模块;所述方法包括:向患者展示交互素材,并通过面孔注意力引导模块,确定所述患者的眼动注视点,以便于在所述眼动注视点处,生成引导注视点,其中,所述交互素材包括虚拟人物交互和真实场景交互中的任意一项;获取所述交互素材中人物的面部核心区域,基于所述面部核心区域,设置所述引导注视点的移动轨迹,其中,所述移动轨迹的起点为所述眼动注视点,所述移动轨迹的终点为所述面部核心区域中的指定点;按照所述移动轨迹,将所述患者的注视位置引导至所述面部核心区域,对所述患者进行引导训练,计算所述患者的响应时延;当所述响应时延满足预设阈值时,通过辅助训练模块,采集患者与所述交互素材的交互视频,并对所述患者的交互视频进行分析,确定患者的表情类型;当所述患者的表情类型与预先获取的所述交互素材中的表情类型一致时,完成对所述患者的表情训练。
[0007]进一步地,基于所述面部核心区域,设置所述引导注视点的移动轨迹之前,所述方法还包括:获取所述面部核心区域对应的位置范围;确定所述眼动注视点的位置坐标,判断所述眼动注视点的位置坐标是否在所述位置范围内;当所述眼动注视点的位置坐标不在所述位置范围内时,基于所述面部核心区域,设置所述引导注视点的移动轨迹。
[0008]进一步地,将所述患者的眼动注视点引导至所述面部核心区域之前,所述方法还包括:将所述引导注视点按照所述移动轨迹进行位移后的指定位置,作为指定引导注视点,并确定指定引导位置坐标,其中,所述指定引导注视点用于引导患者注视指定位置;获取所述患者注视指定位置时的指定眼动位置坐标;计算所述指定引导位置坐标和所述指定眼动位置坐标之间的空间距离,当所述空间距离小于预设阈值时,判定所述引导注视点对所述患者的视线引导成功。
[0009]进一步地,计算所述患者的响应时延,具体包括:计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离;获取所述患者在相邻两个实时眼动注视点之间的反应时间;根据所述空间距离、所述反应时间和预设公式,计算所述患者的响应时延,所述预设公式为:
[0010]DelayT=∑(T|D<=0.1cm),其中,DelayT为所述患者的响应时延,D为所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,T为所述患者注视相邻两个实时眼动注视点的反应时间。
[0011]进一步地,计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,具体包括:确定所述患者注视位置处的实时眼动注视点的位置坐标和对应的引导注视点的位置坐标;根据所述实时眼动注视点的位置坐标、所述对应的引导注视点的位置坐标以及指定公式,计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离;所述指定公式为:其中,D为所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,x
EF
为所述引导注视点的位置坐标中的横坐标,x
ERL
为所述实时眼动注视点的位置坐标中的横坐标,y
EF
为所述引导注视点的位置坐标中的纵坐标,y
ERL
为所述实时眼动注视点的位置坐标中的纵坐标。
[0012]进一步地,通过面孔注意力引导模块,确定所述患者的眼动注视点,具体包括:通过面孔注意力引导模块中的眼动采集装置,采集所述患者的眼动数据;基于所述患者的眼动数据,确定所述患者的眼动注视点。
[0013]进一步地,当所述空间距离大于或等于预设阈值时,所述方法还包括:确定所述引导注视点的显示参数,其中,所述显示参数包括亮度;调整所述引导注视点的显示参数,以便于对所述引导注视点进行加强显示。
[0014]进一步地,当所述患者的表情类型与预先获取的所述交互素材中的表情类型一致时,完成对所述患者的表情训练之前,所述方法还包括:通过预设的人工智能检测算法,对所述交互素材进行特征点位检测,以确定所述交互素材中的表情类型。
[0015]本说明书一个或多个实施例提供一种自闭症谱系障碍的智能训练设备,包括:
[0016]至少一个处理器;以及,
[0017]与所述至少一个处理器通信连接的存储器;其中,
[0018]所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够:
[0019]向患者展示交互素材,并通过面孔注意力引导模块,确定所述患者的眼动注视点,以便于在所述眼动注视点处,生成引导注视点,其中,所述交互素材包括虚拟人物交互和真实场景交互中的任意一项;获取所述交互素材中人物的面部核心区域,基于所述面部核心
区域,设置所述引导注视点的移动轨迹,其中,所述移动轨迹的起点为所述眼动注视点,所述移动轨迹的终点为所述面部核心区域中的指定点;按照所述移动轨迹,将所述患者的注视位置引导至所述面部核心区域,对所述患者进行引导训练,计算所述患者的响应时延;当所述响应时延满足预设阈值时,通过辅助训练模块,采集患者与所述交互素材的交互视频,并对所述患者的交互视频进行分析,确定患者的表情类型;当所述患者的表情类型与预先获取的所述交互素材中的表情类型一致时,完成对所述患者的表情训练。
[0020]本说明书一个或多个实施例提供的一种非易失性计算机存储介质,存储有计算机可执行指令,所述计算机可执行指令设置为:
[0021]向患者展示交互素材,并通过面孔注意力引导模块,确定所述患者的眼动注视点,以便于在所述眼动注视点处,生成引导注视点,其中,所述交互素材包括虚拟人物交本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种自闭症谱系障碍的智能训练方法,其特征在于,应用于智能训练系统,所述系统包括:面孔注意力引导模块和辅助训练模块;所述方法包括:向患者展示交互素材,并通过面孔注意力引导模块,确定所述患者的眼动注视点,以便于在所述眼动注视点处,生成引导注视点,其中,所述交互素材包括虚拟人物交互和真实场景交互中的任意一项;获取所述交互素材中人物的面部核心区域,基于所述面部核心区域,设置所述引导注视点的移动轨迹,其中,所述移动轨迹的起点为所述眼动注视点,所述移动轨迹的终点为所述面部核心区域中的指定点;按照所述移动轨迹,将所述患者的注视位置引导至所述面部核心区域,对所述患者进行引导训练,计算所述患者的响应时延;当所述响应时延满足预设阈值时,通过辅助训练模块,采集患者与所述交互素材的交互视频,并对所述患者的交互视频进行分析,确定患者的表情类型;当所述患者的表情类型与预先获取的所述交互素材中的表情类型一致时,完成对所述患者的表情训练。2.根据权利要求1所述的一种自闭症谱系障碍的智能训练方法,其特征在于,基于所述面部核心区域,设置所述引导注视点的移动轨迹之前,所述方法还包括:获取所述面部核心区域对应的位置范围;确定所述眼动注视点的位置坐标,判断所述眼动注视点的位置坐标是否在所述位置范围内;当所述眼动注视点的位置坐标不在所述位置范围内时,基于所述面部核心区域,设置所述引导注视点的移动轨迹。3.根据权利要求1所述的一种自闭症谱系障碍的智能训练方法,其特征在于,将所述患者的眼动注视点引导至所述面部核心区域之前,所述方法还包括:将所述引导注视点按照所述移动轨迹进行位移后的指定位置,作为指定引导注视点,并确定指定引导位置坐标,其中,所述指定引导注视点用于引导患者注视指定位置;获取所述患者注视指定位置时的指定眼动位置坐标;计算所述指定引导位置坐标和所述指定眼动位置坐标之间的空间距离,当所述空间距离小于预设阈值时,判定所述引导注视点对所述患者的视线引导成功。4.根据权利要求1所述的一种自闭症谱系障碍的智能训练方法,其特征在于,计算所述患者的响应时延,具体包括:计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离;获取所述患者在相邻两个实时眼动注视点之间的反应时间;根据所述空间距离、所述反应时间和预设公式,计算所述患者的响应时延,所述预设公式为:DelayT=Σ(T|D<=0.1cm),其中,DelayT为所述患者的响应时延,D为所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,T为所述患者注视相邻两个实时眼动注视点的反应时间。5.根据权利要求4所述的一种自闭症谱系障碍的智能训练方法,其特征在于,计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,具体包括:
确定所述患者注视位置处的实时眼动注视点的位置坐标和对应的引导注视点的位置坐标;根据所述实时眼动注视点的位置坐标、所述对应的引导注视点的位置坐标以及指定公式,计算所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离;所述指定公式为:其中,D为所述患者注视位置处的实时眼动注视点与对应的引导注视点之间的空间距离,x
EF
为所述引导注视点的位置坐标中的横坐...

【专利技术属性】
技术研发人员:宋业臻肖维斌王荣全韩伟黄岩曲继新
申请(专利权)人:山东心法科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1