养老照护跨模态标准化评估模型的构建方法及评估系统技术方案

技术编号:41336244 阅读:28 留言:0更新日期:2024-05-20 09:55
本发明专利技术涉及医学数据处理与人工智能技术领域,公开一种养老照护跨模态标准化评估模型的构建方法及评估系统,包括:构建跨模态文本‑视频片段序列数据集,通过对养老照护标准文本样本数据和视频片段序列样本数据进行编码,得到养老照护标准文本向量序列和视频片段编码序列,对养老照护标准文本向量序列和视频片段编码序列进行编码、解码、跨模态信息融合,得到跨模态文本‑视频片段序列融合表示,使模型学习养老照护标准文本与正样本数据集和负样本数据集中视频片段序列的映射关系,得到养老照护跨模态标准化评估模型。本发明专利技术能够自动评估养老照护人员在视频中的操作是否遵循文本指令,提高管理员的检查效率,利于加强养老照护人员的操作规范性。

【技术实现步骤摘要】

本专利技术涉及医学数据处理与人工智能,尤其涉及一种养老照护跨模态标准化评估模型的构建方法及评估系统


技术介绍

1、近些年,人口的快速老龄化给我国带来了较大的挑战,其中一个重要问题是养老照护以及相关养老照护人员供给不足以及技能水平参差不齐的问题。解决养老相关从业人员的供给缺口问题,除了通过提高从业人员薪资以及强化养老照护技术的培训等社会、经济层面的措施之外,计算机与人工智能技术也可以有效地帮助提升养老照护人员的素质以及预防非标准化照护、医疗操作对老人的身心健康造成的伤害。

2、遵循各种照护手册的指导,可以防止养老照护人员在操作时发生事故和故障。例如在医院时,医疗照护手册要求卫生专业人员在对患者进行医疗程序之前先消毒双手,因为仔细的手部消毒可以保护患者免受医院获得性感染。文本往往是描述操作标准的权威或关键元素,其常见形式包括书籍、手册、说明书、技巧等。因为操作规范或标准往往只存在于文本版本中,所以管理员通常需要以视觉方式观察与评估这些操作是否符合规范。在公共场所,摄像头可以用视频记录养老照护人员的行为,提供视频记录供管理员来评估养老照护人员的操作本文档来自技高网...

【技术保护点】

1.一种养老照护跨模态标准化评估模型的构建方法,其特征在于,包括:

2.根据权利要求1所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述构建跨模态文本-视频片段序列数据集,包括:

3.根据权利要求2所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述对于养老照护标准文本样本数据集中的每一条养老照护标准文本样本数据,根据养老照护操作过程文字描述,从养老照护操作视频集合中获取对应的多个视频片段并对多个视频片段进行排列,得到视频片段序列样本数据集的正样本数据集,包括:

4.根据权利要求3所述的养老照护跨模态标准化评估模型的构建方法,其特...

【技术特征摘要】

1.一种养老照护跨模态标准化评估模型的构建方法,其特征在于,包括:

2.根据权利要求1所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述构建跨模态文本-视频片段序列数据集,包括:

3.根据权利要求2所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述对于养老照护标准文本样本数据集中的每一条养老照护标准文本样本数据,根据养老照护操作过程文字描述,从养老照护操作视频集合中获取对应的多个视频片段并对多个视频片段进行排列,得到视频片段序列样本数据集的正样本数据集,包括:

4.根据权利要求3所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述分别对养老照护标准文本样本数据集的养老照护标准文本样本数据和视频片段序列样本数据集的视频片段序列样本数据进行编码,得到养老照护标准文本向量序列和视频片段编码序列,包括:

5.根据权利要求4所述的养老照护跨模态标准化评估模型的构建方法,其特征在于,所述对养老照护标准文本向量序列和视频...

【专利技术属性】
技术研发人员:左美云吴超尘
申请(专利权)人:中国人民大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1