命名实体识别方法、装置、设备及存储介质制造方法及图纸

技术编号:42115132 阅读:29 留言:0更新日期:2024-07-25 00:35
本发明专利技术实施例提供一种多模态的命名实体识别方法、装置、设备及存储介质。方法包括:获取待识别的目标文本以及所述目标文本对应的目标图像;通过第一编码器对所述目标文本进行编码,得到初始文本向量;以及,通过第二编码器对所述目标图像进行编码,得到初始图像向量;基于预设的标签信息,通过第三编码器将所述初始文本向量以及所述初始图像向量进行联合编码,得到目标文本向量;对所述目标文本向量进行识别,得到每一所述实体类型对应的目标命名实体。本申请实施例旨在提高对医疗图片以及医疗文本命名实体识别的精确度以及效率。

【技术实现步骤摘要】

本申请涉及医疗科技,尤其涉及一种多模态的命名实体识别方法、命名实体识别装置、计算机设备及计算机可读存储介质。


技术介绍

1、在保险的理赔过程中,通常需要对患者上传的病历、检查单等医疗文本以及对应的医疗图片进行命名实体识别,例如识别到患者姓名、就诊医院、就诊科室、就诊时间、诊断内容等信息以实现对应的业务需求。

2、目前对医疗文本以及医疗图片进行命名实体识别方法主要是使用交互注意力或是门控机制的方法对图像和文本进行交互融合,然而其依赖大量的标注数据,因此效率较低;还有一种是引入外部知识如抽取图片实体之间的位置关系或使用image caption等信息来抽取更加有利于命名实体识别的图像信息。然而该方法很大程度上依赖于外部知识的准确性,因此容易在命名实体识别中引入额外的噪声,因此准确性较低。


技术实现思路

1、本申请提供了一种多模态的命名实体识别方法、命名实体识别装置、计算机设备及计算机可读存储介质,旨在提高对医疗图片以及医疗文本命名实体识别的精确度以及效率。

2、为实现上述目的,本申请提供一本文档来自技高网...

【技术保护点】

1.一种多模态的命名实体识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述通过第一编码器对所述目标文本进行编码,得到初始文本向量,包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述基于预设的标签信息,通过第三编码器将所述初始文本向量以及所述初始图像向量进行联合编码,得到目标文本向量,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述第一相关度以及所述第二相关度,通过所述第三编码器将所述初始文本向量以及所述初始图像向量进行联合编码,得...

【技术特征摘要】

1.一种多模态的命名实体识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述通过第一编码器对所述目标文本进行编码,得到初始文本向量,包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求1所述的方法,其特征在于,所述基于预设的标签信息,通过第三编码器将所述初始文本向量以及所述初始图像向量进行联合编码,得到目标文本向量,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述第一相关度以及所述第二相关度,通过所述第三编码器将所述初始文本向量以及所述初始图像向量进行联合编码,得到所述目标文本向量,包括:

6.根据权利要求1所述的方法,其...

【专利技术属性】
技术研发人员:舒畅肖京陈又新
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1