图像信息提取方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:43299430 阅读:18 留言:0更新日期:2024-11-12 16:16
本申请实施例提供了一种图像信息提取方法、装置、计算机设备及存储介质,涉及人工智能技术领域和数字医疗领域。方法包括:将原始图像分割为多个子图像,并确定每个子图像对应的目标图像特征;确定原始图像对应的描述文本,以及确定描述文本对应的目标文本特征;将目标文本特征分别和每个目标图像特征拼接得到每个子图像对应的目标图文特征;将目标图文特征和目标图像特征输入到训练后的解码模型中,输出与描述文本相关的目标子图像;根据目标子图像提取出描述文本对应的实体,其中训练后的解码模型基于预测子样本图像和标签子图像之间对应的损失训练得到。本申请实施例能够提高对图像中实体进行提取的准确性。

【技术实现步骤摘要】

本申请涉及人工智能,尤其涉及一种图像信息提取方法、装置、计算机设备及存储介质


技术介绍

1、随着图像处理技术的兴起,目前图像处理技术已经应用在多种场景中,比如医疗领域可以支持疾病辅助诊断、健康管理、远程会诊等功能。

2、相关技术中,通过采用图像信息对模型进行训练,使用该训练后的模型来进行图像提取,但是这种方式忽略了图像的语义信息,只关注像素级别的特征,这样导致模型无法理解图像中更高级别的语义特征,还会容易受到噪声和其他干扰因素的影响,导致图像信息提取的准确性不高。

3、因此,相关技术中存在对图像中的实体提取不准确。


技术实现思路

1、本申请实施例的主要目的在于提出一种图像信息提取方法、装置、计算机设备及存储介质,能够提高对图像中需要提取对象的提取准确性。

2、为实现上述目的,本申请实施例的第一方面提出了一种图像信息提取方法,所述方法包括:

3、将原始图像分割为多个子图像,并确定每个所述子图像对应的目标图像特征;

4、确定所述原始图像对应的描述文本,本文档来自技高网...

【技术保护点】

1.一种图像信息提取方法,其特征在于,包括:

2.根据权利要求1所述的图像信息提取方法,其特征在于,所述确定每个所述子图像对应的目标图像特征,包括:

3.根据权利要求2所述的图像信息提取方法,其特征在于,所述训练后的第一编码模型包括多个依次连接的子第一注意力模型,所述将每个所述子图像对应的图像特征输入到训练后的第一编码模型中,输出每个所述子图像对应的图像特征,包括:

4.根据权利要求1所述的图像信息提取方法,其特征在于,所述确定所述描述文本对应的目标文本特征,包括:

5.根据权利要求1所述的图像信息提取方法,其特征在于,所述将所述目标图文特...

【技术特征摘要】

1.一种图像信息提取方法,其特征在于,包括:

2.根据权利要求1所述的图像信息提取方法,其特征在于,所述确定每个所述子图像对应的目标图像特征,包括:

3.根据权利要求2所述的图像信息提取方法,其特征在于,所述训练后的第一编码模型包括多个依次连接的子第一注意力模型,所述将每个所述子图像对应的图像特征输入到训练后的第一编码模型中,输出每个所述子图像对应的图像特征,包括:

4.根据权利要求1所述的图像信息提取方法,其特征在于,所述确定所述描述文本对应的目标文本特征,包括:

5.根据权利要求1所述的图像信息提取方法,其特征在于,所述将所述目标图文特征和所述目标图像特征输入到训练后的解码模型中,输出与所述描述文本相关的目标子图...

【专利技术属性】
技术研发人员:唐小初陈柯舒畅陈又新
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1