一种内镜报告生成装置、方法、电子设备及可读存储介质制造方法及图纸

技术编号:28298288 阅读:12 留言:0更新日期:2021-04-30 16:24
本申请公开了一种内镜报告生成装置、方法、电子设备及计算机可读存储介质,该装置包括:图像获取模块,用于获取多个内镜图像;识别模块,用于将内镜图像输入图像识别模型,得到多个目标图像;信息获取模块,用于基于目标图像,从预设知识图谱中提取对应的报告信息;报告生成模块,用于在目标图像中选择代表图像,并利用代表图像和报告信息生成内镜报告;该装置可以自动生成内镜图像对应的内镜报告,降低人工查看和筛选数量巨大的内镜图像,可以减少查看内镜图像所需的阅片工作量和时长,提高了效率。

【技术实现步骤摘要】
一种内镜报告生成装置、方法、电子设备及可读存储介质
本申请涉及图像处理
,特别涉及一种内镜报告生成装置、内镜报告生成方法、电子设备及计算机可读存储介质。
技术介绍
胶囊内窥镜即胶囊内镜,用于进行消化道检查,其无创无痛的特征使人们摆脱采用传统胃肠镜带来的痛苦与不适,是消化道检查的新型手段。在用胶囊内窥镜进行消化道检查的过程中,会产生大量图像数据,少则几千张(例如胃部检查),多则几万张(例如小肠检查)。大量的胶囊内镜图像数据需要人工进行查看,判断其是否能够表现人体内情况,以便基于其得到对应的信息,这使得阅片工作量大、耗时较长。因此,相关技术存在的阅片工作量大、耗时较长的问题,是本领域技术人员需要解决的技术问题。
技术实现思路
有鉴于此,本申请的目的在于提供一种内镜报告生成装置、内镜报告生成方法、电子设备及计算机可读存储介质,可以自动生成内镜图像对应的内镜报告,降低人工查看和筛选数量巨大的内镜图像,因此可以减少查看内镜图像所需的阅片工作量和时长。为解决上述技术问题,本申请提供了一种内镜报告生成装置,包括:图像获取模块,用于获取多个内镜图像;识别模块,用于将所述内镜图像输入图像识别模型,得到多个目标图像;信息获取模块,用于基于所述目标图像,从预设知识图谱中提取对应的报告信息;报告生成模块,用于在所述目标图像中选择代表图像,并利用所述代表图像和所述报告信息生成内镜报告。可选地,所述识别模块,包括:第一识别单元,用于对各个所述内镜图像进行目标部位识别处理,得到第一目标图像;第二识别单元,用于对各个所述内镜图像进行异常识别处理,得到第二目标图像。可选地,所述第一识别单元,包括:候选子单元,用于分别计算各个所述内镜图像与各个目标部位对应的置信度,并将所述置信度大于置信度阈值的所述内镜图像确定为候选目标图像;确定子单元,用于从各个所述目标部位对应的所述候选目标图像中确定最佳目标图像,并将各个所述目标部位对应的所述最佳目标图像确定为所述第一目标图像。可选地,所述信息获取模块,包括:图像信息提取单元,用于根据所述目标图像的生成顺序,提取所述目标图像对应的图像信息;筛选单元,用于利用所述图像信息筛选所述预设知识图谱,得到诊断信息,并将所述诊断信息确定为所述报告信息。可选地,包括:信息提取模块,用于获取多个初始医学数据,并对所述初始医学数据进行信息提取,得到实体信息、关系信息和属性信息;构建模块,用于基于所述关系信息,对所述实体信息和所述属性信息进行对应关系构建处理,得到所述预设知识图谱;所述对应关系构建处理包括实体对齐处理、关系对齐处理、属性对齐处理、冲突消解处理和格式化处理中的至少一项。可选地,所述报告生成模块,包括:说明信息生成单元,用于对所述代表图像进行视觉语义联合处理,得到图像说明信息;报告生成单元,用于利用所述图像说明信息、所述报告信息和所述代表图像生成所述内镜报告。可选地,还包括:内镜信息获取模块,用于获取所述内镜图像对应的内镜信息;相应的,还包括:模型选择模块,用于根据所述内镜信息,从多个候选识别模型中确定所述图像识别模型。本申请还提供了一种内镜报告生成方法,包括:获取多个内镜图像;将所述内镜图像输入图像识别模型,得到多个目标图像;基于所述目标图像,从预设知识图谱中提取对应的报告信息;在所述目标图像中选择代表图像,并利用所述代表图像和所述报告信息生成内镜报告。本申请还提供了一种电子设备,包括存储器和处理器,其中:所述存储器,用于保存计算机程序;所述处理器,用于执行所述计算机程序,以实现上述的内镜报告生成方法。本申请还提供了一种计算机可读存储介质,用于保存计算机程序,其中,所述计算机程序被处理器执行时实现上述的内镜报告生成方法。本申请提供的内镜报告生成装置,包括:图像获取模块,用于获取多个内镜图像;识别模块,用于将内镜图像输入图像识别模型,得到多个目标图像;信息获取模块,用于基于目标图像,从预设知识图谱中提取对应的报告信息;报告生成模块,用于在目标图像中选择代表图像,并利用代表图像和报告信息生成内镜报告。可见,该装置利用图像获取模块获取到内镜图像后,利用图像识别模型对内镜图像进行识别,将其中可以用于准确描述人体内情况的内镜图像确定为目标图像。在得到目标图像后,可以基于目标图像筛选预设知识图谱,得到与目标图像对应的报告信息。报告信息可以对目标图像的表现进行描述,可以使得用户根据报告信息了解人体内情况,以便对人体内异常的情况进行诊断。在得到报告信息后,在目标图像中确定代表图像,并利用代表图像和报告内容共同生成对应的内镜报告,代表图像可以代表人体内部的情况,其数量也较少,减少了内镜报告中的无效信息。该装置可以自动生成内镜图像对应的内镜报告,降低人工查看和筛选数量巨大的内镜图像,因此可以减少查看内镜图像所需的阅片工作量和时长,提高了效率,解决了相关技术存在的阅片工作量大、耗时较长的问题。此外,本申请还提供了一种内镜报告生成方法、电子设备及计算机可读存储介质,同样具有上述有益效果。附图说明为了更清楚地说明本申请实施例或相关技术中的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。图1为本申请实施例提供的一种内镜报告生成装置的结构示意图;图2为本申请实施例提供的一种具体的内镜报告生成装置的结构示意图;图3为本申请实施例提供的一种内镜报告生成方法流程图;图4为本申请实施例提供的一种电子设备的结构示意图。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。请参考图1,图1为本申请实施例提供的一种内镜报告生成装置的结构示意图,包括:图像获取模块110,用于获取多个内镜图像;识别模块120,用于将内镜图像输入图像识别模型,得到多个目标图像;信息获取模块130,用于基于目标图像,从预设知识图谱中提取对应的报告信息;报告生成模块140,用于在目标图像中选择代表图像,并利用代表图像和报告信息生成内镜报告。具体的,内镜图像的获取方式本实施例不做限定,在一种具体的实施方式中,可以利用图像获取部件获取内镜图像;在另一种实施方式中,可以获取其他电子设备发送的内镜图像,例如可以获取内镜胶囊发送的内镜图像;在另一种实施方式中,可以从预本文档来自技高网...

【技术保护点】
1.一种内镜报告生成装置,其特征在于,包括:/n图像获取模块,用于获取多个内镜图像;/n识别模块,用于将所述内镜图像输入图像识别模型,得到多个目标图像;/n信息获取模块,用于基于所述目标图像,从预设知识图谱中提取对应的报告信息;/n报告生成模块,用于在所述目标图像中选择代表图像,并利用所述代表图像和所述报告信息生成内镜报告。/n

【技术特征摘要】
1.一种内镜报告生成装置,其特征在于,包括:
图像获取模块,用于获取多个内镜图像;
识别模块,用于将所述内镜图像输入图像识别模型,得到多个目标图像;
信息获取模块,用于基于所述目标图像,从预设知识图谱中提取对应的报告信息;
报告生成模块,用于在所述目标图像中选择代表图像,并利用所述代表图像和所述报告信息生成内镜报告。


2.根据权利要求1所述的内镜报告生成装置,其特征在于,所述报告生成模块,包括:
第一识别单元,用于对各个所述目标图像进行目标部位识别处理,得到第一代表图像;
第二识别单元,用于对各个所述目标图像进行异常识别处理,得到第二代表图像。


3.根据权利要求2所述的内镜报告生成装置,其特征在于,所述第一识别单元,包括:
候选子单元,用于分别计算各个所述目标图像与各个目标部位对应的置信度,并将所述置信度大于置信度阈值的所述目标图像确定为候选代表图像;
确定子单元,用于从各个所述目标部位对应的所述候选代表图像中确定最佳代表图像,并将各个所述目标部位对应的所述最佳代表图像确定为所述第一代表图像。


4.根据权利要求1所述的内镜报告生成装置,其特征在于,所述信息获取模块,包括:
图像信息提取单元,用于根据所述目标图像的生成顺序,提取所述目标图像对应的图像信息;
筛选单元,用于利用所述图像信息筛选所述预设知识图谱,得到诊断信息,并将所述诊断信息确定为所述报告信息。


5.根据权利要求1所述的内镜报告生成装置,其特征在于,还包括:
信息提取模块,用于获取多个初始医学数据,并对所述初始医学数据进行...

【专利技术属性】
技术研发人员:廖静黄访
申请(专利权)人:重庆金山医疗器械有限公司
类型:发明
国别省市:重庆;50

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1