本申请提供一种基于大数据分析的ERCP报告生成方法、装置及存储介质，通过获取初始ERCP报告对应的文本表征向量以及获取初始ERCP报告对应的ERCP造影图像的图像表征向量，对文本表征向量进行顺次抽样操作，从而得到初始ERCP报告中的顺次信息，如此增加文本特征，如文本顺次抽样特征的表征效果，采用将图像表征向量和文本顺次抽样特征整合为多要素融合表征向量，对多要素融合表征向量进行嵌入映射操作得到多要素融合嵌入映射表征向量，再通过对多要素融合嵌入映射表征向量进行信息还原操作，推理获得初始ERCP报告对应的最终ERCP报告，增加了报告中内容的准确度和可靠度。
1、ercp(内镜逆行胆管-胰管造影术)是一种介入性内镜检查和治疗技术，用于诊断和治疗胆道和胰管的疾病，通常而言，病患在最终治疗前，会进行不同环节甚至不同医院地检查，得到多种多量报告。为了便于医生了解病患情况，需要将ercp过程中涉及的检查、治疗、随访等信息进行归集整理，并进行信息归纳，让医生快速了解病患情况，提高诊断效率。但是，受限于医疗资源信息孤岛、医疗资源不均、专业知识不统一等情况，要将不同医院、不同医生、不同阶段的ercp报告进行整理是具有挑战性的工作，这需要消耗整理人员大量的时间和精力。为了解决该问题，采用人工智能手段，结合大数据进行报告的自动整理是可行的方案，而其中涉及到的重要的环节和难点在于生成报告的过程中，生成内容与原内容之间的契合度问题，针对这一问题，如何利用报告中不同文本段落在原各报告中的关联性又是需要考虑的技术问题。
>6、对所述文本表征向量进行顺次抽样操作，得到所述初始ercp报告对应的文本顺次抽样特征，将所述文本顺次抽样特征和所述图像表征向量整合为多要素融合表征向量；7、对所述多要素融合表征向量进行嵌入映射操作，得到多要素融合嵌入映射表征向量，对所述多要素融合嵌入映射表征向量进行信息还原操作，得到与所述初始ercp报告对应的最终ercp报告。
8、作为一种实施方式，所述获取所述初始ercp报告对应的文本表征向量，包括：
9、对所述初始ercp报告进行文本段落划分得到文本段落集合，将所述文本段落集合中的各个文本段落拆解成多个的文本分句，得到所述文本段落集合中的每个文本段落所对应的文本分句序列；
10、通过所述文本段落集合中的文本段落a对应的文本分句序列，获取所述文本段落a对应的文本执行载体，将所述文本执行载体加载到报告构建网络中的文本嵌入映射算子；a≤所述文本段落集合对应的文本段落数量；
11、通过所述文本嵌入映射算子对所述文本执行载体进行嵌入映射操作，得到所述文本段落a对应的段落表征向量；
12、将所述文本段落集合中的各个文本段落所对应的段落表征向量整合为所述初始ercp报告对应的文本表征向量。
13、作为一种实施方式，所述通过所述文本嵌入映射算子对所述文本执行载体进行嵌入映射操作，得到所述文本段落a对应的段落表征向量，包括：
14、通过所述文本嵌入映射算子中的显著性嵌入映射模块输出所述文本执行载体对应的显著性嵌入映射向量，将所述文本执行载体和所述显著性嵌入映射向量整合为文本整合表征向量；
15、获取所述文本嵌入映射算子中的前馈神经网络对应的中间层权值参数和偏移参数，基于所述偏移参数以及所述中间层权值参数与所述文本整合表征向量之间的内积，确定所述文本段落a对应的文本调节保证向量，将所述文本整合表征向量和所述文本调节保证向量整合为所述文本段落a对应的段落表征向量。
16、作为一种实施方式，所述通过所述文本嵌入映射算子中的显著性嵌入映射模块输出所述文本执行载体对应的显著性嵌入映射向量，包括：
17、获取所述文本嵌入映射算子中的显著性嵌入映射模块对应的转换权值张量，基于所述显著性嵌入映射模块的转换权值张量，将所述文本执行载体转换成第一输入数组、第一检索数组以及第一输出加权信息数组；
18、对所述第一输入数组与所述第一检索数组的转置进行内积求取，得到临时权值数组，获取所述第一输入数组对应的列的数目；
19、对所述临时权值数组与所述列的数目的预设运算结果间的比例进行标准化，得到第一显著性权值数组，通过所述第一显著性权值数组与所述第一输出加权信息数组之间的内积，确定所述文本执行载体对应的显著性嵌入映射向量。
20、作为一种实施方式，所述获取所述ercp造影图像对应的图像表征向量，包括：
21、将所述ercp造影图像拆解成p个图像块，获取所述p个图像块分别对应的图像块表征向量；p≥1；
22、通过所述p个图像块在所述ercp造影图像中的语义，获取所述p个图像块分别对应的图像全局向量；
23、通过所述p个图像块在所述ercp造影图像中的分布信息，获取所述p个图像块分别对应的分布表征向量；
24、将所述图像块表征向量、所述图像全局向量以及所述分布表征向量进行融合，得到所述ercp造影图像对应的图像执行载体；
25、将所述图像执行载体加载到报告构建网络中的图像嵌入映射算子，通过所述图像嵌入映射算子对所述图像执行载体进行嵌入映射操作，得到所述ercp造影图像对应的图像表征向量；
26、所述对所述文本表征向量进行顺次抽样操作，得到所述初始ercp报告对应的文本顺次抽样特征，包括：
27、对所述文本表征向量进行分布信息嵌入，得到所述文本表征向量对应的分布嵌入映射信息，将所述文本表征向量和所述分布嵌入映射信息整合为文本表征信息；
28、获取与所述图像表征向量一样维数的基础顺次表征向量，将所述基础顺次表征向量和所述文本表征信息加载到报告构建网络中的顺次抽样算子；
29、通过所述顺次抽样算子和所述文本表征信息对所述基础顺次表征向量进行优化，得到所述初始ercp报告对应的文本顺次抽样特征。
30、作为一种实施方式，所述文本表征向量包括q个段落表征向量，q≥1；所述对所述文本表征向量进行分布信息嵌入，得到所述文本表征向量对应的分布嵌入映射信息，包括：
31、获取所述q个段落表征向量在所述初始ercp报告中的查询位，将所述q个段落表征向量的查询位拆解成第一查询位和第二查询位，所述第一查询位和第二查询位的奇偶性不一致；
32、对所述文本表征向量中的第一查询位进行第一分布嵌入，得到所述第一查询位对应的第一嵌入结果；
33、对所述文本表征向量中的第二查询位进行第二分布嵌入，得到所述第二查询位对应的第二嵌入结果；
34、将所述第一嵌入结果和所述第二嵌入结果，确定为所述文本表征向量对应的分布嵌入映射信息；
35、所述报告构建网络中的顺次抽样算子包括s个外部显著性模块和s个内部显著性模块，所述s个外部显著性模块和所述s个内部显著性模块间隔设置，s≥1；所述通过所述顺次抽样算子和所述文本表征信息，对所述基础顺次表征向量进行优化，得到所述初始ercp报告对本文档来自技高网...
【技术保护点】
1.一种基于大数据分析的ERCP报告生成方法，其特征在于，包括：
2.如权利要求1所述的方法，其特征在于，所述获取所述初始ERCP报告对应的文本表征向量，包括：
3.如权利要求2所述的方法，其特征在于，所述通过所述文本嵌入映射算子对所述文本执行载体进行嵌入映射操作，得到所述文本段落A对应的段落表征向量，包括：
4.如权利要求3所述的方法，其特征在于，所述通过所述文本嵌入映射算子中的显著性嵌入映射模块输出所述文本执行载体对应的显著性嵌入映射向量，包括：
5.如权利要求1所述的方法，其特征在于，所述获取所述ERCP造影图像对应的图像表征向量，包括：
6.如权利要求5所述的方法，其特征在于，所述文本表征向量包括Q个段落表征向量，Q≥1；所述对所述文本表征向量进行分布信息嵌入，得到所述文本表征向量对应的分布嵌入映射信息，包括：
7.如权利要求1所述的方法，其特征在于，所述对所述多要素融合表征向量进行嵌入映射操作得到多要素融合嵌入映射表征向量，对所述多要素融合嵌入映射表征向量进行信息还原操作，得到与所述初始ERCP报告对应的最终ERCP报告，包括：
8.如权利要求2所述的方法，其特征在于，所述报告构建网络通过以下方式调试得到：
9.一种ERCP报告生成装置，其特征在于，包括：
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，当所述计算机程序在处理器上运行时，使得处理器可以执行权利要求1～8任一项所述的方法。
...
【技术特征摘要】
1.一种基于大数据分析的ercp报告生成方法，其特征在于，包括：
2.如权利要求1所述的方法，其特征在于，所述获取所述初始ercp报告对应的文本表征向量，包括：
3.如权利要求2所述的方法，其特征在于，所述通过所述文本嵌入映射算子对所述文本执行载体进行嵌入映射操作，得到所述文本段落a对应的段落表征向量，包括：
4.如权利要求3所述的方法，其特征在于，所述通过所述文本嵌入映射算子中的显著性嵌入映射模块输出所述文本执行载体对应的显著性嵌入映射向量，包括：
5.如权利要求1所述的方法，其特征在于，所述获取所述ercp造影图像对应的图像表征向量，包括：
6.如权利要求5所述的方法，其特征在于，所述文本表征向量包括q个段落...
【专利技术属性】
技术研发人员：郭汉斌，王麟，徐有青，
申请(专利权)人：首都医科大学附属北京天坛医院，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。