本发明专利技术公开了一种用于肾病患者恶化情况分析的报告生成系统，涉及智能化报告生成技术领域，其获取患者在预定时间段内多个预定时间点的肾活检检查影像以得到肾活检检查影像的序列；对所述肾活检检查影像的序列进行模态转换以得到肾活检影像编码向量的序列；对所述肾活检影像编码向量的序列进行语义分析和基于影像语义关注度权重的强化更新以得到强化后肾活检影像上下文语义关联特征向量的序列；基于所述强化后肾活检影像上下文语义关联特征向量的序列，生成所述患者的生成恶化情况分析报告。这样，通过对肾活检检查影像的序列进行分析，可以发现病变的趋势和模式，进而辅助医护人员了解患者的病情发展趋势和恶化风险。
【技术实现步骤摘要】
本专利技术涉及智能化报告生成，尤其涉及一种用于肾病患者恶化情况分析的报告生成系统。
技术介绍
1、iga全称是immunoglobulina，即免疫球蛋白a。iga肾病是全世界最常见的免疫性肾小球肾炎。迄今为止，发病的机制尚不清楚，疾病预测仍依赖于肾活检这项有创操作，虽然经过积极治疗，目前仍有高达20％-30％的患者可能恶化至终末期肾病(尿毒症)。
2、由于iga肾病的恶化概率是随着时间而逐渐升高的。而现有方法并没有考虑到iga肾病的时间序列特性，导致对iga肾病患者的恶化情况分析结果并不准确。因此，期待一种优化的方案。
技术实现思路
1、本专利技术为了克服上述缺陷，提供一种用于肾病患者恶化情况分析的报告生成系统。
2、本专利技术提供了一种用于肾病患者恶化情况分析的报告生成系统，其包括：
3、检查影像获取模块，用于获取患者在预定时间段内多个预定时间点的肾活检检查影像以得到肾活检检查影像的序列；
4、模态转换模块，用于对所述肾活检检查影像的序列进行模态转换以得到肾活检影像编码向量的序列；
5、强化更新模块，用于对所述肾活检影像编码向量的序列进行语义分析和基于影像语义关注度权重的强化更新以得到强化后肾活检影像上下文语义关联特征向量的序列；
6、恶化情况分析报告生成模块，用于基于所述强化后肾活检影像上下文语义关联特征向量的序列，生成所述患者的生成恶化情况分析报告；
7、所述强化更新模块，包括：
>8、上下文语义关联特征提取单元，用于提取所述肾活检影像编码向量的序列的影像上下文语义关联特征以得到肾活检影像上下文语义关联特征向量的序列；9、影像语义关注度权重计算单元，用于计算所述肾活检影像上下文语义关联特征向量的序列中各个肾活检影像上下文语义关联特征向量相对于所述肾活检影像上下文语义关联特征向量的序列的特征分布整体的影像语义关注度权重以得到多个影像语义关注度权重；
10、权重强化更新单元，用于以所述多个影像语义关注度权重作为权重施加值，对所述肾活检影像上下文语义关联特征向量的序列进行强化更新以得到所述强化后肾活检影像上下文语义关联特征向量的序列；
11、其中，所述影像语义关注度权重计算单元，用于：
12、以如下影像语义关注度公式计算所述肾活检影像上下文语义关联特征向量的序列中各个肾活检影像上下文语义关联特征向量相对于所述肾活检影像上下文语义关联特征向量的序列的特征分布整体的影像语义关注度权重以得到多个影像语义关注度权重；其中，所述影像语义关注度公式为：
13、；
14、其中，和是1×的矩阵，是各个所述肾活检影像上下文语义关联特征向量的维度，是所述肾活检影像上下文语义关联特征向量的个数，是所述肾活检影像上下文语义关联特征向量的序列中第个肾活检影像上下文语义关联特征向量，是sigmoid函数，是第个影像语义关注度权重。
15、进一步地，所述模态转换模块，用于：
16、将所述肾活检检查影像的序列通过图像-向量模态转换器以得到所述肾活检影像编码向量的序列。
17、进一步地，所述上下文语义关联特征提取单元，用于：
18、将所述肾活检影像编码向量的序列通过基于转换器的图像语义上下文关联特征捕获器以得到所述肾活检影像上下文语义关联特征向量的序列。
19、进一步地，所述上下文语义关联特征提取单元，包括：
20、查询向量构造子单元，用于将所述肾活检影像编码向量的序列进行一维排列以得到肾活检影像特征向量；
21、自注意子单元，用于计算所述肾活检影像特征向量与所述肾活检影像编码向量的序列中各个肾活检影像编码向量的转置向量之间的乘积以得到多个自注意力关联矩阵；
22、标准化子单元，用于分别对所述多个自注意力关联矩阵中各个自注意力关联矩阵进行标准化处理以得到多个标准化后自注意力关联矩阵；
23、关注度计算子单元，用于将所述多个标准化后自注意力关联矩阵中各个标准化后自注意力关联矩阵通过softmax分类函数以得到多个概率值；
24、注意力施加子单元，用于分别以所述多个概率值中各个概率值作为权重对所述肾活检影像编码向量的序列中各个肾活检影像编码向量进行加权以得到所述肾活检影像上下文语义关联特征向量的序列。
25、进一步地，所述恶化情况分析报告生成模块，包括：
26、级联单元，用于将所述强化后肾活检影像上下文语义关联特征向量的序列级联为肾活检影像全局上下文语义关联特征向量；
27、报告生成单元，用于将所述肾活检影像全局上下文语义关联特征向量通过基于aigc的报告生成器以得到所述患者的生成恶化情况分析报告。
28、进一步地，还包括用于对所述图像-向量模态转换器、所述基于转换器的图像语义上下文关联特征捕获器和所述基于aigc的报告生成器进行训练的训练模块。
29、进一步地，所述训练模块，包括：
30、训练数据获取单元，用于获取训练数据，所述训练数据包括患者的训练肾活检检查影像的序列，以及，所述患者的生成恶化情况分析报告的真实值；
31、训练模态转换单元，用于将所述训练肾活检检查影像的序列通过所述图像-向量模态转换器以得到训练肾活检影像编码向量的序列；
32、训练上下文关联特征捕获单元，用于将所述训练肾活检影像编码向量的序列通过所述基于转换器的图像语义上下文关联特征捕获器以得到训练肾活检影像上下文语义关联特征向量的序列；
33、训练影像语义关注度权重计算单元，用于计算所述训练肾活检影像上下文语义关联特征向量的序列中各个训练肾活检影像上下文语义关联特征向量相对于所述训练肾活检影像上下文语义关联特征向量的序列的特征分布整体的影像语义关注度权重以得到多个训练影像语义关注度权重；
34、训练强化更新单元，用于以所述多个训练影像语义关注度权重作为权重施加值，对所述训练肾活检影像上下文语义关联特征向量的序列进行强化更新以得到训练强化后肾活检影像上下文语义关联特征向量的序列；
35、训练级联单元，用于将所述训练强化后肾活检影像上下文语义关联特征向量的序列级联为训练肾活检影像全局上下文语义关联特征向量；
36、训练特征分布修正单元，用于对所述训练肾活检影像全局上下文语义关联特征向量进行特征分布修正以得到修正肾活检影像全局上下文语义关联特征向量；
37、训练报告生成单元，用于将所述修正肾活检影像全局上下文语义关联特征向量通过所述基于aigc的报告生成器以得到生成损失函数值；
38、训练单元，用于以所述生成损失函数值来对所述图像-向量模态转换器、所述基于转换器的图像语义上下文关联特征捕获器和所述基于aigc的报告生成器进行训练。
39、本专利技术获取患者在预定时间段内多个预定时间点的肾活检检查影像以得到肾活检检查影像的序列；对所述肾本文档来自技高网...
【技术保护点】
1.一种用于肾病患者恶化情况分析的报告生成系统，其特征在于，包括：
2.根据权利要求1所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述模态转换模块，用于：
3.根据权利要求2所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述上下文语义关联特征提取单元，用于：
4.根据权利要求3所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述上下文语义关联特征提取单元，包括：
5.根据权利要求4所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述恶化情况分析报告生成模块，包括：
6.根据权利要求5所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，还包括用于对所述图像-向量模态转换器、所述基于转换器的图像语义上下文关联特征捕获器和所述基于AIGC的报告生成器进行训练的训练模块。
7.根据权利要求6所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述训练模块，包括：
【技术特征摘要】
1.一种用于肾病患者恶化情况分析的报告生成系统，其特征在于，包括：
2.根据权利要求1所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述模态转换模块，用于：
3.根据权利要求2所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述上下文语义关联特征提取单元，用于：
4.根据权利要求3所述的用于肾病患者恶化情况分析的报告生成系统，其特征在于，所述上下文语义关联特征提取单元，包括：
【专利技术属性】
技术研发人员：王影，李艳博，
申请(专利权)人：吉林大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。