数据血缘生成方法、系统、设备、存储介质及产品技术方案

技术编号:41769329 阅读:11 留言:0更新日期:2024-06-21 21:46
本发明专利技术提出一种数据血缘生成方法、系统、设备、存储介质及产品,应用于数据处理技术领域,数据血缘生成方法包括:基于目标待处理数据生成目标知识图谱;将目标知识图谱输入Informer模型中,得到目标语义特征,Informer模型是以第一真实血缘数据的知识图谱为模型输入数据,以第一真实血缘数据的语义特征为模型训练标签训练得到的;将目标待处理数据和目标语义特征输入Diffusion模型,得到目标待处理数据的数据血缘,其中,Diffusion模型是以第二真实血缘数据和语义特征为模型输入数据,以第二真实血缘数据的数据血缘为模型训练标签训练得到的。本发明专利技术技术方案旨在解决如何提高数据血缘的生成效率的技术问题。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种数据血缘生成方法、系统、设备、存储介质及产品


技术介绍

1、数据血缘,是指数据的全生命周期中,数据从产生、处理、加工、融合、流转到最终消亡,数据之间自然形成的一种关系。通过数据血缘,可以清晰地得到数据是如何在各个系统、应用程序和表之间流动和转换的。因此,数据血缘是数据处理过程中的关键数据。

2、现如今,在各个系统中提取各类数据后,通常需要人工对获取的各类数据的流转关系进行梳理,从而生成数据血缘。在待处理的数据体量较大时,也就需要耗费大量的人力和时间,导致数据血缘的生成效率较低。

3、因此,如何提高数据血缘的生成效率,是本领域技术人员尚待解决的技术问题。


技术实现思路

1、本专利技术提出一种数据血缘生成方法、系统、设备、存储介质及产品,旨在解决如何提高数据血缘的生成效率的技术问题。

2、为解决上述问题,本专利技术提出一种数据血缘生成方法,所述数据血缘生成方法包括:

3、获取目标待处理数据,并基于所述目标待处理数据生成目标知识图本文档来自技高网...

【技术保护点】

1.一种数据血缘生成方法,其特征在于,所述数据血缘生成方法包括:

2.如权利要求1所述的数据血缘生成方法,其特征在于,所述Informer模型的数量为多个,多个所述Informer模型训练时采用的不同的所述第一真实血缘数据,所述将所述目标知识图谱输入预设的Informer模型中,得到目标语义特征的步骤包括:

3.如权利要求1所述的数据血缘生成方法,其特征在于,所述Diffusion模型包括前向传播模块和后向传播模块,在所述将所述目标待处理数据和所述目标语义特征输入预设的Diffusion模型,得到所述目标待处理数据的数据血缘的步骤之前,所述方法还包括:

...

【技术特征摘要】

1.一种数据血缘生成方法,其特征在于,所述数据血缘生成方法包括:

2.如权利要求1所述的数据血缘生成方法,其特征在于,所述informer模型的数量为多个,多个所述informer模型训练时采用的不同的所述第一真实血缘数据,所述将所述目标知识图谱输入预设的informer模型中,得到目标语义特征的步骤包括:

3.如权利要求1所述的数据血缘生成方法,其特征在于,所述diffusion模型包括前向传播模块和后向传播模块,在所述将所述目标待处理数据和所述目标语义特征输入预设的diffusion模型,得到所述目标待处理数据的数据血缘的步骤之前,所述方法还包括:

4.如权利要求1所述的数据血缘生成方法,其特征在于,所述基于所述目标待处理数据生成目标知识图谱的步骤,包括:

5.如权利要求4所述的数据血缘生成方法,其特征在于,所述基于所述目标待处理数据生成目标知识图谱的步骤之后,还包括:

6.如权利要求1至5中...

【专利技术属性】
技术研发人员:安翔宇白波孟瑶王光超詹洪宇
申请(专利权)人:中移动信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1