数据融合汇聚方法、装置及计算机可读存储介质制造方法及图纸

技术编号:41467364 阅读:28 留言:0更新日期:2024-05-30 14:22
本发明专利技术公开一种数据融合汇聚方法、装置及计算机可读存储介质。其中,该方法包括:接入多源数据,对接入的多源数据进行数据归集,并将归集后的数据存入原始数据库中;加载唯一索引规则库;加载原始数据库中的待识别数据;对待识别数据进行类型分类;根据唯一索引规则表对分类后的数据进行匹配识别,在匹配的情况下生成唯一索引确认清单表;根据接入的多源数据对匹配的唯一性进行验证;在验证成功的情况下,将唯一索引确认清单表存入唯一索引规则库并记录每个唯一索引在唯一索引确认清单表所在位置以及每个唯一索引对应的数据内容;根据唯一索引确认清单表索引对原始数据库中已识别的数据执行融合操作,并将融合后的数据存储至融合数据库中。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种数据融合汇聚方法、装置及计算机可读存储介质


技术介绍

1、在当今数字化时代,大量的数据不断被生成和积累,这些数据分散在各种不同的数据源中,如数据库、文件系统、云存储等。这些数据可能来自于不同的组织、部门或个人,且存在着多样化的数据格式和结构。为了更好地利用这些数据,我们需要将它们进行融合和关联,以获取更全面、准确的信息。

2、然而,由于数据源的异构性和数据结构的差异性,数据融合和关联变得复杂而耗时。传统的手动方法需要人工处理和匹配不同源的数据,这不仅费时费力,还容易出错。因此,迫切需要一种自动化的融合技术,能够高效、准确地实现数据的关联和融合。


技术实现思路

1、本专利技术提供了一种数据融合汇聚方法、装置及计算机可读存储介质,能够解决现有技术中的问题。

2、本专利技术提供了一种数据融合汇聚方法,其中,该方法包括:

3、接入多源数据,对接入的多源数据进行数据归集,并将归集后的数据存入原始数据库中;

4、加载唯一索引规则库,唯一本文档来自技高网...

【技术保护点】

1.一种数据融合汇聚方法,其特征在于,该方法包括:

2.根据权利要求1所述的方法,其特征在于,唯一索引规则表包括数据唯一标识和与唯一标识对应的相关信息。

3.根据权利要求2所述的方法,其特征在于,唯一索引确认清单表包括已识别数据类型和已识别数据来源。

4.根据权利要求3所述的方法,其特征在于,对待识别数据按照数据的属性字段进行类型分类。

5.一种数据融合汇聚装置,其特征在于,该装置包括:

6.一种计算机可读存储介质,所述存储介质中存储有至少一条指令,其特征在于,所述至少一条指令由处理器加载并执行以实现如权利要求1-4任一项所述的...

【技术特征摘要】

1.一种数据融合汇聚方法,其特征在于,该方法包括:

2.根据权利要求1所述的方法,其特征在于,唯一索引规则表包括数据唯一标识和与唯一标识对应的相关信息。

3.根据权利要求2所述的方法,其特征在于,唯一索引确认清单表包括已识别数据类型和已识别数据来源。

4.根据权利要求3...

【专利技术属性】
技术研发人员:刘超刘同林常衢通余金龙佘青徐言俊黄鑫王胜
申请(专利权)人:北京机电工程研究所
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1