一种数据管理方法及数据管理平台技术

技术编号:31723902 阅读:59 留言:0更新日期:2022-01-05 15:47
本发明专利技术提出一种数据管理方法,包括:接收结构化数据、非结构化数据;处理所述结构化数据和所述非结构化数据,形成数据源;存储所述数据源;发布所述数据源。本发明专利技术设计的数据管理方法及数据管理平台,总体定位在数据层面集中所有的业务数据,各业务系统的业务数据将通过数据同步和数据装载的方式批量或近实时的方式导入数据管理平台。数据管理平台对数据进行清洗、存储和发布。这样可以保证数据分析应用的基础数据的完整性和全面性,保持数据唯一性和一致性,更可以简化公司系统数据管理的复杂性,提升数据管理平台的可持续发展能力。提升数据管理平台的可持续发展能力。提升数据管理平台的可持续发展能力。

【技术实现步骤摘要】
一种数据管理方法及数据管理平台


[0001]本专利技术属于数据共享领域,特别涉及一种数据管理方法及数据管理平台。

技术介绍

[0002]随着我国现代化信息技术的蓬勃发展,信息化建设模式发生根本性改变,信息化应用进入一个新常态,为积极应对大数据时代的机遇与挑战,大数据平台应运而生。为了实现数据集中管理,实现主数据在系统间同步一致,切实提升业务公司提供企业级分析能力。
[0003]由于历史等原因,各业务系统所使用的数据存储方式不同,也存在部分数据存储在不同业务系统中,甚至部分业务系统内数据出现错误而无法统一。

技术实现思路

[0004]针对上述问题,本专利技术提出一种数据管理方法,包括:
[0005]接收结构化数据、非结构化数据;
[0006]处理所述结构化数据和所述非结构化数据,形成数据源;
[0007]存储所述数据源;
[0008]发布所述数据源。
[0009]进一步地,所述结构化数据包括:数据库标准数据、通信标准数据;
[0010]所述非结构化数据包括:文本、图片。...

【技术保护点】

【技术特征摘要】
1.一种数据管理方法,其特征在于,所述方法包括:接收结构化数据、非结构化数据;处理所述结构化数据和所述非结构化数据,形成数据源;存储所述数据源;发布所述数据源。2.根据权利要求1所述的管理方法,其特征在于,所述结构化数据包括:数据库标准数据、通信标准数据;所述非结构化数据包括:文本、图片。3.根据权利要求1或2所述的管理方法,其特征在于,所述接收结构化数据包括:通过中转站、API数据接口或Webservice接口模式接收结构化数据。4.根据权利要求1或2所述的管理方法,其特征在于,所述接收非结构化数据包括:通过FTP传输方式接收非结构化数据。5.根据权利要求1所述的管理方法,其特征在于,所述处理所述结构化数据和所述非结构化数据,形成数据源包括:对所述结构化数据和所述非结构化数据进行数据清洗,所述清洗包括:合并重复数据;修改或删除错误数据。6.根据权利要求1所述的管理方法,其特征在于,所述存储所述数据源包括:分布式存储数据源。7.根据权利要求1或6所述的管理方法,其特征在于,...

【专利技术属性】
技术研发人员:刘磊庄勇吴士华王飒邰志浩
申请(专利权)人:北京国电思达科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1