一种基于数据湖的数字对象存储方法技术

技术编号:37666740 阅读:28 留言:0更新日期:2023-05-26 04:25
本发明专利技术提供了一种基于数据湖的数字对象存储方法,它解决了现有DOA架构对于大数据处理效果较差等问题,其包括如下步骤:S1:组织DOA架构;S2:引入数据湖,将数据湖作为DOA架构的数字对象仓库;S3:输出基于数据湖的DOA架构;S4:数字对象在数据湖内进行抽象封装、CRUD以及元数据管理。本发明专利技术具有大数据处理效果好、兼容多种数据系统等优点。兼容多种数据系统等优点。兼容多种数据系统等优点。

【技术实现步骤摘要】
一种基于数据湖的数字对象存储方法


[0001]本专利技术属于信息处理
,具体涉及一种基于数据湖的数字对象存储方法。

技术介绍

[0002]数字对象体系架构(DOA)是一种互联网环境下对数字对象(DO)进行标识、解析、管理和安全控制的数据治理基础设施。除了将从物理和虚拟世界中获得的信息、流程、服务等各类数据封装和抽象为互联网上的数字对象,DOA还基于Handle系统建立了一整套完善的治理机制,实现了数字对象之间安全、高效、可控的互联互通和互操作。传统互联网及域名解析系统(DNS)是基于IP地址的、主机间的互联互通,存储在不同主机上的数据及其访问控制由主机自行管理。而DOA将标识和解析的对象由主机延伸至数字对象,实现了逻辑上集中统一的访问权限管理和安全控制,从而为逻辑或物理上不同来源的数据互联互通和有序共享提供了良好的机制及基础设施支持。但现有的数字对象体系对于大数据治理能力不足。除此之外,对于海量的数据,现有的DOA受到传统数据之间耦合的关系限制,维护成本较高。
[0003]为了解决现有技术存在的不足,人们进行了长期的探索,提出了各本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于数据湖的数字对象存储方法,其特征在于,包括如下步骤:S1:组织DOA架构;S2:引入数据湖,将数据湖作为DOA架构的数字对象仓库;S3:输出基于数据湖的DOA架构;S4:数字对象在数据湖内进行抽象封装、CRUD以及元数据管理。2.根据权利要求1所述的一种基于数据湖的数字对象存储方法,其特征在于,所述的步骤S1中的DOA架构包括信息资源以及抽象封装后的数字对象DO,其中数字对象DO通过协议与核心构件连接。3.根据权利要求2所述的一种基于数据湖的数字对象存储方法,其特征在于,所述的步骤S1中的数字对象DO包括标识ID、元数据MetaData以及数据本体DATA。4.根据权利要求2所述的一种基于数据湖的数字对象存储方法,其特征在于,所述的步骤S1中的核心构件包括标识解析系统IRS、数字对象仓库系统Repository以及数字对象注册表系统Registry。5.根据权利要求3所述的一种基于数据湖的数字对象存储方法,其特征在于,所述的步骤S1中的协议包括与标识解析系统IR...

【专利技术属性】
技术研发人员:刘昊王朋张磊王秋烨刘荫隆陈志凌陈巍张涛王琪郁晨熹刘哲峰
申请(专利权)人:北京大数据先进技术研究院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1