一种数据网格的联合计算治理实现方法技术

技术编号:40336583 阅读:20 留言:0更新日期:2024-02-09 14:26
本发明专利技术涉及数据处理技术领域,尤其涉及一种数据网格的联合计算治理实现方法,该方法从数据网格的四个基本原则出发,综合分析四个原则的相互作用,针对联合计算治理从团队组织到各组件原则均进行了细致的建模,使得联合治理策略能够真正的在数据网格中稳定运行,将必要功能通过联合计算实现,提升计算网格的安全性与高效性。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种数据网格的联合计算治理实现方法


技术介绍

1、数据网格是一种新兴的数据管理架构范式,是一种分散的社会技术方法,用于大规模管理和访问分析数据。数据网格背后的想法是使组织内的自治团队能够拥有自己的数据域,并开发和运营满足各自领域特定需求的数据产品。这种方法可以提高数据管理的灵活性和创新性,并更有效地利用计算资源。

2、数据网格遵循分布式系统架构,包括由领域构建和部署的多个具有独立生命周期的数据产品。为了使数据产品能够以高阶数据集、洞察力或机器智能的形式获得更高价值,这些独立的数据产品需要互操作关联进行聚合计算。因此,数据网格需要依托一个治理模型,该模型包含去中心化和领域自主权、全局标准化的互操作性、基于动态拓扑的平台自动执行决策。是由领域数据产品所有者和数据平台产品所有者联合领导的决策模型,具有自治和领域本地决策权,同时创建并遵守一组全局规则,包含适用于所有数据产品及其接口的规则,以确保健康和可互操作的生态系统。

3、数据网格一共有四个原则:基于领域的所有权、数据作为产品、自助数据平台与联合计算治理本文档来自技高网...

【技术保护点】

1.一种数据网格的联合计算治理实现方法,其特征在于:包括如下步骤:

2.根据权利要求1所述的一种数据网格的联合计算治理实现方法,其特征在于:在步骤S1中,具体包括:

3.根据权利要求2所述的一种数据网格的联合计算治理实现方法,其特征在于:在步骤S2中,数据契约对数据产品上下游交互的接口级别进行定义,还包含数据产品本身的元数据信息,是定义数据提供者与其消费者之间交换数据的结构、格式、语义、质量和使用条款的文档,具体包括数据产品名称、版本号、唯一身份ID、服务状态、所属领域、产品负责人、描述、标签、数据源、数据模式、SLAs、数据质量和服务说明。</p>

4.根据...

【技术特征摘要】

1.一种数据网格的联合计算治理实现方法,其特征在于:包括如下步骤:

2.根据权利要求1所述的一种数据网格的联合计算治理实现方法,其特征在于:在步骤s1中,具体包括:

3.根据权利要求2所述的一种数据网格的联合计算治理实现方法,其特征在于:在步骤s2中,数据契约对数据产品上下游交互的接口级别进行定义,还包含数据产品本身的元数据信息,是定义数据提供者与其消费者之间交换数据的结构、格式、语义、质量和使用条款的文档,具体包括数据产品名称、版本号、唯一身份id、服务状态、所属领域、产品负责人、描述、标签、数据源、数据模式、slas、数据质量和服务说明。

4.根据权利要求3所述的一种数据网格的联合计算治理实现方法,其特征在于:在步骤s2中,领域内治理原则是联合计算治理在数据产品的生产和交互的遵守项,领域内治理原则基本要素包括数据说明,数据字段说明,数据产品质量...

【专利技术属性】
技术研发人员:于峰戴弘林张玉磊梅雪明王晟
申请(专利权)人:江苏量界数据科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1