一种公共数据运营系统及其数据分区部署架构技术方案

技术编号:39585032 阅读:7 留言:0更新日期:2023-12-03 19:36
本发明专利技术涉及数据运营技术领域,公开了一种公共数据运营系统其数据分区部署架构,其中公共数据运营系统包括:工具平台层

【技术实现步骤摘要】
一种公共数据运营系统及其数据分区部署架构


[0001]本专利技术涉及数据运营
,具体涉及一种公共数据运营系统其数据分区部署架构


技术介绍

[0002]数据基础制度建设事关国家发展和安全大局,要维护国家数据安全,保护个人信息和商业秘密,促进数据高效流通使用

赋能实体经济,统筹推进数据产权

流通交易

收益分配

安全治理,因此需要加快构建数据基础制度体系,进一步释放数据要素价值,激活数据要素潜能

[0003]公共数据在整体数据中占比高达
70


80
%,蕴藏巨大的经济和社会价值潜力

推动公共数据运营

充分发挥数据要素价值,具有汇聚流失数据资产构建数据资源池

盘活各地市现有数字基础设施资源

完善和激活各市数字经济产业链

助力各市数字化治理和惠民服务的重要意义,现有的各个与公共数据相关的业务单位各自独立开发软件平台利用各环节中数据,导致公共存储资源利用率低;或者部分单位联合实现了部分公共数据的汇聚

共享交换,导致公共数据开发利用不完整不连续,不能对数据全生命周期进行追溯,公共数据的可信情况不能保证,使得各部门的政务数据和企业个人的数据融合

碰撞效应不明显未能充分发挥公共数据价值


技术实现思路

[0004]因此,为了解决现有的公共数据开发利用不完整不连续,不能对数据全生命周期进行追溯,公共数据的可信性差证,不能充分发挥公共数据价值的问题,本专利技术提一种公共数据运营系统其数据分区部署架构

[0005]为达到上述目的,本专利技术提供如下技术方案:
[0006]第一方面,本专利技术实施例提供的公共数据运营系统,包括:工具平台层

数据资源池层

业务平台层

数据运营层和数据安全工具体系,其中:
[0007]所述工具平台层,以政务云管理平台为基础,利用云化计算资源和存储资源构建计算资源池和存储资源池,并基于计算资源池和存储资源池,构建包括数据采集

数据管理

数据处理

数据挖掘

数据共享工具能力的数据中台体系;
[0008]所述数据资源池层,基于所述数据中台体系,形成以公共数据为主企业数据为辅的数据资源的物理汇聚和逻辑汇聚,所述物理汇聚表征各政务部门的数据目录挂载到政务云管理平台并定期上传数据;逻辑汇聚表征各政务部门

企业或外部数据源在数据中台的数据管理工具中进行数据目录注册但不上传数据,根据用数需求提供数据供场景运营使用;
[0009]所述业务平台层,基于数据资源池层及工具平台层中的数据,进行登记确权

安全用数

运营服务和合规监管;
[0010]所述数据运营层,包括多种运营模式,用于将公共数据以
API、
数据集

数据报告

数据应用形式向各产业和行业进行对外输出;
[0011]所述数据安全工具体系,包括数据库审计工具和终端防泄漏工具,其中的数据库审计工具用于对数据库增删改查日志进行分析,并对分析结果中存在风险的操作进行告警;终端防泄漏工具部署在可接触到数据的电脑终端,对于数据异常访问

拷贝

外发行为进行及时发现并阻断

[0012]本专利技术提供的公共数据运营系统,将数据资源持有权

数据加工使用权

数据产品经营权与公共数据运营系统参与主体的权益绑定,建设保障数据资源持有权与数据加工使用权分离的安全用数工具,且在不触碰原始数据且保障授权可信的前提下,面向数据需求方提供数据交易及运营服务,且将合规监管贯穿于公共数据运营全流程,实现了任意数据皆可控

各环节皆可信的监管目标,保证了数据的安全可信

[0013]在一实施例中,所述计算资源池包括流式计算引擎

批量计算引擎,所述存储资源池包括关系型数据库

非关系型数据库

文档存储

图片存储及区块链存储

[0014]本专利技术实施例提供计算资源池个存储资源池的包括多种形式,可以满足不同数据类型的计算和存储功能

[0015]在一实施例中,所述数据资源池层,包括标准库

主题库及专题库,其中:
[0016]所述标准库,用于存储全量政务原始数据进行标准化后的数据;
[0017]所述主题库,用于对标准库中的数据根据数据运营主题进行分类得到的数据仓库;
[0018]所述专题库,用不满足特定数据运营需求而建立的专门用于存储某个业务领域的数据仓库

[0019]本专利技术实施通过将数据分别存储于按照场景划分的数据库中,有利于更加高效精准的获取相应场景的所需的数据,满足数据需求者和开发者的要求

[0020]在一实施例中,所述业务平台层,包括:登记确权平台

数据开放实验室

数据资产化运营平台

数据资产化服务平台

数据要素安全监管平台,其中:
[0021]所述登记确权平台用于通过进行首次登记

许可登记

转移登记

变更登记

销毁登记流程,确定数据融通参与主体对于数据要素

数据产品的数据资源持有权

加工使用权

产品经营权的权益范围,通过数据特征链

数据产权链

业务存证链实现数据权益流转及留痕;
[0022]所述数据开放实验室,包括:数据沙箱模块

隐私计算模块

模型仓库模块

成果上线模块

资源监控模块和数据资源目录模块,其中数据沙箱模块用于结合网络隔离

物理隔离技术及沙箱技术提供数据分析与算法孵化双重技术工具,用于不受控环境下的数据分析与融通;所述隐私计算模块,用于利用联邦学习

多方安全计算工具进行数据建模;数据资源目录模块用于展示可开放的数据资源的目录

元信息和样例数据,用于数据开放实验室使用方查看并申请数据;模型仓库模块用于数据沙箱或隐私计算模块经过训练后产生的模型成果;成果上线模块用于将所述模型成果推至生产环境,并对接生产环境数据提供在线模型预测服务;资源监控模块用于展示训练环境

...

【技术保护点】

【技术特征摘要】
1.
一种公共数据运营系统,其特征在于,包括:工具平台层

数据资源池层

业务平台层

数据运营层和数据安全工具体系,其中:所述工具平台层,以政务云管理平台为基础,利用云化计算资源和存储资源构建计算资源池和存储资源池,并基于计算资源池和存储资源池,构建包括数据采集

数据管理

数据处理

数据挖掘

数据共享工具能力的数据中台体系;所述数据资源池层,基于所述数据中台体系,形成以公共数据为主企业数据为辅的数据资源的物理汇聚和逻辑汇聚,所述物理汇聚表征各政务部门的数据目录挂载到政务云管理平台并定期上传数据;逻辑汇聚表征各政务部门

企业或外部数据源在数据中台的数据管理工具中进行数据目录注册但不上传数据,根据用数需求提供数据供场景运营使用;所述业务平台层,基于数据资源池层及工具平台层中的数据,进行登记确权

安全用数

运营服务和合规监管;所述数据运营层,包括多种运营模式,用于将公共数据以
API、
数据集

数据报告

数据应用形式向各产业和行业进行对外输出;所述数据安全工具体系,包括数据库审计工具和终端防泄漏工具,其中的数据库审计工具用于对数据库增删改查日志进行分析,并对分析结果中存在风险的操作进行告警;终端防泄漏工具部署在可接触到数据的电脑终端,对于数据异常访问

拷贝

外发行为进行及时发现并阻断
。2.
根据权利要求1所述的公共数据运营系统,其特征在于,所述计算资源池包括流式计算引擎

批量计算引擎,所述存储资源池包括关系型数据库

非关系型数据库

文档存储

图片存储及区块链存储
。3.
根据权利要求1所述的公共数据运营系统,其特征在于,所述数据资源池层,包括标准库

主题库及专题库,其中:所述标准库,用于存储全量政务原始数据进行标准化后的数据;所述主题库,用于对标准库中的数据根据数据运营主题进行分类得到的数据仓库;所述专题库,用不满足特定数据运营需求而建立的专门用于存储某个业务领域的数据仓库
。4.
根据权利要求1所述的公共数据运营系统,其特征在于,所述业务平台层,包括:登记确权平台

数据开放实验室

数据资产化运营平台

数据资产化服务平台

数据要素安全监管平台,其中:所述登记确权平台用于通过进行首次登记

许可登记

转移登记

变更登记

销毁登记流程,确定数据融通参与主体对于数据要素

数据产品的数据资源持有权

加工使用权

产品经营权的权益范围,通过数据特征链

数据产权链

业务存证链实现数据权益流转及留痕;所述数据开放实验室,包括:数据沙箱模块

隐私计算模块

模型仓库模块

成果上线模块

资源监控模块和数据资源目录模块,其中数据沙箱模块用于结合网络隔离

物理隔离技术及沙箱技术提供数据分析与算法孵化双重技术工具,用于不受控环境下的数据分析与融通;所述隐私计算模块,用于利用联邦学习

多方安全计算工具进行数据建模;数据资源目录模块用于展示可开放的数据资源的目录

元信息和样例数据,用于数据开放实验室使用方查看并申请数据;模型仓库模块用于数据沙箱或隐私计算模块经过训练后产生的模型成
果;成果上线模块用于将所述模型成果推至生产环境,并对接生产环境数据提供在线模型预测服务;资源监控模块用于展示训练环境

推理环境的资源使用情况;所述数据资产化运营平台及数据资产化服务平台以“标准数据产品”+“受托数据服务”模式,为多种用户角色,包括数据供应商

数据需求方

生态服务商

运营人员,提供数据开放

融通交易

运营宣传功能;所述数据要素安全监管平台用于通过对数据要素融通过程中的数据全生命周期

业务全流程进行合规监管,实现数据要素流通过程中数据防篡改

文件存档

业务存证

数据血缘发现
。5.
根据权利要求1所述的公共数据运营系统,其特征在于,所述数据运营层,包括:标准化运营模式

受托运营模式

受托存储模式,其中:所述标准化运营模式,用于通过预设标准化模式进行运营,所述预设标准化模式包括数据
API
服务形式和
Saas
数据应用形式;所述受托运营模式,用于面向产业用户向生态服务商申请数据资源进行数据开发,提供定制化数据服务;所述受托存储模式,用于数据提供方将数据存储数据资源池层,若有数据变现需求则与平台运营方联合开发共享数据开发成果
。6.
一种公共数据运营系统的数据分区部署架构,基于权利要求1‑5任一所述的公共数据运营系统,其特征在于,所述数据分区部署架构包括:原始数据域

运营数据域,其中:所述原始数据域,用于获取并存储参与数据融通的公共数据

企业数据

各政务部门数据

行业龙头数据和个人数据,其包...

【专利技术属性】
技术研发人员:苟轶凡李君姚丽娜张凯
申请(专利权)人:北京易华录信息技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1