一种城市级数据中台制造技术

技术编号:27204657 阅读:24 留言:0更新日期:2021-01-31 12:23
本发明专利技术提供一种城市级数据中台,涉及信息处理技术领域,包括:区级数据资源中心,用于采集并存储区级大数据形成区级数据湖;数据治理子平台,用于提取区级大数据并进行数据治理形成基础库和主题库,进而对区级大数据进行数据资源管理;数据共享交换子平台,用于是实现区级数据资源中心与数据治理子平台之间的数据交换,以及实现区级数据资源中心的数据共享;人工建模子平台,用于为数据治理子平台以及上层应用提供基础算法模型;大数据支撑子平台,用于为区级数据资源中心提供数据仓库软件,并为数据治理子平台和数据共享交换子平台提供支撑平台组件。有益效果是建立数据共享交换子平台,实现区级资源中心中区级大数据的共享交换。换。换。

【技术实现步骤摘要】
一种城市级数据中台


[0001]本专利技术涉及信息处理领域,尤其涉及一种城市级数据中台。

技术介绍

[0002]数据中台是数据应用开发门户,具有闭环涵盖数据应用开发全流程,完整覆盖离线计算、实时计算应用等功能。能够满足开发人员从数据采集、数据分析、数据挖掘、数据质量、数据地图、数据模型、数据API的各层次应用。但是现有的数据中台中,大数据基础组件难以支持流式处理及综合搜索,数据共享管理中的需求管理、变更管理和任务管理中的智能辅助能力不够强,数据治理中的元数据管理、数据编目、主数据管理和血缘分析方面不够强,难以满足城市级数据中台的需求。

技术实现思路

[0003]针对现有技术中存在的问题,本专利技术提供一种城市级数据中台,具体包括:
[0004]区级数据资源中心,用于采集区级大数据并对所述区级大数据进行归类存储形成区级数据湖;
[0005]数据治理子平台,连接所述区级数据资源中心,用于从所述区级数据资源中心的区级数据湖中提取所述区级大数据,并对所述区级大数据进行数据治理形成基础库和主题库以存储至所述区级数据资源中心,进而对所述区级大数据进行数据资源管理;
[0006]数据共享交换子平台,分别连接所述区级数据资源中心和数据治理子平台,用于实现所述区级数据资源中心与所述数据治理子平台之间的数据交换,以及实现所述区级数据资源中心的数据共享;
[0007]人工建模子平台,连接所述数据治理子平台,用于建设人工智能建模调度平台,提供主流机器学习、深度学习算法库,为所述数据治理子平台以及上层应用提供基础算法模型库;
[0008]大数据支撑子平台,分别连接所述区级数据资源中心,所述数据治理子平台和所述数据共享交换子平台,用于为区级数据资源中心区级数据资源中心提供数据仓库软件,并为所述数据治理子平台和所述数据共享交换子平台提供支撑平台组件以支撑整个城市级数据中台。
[0009]优选的,还包括一数据资源管理门户,连接所述区级数据资源中心,用于供管理人员对接政务信息共享网站和供需系统,并通过所述区级数据资源中心提供数据共享给所述共享网站和供需系统。
[0010]优选的,所述数据治理包含一数据预处理过程,所述数据预处理过程包括:
[0011]数据标签,和/或数据融合,和/或数据清洗,和/或数据质量管控,和/或数据汇聚。
[0012]优选的,所述数据资源管理包括:
[0013]元数据管理,和/或数据标准管理,和/或数据质量管理,和/或数据血源分析,和/或数据立方体。
[0014]优选的,所述数据治理子平台还包括一数据建模的过程,所述数据治理子平台根据所述人工建模子平台提供的所述基础算法模型库中的算法模型进行数据建模。
[0015]优选的,所述主题库包括:
[0016]交通主题库,和/或环保主题库,和/或应急指挥主题库,和/或防汛防台主题库,和/或重点景区主题库,和/或城市管理主题库。
[0017]优选的,所述支撑平台组件包括:
[0018]线处理组件,和/或流处理组件,和/或全文检索组件,和/或数据开发组件,和/或资源管理组件,和/或安全控制组件。
[0019]优选的,还包括一安全保护模块,分别连接所述区级数据资源中心、数据共享交换子平台、所述数据治理子平台和所述大数据支撑子平台,用于为所述区级数据资源中心、所述数据共享交换子平台、所述数据治理子平台和所述大数据支撑子平台提供信息安全保障。
[0020]优选的,所述数据共享交换子平台包括:
[0021]第一共享单元,用于实现所述区级数据资源中心中的所述基础库和所述主题库各租户之间的数据共享;
[0022]第二共享单元,用于对所述城市级数据中台外部提供对外的服务发布与利用。
[0023]上述技术方案具有如下优点或有益效果:
[0024]通过建立数据共享交换子平台,实现区级资源中心中区级大数据的共享交换,并通过建立区级数据资源中心,结合政务业务、城市治理的基础和条件,以跨部门、跨行业、跨系统应用为重点,不断提高数据“加工”能力,实现数据“增值”,推动政府进一步提升行政效能和精细化、智慧化服务管理水平。
附图说明
[0025]图1为本专利技术的较佳的实施例中,一种城市级数据中台的结构原理图。
具体实施方式
[0026]下面结合附图和具体实施例对本专利技术进行详细说明。本专利技术并不限定于该实施方式,只要符合本专利技术的主旨,则其他实施方式也可以属于本专利技术的范畴。
[0027]本专利技术的较佳的实施例中,基于现有技术中存在的上述问题,现提供一种城市级数据中台,如图1所示,具体包括:
[0028]区级数据资源中心1,用于采集区级大数据并对区级大数据进行归类存储形成区级数据湖11;
[0029]数据治理子平台3,连接区级数据资源中心1,用于从区级数据资源中心1提取区级大数据,并对区级大数据进行数据治理形成基础库12和主题库13以存储至区级数据资源中心1,以及对区级大数据进行数据资源管理;
[0030]数据共享交换子平台2,分别连接区级数据资源中心1和数据治理子平台3,用于实现区级数据资源中心1与数据治理子平台3之间的数据交换,以及实现区级数据资源中心1的数据共享;
[0031]人工建模子平台5,连接数据治理子平台3,用于建设人工智能建模调度平台,并提
供主流机器学习、深度学习算法库,为数据治理子平台3以及上层应用提供基础算法模型库;
[0032]大数据支撑子平台4,分别连接区级数据资源中心1,数据治理子平台3和数据共享交换子平台2,用于为区级数据资源中心提供数据仓库软件,并为数据治理子平台3和数据共享交换子平台2提供支撑平台组件41以支撑整个城市级数据中台。
[0033]具体地,本实施例中,区级数据资源中心1包括区级数据湖11、基础库12和主题库13三大部分,是数据接入、数据归集和数据治理形成的结果。数据治理子平台3从区级数据湖11提取区级大数据,并对区级大数据进行数据治理形成基础库12和主题库13以存储至区级数据资源中心1,同时对区级大数据进行数据资源管理。数据治理子平台3通过数据治理保证了区级数据资源中心1中的区级数据湖11中数据的规范,并根据更高层次的管理机制构建构建基础库12和主题库13。通过数据治理子平台3的数据治理,能够保障政务、物联、视频三大类数据架构、数据标准、数据开发等数据管理职能的开展,同时提升数据管理水平。
[0034]区级数据资源中心1中的数据覆盖各委办局部门,数据来源包括市级数据、区级政务数据、物联设备数据、视频数据等。为满足多源异构的结构化数据、半结构化数据和非结构化数据的存储,支撑政务数据共享交换需求,支撑城运应用算法模型训练需求,支撑上层应用系统的数据需求,需要设计相应的数据库以及数据存储结构。
[0035]数据治理子平台3是进行数据治理和数据管理的重要工具,能够整合平台各个环节的元数据资产,以便进行元数据的浏览和分析,也是形成数据资源管理门户本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种城市级数据中台,其特征在于,具体包括:区级数据资源中心,用于采集区级大数据并对所述区级大数据进行存储形成区级数据湖;数据治理子平台,连接所述区级数据资源中心,用于从所述区级数据湖中提取所述区级大数据,并对所述区级大数据进行数据治理形成基础库和主题库以存储至所述区级数据资源中心,进而对所述区级大数据进行数据资源管理;数据共享交换子平台,分别连接所述区级数据资源中心和数据治理子平台,用于实现所述区级数据资源中心与所述数据治理子平台之间的数据交换,以及实现所述区级数据资源中心的数据共享;人工建模子平台,连接所述数据治理子平台,用于建设人工智能建模调度平台,提供主流机器学习、深度学习算法库,为所述数据治理子平台以及上层应用提供基础算法模型库;大数据支撑子平台,分别连接所述区级数据资源中心,所述数据治理子平台和所述数据共享交换子平台,用于为所述区级数据资源中心提供数据仓库软件,并为所述数据治理子平台和所述数据共享交换子平台提供支撑平台组件以支撑整个所述城市级数据中台。2.根据权利要求1所述的城市级数据中台,其特征在于,还包括一数据资源管理门户,连接所述区级数据资源中心,用于供管理人员对接政务信息共享网站和供需系统,并通过所述区级数据资源中心提供数据共享给所述共享网站和供需系统。3.根据权利要求1所述的城市级数据中台,其特征在于,所述数据治理包含一数据预处理过程,所述数据预处理过程包括:数据标签,和/或数据融合,和/或数据清洗,和/或数据质量管控,和/或数...

【专利技术属性】
技术研发人员:陈正伟辛帅
申请(专利权)人:云赛智联股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1