一种部门间数据资源接入方法技术

技术编号:15639328 阅读:77 留言:0更新日期:2017-06-15 22:50
一种部门间数据资源接入方法,首先对各部门数据资源进行分析,形成需要进行接入的信息资源目录;然后进行前置机环境的搭建,包括前置机设备部署、网络联通,前置机操作系统及数据库安装;数据库表结构构件,在数据表中分别增加记录状态字段以及时间戳字段;数据接入部门将数据资源定期定时推送至前置机数据库;数据中心根据前置库状态字段及时间戳更新数据资源至中心,完成资源接入与整合工作。

【技术实现步骤摘要】
一种部门间数据资源接入方法
本专利技术涉及网络信息资源利用领域,具体涉及一种将各部门间的数据资源进行整合,同一数据资源访问接口达到资源共享的方法。
技术介绍
近年来,随着各部门信息化建设的深入发展,各部门掌握的数据信息资源迅速发展及剧增,信息资源作为政府宝贵的财富,已经成为社会运行和发展不可缺少的生产要素、无形资产和社会财富。对于各部门尤其是政府部门而言,已经把加强信息资源的管理、开发和利用作为成为维护社会稳定和指导运行的有效手段。但如今全球信息化飞速发展、信息量爆炸式增长,各部门各自分别建设的信息化平台以及信息资源的分散与割裂已经成为信息化建设的主要瓶颈,“信息孤岛”现象十分普遍,在一定程度上严重影响着部门自身管理职能的完善和服务水平的提高,影响着管理者决策的科学性和有效性。在这样的背景和趋势之下,对有效接入各部门数据资源的方法与技术的研究逐渐成为政府相关系统重点关注领域。
技术实现思路
本专利技术的目的在于提供一种部门间数据资源接入方法,旨在能帮助各部门行之有效的接入其他部门的各类数据信息资源,形成各类数据资源的有效汇聚,构建可供数据共享的数据中心。本专利技术的技术方案如下:一种部门间数据资源接入方法,其特征在于包括以下步骤:(1)由将各部门相关信息资源由单位业务生产库推送至前置机数据库中,系统根据资源更新频率要求设置定时任务访问单位业务生产库,读取相关信息资源数据库表,将符合更新条件的数据插入到前置机对应数据库表中;(2)在数据资源中心接入设置前置机区域、数据中心区域和交换区域;其中在前置机区域用于部署前置机设备,并构建前置数据库临时存储在前置接入阶段推送的信息资源;数据中心区域由汇聚区、管理区和专题区组成,是数据中心接入信息资源的核心存储;交换区域由内外网交换系统构成,为信息资源进出数据中心提供安全控制保障。(3)信息资源在保持原有形态、结构和内容的形式下进入汇聚区的镜像数据库,进入汇聚区的信息资源将按照业务类型进行重新分类,并经过相关清洗规则进行数据的清洗、处理、去重等操作后抽取至数据中心管理区;进入管理区的信息资源将按照相关整合要求,进行拆分、重组、重构等操作后形成专题数据库进入数据中心专题区;(4)在整个信息资源中心接入阶段相关信息资源的迁移通过信息资源整合系统相关抽取工具实现。系统在各迁移阶段同时连通源数据库和目标数据库,并可访问数据库各对应信息资源表,通过配置源数据库主外键、时间戳字段、库表关系、抽取频率、清洗规则等,实现信息资源由源数据库至目标数据库的抽取。(5)数据库表结构构件。在该环节中需要在数据表中分别增加记录状态字段以及时间戳字段;(6)第六,接入单位负责将数据资源定期定时推送至前置机数据库;根据前置库状态字段及时间戳更新数据资源至中心,完成资源接入与后续整合工作。本专利技术有利于满足信息使用者多元化的信息需求。现有的信息管理系统提供的信息的增值性不强,造成信息使用者对信息的理解有困难。数据资源接入将弥补信息管理体制的这些缺陷,通过广泛的信息收集,深入的整合分析,向信息使用者提供多元化的有效信息。本专利技术能够实现信息增值。通过内外部信息的有机融合与平滑流动和共享,提高信息使用率,并生成可供各级决策者制定战略决策的有价信息。本专利技术能够将各种多元异构信息根据组织内部需求及时、准确地手机到组织内部,实现内外信息的有机融合。具体实施方式本专利技术的数据信息资源的接入总体上分为前置接入和中心接入两个阶段。其中,前置接入阶段是数据信息资源接入的第一阶段,该阶段主要负责完成将数据资源来源部门的业务数据信息资源,由其当前所在业务系统、业务库,经过相关信息资源推送系统,最终推送至单位前置机环境中。中心接入阶段是数据信息资源接入第二阶段,该阶段主要负责完成将业务数据信息资源从单位前置机环境中,经过内外网交换系统,最终抽取到数据中心存储环境中,经过清洗、整合、入库(成库)最终完成信息资源的接入。一、前置接入阶段:前置接入阶段作为数据信息资源接入的第一阶段,主要由接入单位负责完成相关信息资源由单位业务生产库推送至前置机数据库中。系统根据资源更新频率要求设置定时任务访问单位业务生产库,读取相关信息资源数据库表,将符合更新条件的数据插入到前置机对应数据库表中。在整个接入过程中,首先在更新频率方面,由于信息资源的更新频率可能会根据将来业务工作需求发生变化,因此建议系统研发过程中将更新频率设计成可配置;其次在数据入库(前置机数据库)方面,需要注意的问题是前置机中数据库应尽量选择与接入单位业务生产库一致的数据库。同时,前置机数据库表结构中与原单位业务生产库表结构相比会增加时间戳RecordStamp字段和记录状态RecordStatus字段,在进行前置机数据插入时需要将时间戳字段及记录状态一并插入。其中时间戳字段内容取前置机系统默认时间,精度需要精确到秒,格式为:YYYY-MM-DD24HH:MI:SS(前置机系统时间应由中心统一授时服务器进行统一管理、统一授时),中心将根据时间戳字段将数据由前置机增量更新至数据中心;记录状态字段用于记录数据状态信息,该字段内容只包含add、update、delete三种内容,其中add表示该条记录是第一次推送的记录,update表示该条记录经过修改,是重新推送的记录;delete表示该条记录已经删除。二、中心接入阶段:数据信息资源中心接入整体过程是以前置机数据库为源数据库,以数据中心数据库为目标数据库,利用信息资源整合系统实现信息资源由源数据库至目标数据库的抽取。在数据资源中心接入阶段主要包括前置机区域、数据中心区域和交换区域三个部分。其中在前置机区域用于部署前置机设备,并构建前置数据库临时存储在前置接入阶段推送的信息资源;数据中心区域由汇聚区、管理区和专题区组成,是数据中心接入信息资源的核心存储;交换区域由内外网交换系统构成,为信息资源进出数据中心提供安全控制保障。数据资源中心接入过程主要负责完成将业务数据信息资源从单位前置机中,经过内外网交换系统,最终抽取到数据中心中,经过清洗、整合、入库(成库)最终完成信息资源的接入。在这个过程中主要由内外网交换系统进行控制。前置机数据库部署位置在内外网交换系统的外围区域,信息资源首先需要进入交换系统的外交换区,经安全控制管理后进入交换系统内交换区,最后进入数据中心的汇聚区。信息资源基本在保持原有形态、结构和内容的形式下进入汇聚区的镜像数据库。进入汇聚区的信息资源将按照业务类型进行重新分类,并经过相关清洗规则进行数据的清洗、处理、去重等操作后抽取至数据中心管理区。进入管理区的信息资源将按照相关整合要求,进行拆分、重组、重构等操作后形成专题数据库进入数据中心专题区。在整个信息资源中心接入阶段相关信息资源的迁移通过信息资源整合系统相关抽取工具实现。系统在各迁移阶段同时连通源数据库和目标数据库,并可访问数据库各对应信息资源表,通过配置源数据库主外键、时间戳字段、库表关系、抽取频率、清洗规则等,实现信息资源由源数据库至目标数据库的抽取。本文档来自技高网...

【技术保护点】
一种部门间数据资源接入方法,其特征在于包括以下步骤:(1)由将各部门相关信息资源由单位业务生产库推送至前置机数据库中,系统根据资源更新频率要求设置定时任务访问单位业务生产库,读取相关信息资源数据库表,将符合更新条件的数据插入到前置机对应数据库表中;(2)在数据资源中心接入设置前置机区域、数据中心区域和交换区域;其中在前置机区域用于部署前置机设备,并构建前置数据库临时存储在前置接入阶段推送的信息资源;数据中心区域由汇聚区、管理区和专题区组成,是数据中心接入信息资源的核心存储;交换区域由内外网交换系统构成,为信息资源进出数据中心提供安全控制保障。(3)信息资源在保持原有形态、结构和内容的形式下进入汇聚区的镜像数据库,进入汇聚区的信息资源将按照业务类型进行重新分类,并经过相关清洗规则进行数据的清洗、处理、去重等操作后抽取至数据中心管理区;进入管理区的信息资源将按照相关整合要求,进行拆分、重组、重构等操作后形成专题数据库进入数据中心专题区;(4)在整个信息资源中心接入阶段相关信息资源的迁移通过信息资源整合系统相关抽取工具实现,系统在各迁移阶段同时连通源数据库和目标数据库,并可访问数据库各对应信息资源表,通过配置源数据库主外键、时间戳字段、库表关系、抽取频率、清洗规则等,实现信息资源由源数据库至目标数据库的抽取。(5)在数据表中分别增加记录状态字段以及时间戳字段;(6)接入单位负责将数据资源定期定时推送至前置机数据库;根据前置库状态字段及时间戳更新数据资源至中心,完成资源接入与后续整合工作。...

【技术特征摘要】
1.一种部门间数据资源接入方法,其特征在于包括以下步骤:(1)由将各部门相关信息资源由单位业务生产库推送至前置机数据库中,系统根据资源更新频率要求设置定时任务访问单位业务生产库,读取相关信息资源数据库表,将符合更新条件的数据插入到前置机对应数据库表中;(2)在数据资源中心接入设置前置机区域、数据中心区域和交换区域;其中在前置机区域用于部署前置机设备,并构建前置数据库临时存储在前置接入阶段推送的信息资源;数据中心区域由汇聚区、管理区和专题区组成,是数据中心接入信息资源的核心存储;交换区域由内外网交换系统构成,为信息资源进出数据中心提供安全控制保障。(3)信息资源在保持原有形态、结构和内容的形式下进入汇聚区的镜像数据库,进入汇聚区的信息资源将按照业...

【专利技术属性】
技术研发人员:薛振宇
申请(专利权)人:北京航天长峰科技工业集团有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1