一种支持可扩展的数据采集及分析系统和方法技术方案

技术编号:37674562 阅读:37 留言:0更新日期:2023-05-26 04:38
本发明专利技术实施例公开了一种支持可扩展的数据采集及分析系统和方法,其中系统包括:大数据平台、核心系统及多个业务系统;所述大数据平台用于存储企业原始数据;所述核心系统用于采用不同的认证方式,从所述大数据平台抽取企业原始数据,并按照数据来源将企业原始数据分类处理成不同的数据结构进行存储;所述多个业务系统用于从所述核心系统读取数据,并基于读取的数据进行相应的业务处理。取的数据进行相应的业务处理。取的数据进行相应的业务处理。

【技术实现步骤摘要】
一种支持可扩展的数据采集及分析系统和方法


[0001]本专利技术涉及数据采集及分析
,并且更具体地,涉及一种支持可扩展的数据采集及分析系统和方法。

技术介绍

[0002]近年来,国家对于税务管理逐步加强,企业对于内部税务相关数据越来越重视,发票数据对于企业税务来说很强的重要性。发票是国家监督经济活动,维护经济秩序,保护国家财产安全的重要手段。发票数据无论从本身还是作为公司财务核算数据都很重要,是企业财务管理的重要工具,是税务机关征收税款的重要依据。
[0003]目前,对于很多大型企业,各种发票数据、凭证等财务数据存储于数据湖中,数据湖中一般存储原始数据,不能提供给其他业务系统直接使用,应用系统之间交换就存在数据采集及数据分析等。为适应某国有大型企业税务系统项目,需采集该企业全国发票数据作为核心功能模块数据源,发票原始数据存储于数据湖中,为了便于提取需要的业务功能数据,建立采集及分析系统对发票数据进行提取、采集、分析、应用等。
[0004]但是,现有的数据采集方式只支持单一的认证方式,也只支持单一的业务系统,兼容性差、可扩展本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种支持可扩展的数据采集及分析系统,其特征在于,包括:大数据平台、核心系统及多个业务系统;所述大数据平台用于存储企业原始数据;所述核心系统用于采用不同的认证方式,从所述大数据平台抽取企业原始数据,并按照数据来源将企业原始数据分类处理成不同的数据结构进行存储;所述多个业务系统用于从所述核心系统读取数据,并基于读取的数据进行相应的业务处理。2.根据权利要求1所述的系统,其特征在于,所述大数据平台包括数据中心和企业数据湖,所述数据中心和所述企业数据湖均用于存储企业原始数据。3.根据权利要求1所述的系统,其特征在于,所述核心系统包括数据处理应用服务器及多个数据库;所述数据处理应用服务器用于采用不同的认证方式,从所述数据中心和所述企业数据湖采集企业原始数据,按照数据来源将企业原始数据分类处理成不同的数据结构;所述多个数据库分别用于存储经过所述数据处理应用服务器处理的不同数据结构的数据。4.根据权利要求3所述的系统,其特征在于,所述数据处理应用服务器采用LDAP认证方式或者Kerberos认证方式,从所述数据中心和所述企业数据湖采集企业原始数据。5.一种支持可扩展的数据采集及分析方法,其特征在于,包括:核心系统采用不同的认证方式,从大数据平台采集企业原始数据;所述核心系统按照数据来源,将所述企业原始数据分类处理成不同的...

【专利技术属性】
技术研发人员:孙宏兵青晨常乾
申请(专利权)人:航天信息软件技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1