【技术实现步骤摘要】
一种企业大数据分析平台
[0001]本专利技术涉及数据处理
,具体领域为一种企业大数据分析平台。
技术介绍
[0002]现有的产品,是运用传统的数据处理方法实现,相关技术人员直接编写存储过程从业务平台查询数据,最后将数据渲染到网页。但现有产品存在以下缺点:1. 随时企业的发展,数据体量急剧增长,根据现有技术无法满足当前数据量的处理能力,存在处理速度慢、数据存储等问题;2. 企业目前处在发展数据字化阶段,业务平台随之增多,现有技术无法将所有平台的数据进行集中管理、关联起来,存在信息数据孤岛现象。
技术实现思路
[0003]本专利技术的目的在于提供一种企业大数据分析平台,以解决上述
技术介绍
中提出的问题。
[0004]为实现上述目的,本专利技术提供如下技术方案:一种企业大数据分析平台,包括数据采集层、数据存储层、数据处理层以及数据应用层,所述数据采集层用于将数据由各个关系型数据库抽取至所述数据存储层,所述数据存储层用于接收所述数据采集层以及所述数据处理层传输的数据,所述数据处理层用于对所述数据存储层对 ...
【技术保护点】
【技术特征摘要】
1.一种企业大数据分析平台,其特征在于:包括数据采集层(1)、数据存储层(2)、数据处理层(3)以及数据应用层(4),所述数据采集层(1)用于将数据由各个关系型数据库抽取至所述数据存储层(2),所述数据存储层(2)用于接收所述数据采集层(1)以及所述数据处理层(3)传输的数据,所述数据处理层(3)用于对所述数据存储层(2)对数据进行清洗和转换,并存储在所述数据存储层(2),所述数据应用层(4)用于将所述数据处理层(3)处理后的数据进行可视化输出展示。2.根据权利要求1所述的一种企业大数据分析平台,其特征在于:所述数据采集层(1)包括sqoop组件和flume组件,所述sqoop组件根据用户指定的sal或阻断参数,从数据库中读取数据,所述flume组件接收采集到的数据并进行临时存储,...
【专利技术属性】
技术研发人员:陈锡麟,
申请(专利权)人:广东云药科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。