报表数据的处理方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:20221707 阅读:48 留言:0更新日期:2019-01-28 20:14
本申请涉及大数据平台的领域,提供了一种报表数据的处理方法、装置、计算机设备和存储介质,包括:从大数据平台获取待处理数据;对所述待处理数据进行预处理操作,且预处理后的数据存储于Druid内;将所述Druid内的预处理后的数据创建成数据集;根据报表要求到所述数据集中抽取对应的数据创建报表;本申请中提供的报表数据的处理方法、装置、计算机设备和存储介质,支持大数据的查看。

【技术实现步骤摘要】
报表数据的处理方法、装置、计算机设备和存储介质
本申请涉及大数据平台的
,特别涉及一种报表数据的处理方法、装置、计算机设备和存储介质。
技术介绍
目前,现有的报表数据是在大数据平台加工完成,再同步至关系型数据库中,需要经过一系列繁琐配置才能让业务看到报表数据,需要投入大量数据对接以及报表开发人力,浪费存储,且报表系统因为与关系型数据库关联,难以查看大数据量报表,需要减少维度才能分析数据的情况。
技术实现思路
本申请的主要目的为提供一种报表数据的处理方法、装置、计算机设备和存储介质,支持大数据的查看。为实现上述目的,本申请提供了一种报表数据的处理方法,包括以下步骤:从大数据平台获取待处理数据;对所述待处理数据进行预处理操作,且预处理后的数据存储于Druid内;将所述Druid内的预处理后的数据创建成数据集;根据报表要求到所述数据集中抽取对应的数据创建报表。进一步地,所述待处理数据包括实时数据和离线数据,所述从所述大数据平台获取待处理数据的步骤,包括:若从所述大数据平台获取所述实时数据,则通过kafka接收所述实时数据;若从所述大数据平台获取所述离线数据,则通过Hive接收所述离线数据本文档来自技高网...

【技术保护点】
1.一种报表数据的处理方法,其特征在于,包括以下步骤:从大数据平台获取待处理数据;对所述待处理数据进行预处理操作,且预处理后的数据存储于Druid内;将所述Druid内的预处理后的数据创建成数据集;根据报表要求到所述数据集中抽取对应的数据创建报表。

【技术特征摘要】
1.一种报表数据的处理方法,其特征在于,包括以下步骤:从大数据平台获取待处理数据;对所述待处理数据进行预处理操作,且预处理后的数据存储于Druid内;将所述Druid内的预处理后的数据创建成数据集;根据报表要求到所述数据集中抽取对应的数据创建报表。2.根据权利要求1所述的一种报表数据的处理方法,其特征在于,所述待处理数据包括实时数据和离线数据,所述从所述大数据平台获取待处理数据的步骤,包括:若从所述大数据平台获取所述实时数据,则通过kafka接收所述实时数据;若从所述大数据平台获取所述离线数据,则通过Hive接收所述离线数据。3.根据权利要求2所述的一种报表数据的处理方法,其特征在于,所述对所述待处理数据进行预处理操作,且预处理后的数据存储于Druid内的步骤,包括:若所述待处理数据为所述实时数据,则通过所述kafka接收并发送至所述Druid存储,对所述Druid内的实时数据进行预处理;若所述待处理数据为所述离线数据,则通过所述Hive接收并对所述Hive中的数据进行预处理后发送至所述Druid存储。4.根据权利要求1所述的一种报表数据的处理方法,其特征在于,所述对所述待处理数据进行预处理操作的步骤,包括:选择审核、筛选、排序、聚合以及汇总中的至少一种处理方法对所述待处理数据进行处理;根据所述报表要求,对预处理后的数据进行分类或者分组。5.根据权利要求3所述的一种报表数据的处理方法,其特征在于,所述将所...

【专利技术属性】
技术研发人员:席旭亮
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1