数据处理方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:38820814 阅读:15 留言:0更新日期:2023-09-15 19:59
本申请实施例属于大数据领域与金融科技领域,涉及一种数据处理方法,包括:若接收到用户触发的数据汇总请求,展示数据选择页面;基于用户在数据选择页面中选取的指定数据源及数据时间信息确定目标数据集;接收用户对目标数据集中的目标业务字段的拉取操作;基于各个目标业务字段的拉取顺序,将各个目标业务字段填充至分析表模板;基于取数脚本从目标数据集中查询出目标业务字段的目标填充数据;基于目标填充数据与分析表模板生成汇总数据表。本申请还提供一种数据处理装置、计算机设备及存储介质。此外,本申请还涉及区块链技术,汇总数据表可存储于区块链中。本申请可应用于金融领域的数据表汇总场景,提高了汇总数据表的生成效率与准确率。率与准确率。率与准确率。

【技术实现步骤摘要】
数据处理方法、装置、计算机设备及存储介质


[0001]本申请涉及大数据
与金融科技领域,尤其涉及数据处理方法、装置、计算机设备及存储介质。

技术介绍

[0002]在大数据时代,对于金融科技公司,每时每刻都会产生大量的数据,这就需要一些数据分析人员去分门别类的去汇总这些数据,根据汇总的数据,帮助公司进行精确分析,例如分析竞争对手的信息,自家产品的优缺点,用户的喜好等等。
[0003]现有的金融科技公司所采用的数据汇总方式,通常是由金融科技公司内部的数据分析人员先将数据导出后,再借助一些处理工具,例如excel、csv等,利用这些处理工具的汇总数据,透视表的功能来将数据汇总,这样的基于人工的数据汇总处理过程比较繁琐,数据分析人员的工作量大,需要消耗较多的人力物力,无法实现数据的自动汇总,数据汇总的处理效率低下。

技术实现思路

[0004]本申请实施例的目的在于提出一种数据处理方法、装置、计算机设备及存储介质,以解决现有的基于人工的数据汇总处理过程比较繁琐,数据分析人员的工作量大,需要消耗较多的人力物力,无法实现数据的自动汇总,数据汇总的处理效率低下的技术问题。
[0005]为了解决上述技术问题,本申请实施例提供一种数据处理方法,采用了如下所述的技术方案:
[0006]若接收到用户触发的数据汇总请求,展示预设的数据选择页面;
[0007]接收所述用户在所述数据选择页面中选取的指定数据源以及数据时间信息;
[0008]基于所述数据时间信息从所述指定数据源中确定出目标数据集,并展示所述目标数据集包含的所有业务字段;
[0009]接收所述用户对所述目标数据集中的目标业务字段的拉取操作,并记录各个所述目标业务字段的拉取顺序;
[0010]基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内;
[0011]基于预设的取数脚本,从所述目标数据集中查询出与各个所述目标业务字段分别对应的目标填充数据;
[0012]基于所述目标填充数据与所述分析表模板生成汇总数据表。
[0013]进一步的,所述基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内的步骤,具体包括:
[0014]按照所述各个所述目标业务字段的拉取顺序,依次为各个所述目标业务字段生成一一对应的编号;
[0015]获取所述编号的数量;
[0016]基于所述编号的数量确定出所述分析表模板的待填充列;
[0017]基于所述编号将所有所述目标业务字段填充至所述分析表模板的待填充列内。
[0018]进一步的,所述基于所述目标填充数据与所述分析表模板生成汇总数据表的步骤,具体包括:
[0019]获取所述目标业务字段与所述目标填充数据之间的数据对应关系;
[0020]基于所述数据对应关系,将各个所述目标填充数据作为行维度数据填充至所述分析表模板内的对应位置处,得到填充后的分析表模板;
[0021]将所述填充后的分析表模板作为所述汇总数据表。
[0022]进一步的,所述数据汇总请求还携带所述用户的用户信息,所述展示预设的数据选择页面的步骤,具体包括:
[0023]从所述数据汇总请求中提取出所述用户信息;
[0024]基于预设的权限识别模型与所述用户信息对所述用户进行权限验证;
[0025]若验证通过,执行所述展示预设的数据选择页面的步骤。
[0026]进一步的,所述基于预设的权限识别模型与所述用户信息对所述用户进行权限验证的步骤,具体包括:
[0027]调用所述权限识别模型;
[0028]基于所述权限识别模型对所述用户信息进行分析,得到与所述用户对应的目标权限级别;
[0029]获取与数据汇总操作对应的业务权限级别;
[0030]判断所述目标权限级别是否大于所述业务权限级别;
[0031]若是,判定所述用户通过权限验证,否则判定所述用户未通过权限验证。
[0032]进一步的,在所述基于所述目标填充数据与所述分析表模板生成汇总数据表的步骤之后,还包括:
[0033]判断是否接收到所述用户触发的对于所述汇总数据表的编辑请求;
[0034]若是,接收所述用户输入的对于所述汇总数据表的编辑操作,并基于所述编辑操作对所述汇总数据表进行调整处理,得到调整后的目标汇总数据表;
[0035]存储所述目标汇总数据表。
[0036]进一步的,在所述基于所述目标填充数据与所述分析表模板生成汇总数据表的步骤之后,还包括:
[0037]判断是否接收到用户触发的与所述汇总数据表对应的邮件任务发送请求;其中,所述邮件任务发送请求携带邮件发送信息;
[0038]若是,基于所述邮件发送信息生成与所述汇总数据表对应的目标邮件;
[0039]基于所述邮件发送信息对所述目标邮件进行发送处理。
[0040]为了解决上述技术问题,本申请实施例还提供一种数据处理装置,采用了如下所述的技术方案:
[0041]展示模块,用于若接收到用户触发的数据汇总请求,展示预设的数据选择页面;
[0042]第一接收模块,用于接收所述用户在所述数据选择页面中选取的指定数据源以及数据时间信息;
[0043]确定模块,用于基于所述数据时间信息从所述指定数据源中确定出目标数据集,
并展示所述目标数据集包含的所有业务字段;
[0044]第二接收模块,用于接收所述用户对所述目标数据集中的目标业务字段的拉取操作,并记录各个所述目标业务字段的拉取顺序;
[0045]填充模块,用于基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内;
[0046]查询模块,用于基于预设的取数脚本,从所述目标数据集中查询出与各个所述目标业务字段分别对应的目标填充数据;
[0047]第一生成模块,用于基于所述目标填充数据与所述分析表模板生成汇总数据表。
[0048]为了解决上述技术问题,本申请实施例还提供一种计算机设备,采用了如下所述的技术方案:
[0049]若接收到用户触发的数据汇总请求,展示预设的数据选择页面;
[0050]接收所述用户在所述数据选择页面中选取的指定数据源以及数据时间信息;
[0051]基于所述数据时间信息从所述指定数据源中确定出目标数据集,并展示所述目标数据集包含的所有业务字段;
[0052]接收所述用户对所述目标数据集中的目标业务字段的拉取操作,并记录各个所述目标业务字段的拉取顺序;
[0053]基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内;
[0054]基于预设的取数脚本,从所述目标数据集中查询出与各个所述目标业务字段分别对应的目标填充数据;
[0055]基于所述目标填充数据与所述本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括下述步骤:若接收到用户触发的数据汇总请求,展示预设的数据选择页面;接收所述用户在所述数据选择页面中选取的指定数据源以及数据时间信息;基于所述数据时间信息从所述指定数据源中确定出目标数据集,并展示所述目标数据集包含的所有业务字段;接收所述用户对所述目标数据集中的目标业务字段的拉取操作,并记录各个所述目标业务字段的拉取顺序;基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内;基于预设的取数脚本,从所述目标数据集中查询出与各个所述目标业务字段分别对应的目标填充数据;基于所述目标填充数据与所述分析表模板生成汇总数据表。2.根据权利要求1所述的数据处理方法,其特征在于,所述基于各个所述目标业务字段的拉取顺序,将各个所述目标业务字段作为列维度数据填充至预设的分析表模板内的步骤,具体包括:按照所述各个所述目标业务字段的拉取顺序,依次为各个所述目标业务字段生成一一对应的编号;获取所述编号的数量;基于所述编号的数量确定出所述分析表模板的待填充列;基于所述编号将所有所述目标业务字段填充至所述分析表模板的待填充列内。3.根据权利要求1所述的数据处理方法,其特征在于,所述基于所述目标填充数据与所述分析表模板生成汇总数据表的步骤,具体包括:获取所述目标业务字段与所述目标填充数据之间的数据对应关系;基于所述数据对应关系,将各个所述目标填充数据作为行维度数据填充至所述分析表模板内的对应位置处,得到填充后的分析表模板;将所述填充后的分析表模板作为所述汇总数据表。4.根据权利要求1所述的数据处理方法,其特征在于,所述数据汇总请求还携带所述用户的用户信息,所述展示预设的数据选择页面的步骤,具体包括:从所述数据汇总请求中提取出所述用户信息;基于预设的权限识别模型与所述用户信息对所述用户进行权限验证;若验证通过,执行所述展示预设的数据选择页面的步骤。5.根据权利要求4所述的数据处理方法,其特征在于,所述基于预设的权限识别模型与所述用户信息对所述用户进行权限验证的步骤,具体包括:调用所述权限识别模型;基于所述权限识别模型对所述用户信息进行分析,得到与所述用户对应的目标权限级别;获取与数据汇总操作对应...

【专利技术属性】
技术研发人员:李刚
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1