数据处理方法技术

本申请实施例提供了一种数据处理方法

【技术实现步骤摘要】
数据处理方法、装置、设备及计算机可读存储介质


[0001]本申请属于大数据
，尤其涉及一种数据处理方法
、
装置
、
设备及计算机可读存储介质
。

技术介绍

[0002]漏斗分析是数据分析领域中的重要工具，是探究用户路径上阻碍用户转化和留存的关键环节
。
为了对用户数据进行分析以计算漏斗分析指标，现有技术通常会根据漏斗分析需求，定制化开发相应的漏斗分析程序
。
[0003]然而，在这样的开发模式下，一个漏斗分析程序只适用于一个漏斗分析需求，如需增加新的漏斗分析需求，则需重新定制开发新的漏斗分析程序
。
因此，现有技术方案存在大量重复编发的工作，漏斗分析程序的开发时间周期长
、
运维成本高，数据分析的效率低下
。

技术实现思路

[0004]本申请实施例提供了一种数据处理方法
、
装置
、
设备及计算机可读存储介质，能够降低漏斗分析程序的开发时间周期和运维成本，提高数据分析的效率
。
[0005]第一方面，本申请实施例提供了一种数据处理方法，数据处理方法包括：显示漏斗分析任务的任务配置界面；响应于用户在任务配置界面上的配置操作，确定待处理的目标漏斗分析任务的配置要素信息；配置要素信息至少包括待处理的目标漏斗分析任务对应的目标数据源配置信息以及漏斗分析指标；根据配置要素信息，生成待处理的目标漏斗分析任务记录；在扫描到目标漏斗分析任务记录的情况下，解析目标漏斗分析任务记录中的配置要素信息；根据解析到的配置要素信息，生成目标漏斗分析任务的各任务节点处的数据处理规则；根据数据处理规则从目标数据源配置信息对应的目标数据源中提取目标数据；对目标数据进行计算处理，得到漏斗分析指标的指标结果
。
[0006]根据本申请第一方面的实施方式，任务配置界面上包括数据源配置选项，配置要素包括数据源和数据源的漏斗数据筛选条件，响应于用户在任务配置界面上的配置操作，确定待处理的目标漏斗分析任务的配置要素信息，包括：响应于用户对数据源配置选项的操作，确定目标数据源配置信息；从数据源配置映射表中查找与目标数据源配置信息对应的目标数据源；从数据源与漏斗数据筛选条件配置映射表中确定目标数据源对应的漏斗数据筛选条件；响应于用户从目标数据源对应的漏斗数据筛选条件中选择目标漏斗数据筛选条件的操作，确定待处理的目标漏斗分析任务的目标漏斗数据筛选条件
。
[0007]根据本申请第一方面前述任一实施方式，在确定待处理的目标漏斗分析任务的目标漏斗数据筛选条件之后，数据处理方法还包括：接收用户对目标漏斗数据筛选条件的目标操作，更新待处理的目标漏斗分析任务的目标漏斗数据筛选条件；目标操作包括用户对目标漏斗数据筛选条件的增加
、
删除
、
修改操作中的任意一项
。
[0008]根据本申请第一方面前述任一实施方式，目标漏斗分析任务记录包括目标漏斗分析任务的任务处理状态标识，数据处理方法还包括：在解析目标漏斗分析任务记录中的配
置要素信息的过程中，将任务处理状态标识由第一标识更新为第二标识，第一标识用于指示目标漏斗分析任务未处理，第二标识用于指示目标漏斗分析任务正在处理
。
[0009]根据本申请第一方面前述任一实施方式，目标漏斗分析任务记录还包括目标漏斗分析任务的任务标识，在对目标数据进行计算处理，得到漏斗分析指标的指标结果之后，数据处理方法还包括：将指标结果存储至搜索服务器的结果索引中；在将指标结果存储至结果索引的过程中，将任务标识设置为指标结果的结果标识
。
[0010]根据本申请第一方面前述任一实施方式，在将指标结果存储至搜索服务器的结果索引中之后，数据处理方法还包括：显示漏斗分析任务的结果展示界面，结果展示界面上包括漏斗分析任务的任务标识；响应于用户从任务标识中选择目标任务标识的操作，从结果索引中查找目标任务标识对应的目标指标结果；按照预设格式对目标指标结果进行封装；显示封装后的目标指标结果
。
[0011]根据本申请第一方面前述任一实施方式，目标数据包括在不同任务节点处执行操作的不同用户的用户标识
、
用户操作行为数据和操作时间，对目标数据进行计算处理，得到漏斗分析指标的指标结果，包括：基于自定义聚合函数对目标数据进行数据处理，得到以用户标识为键，以用户操作行为数据和操作时间为值的多个第一键值对；对用户标识相同的多个第一键值对进行合并处理，得到合并后的多个第二键值对；基于自定义聚合函数对第二键值对进行计算处理，得到漏斗分析指标的指标结果
。
[0012]根据本申请第一方面前述任一实施方式，基于自定义聚合函数对第二键值对进行计算处理，得到漏斗分析指标的指标结果，包括：以第二键值对中操作时间由早到晚的顺序，对第二键值对中的用户操作行为数据进行排序，得到用户操作行为数据序列；从用户操作行为数据序列中筛选出与任务节点对应的操作行为数据序列相一致的目标用户操作行为数据；统计各任务节点分别对应的目标用户操作行为数据的个数；根据个数，计算漏斗分析指标的指标结果
。
[0013]第二方面，本申请实施例提供了一种数据处理装置，数据处理装置包括：第一显示模块，用于显示漏斗分析任务的任务配置界面；第一确定模块，用于响应于用户在任务配置界面上的配置操作，确定待处理的目标漏斗分析任务的配置要素信息；配置要素信息至少包括待处理的目标漏斗分析任务对应的目标数据源配置信息以及漏斗分析指标；第一生成模块，用于根据配置要素信息，生成待处理的目标漏斗分析任务记录；解析模块，用于在扫描到目标漏斗分析任务记录的情况下，解析目标漏斗分析任务记录中的配置要素信息；第二生成模块，用于根据解析到的配置要素信息，生成目标漏斗分析任务的各任务节点处的数据处理规则；提取模块，用于根据数据处理规则从目标数据源配置信息对应的目标数据源中提取目标数据；计算模块，用于对目标数据进行计算处理，得到漏斗分析指标的指标结果
。
[0014]第三方面，本申请实施例提供了一种电子设备，电子设备包括：处理器
、
存储器及存储在存储器上并可在处理器上运行的计算机程序，计算机程序被处理器执行时实现如第一方面提供的数据处理方法的步骤
。
[0015]第四方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现如第一方面提供的数据处理方法的步骤
。
[0016]本申请实施例的数据处理方法
、
装置
、
设备及计算机可读存储介质，能够基于用户在任务配置界面上的配置操作，生成待处理的目标漏斗分析任务记录；通过解析目标漏斗分析任务记录中的配置要素信息，生成目标漏斗分析任务的各任务节点处的数据处理规则；根据数据处理规则提取目标数据，对目标数据进行计算处理，得到漏斗分析指标的指标结果本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种数据处理方法，其特征在于，所述方法包括：显示漏斗分析任务的任务配置界面；响应于用户在所述任务配置界面上的配置操作，确定待处理的目标漏斗分析任务的配置要素信息；所述配置要素信息至少包括待处理的目标漏斗分析任务对应的目标数据源配置信息以及漏斗分析指标；根据所述配置要素信息，生成待处理的目标漏斗分析任务记录；在扫描到所述目标漏斗分析任务记录的情况下，解析所述目标漏斗分析任务记录中的配置要素信息；根据解析到的配置要素信息，生成目标漏斗分析任务的各任务节点处的数据处理规则；根据所述数据处理规则从目标数据源配置信息对应的目标数据源中提取目标数据；对所述目标数据进行计算处理，得到漏斗分析指标的指标结果
。2.
根据权利要求1所述的方法，其特征在于，所述任务配置界面上包括数据源配置选项，所述配置要素包括数据源和数据源的漏斗数据筛选条件，所述响应于用户在所述任务配置界面上的配置操作，确定待处理的目标漏斗分析任务的配置要素信息，包括：响应于用户对所述数据源配置选项的操作，确定目标数据源配置信息；从数据源配置映射表中查找与所述目标数据源配置信息对应的目标数据源；从数据源与漏斗数据筛选条件配置映射表中确定所述目标数据源对应的漏斗数据筛选条件；响应于用户从目标数据源对应的漏斗数据筛选条件中选择目标漏斗数据筛选条件的操作，确定待处理的目标漏斗分析任务的目标漏斗数据筛选条件
。3.
根据权利要求2所述的方法，其特征在于，在所述确定待处理的目标漏斗分析任务的目标漏斗数据筛选条件之后，所述方法还包括：接收用户对所述目标漏斗数据筛选条件的目标操作，更新待处理的目标漏斗分析任务的目标漏斗数据筛选条件；所述目标操作包括用户对所述目标漏斗数据筛选条件的增加
、
删除
、
修改操作中的任意一项
。4.
根据权利要求1所述的方法，其特征在于，所述目标漏斗分析任务记录包括所述目标漏斗分析任务的任务处理状态标识，所述方法还包括：在解析所述目标漏斗分析任务记录中的配置要素信息的过程中，将所述任务处理状态标识由第一标识更新为第二标识，所述第一标识用于指示所述目标漏斗分析任务未处理，所述第二标识用于指示所述目标漏斗分析任务正在处理
。5.
根据权利要求1所述的方法，其特征在于，所述目标漏斗分析任务记录还包括所述目标漏斗分析任务的任务标识，在所述对所述目标数据进行计算处理，得到漏斗分析指标的指标结果之后，所述方法还包括：将所述指标结果存储至搜索服务器的结果索引中；在将所述指标结果存储至所述结果索引的过程中，将所述任务标识设置为所述指标结果的结果标识
。
6.
根据权利要求5所述的方法，其特征在于，在所述将所述指标结果存储至搜索服务器的结果索引中之后，所述方法还包括：显示漏斗分析任...

【专利技术属性】
技术研发人员：钟昊文，黎洪达，覃鹏，陈大平，冯壮壮，陈宇，吴秦明，唐豪鸿，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：