一种数据的处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:37158376 阅读:40 留言:0更新日期:2023-04-06 22:21
本申请提供了一种数据的处理方法、装置、电子设备及存储介质,其中,该方法包括从验证数据库的多个数据表中提取预设时间段内所有的交易数据,验证数据库中包括多个与预设交易场景对应的数据表;针对每个预设交易场景,根据从该预设交易场景对应的数据表中提取的交易数据和该预设交易场景对应的规则,确定出每条交易数据是否存在风险;针对每个预设交易场景,计算出不存在风险的交易数据的比例值,若比例值在目标比例值区间内,则将提取的所有交易数据更新至生产数据库中,以用于在接收到用户的交易请求时,根据生产数据库中的数据,确定是否同意用户的交易请求。定是否同意用户的交易请求。定是否同意用户的交易请求。

【技术实现步骤摘要】
一种数据的处理方法、装置、电子设备及存储介质


[0001]本申请涉及大数据处理
,具体而言,涉及一种数据的处理方法、装置、电子设备及存储介质。

技术介绍

[0002]传统的离线大数据的问题发现局限于事后默认值、空值、是否推送数据文件等验证(也就是规则产出决策结果之后),现有的系统就只能在规则产出决策结果之后(问题已经发生的情况下)进行问题回溯,去检查变量是否有问题,进而无法避免用户实际的损失发生。

技术实现思路

[0003]有鉴于此,本申请的目的在于提供一种数据的处理方法、装置、电子设备及存储介质方法以及系统,以避免用户发生损失。
[0004]第一方面,本申请提供了一种数据的处理方法,方法包括从验证数据库的多个数据表中提取预设时间段内所有的交易数据,验证数据库中包括多个与预设交易场景对应的数据表;针对每个预设交易场景,根据从该预设交易场景对应的数据表中提取的交易数据和该预设交易场景对应的规则,确定出每条交易数据是否存在风险;针对每个预设交易场景,计算出不存在风险的交易数据的比例值,若比例值在目标比例值区间内,则将提取的所有交易数据更新至生产数据库中,以用于在接收到用户的交易请求时,根据生产数据库中的数据,确定是否同意用户的交易请求。
[0005]优选的,针对每个预设交易场景,若比例值不在目标比例值区间内,则生成告警信息,以提示该预设交易场景下的交易数据错误,并进行人工排查。
[0006]优选的,针对接收到的用户的每个交易请求,根据该交易请求解析出交易数据,并存储在验证数据库中对应的数据表中,交易数据至少包括交易请求时间和交易对象,交易对象用于指示交易场景。
[0007]优选的,针对每条交易数据,通过以下方式确定该交易数据是否存在风险:根据从该预设交易场景对应的数据表中解析的交易数据,确定出交易金额;根据交易金额与对应的预设交易场景下的预设交易金额的大小,确定该交易数据是否存在风险。
[0008]优选的,针对每条交易数据,通过以下方式确定该交易数据是否存在风险:根据从该预设交易场景对应的数据表中提取的交易数据,确定发起用户;统计发起用户在预设时间段内的发起次数,以及获取发起用户的参考次数;根据发起次数和参考次数,确定该交易数据是否存在风险。
[0009]优选的,针对每条交易数据,通过以下方式确定该交易数据是否存在风险:计算复合指标,复合指标为根据交易数据确定的多个目标参数按照预设计算公式计算的,目标参数为从交易数据中确定的参数或从生产数据库中确定的参数;根据复合指标与预设复合指标的大小,确定该交易数据是否存在风险。
[0010]优选的,响应复合指标解析指令,将复合指标解析指令所指示的复合指标所对应的目标参数和预设计算公式显示在展示界面中。
[0011]第二方面,本申请提供了一种数据的处理装置,所述装置包括:
[0012]提取模块,用于从验证数据库的多个数据表中提取预设时间段内所有的交易数据,所述验证数据库中包括多个与预设交易场景对应的数据表;
[0013]回放模块,用于针对每个预设交易场景,根据从该预设交易场景对应的数据表中提取的交易数据和该预设交易场景对应的规则,确定出每条交易数据是否存在风险;
[0014]判断模块,用于针对每个预设交易场景,计算出不存在风险的交易数据的比例值,若所述比例值在目标比例值区间内,则将提取的所有交易数据更新至生产数据库中,以用于在接收到用户的交易请求时,根据所述生产数据库中的数据,确定是否同意用户的交易请求。
[0015]第三方面,本申请还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述的数据的处理方法的步骤。
[0016]第四方面,本申请还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述的数据的处理方法的步骤。
[0017]本申请提供的一种数据的处理方法及装置,通过从验证数据库的多个数据表中提取预设时间段内所有的交易数据,验证数据库中包括多个与预设交易场景对应的数据表;针对每个预设交易场景,根据从该预设交易场景对应的数据表中提取的交易数据和该预设交易场景对应的规则,确定出每条交易数据是否存在风险;针对每个预设交易场景,计算出不存在风险的交易数据的比例值,若比例值在目标比例值区间内,则将提取的所有交易数据更新至生产数据库中,以用于在接收到用户的交易请求时,根据生产数据库中的数据,确定是否同意用户的交易请求,从而防止错误的数据更新到生产数据库中,避免由于错误的数据影响对用户的交易请求的验证的准确性。
[0018]为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
[0019]为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
[0020]图1为本申请实施例所提供的一种数据的处理方法的流程图;
[0021]图2为本申请实施例所提供的一种确定交易数据风险的步骤的流程图;
[0022]图3为本申请实施例所提供的另一种确定交易数据风险的步骤的流程图;
[0023]图4为本申请实施例所提供的另一种确定交易数据风险的步骤的流程图;
[0024]图5为本申请实施例所提供的一种数据的处理装置的结构示意图;
[0025]图6为本申请实施例所提供的一种电子设备的结构示意图。
具体实施方式
[0026]为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的每个其他实施例,都属于本申请保护的范围。
[0027]首先,对本申请可适用的应用场景进行介绍。本申请可应用于大数据变量验证回放。
[0028]经研究发现,传统的离线大数据的问题发现局限于事后默认值、空值、是否推送数据文件等验证(也就是规则产出决策结果之后),现有的系统就只能在规则产出决策结果之后(问题已经发生的情况下)进行问题回溯,去检查变量是否有问题,进而无法避免用户实际的损失发生。
[0029]变量是风控领域重要的领域,变量为风控提供数据源,而基于行内存量数据加工出来的大数据变量更是占据主本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据的处理方法,其特征在于,所述方法包括:从验证数据库的多个数据表中提取预设时间段内所有的交易数据,所述验证数据库中包括多个与预设交易场景对应的数据表;针对每个预设交易场景,根据从该预设交易场景对应的数据表中提取的交易数据和该预设交易场景对应的规则,确定出每条交易数据是否存在风险;针对每个预设交易场景,计算出不存在风险的交易数据的比例值,若所述比例值在目标比例值区间内,则将提取的所有交易数据更新至生产数据库中,以用于在接收到用户的交易请求时,根据所述生产数据库中的数据,确定是否同意用户的交易请求。2.根据权利要求1所述的方法,其特征在于,还包括:针对每个预设交易场景,若所述比例值不在目标比例值区间内,则生成告警信息,以提示该预设交易场景下的交易数据错误,并进行人工排查。3.根据权利要求2所述的方法,其特征在于,还包括:针对接收到的用户的每个交易请求,根据该交易请求解析出交易数据,并存储在所述验证数据库中对应的数据表中,所述交易数据至少包括交易请求时间和交易对象,所述交易对象用于指示交易场景。4.根据权利要求2所述的方法,其特征在于,针对每条交易数据,通过以下方式确定该交易数据是否存在风险:根据从该预设交易场景对应的数据表中解析的交易数据,确定出交易金额;根据所述交易金额与对应的预设交易场景下的预设交易金额的大小,确定该交易数据是否存在风险。5.根据权利要求2所述的方法,其特征在于,针对每条交易数据,通过以下方式确定该交易数据是否存在风险:根据从该预设交易场景对应的数据表中提取的交易数据,确定发起用户;统计所述发起用户在预设时间段内的发起次数,以及获取所述发起用户的参考次数;根据所述发起次数和所述参考次数,确定该交易数据是否存在风险。6...

【专利技术属性】
技术研发人员:翟博伦
申请(专利权)人:平安银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1