数据处理方法、装置、计算机可读介质及电子设备制造方法及图纸

技术编号:39251711 阅读:9 留言:0更新日期:2023-10-30 12:03
本申请的实施例提供了一种数据处理方法、装置、计算机可读介质及电子设备。该数据处理方法包括:获取待处理数据和针对待处理数据的检测处理策略;从检测处理策略中提取出衍生特征变量,衍生特征变量是根据待处理数据中的算子特征进行组合生成的,算子特征是待处理数据中存在的共性特征;将提取出的衍生特征变量转化为算子特征的组合表达式,并根据组合表达式和算子特征的计算方式,生成衍生特征变量的计算结果;根据衍生特征变量的计算结果,执行检测处理策略,以对待处理数据进行检测处理。本实施例的技术方案,通过将衍生特征变量转化为算子特征的组合表达式,基于算子特征的组合计算得到衍生特征变量的计算结果,从而提升了计算效率。算效率。算效率。

【技术实现步骤摘要】
数据处理方法、装置、计算机可读介质及电子设备


[0001]本申请涉及计算机及通信
,具体而言,涉及一种数据处理方法、装置、计算机可读介质及电子设备。

技术介绍

[0002]在实时风控场景中,统一系统中往往存在大量判定策略或判定模型同时运行。以交易风控场景为例,为了防范众多风险的出现,对同一笔交易,会有数以千百记的风控检测处理策略对其交易安全进行判定。其中,每个检测处理策略又由若干衍生特征变量组合形成的规则构成。因此,在实时风控场景中,会有大量的衍生特征变量的计算需求。
[0003]在相关技术方案中,对于风控检测处理策略中衍生特征变量的计算,往往存在计算效率比较低的问题。

技术实现思路

[0004]本申请的实施例提供了一种数据处理方法、装置、计算机可读介质及电子设备,进而可以克服衍生特征变量计算效率较低的问题。
[0005]本申请的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本申请的实践而习得。
[0006]根据本申请实施例的一个方面,提供了一种数据处理方法,该方法包括:
[0007]获取待处理数据和针对所述待处理数据的检测处理策略;
[0008]从所述检测处理策略中提取出衍生特征变量,所述衍生特征变量是根据待处理数据中的算子特征进行组合生成的,所述算子特征是所述待处理数据中存在的共性特征;
[0009]将提取出的所述衍生特征变量转化为所述算子特征的组合表达式,并根据所述组合表达式和所述算子特征的计算方式,生成所述衍生特征变量的计算结果;
[0010]根据所述衍生特征变量的计算结果,执行所述检测处理策略,以对所述待处理数据进行检测处理。
[0011]根据本申请实施例的一个方面,提供了一种数据处理装置,所述装置包括:
[0012]获取模块,用于获取待处理数据和针对所述待处理数据的检测处理策略;
[0013]提取模块,用于从所述检测处理策略中提取出衍生特征变量,所述衍生特征变量是根据待处理数据中的算子特征进行组合生成的,所述算子特征是所述待处理数据中存在的共性特征;
[0014]转化模块,用于将提取出的所述衍生特征变量转化为所述算子特征的组合表达式,并根据所述组合表达式和所述算子特征的计算结果,生成所述衍生特征变量的计算结果;
[0015]执行模块,用于根据所述衍生特征变量的计算方式,执行所述检测处理策略,以对所述待处理数据进行检测处理。
[0016]在本申请的一些实施例中,基于以上技术方案,所述提取模块还用于,解析所述检
测处理策略中包含的针对待处理变量的处理逻辑;从所述处理逻辑中提取待处理变量,将提取出的待处理变量作为所述衍生特征变量。
[0017]在本申请的一些实施例中,基于以上技术方案,所述装置还包括去重模块用于,从提取出的衍生特征变量中查找到重复的衍生特征变量;对所述重复的衍生特征变量进行去重处理,得到去重后的衍生特征变量。
[0018]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,根据所述衍生特征变量中包含的运算逻辑,确定生成所述衍生特征变量所需要的算子特征;将所需要的算子特征按照所述运算逻辑进行嵌套组合,以得到所述衍生特征变量所对应的算子特征的组合表达式。
[0019]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,从各个衍生特征变量对应的组合表达式中查找共用的算子特征;对所述共用的算子特征和非共用的算子特征进行计算,得到所述共用的算子特征和所述非共用的算子特征分别对应的计算结果;根据所述共用的算子特征和所述非共用的算子特征分别对应的计算结果,以及所述各个衍生特征变量对应的组合表达式,生成各个衍生特征变量对应的计算结果。
[0020]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,根据所述共用的算子特征,将所述各个衍生特征变量对应的算子特征的组合表达式进行合并,得到合并后的组合表达式。
[0021]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,根据所述算子特征在计算时所依赖的数据资源,对所述算子特征进行分组,得到至少一组算子特征;在相同的处理时机内对属于同一组的算子特征进行计算。
[0022]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,将使用相同的待处理数据进行计算的算子特征分为同一组;将使用相同的算子特征计算结果进行计算的算子特征分为同一组。
[0023]在本申请的一些实施例中,基于以上技术方案,所述转化模块还用于,在得到所述算子特征的计算结果之后,按照所述组合表达式所表示的嵌套顺序,对所述算子特征的计算结果进行组合,生成所述各个衍生特征变量的计算结果。
[0024]在本申请的一些实施例中,基于以上技术方案,所述获取模块还用于,根据所述待处理数据中所包含的数据维度,提取所述待处理数据中的共性特征;根据所述待处理数据中的共性特征生成所述算子特征。
[0025]在本申请的一些实施例中,基于以上技术方案,所述执行模块还用于,将所述衍生特征变量的计算结果作为所述检测处理策略的输入,执行所述检测处理策略中的逻辑运算;将所述检测处理策略的执行结果作为对所述待处理数据进行检测处理的检测结果。
[0026]根据本申请实施例的一个方面,提供了一种计算机可读介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例中所述的数据处理方法。
[0027]根据本申请实施例的一个方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个计算机程序,当所述一个或多个计算机程序被所述一个或多个处理器执行时,使得所述电子设备实现如上述实施例中所述的数据处理方法。
[0028]根据本申请实施例的一个方面,提供了一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中。电子设备的处理器从计算
机可读存储介质读取并执行该计算机程序,使得该电子设备执行上述各种可选实施例中提供的数据处理方法。
[0029]在本申请的一些实施例所提供的技术方案中,通过从检测处理策略中提取出衍生特征变量,将提取出的衍生特征变量转化为算子特征的组合表达式。通过算子特征的组合表达式的计算得到衍生特征变量的计算结果,最后,将衍生特征变量的计算结果返回输入至检测处理策略,从而可以得到检测处理策略的判定结果。如此,通过先将检测处理策略中的衍生特征变量转化为算子特征的组合表达式,基于算子特征的组合计算得到衍生特征变量的计算结果,这样,对于衍生特征变量结果的计算方式更加灵活,极大地提升了计算效率,从而能够更快地得到待处理数据的检测结果。
[0030]应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
[0031]图1示出了可以应用本申请实施例的技术方案的示例性系统架构的示意图。
[0032]图2示出了根据本申请的一个实施例的数据处理方法的流程图本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法包括:获取待处理数据和针对所述待处理数据的检测处理策略;从所述检测处理策略中提取出衍生特征变量,所述衍生特征变量是根据待处理数据中的算子特征进行组合生成的,所述算子特征是所述待处理数据中存在的共性特征;将提取出的所述衍生特征变量转化为所述算子特征的组合表达式,并根据所述组合表达式和所述算子特征的计算方式,生成所述衍生特征变量的计算结果;根据所述衍生特征变量的计算结果,执行所述检测处理策略,以对所述待处理数据进行检测处理。2.根据权利要求1所述的数据处理方法,其特征在于,所述从所述检测处理策略中提取出衍生特征变量,包括:解析所述检测处理策略中包含的针对待处理变量的处理逻辑;从所述处理逻辑中提取待处理变量,将提取出的待处理变量作为所述衍生特征变量。3.根据权利要求1所述的数据处理方法,其特征在于,在从所述检测处理策略中提取出衍生特征变量之后,所述方法还包括:从提取出的衍生特征变量中查找到重复的衍生特征变量;对所述重复的衍生特征变量进行去重处理,得到去重后的衍生特征变量。4.根据权利要求1所述的数据处理方法,其特征在于,所述将提取出的所述衍生特征变量转化为所述算子特征的组合表达式,包括:根据所述衍生特征变量中包含的运算逻辑,确定生成所述衍生特征变量所需要的算子特征;将所需要的算子特征按照所述运算逻辑进行嵌套组合,以得到所述衍生特征变量所对应的算子特征的组合表达式。5.根据权利要求1所述的数据处理方法,其特征在于,所述根据所述组合表达式和所述算子特征的计算方式,生成所述衍生特征变量的计算结果,包括:从各个衍生特征变量对应的组合表达式中查找共用的算子特征;对所述共用的算子特征和非共用的算子特征进行计算,得到所述共用的算子特征和所述非共用的算子特征分别对应的计算结果;根据所述共用的算子特征和所述非共用的算子特征分别对应的计算结果,以及所述各个衍生特征变量对应的组合表达式,生成各个衍生特征变量对应的计算结果。6.根据权利要求5所述的数据处理方法,其特征在于,在从各个衍生特征变量对应的组合表达式中查找共用的算子特征之后,所述方法还包括:根据所述共用的算子特征,将所述各个衍生特征变量对应的算子特征的组合表达式进行合并,得到合并后的组合表达式。7.根据权利要求5所述的数据处理方法,其特征在于,对所述共用的算子特征和非共用的算子特征进行计算,得到所述共用的算子特征和所述非共用的算子特征分别对应的计算结果,包括:根据所述算子特征在计算时所依赖的数据资源,对所述算子特征进行分组,得到至少一组算子特征;在相同的处理时机内对属于同一组的算子特征进行计算。

【专利技术属性】
技术研发人员:张雨春
申请(专利权)人:财付通支付科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1