一种特征加工平台、特征加工方法、设备及存储介质技术

技术编号:43468414 阅读:20 留言:0更新日期:2024-11-27 13:05
本申请涉及一种特征加工平台、特征加工方法、设备及存储介质。包括:基础数据层、中间加工层、特征层、公共信息层和接口层;基础数据层获取数据湖中的数据,对数据进行预处理,到基础数据层数据;中间加工层获取基础数据层数据,并对基础数据层数据按照业务规则进行处理,得到中间加工层数据;公共信息层中存储有用于特征加工的基本参数,特征层根据特征加工需求从公共信息层获取与特征加工需求对应的基本参数,作为目标基本参数,根据目标基本参数从中间加工层数据中确定目标加工数据,对目标加工数据执行与特征加工需求对应的特征加工规则,得到特征加工结果;接口层对外提供特征加工结果。通过本说明书实施例,提高了特征加工的效率。

【技术实现步骤摘要】

本说明书实施例涉及数据处理,尤其涉及一种特征加工平台、特征加工方法、设备及存储介质


技术介绍

1、目前的特征加工方法中,特征加工全部在特征加工层(odm),不同的特征加工的处理逻辑在不同的odm层,且odm层交叉的相互依赖,最终通过视图层(model)将odm层数据进行组合提供给管理平台等下游进行使用。

2、但目前的特征加工方法中,特征加工链路很长,无法满足管理平台对特征的时效性要求,并且特征的口径复杂(尤其是新老系统交叉迁移)、不统一,且口径较旧,不符合使用要求,此外,特征加工层级混乱,复用性低,极大程度的增加了对口径变更修改的难度。

3、如何优化特征加工的步骤,从而提高特征加工的时效性是目前亟待解决的技术问题。


技术实现思路

1、为解决现有技术中特征加工层级混乱,特征处理逻辑复用性低,特征加工链路很长,且特征加工口径复杂多样,不统一,不满足下游对特征加工完成的时效性要求的问题,本说明书实施例提供了一种特征加工平台、特征加工方法、设备及存储介质,特征平台整体设计了分层规则,以最大程本文档来自技高网...

【技术保护点】

1.一种特征加工平台,其特征在于,所述特征加工平台包括:基础数据层、中间加工层、特征层、公共信息层和接口层;

2.根据权利要求1所述的特征加工平台,其特征在于,所述基础数据层对所述数据进行预处理,得到基础数据层数据包括:

3.根据权利要求1所述的特征加工平台,其特征在于,所述中间加工层对所述基础数据层数据按照业务规则进行处理,得到中间加工层数据包括:

4.根据权利要求3所述的特征加工平台,其特征在于,所述数据主键包括客户号、产品、交易类型中一种或多种的组合。

5.根据权利要求3所述的特征加工平台,其特征在于,所述基本参数包括多个数据主键与多...

【技术特征摘要】

1.一种特征加工平台,其特征在于,所述特征加工平台包括:基础数据层、中间加工层、特征层、公共信息层和接口层;

2.根据权利要求1所述的特征加工平台,其特征在于,所述基础数据层对所述数据进行预处理,得到基础数据层数据包括:

3.根据权利要求1所述的特征加工平台,其特征在于,所述中间加工层对所述基础数据层数据按照业务规则进行处理,得到中间加工层数据包括:

4.根据权利要求3所述的特征加工平台,其特征在于,所述数据主键包括客户号、产品、交易类型中一种或多种的组合。

5.根据权利要求3所述的特征加工平台,其特征在于,所述基本参数包括多个数据主键与多个特征加工需求中的参数之间的对应关系。

6.根据权利要求5所述的特征加工平台,其特征在于,所述特征层根据特征加工需求从所述公共信息层获取与所述特征加工需求对应的基本参数,作为目标基本参数,并根据所述目标基本参数从所述中间加工层数据中确定目标加工数据包括:

7.根据权利要求1所述的特征加工平台,其特征在于,所述基本参数是对所述基础数据层数据进行分析后得到的;

8.根据权利要求1所述的特征加工平台,其特征在于,所述接口层进一步用于,从所述公共信息层获取所述目标基本参数,并对外同时提供所述特征加工结果以及所述目标基本参数,以便于后续根据所述特征加工结果以及所述目标基本参数生成特征视图。

9.一种特征加工方法,应用于权利要求1-8任意一项所述的特征加工平台,其特征在于,所述方法包括:

10.根据权利要求9所述的方法,其特征在于,控制基础数据层获取数据湖中的数据,对所述数据进行预处理,得到基础数据层数据包括:

【专利技术属性】
技术研发人员:尚泽宇霍曼裴亚民张洁张亚朋
申请(专利权)人:中国光大银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1