【技术实现步骤摘要】
本申请涉及大数据，尤其涉及一种应用于长护基金的数据处理方法、装置和设备。
技术介绍
1、现有的长护基金智能审核系统，在获取待处理数据之后，先将待处理数据存储至数据平台中，然后，再从数据平台中抽取需要进行审核的待审核数据，并将待审核数据写入标准的关系型数据库中。此时，可以对标准的关系型数据库中的待处理数据进行运算处理，得到标准化的待审核数据。之后，再基于审核模块，对标准化的待审核数据进行审核处理，得到数据审核结果。
2、这种数据处理方式，一方面，不仅消耗硬件资源过多，还依赖于数据平台或者关系型数据库的运算能力，导致对硬件资源的要求过高。另一方面，这种数据处理方式，需要对待处理数据进行多次处理，处理流程复杂，不仅容易出现误差，还影响了数据审核的效率。
技术实现思路
1、本申请提供一种应用于长护基金的数据处理方法、装置和设备，用以解决现有技术中在对基金结算数据进行审核处理时，硬件资源依赖较多，处理流程复杂，数据处理效率较低的技术问题。
2、第一方面，本申请提供一种应用于长护基金的数据处理方法，该方法应用于ignite数据网格中，ignite数据网格部署在ignite集群中，该方法包括：
3、获取待处理数据，并将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中；其中，所述待处理数据表征长护基金的基金结算相关数据；所述ignite集群中的节点所包括的数据存储模块对应多个数据存储层级；
4、响应于数据审核指令，从所述ignit
5、基于预先设置的基金结算清单模板，对所述待审核数据进行标准化处理，得到标准化的待审核数据；其中，所述预先设置的基金结算清单模板用于确定所述待审核数据的表示格式；
6、将所述标准化的待审核数据，发送至数据审核模块，以使所述数据审核模块对所述标准化的待审核数据进行审核处理，得到数据审核结果；其中，所述数据审核模块用于审核所述标准化的待审核数据；所述数据审核结果用于表征所述待审核数据是否审核通过。
7、一个示例中，将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中，包括：
8、按照流式处理方式，将所述待处理数据，均匀的存储至所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中。
9、一个示例中，将所述待处理数据，均匀的存储至所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中，包括：
10、将所述待处理数据中的，具有关联关系的待处理数据，存储至所述ignite集群中的相同节点下的数据存储模块中；其中，所述具有关联关系的待处理数据表征具有相同的主键信息的待处理数据。
11、一个示例中，所述响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据，包括：
12、响应于所述数据审核指令，从所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中，确定与所述数据审核指令相匹配的待处理数据；
13、将所述相匹配的待处理数据加载至所述ignite集群中的，数据存储层级为缓存的数据存储模块中，得到所述待审核数据。
14、一个示例中，所述响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据，包括：
15、响应于数据审核指令，确定与所述数据审核指令相匹配的至少一个主键信息；
16、基于所述至少一个主键信息，从所述ignite集群所包括的各个节点的数据存储模块中，确定出所述待审核数据。
17、一个示例中，所述基于预先设置的基金结算清单模板，对所述待审核数据进行标准化处理，得到标准化的待审核数据，包括：
18、确定与所述预先设置的基金结算清单模板相对应的sql指令，并基于所述sql指令对所述待审核数据进行标准化处理，得到所述标准化的待审核数据。
19、一个示例中，所述将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中，包括：
20、确定所述待处理数据的数据属性信息；其中，所述数据属性信息表征所述待处理数据的数据量，和/或，所述待处理数据之间的关联程度；
21、确定与所述数据属性信息，相匹配的数据存储模式；其中，所述数据存储模式为分区存储模式，或者，复制存储模式中的至少一种；
22、基于所述数据存储模式，将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中。
23、第二方面，本申请提供一种应用于长护基金的数据处理装置，包括：
24、数据存储单元，用于获取待处理数据，并将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中；其中，所述待处理数据表征长护基金的基金结算相关数据；所述ignite集群中的节点所包括的数据存储模块对应多个数据存储层级；
25、数据确定单元，用于响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据；其中，所述数据审核指令用于审核所述待处理数据；所述待审核数据表征需要进行审核处理的待处理数据；
26、标准化单元，用于基于预先设置的基金结算清单模板，对所述待审核数据进行标准化处理，得到标准化的待审核数据；其中，所述预先设置的基金结算清单模板用于确定所述待审核数据的表示格式；
27、审核处理单元，用于将所述标准化的待审核数据，发送至数据审核模块，以使所述数据审核模块对所述标准化的待审核数据进行审核处理，得到数据审核结果；其中，所述数据审核模块用于审核所述标准化的待审核数据；所述数据审核结果用于表征所述待审核数据是否审核通过。
28、一个示例中，数据存储单元，用于：
29、按照流式处理方式，将所述待处理数据，均匀的存储至所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中。
30、一个示例中，数据存储单元，用于：
31、将所述待处理数据中的，具有关联关系的待处理数据，存储至所述ignite集群中的相同节点下的数据存储模块中；其中，所述具有关联关系的待处理数据表征具有相同的主键信息的待处理数据。
32、一个示例中，数据确定单元，用于：
33、响应于所述数据审核指令，从所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中，确定与所述数据审核指令相匹配的待处理数据；
34、将所述相匹配的待处理数据加载至所述ignite集群中的，数据存储层级为缓存的数据存储模块中，得到所述待审核数据。
35、一个示例中，数据确定单元，用于：
本文档来自技高网...
【技术保护点】
1.一种应用于长护基金的数据处理方法，其特征在于，所述方法应用于ignite数据网格中，所述ignite数据网格部署在ignite集群中；所述方法包括：
2.根据权利要求1所述的方法，其特征在于，将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中，包括：
3.根据权利要求2所述的方法，其特征在于，将所述待处理数据，均匀的存储至所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中，包括：
4.根据权利要求3所述的方法，其特征在于，所述响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据，包括：
5.根据权利要求3所述的方法，其特征在于，所述响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于预先设置的基金结算清单模板，对所述待审核数据进行标准化处理，得到标准化的待审核数据，包括：
7.根据权利要求1-6中任一项所述的方法，其特征在
8.一种应用于长护基金的数据处理装置，其特征在于，包括：
9.一种计算机设备，其特征在于，包括：处理器，以及与所述处理器通信连接的存储器；
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1至7中任一项所述的应用于长护基金的数据处理方法。
...【技术特征摘要】
1.一种应用于长护基金的数据处理方法，其特征在于，所述方法应用于ignite数据网格中，所述ignite数据网格部署在ignite集群中；所述方法包括：
2.根据权利要求1所述的方法，其特征在于，将所述待处理数据存储至ignite集群所包括的各个节点的数据存储模块中，包括：
3.根据权利要求2所述的方法，其特征在于，将所述待处理数据，均匀的存储至所述ignite集群所包括的各个节点中的，数据存储层级为磁盘的数据存储模块中，包括：
4.根据权利要求3所述的方法，其特征在于，所述响应于数据审核指令，从所述ignite集群所包括的各个节点的数据存储模块中，确定出待审核数据，包括：
5.根据权利要求3所述的方法，其特征在于，所述响应于数据审核指令，从所述ignite集群所包...
【专利技术属性】
技术研发人员：逯燕芳，
申请(专利权)人：泰康保险集团股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。