【技术实现步骤摘要】
本专利技术属于数据处理，尤其涉及一种数据截面处理方法及系统。
技术介绍
1、截面数据（cross-section data）是指在同一时间（时期或时点）的数据截面上反映一个总体的一批（或全部）个体的观测值，由于企业内部的不同的应用系统的程序语言和软件结构存在一定程度的差异，因此在数据的传输和加工过程中不可避免的存在更新不及时或者数据加工错误的问题，通过数据截面的构建对于保证数据的可靠性和准确性至关重要。
2、现有技术方案中通过对不同的数据截面的截面数据的采集和分析实现对截面数据的校验处理，保证企业的数据的可靠性，具体的在专利技术专利cn202210913338.0《一种针对截面数据的分布规律及其离群值的挖掘方法》、cn202011221755.6《关键截面数据分析方法、装置、设备及存储介质》均通过对截面数据的分析和校验，提升了企业的业务数据的分析可靠性，但是通过分析不难发现，存在以下技术问题：
3、对于大型企业，例如在消费金融企业，由于业务系统的数量庞大，同时不同的业务系统之间的业务模块间的数据交互的交互数据的数据量也较大，因此若不能根据数据的历史校验结果进行差异化的数据截面的采样分析对象和采样分析周期的确定，则不仅无法保证数据截面的截面数据的校验分析的实时性，同时也无法保证企业的数据的可靠性。
4、针对上述技术问题，本专利技术提供了一种数据截面处理方法及系统。
技术实现思路
1、为实现本专利技术目的，本专利技术采用如下技术方案：
2
3、一种数据截面处理方法，其特征在于，具体包括：
4、s1通过不同的业务系统的业务数据的历史变动数据进行业务数据的问题更新记录的确定，基于所述问题更新记录确定不同的业务数据在不同的匹配校验规则下的异常更新概率；
5、s2基于不同的业务数据在不同的匹配校验规则下的异常更新概率确定所述业务数据的异常校验规则以及可靠校验规则，并结合不同的业务数据在不同的匹配校验规则下的异常更新概率确定业务数据的数据异常概率以及异常更新数据，基于数据异常概率确定异常更新数据的数据截面的构建周期；
6、s3确定不同的业务系统中的异常更新数据和稳定更新数据，并结合不同的业务系统中的不同的业务数据的异常更新概率确定不同的业务系统的系统异常概率以及异常业务系统，基于系统异常概率确定异常业务系统的数据截面的构建周期；
7、s4根据不同的业务系统中的异常业务系统以及不同的业务系统的系统异常概率进行综合异常概率的确定，并结合不同的业务系统之间的系统框架的相似度进行业务系统的数据截面的构建周期的确定。
8、本专利技术的有益效果在于：
9、1、基于问题更新记录确定不同的业务数据在不同的匹配校验规则下的异常更新概率，不仅实现了从历史更新次数下的问题更新情况对不同的业务数据在对应的不同的匹配校验规则下的问题情况的准确评估，同时通过对异常更新概率较大的业务数据对应的匹配校验规则的筛选也为对问题较大的业务数据的差异化的数据截面的构建周期的确定奠定了基础；
10、2、通过进行业务数据的数据异常概率以及异常更新数据的确定，从而实现了从多个角度对业务数据发生异常的概率的准确评估，同时通过异常更新数据的筛选，保证了发生异常的概率较大的业务数据的数据截面的构建周期的差异化评估，进而保证了业务数据的校验处理效率和业务数据的可靠性；
11、3、通过综合异常概率以及不同的业务系统之间的系统框架的相似度进行业务系统的数据截面的构建周期的确定，不仅考虑到单一的由于业务系统的业务数据的异常概率的差异，同时通过从系统框架的相似度的考虑也实现了对数据截面的构建难度的准确评估，既保证了异常概率的业务系统的业务数据的可靠性，同时也避免了由于构建难度较大导致的频繁进行数据截面的构建导致的系统压力较大的问题。
12、进一步的技术方案在于，所述业务系统包括登录系统、授信系统、支用系统、还款接口和信贷申请系统。
13、进一步的技术方案在于，所述问题更新记录包括所述业务数据在不同的历史更新次数中的问题更新次数以及不同的问题更新次数下的更新结果。
14、进一步的技术方案在于，所述匹配校验规则包括0-1校验、范围校验、数据类型校验、长度限制校验以及逻辑关系校验。
15、进一步的技术方案在于，所述业务数据的异常校验规则以及可靠校验规则的确定的方法为：
16、当所述业务数据在匹配校验规则下的异常更新概率大于设定异常概率时，则确定所述匹配校验规则为异常校验规则，当所述业务数据在匹配校验规则下的异常更新概率在预设异常概率区间内时，则确定所述匹配校验规则为可靠校验规则。
17、进一步的技术方案在于，所述稳定更新数据的确定的方法为：
18、当所述业务系统中的业务数据的数据异常概率小于预设异常概率阈值时，则确定所述业务数据为稳定更新数据。
19、第二方面，本专利技术提供了一种计算机系统，包括：通信连接的存储器和处理器，以及存储在所述存储器上并能够在所述处理器上运行的计算机程序，其特征在于：所述处理器运行所述计算机程序时执行上述的一种数据截面处理方法。
20、其他特征和优点将在随后的说明书中阐述，本专利技术的目的和其他优点在说明书以及附图中所特别指出的结构来实现和获得。
21、为使本专利技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
本文档来自技高网...【技术保护点】
1.一种数据截面处理方法，其特征在于，具体包括：
2.如权利要求1所述的数据截面处理方法，其特征在于，所述业务系统包括登录系统、授信系统、支用系统、还款接口和信贷申请系统。
3.如权利要求1所述的数据截面处理方法，其特征在于，所述问题更新记录包括所述业务数据在不同的历史更新次数中的问题更新次数以及不同的问题更新次数下的更新结果。
4.如权利要求1所述的数据截面处理方法，其特征在于，所述业务数据在不同的匹配校验规则下的异常更新概率的确定的方法为：
5.如权利要求1所述的数据截面处理方法，其特征在于，所述匹配校验规则包括0-1校验、范围校验、数据类型校验、长度限制校验以及逻辑关系校验。
6.如权利要求1所述的数据截面处理方法，其特征在于，所述业务数据的异常校验规则以及可靠校验规则的确定的方法为：
7.如权利要求1所述的数据截面处理方法，其特征在于，所述业务数据的数据异常概率的确定的方法为：
8.如权利要求1所述的数据截面处理方法，其特征在于，基于数据异常概率确定异常更新数据的数据截面的构建周期，具体包
9.如权利要求1所述的数据截面处理方法，其特征在于，所述业务系统的数据截面的构建周期的确定的方法为：
10.一种计算机系统，包括：通信连接的存储器和处理器，以及存储在所述存储器上并能够在所述处理器上运行的计算机程序，其特征在于：所述处理器运行所述计算机程序时执行权利要求1-9任一项所述的一种数据截面处理方法。
...【技术特征摘要】
1.一种数据截面处理方法，其特征在于，具体包括：
2.如权利要求1所述的数据截面处理方法，其特征在于，所述业务系统包括登录系统、授信系统、支用系统、还款接口和信贷申请系统。
3.如权利要求1所述的数据截面处理方法，其特征在于，所述问题更新记录包括所述业务数据在不同的历史更新次数中的问题更新次数以及不同的问题更新次数下的更新结果。
4.如权利要求1所述的数据截面处理方法，其特征在于，所述业务数据在不同的匹配校验规则下的异常更新概率的确定的方法为：
5.如权利要求1所述的数据截面处理方法，其特征在于，所述匹配校验规则包括0-1校验、范围校验、数据类型校验、长度限制校验以及逻辑关系校验。
6.如权利要求1所...
【专利技术属性】
技术研发人员：石杰，廖家林，陶嘉驹，陈煜，
申请(专利权)人：杭银消费金融股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。