一种数据处理方法、装置及设备制造方法及图纸

本说明书提供了一种数据处理方法、装置及设备。所述方法包括获取监测数据；所述监测数据中包括政务数据和非政务数据；对所述监测数据进行预处理，获得预处理数据；所述预处理用于将所述监测数据中预设属性的数据进行隐私泛化；利用所述预处理数据，对预设机器模型进行训练；其中，训练过程中，通过逐步向样本集中加入预设数量的政务数据对预设机器模型进行调整，初始样本集中不包括政务数据；在预设机器模型满足预设准确度阈值时，获取资源共享数据；其中，所述资源共享数据为预设机器模型满足预设准确度阈值时对应的样本集中的训练数据；将所述资源共享数据分享至目标端。利用本说明书实施例可以有效的保护隐私信息。

【技术实现步骤摘要】
一种数据处理方法、装置及设备
本申请涉及数据处理
，特别涉及一种数据处理方法、装置及设备。
技术介绍
随着电子政务信息资源共享建设的不断推进，在地方金融机构监管中，监管部门可以使用共享信息资源进行数据分析等工作以实现对相关政策、业务的决策和风险判断的支持。因此，在信息资源共享的过程中，保证监管模型实现的前提下有效的保护隐私信息变得越来越重要。现有技术中，在信息资源共享的过程中，保护隐私信息的方法主要通过人为定义隐私信息范围，如个人信息的身份证、手机号等，然后根据隐私信息的定义，在数据存储时对在定义范围内的数据进行加密存储。然而，由于隐私信息范围是人为定义的，在信息资源共享过程中，存在人为篡改带来的泄露风险，从而在一定程度上降低了对隐私信息的安全保护。因此，业内亟需一种可以解决上述问题的技术方案。
技术实现思路
本说明书实施例提供了一种数据处理方法、装置及设备，可以在保证监管模型实现的前提下有效的保护隐私信息。本说明书提供的数据处理方法、装置及设备是包括以下方式实现的。一种数据处理方法，包本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，所述方法包括：/n获取监测数据；所述监测数据中包括政务数据和非政务数据；/n对所述监测数据进行预处理，获得预处理数据；所述预处理用于将所述监测数据中预设属性的数据进行隐私泛化；/n利用所述预处理数据，对预设机器模型进行训练；其中，训练过程中，通过逐步向样本集中加入预设数量的政务数据对预设机器模型进行调整，初始样本集中不包括政务数据；/n在预设机器模型满足预设准确度阈值时，获取资源共享数据；其中，所述资源共享数据为预设机器模型满足预设准确度阈值时对应的样本集中的训练数据；/n将所述资源共享数据分享至目标端。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：
获取监测数据；所述监测数据中包括政务数据和非政务数据；
对所述监测数据进行预处理，获得预处理数据；所述预处理用于将所述监测数据中预设属性的数据进行隐私泛化；
利用所述预处理数据，对预设机器模型进行训练；其中，训练过程中，通过逐步向样本集中加入预设数量的政务数据对预设机器模型进行调整，初始样本集中不包括政务数据；
在预设机器模型满足预设准确度阈值时，获取资源共享数据；其中，所述资源共享数据为预设机器模型满足预设准确度阈值时对应的样本集中的训练数据；
将所述资源共享数据分享至目标端。


2.根据权利要求1所述的方法，其特征在于，所述对所述监测数据进行预处理，包括：
将所述监测数据按照属性划分为标识符、准标识符、敏感属性和非敏感属性；
基于标识符与序号的预设关系，采用序号代替所述标识符；
利用匿名化的隐私保护技术对所述准标识符、敏感属性进行预处理。


3.根据权利要求1所述的方法，其特征在于，所述利用所述预处理数据，对预设机器模型进行训练前，包括：
从所述预处理数据中提取特征数据；其中，特征数据包括关联关系的交叉特征、偏离值特征、业务场景中存在的隐晦特征；
利用所述特征数据，对所述预设机器模型进行训练。


4.根据权利要求1所述的方法，其特征在于，所述非政务数据至少包括下述数据中一种：业务数据、外部数据、互联网数据、资金流数据。


5.根据权利要求1所述的方法，其特征在于，所述利用所述预处理数据，对预设机器模型进行训练，包括：
获取所述预处理数据中非政务数据，组成初始样本集；
将所述初始样本集划分为训练数据和测试数据；
利用所述训练数据对所述预设机器模型进行训练，获得第一模型；
利用所述测试数据对所述第一模型进行验证，获得第一验证结果；
当所述第一验证结果小于预设准确度阈值时，向所述初始样本集加入第一预设数量的政务数据，获得第一样本集；
将所述第一样本集划分为第一训练数据和第一测试数据；
利用所述第一训练数据对所述第一模型进行调整，获得第二模型；
利用所述第一测试数据对所述第...

【专利技术属性】
技术研发人员：吴勇，张东凯，卢世温，陈亚君，蔡朴锐，李宁，林莹，
申请(专利权)人：中国建设银行股份有限公司，
类型：发明
国别省市：北京;11