数据处理方法、装置、服务器及存储介质制造方法及图纸

技术编号:38753227 阅读:5 留言:0更新日期:2023-09-10 09:37
本申请提供一种数据处理方法、装置、服务器及存储介质,涉及大数据领域。该方法包括:从数据源系统中获取原始业务数据表;所述原始业务数据表中包括多个数据;根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,获取脱敏后的业务数据表,并将所述脱敏后的业务数据表存储至数据湖中与所述用户级别对应的存储区中。本申请的方法,能够为不同级别的用户进行不同程度的脱敏处理,提供一种更为合理的脱敏处理方式,而且还能基于用户级别将脱敏处理后的数据表进行分区域存储,便于后续数据的查询。便于后续数据的查询。便于后续数据的查询。

【技术实现步骤摘要】
数据处理方法、装置、服务器及存储介质


[0001]本申请涉及大数据
,尤其涉及一种数据处理方法、装置、服务器及存储介质。

技术介绍

[0002]随着信息技术的发展,敏感信息在数据流通过程中缺少管控,若敏感信息泄露,将会给客户带来不必要的风险,因此,需要对敏感信息进行管控。在金融行业中,敏感信息包括生物识别信息、身份信息及财产信息等。
[0003]相关工作人员从数据库中查询业务数据,对业务进行分析,业务数据中记录了客户姓名、手机号、地址信息、卡号及客户号等敏感信息,通常会对业务数据进行脱敏处理,如,对敏感信息进行数据的变形或遮蔽,相关工人人员无法查看原始业务数据,只能查看脱敏处理后的业务数据,有效地保护了客户隐私。
[0004]但是,部分工作人员由于业务需求,在开展业务时需要查看一些原始业务数据,但是目前脱敏处理后呈现给每个工作人员的业务数据是一样的,现有的脱敏处理方式并不合理。

技术实现思路

[0005]本申请提供一种数据处理方法、装置、服务器及存储介质,用以解决现有的脱敏处理方式并不合理的问题。
[0006]第一方面,本申请提供一种数据处理方法,包括:
[0007]从数据源系统中获取原始业务数据表;所述原始业务数据表中包括多个数据;
[0008]根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,获取脱敏后的业务数据表,并将所述脱敏后的业务数据表存储至数据湖中与所述用户级别对应的存储区中。
[0009]可选地,所述根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,包括:
[0010]对于每个用户级别,从所述原始业务数据表中,获取与所述用户级别所对应的脱敏策略中的敏感字段类型对应的待脱敏的数据;
[0011]根据所述用户级别所对应的脱敏策略中的脱敏处理需求信息,确定所述待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述待脱敏的数据进行脱敏处理。
[0012]可选地,若预配置的用户级别为第一级别用户,且其所对应的脱敏策略为第一脱敏策略,则所述敏感字段类型包括如下一种或者几种组合:用户姓名、用户地址和用户联系方式。
[0013]可选地,若所述用户级别为第一级别用户,且其所对应的脱敏策略为第一脱敏策略,则所述根据所述用户级别所对应的脱敏策略中的脱敏处理需求信息,确定所述待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述待脱敏的数据进行脱敏处理,包
括:
[0014]在所述敏感字段类型为用户姓名时,根据所述第一脱敏策略中的脱敏处理需求信息中的生僻字转换脱敏处理需求信息,确定与所述用户姓名对应的第一待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第一待脱敏的数据进行生僻字转换处理;
[0015]和/或,
[0016]在所述敏感字段类型为用户地址时,根据所述第一脱敏策略中的脱敏处理需求信息中的省略部分内容脱敏处理需求信息,确定与所述用户地址对应的第二待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第二待脱敏的数据进行省略处理;
[0017]和/或;
[0018]在所述敏感字段类型为用户联系方式时,根据所述第一脱敏策略中的脱敏处理需求信息中的数字变换脱敏处理需求信息,确定与所述用户联系方式对应的第三待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第三待脱敏的数据进行数字变换处理。
[0019]可选地,若预配置的用户级别为第二级别用户,且其所对应的脱敏策略为第二脱敏策略,则所述敏感字段类型包括如下一种或者几种组合:用户姓名和用户地址。
[0020]可选地,若预配置的用户级别为第二级别用户,且其所对应的脱敏策略为第二脱敏策略,则根据所述用户级别所对应的脱敏策略中的脱敏处理需求信息,确定所述待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述待脱敏的数据进行脱敏处理,包括:
[0021]在所述敏感字段类型为用户姓名时,根据所述第二脱敏策略中的脱敏处理需求信息中的生僻字转换脱敏处理需求信息,确定与所述用户姓名对应的第一待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第一待脱敏的数据进行生僻字转换处理;
[0022]和/或,
[0023]在所述敏感字段类型为用户地址时,根据所述第二脱敏策略中的脱敏处理需求信息中的省略部分内容脱敏处理需求信息,确定与所述用户地址对应的第二待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第二待脱敏的数据进行省略处理。
[0024]可选地,还包括:
[0025]接收分析平台发送的数据查询请求,解析所述请求,获取所述分析平台的标识和待查询的业务数据表的标识;
[0026]获取分析平台的标识对应的用户级别,并从所述用户级别对应的存储区中获取与所述待查询的业务数据表的标识对应的脱敏后的业务数据表;
[0027]将所述脱敏后的业务数据表发送至所述分析平台,以供所述分析平台展示所述脱敏后的业务数据表。
[0028]第二方面,本申请提供一种数据处理装置,包括:
[0029]获取单元,用于从数据源系统中获取原始业务数据表;所述原始业务数据表中包括多个数据;
[0030]处理单元,用于根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,获取脱敏后的业务数据表,并将所述脱敏后的业务数据表存储至数据湖中与所述用户级别对应的存储区中。
[0031]第三方面,本申请提供一种服务器,包括:处理器,存储器及收发器;
[0032]处理器,存储器及收发器电路互联;
[0033]存储器存储计算机执行指令;
[0034]收发器,用于收发数据;
[0035]处理器执行存储器存储的计算机执行指令,使得处理器执行如第一方面所述的方法。
[0036]第四方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如第一方面所述的方法。
[0037]第五方面,本申请提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现第一方面所述的方法。
[0038]本申请提供的数据处理方法、装置、服务器及存储介质,通过从数据源系统中获取原始业务数据表;所述原始业务数据表中包括多个数据;根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,获取脱敏后的业务数据表,并将所述脱敏后的业务数据表存储至数据湖中与所述用户级别对应的存储区中,能够为不同级别的用户进行不同程度的脱敏处理,提供一种更为合理的脱敏处理方式,而且还能基于用户级别将脱敏处理后的数据表进行分区域存储,便于后续数据的查询。<本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法包括:从数据源系统中获取原始业务数据表;所述原始业务数据表中包括多个数据;根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,获取脱敏后的业务数据表,并将所述脱敏后的业务数据表存储至数据湖中与所述用户级别对应的存储区中。2.根据权利要求1所述的方法,其特征在于,所述根据预配置的每个用户级别所对应的脱敏策略中的敏感字段类型和脱敏处理需求信息,对所述原始业务数据表中的待脱敏数据进行脱敏处理,包括:对于每个用户级别,从所述原始业务数据表中,获取与所述用户级别所对应的脱敏策略中的敏感字段类型对应的待脱敏的数据;根据所述用户级别所对应的脱敏策略中的脱敏处理需求信息,确定所述待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述待脱敏的数据进行脱敏处理。3.根据权利要求2所述的方法,其特征在于:若预配置的用户级别为第一级别用户,且其所对应的脱敏策略为第一脱敏策略,则所述敏感字段类型包括如下一种或者几种组合:用户姓名、用户地址和用户联系方式。4.根据权利要求3所述的方法,其特征在于,若所述用户级别为第一级别用户,且其所对应的脱敏策略为第一脱敏策略,则所述根据所述用户级别所对应的脱敏策略中的脱敏处理需求信息,确定所述待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述待脱敏的数据进行脱敏处理,包括:在所述敏感字段类型为用户姓名时,根据所述第一脱敏策略中的脱敏处理需求信息中的生僻字转换脱敏处理需求信息,确定与所述用户姓名对应的第一待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第一待脱敏的数据进行生僻字转换处理;和/或,在所述敏感字段类型为用户地址时,根据所述第一脱敏策略中的脱敏处理需求信息中的省略部分内容脱敏处理需求信息,确定与所述用户地址对应的第二待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第二待脱敏的数据进行省略处理;和/或;在所述敏感字段类型为用户联系方式时,根据所述第一脱敏策略中的脱敏处理需求信息中的数字变换脱敏处理需求信息,确定与所述用户联系方式对应的第三待脱敏的数据是否满足脱敏条件,并在满足脱敏条件时,对所述第三待脱敏的数据进行数字变换处理。5.根据权利要求2所述的方法,其特征在于:若预配置的用户级别为第二级别用户,且其所对应的脱...

【专利技术属性】
技术研发人员:闫宇
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1