数据脱敏方法、装置、设备及可读存储介质制造方法及图纸

技术编号:42101998 阅读:34 留言:0更新日期:2024-07-25 00:27
本公开涉及一种数据脱敏方法、装置、设备及可读存储介质。通过获取待脱敏的敏感数据,构造出敏感数据的数据血缘关系图,对数据血缘关系图中的各个字段进行识别,得到数据血缘关系图中的各个敏感字段以及各个敏感字段的类型,采用与各个敏感字段的类型对应的脱敏策略对各个敏感字段进行脱敏,得到各个敏感字段对应的脱敏后字段数据。相较于现有技术,本公开实施例通过构造数据血缘关系图,对数据血缘关系图中的各个字段进行识别,得到各个敏感字段以及各个敏感字段的类型,采用与各个敏感字段的类型对应的脱敏策略对各个敏感字段进行脱敏,得到脱敏后字段数据,进而可以减少人工参与度,缩短周期,提高数据脱敏效率,提高脱敏处理后的数据质量。

【技术实现步骤摘要】

本公开涉及计算机,尤其涉及一种数据脱敏方法、装置、设备及可读存储介质


技术介绍

1、在有状态的数据服务中,我们很多时候需要保证数据事务的一致性。举一个常见的场景,比如我们经常用到的数据存储服务mysql、redis等等,涉及到事务的一致性。特别是在读多写多这种高并发的场景下,服务的压力很大,我们需要服务可以扛得住这部分流量。

2、为实现这一目标,采用了数据分片的方法,通过对用户id进行哈希拆分,将不同用户id分配到不同的分片服务上。采用哈希分片容易导致个别热点问题,尤其在流量激增时可能需要进行扩容。其次,在面临服务器故障的情况下,哈希映射错误可能会发生,进而导致请求错误的分片。为了解决该问题,引入了一致性哈希算法。

3、一致性哈希算法作为一种解决哈希分片中扩容问题的方案,其特性允许在局部区域进行扩容而不干扰整个集群的分片。由于一致性哈希算法的不通用性,显著限制了其灵活性和可控性。具体而言,一致性哈希算法的自动触发和控制机制较为局限,使得系统管理员难以干预或手动调整分片的过程,增加了人为控制的难度,无法按需调整分片。尤其在需要手动处本文档来自技高网...

【技术保护点】

1.一种数据脱敏方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述构造出所述敏感数据的数据血缘关系图,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述待脱敏的敏感数据进行数据血缘关系探查,得到各个字段之间的流转关系,包括:

4.根据权利要求1所述的方法,其特征在于,所述对所述数据血缘关系图中的各个字段进行识别,得到所述数据血缘关系图中的各个敏感字段以及各个敏感字段的类型,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于各个字段对应的目标识别模版对各个字段进行识别,得到所述数据血缘关系图中的...

【技术特征摘要】

1.一种数据脱敏方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述构造出所述敏感数据的数据血缘关系图,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述待脱敏的敏感数据进行数据血缘关系探查,得到各个字段之间的流转关系,包括:

4.根据权利要求1所述的方法,其特征在于,所述对所述数据血缘关系图中的各个字段进行识别,得到所述数据血缘关系图中的各个敏感字段以及各个敏感字段的类型,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于各个字段对应的目标识别模版对各个字段进行识别,得到所述数据血...

【专利技术属性】
技术研发人员:王胜先
申请(专利权)人:北京金山云网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1