【技术实现步骤摘要】
本专利技术属于报文数据处理,具体涉及一种无规则报文全自动集市化解析脱敏落表方法、装置及存储介质。
技术介绍
1、各类it系统产出很多是非结构化报文,需要进行解析后才能进行分析读取及使用,这里的报文解析是指把不规则、可视化程度低、查询困难的报文解析成结构化的表单。现有技术中关于报文解析往往都是通过人工写脚本方式进行解析,这样就会导致报文有改动变化需要进行人工开发新的解析脚本,造成很多常规类解析工作需要人工反复写脚本,开发人力投入较多成本较大,每一期开发都意味着需要经过开发、测试、投产、验证等流程,就会导致无法快速响应对数据的查询需求。
技术实现思路
1、本专利技术旨在提供一种无规则报文全自动集市化解析脱敏落表方法、装置及存储介质,以实现对不同结构的各种无规则报文进行全自动集市化统一解析落表,并对敏感信息进行脱敏处理,避免常规类解析工作需要人工反复写同类型脚本以及脱敏字段需人工逐个进行查核而导致的开发人力投入较多成本较大的问题;且集市化落表能够更好的满足数据落表后的查询需求,提高落表数据的复用
...【技术保护点】
1.一种无规则报文全自动集市化解析脱敏落表方法,其特征在于,该方法应用于数据处理设备中,以用于对无规则报文进行全自动集市化落表,并在集市化落表过程中对无规则报文中的敏感字段进行脱敏,所述方法包括:
2.根据权利要求1所述的无规则报文全自动集市化解析脱敏落表方法,其特征在于,所述采集非结构化、不规则的无规则报文并汇总整合成报文集市表包括:
3.根据权利要求1所述的无规则报文全自动集市化解析脱敏落表方法,其特征在于,所述对所述行表式数据进行解析得到多张结构化、前后嵌套的列表式数据包括:将所述行表式数据的当前层级节点中包含的层级属性、字段属性、字段数
...【技术特征摘要】
1.一种无规则报文全自动集市化解析脱敏落表方法,其特征在于,该方法应用于数据处理设备中,以用于对无规则报文进行全自动集市化落表,并在集市化落表过程中对无规则报文中的敏感字段进行脱敏,所述方法包括:
2.根据权利要求1所述的无规则报文全自动集市化解析脱敏落表方法,其特征在于,所述采集非结构化、不规则的无规则报文并汇总整合成报文集市表包括:
3.根据权利要求1所述的无规则报文全自动集市化解析脱敏落表方法,其特征在于,所述对所述行表式数据进行解析得到多张结构化、前后嵌套的列表式数据包括:将所述行表式数据的当前层级节点中包含的层级属性、字段属性、字段数值这些信息进行数据平铺,并设置用于嵌套下一层节点中信息的字段空值,得到当前层级节点对应的列表式数据。
4.根据权利要求1所述的无规则报文全自动集市化解析脱敏落表方法,其特征在于,所述对各所述列式数据表中的敏感信息进行精确查询并加密包括:通过正则表达式匹配的方式识别各所述列式数据表中的敏感信息,对识别出的敏感信息统一进行加密。
5.根据权利要求1所述的无规则报文全自动...
【专利技术属性】
技术研发人员:廖桂杰,吴启煌,张南华,吴柏平,
申请(专利权)人:辽宁振兴银行股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。