数据规则挖掘方法及装置制造方法及图纸

技术编号:26342485 阅读:30 留言:0更新日期:2020-11-13 20:34
本说明书实施例提供了数据规则挖掘方法及装置,其中,一种数据规则挖掘方法包括:获取远程过程调用消息的消息参数;对所述远程过程调用消息的消息参数进行预处理,获得中间参数;对所述中间参数进行组合,将组合获得的数据规则中满足业务条件的数据规则作为候选规则;基于所述中间参数对所述候选规则进行验证,获得所述候选规则的支持度和置信度;在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则。

Data rule mining method and device

【技术实现步骤摘要】
数据规则挖掘方法及装置
本文件涉及数据挖掘
,尤其涉及一种数据规则挖掘方法及装置。
技术介绍
随着互联网技术的发展,互联网中产生的数据可能蕴含着大量的价值,许多业务场景下,如何有效的对业务系统产生的业务数据进行挖掘,成为当下业务处理的重点。数据挖掘是指从业务系统产生的大量业务数据中通过算法搜索隐藏于其中信息的过程,而业务处理过程中数据挖掘的重点,则是挖掘业务数据中有价值的业务规则,以对业务系统后续运行过程中产生的业务数据的处理提供帮助。
技术实现思路
本说明书一个或多个实施例提供了一种数据规则挖掘方法。所述数据规则挖掘方法包括:获取远程过程调用消息的消息参数。对所述远程过程调用消息的消息参数进行预处理,获得中间参数。对所述中间参数进行组合,将组合获得的数据规则中满足业务条件的数据规则作为候选规则。基于所述中间参数对所述候选规则进行验证,获得所述候选规则的支持度和置信度。在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则。本说明书一个或多个实施例提供了一种数据规则挖掘装置,包括:消息参数获取模块本文档来自技高网...

【技术保护点】
1.一种数据规则挖掘方法,包括:/n获取远程过程调用消息的消息参数;/n对所述远程过程调用消息的消息参数进行预处理,获得中间参数;/n对所述中间参数进行组合,将组合获得的数据规则中满足业务条件的数据规则作为候选规则;/n基于所述中间参数对所述候选规则进行验证,获得所述候选规则的支持度和置信度;/n在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则。/n

【技术特征摘要】
1.一种数据规则挖掘方法,包括:
获取远程过程调用消息的消息参数;
对所述远程过程调用消息的消息参数进行预处理,获得中间参数;
对所述中间参数进行组合,将组合获得的数据规则中满足业务条件的数据规则作为候选规则;
基于所述中间参数对所述候选规则进行验证,获得所述候选规则的支持度和置信度;
在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则。


2.根据权利要求1所述的数据规则挖掘方法,应用于数据平台;相应的,所述获取远程过程调用消息的消息参数,包括:
采用数据录制的方式采集调用所述数据平台的远程过程调用请求的请求参数,以及所述数据平台返回的远程过程调用响应的响应参数;
获取所述数据平台调用的后端应用采用埋点的方式采集的远程过程调用请求的应用请求参数,以及所述后端应用返回的远程过程调用响应的应用响应参数。


3.根据权利要求1所述的数据规则挖掘方法,所述对所述远程过程调用消息的消息参数进行预处理,获得中间参数,包括:
将所述消息参数解析为参数域的参数标识与数值域的参数值组成的中间参数;
将所述参数域的参数标识与所述数值域的参数值写入参数数据表;其中,所述参数数据表采用键值对的方式存储参数标识以及对应的参数值。


4.根据权利要求1所述的数据规则挖掘方法,所述对所述中间参数进行组合,将组合获得的数据规则中满足业务条件的数据规则作为候选规则,包括:
对所述中间参数进行采样,获得采样参数;
将所述采样参数组合为数据规则,并将组合获得的数据规则当中参数值相同且满足预设调用关系的数据规则确定为所述候选规则。


5.根据权利要求4所述的数据规则挖掘方法,所述预设调用关系包括下述至少一项:
数据平台的远程过程调用请求与数据平台返回的远程过程调用响应间的调用关系,数据平台的远程过程调用请求与后端应用的远程过程调用请求间的调用关系,数据平台的远程过程调用响应与后端应用的远程过程调用响应间的调用关系。


6.根据权利要求1所述的数据规则挖掘方法,所述基于所述中间参数对所述候选规则进行验证,获得所述候选规则的支持度和置信度,包括:
针对任意一条候选规则,采用如下方式进行验证:
判断所述中间参数所属的远程过程调用消息是否满足所述候选规则的调用关系;
若满足,判断所述中间参数的参数值是否满足所述候选规则的参数关系;
若是,更新所述候选规则的支持度和置信度。


7.根据权利要求6所述的数据规则挖掘方法,若所述判断所述中间参数的参数值是否满足所述候选规则的参数关系子步骤执行后的判断结果为否,剔除所述候选规则。


8.根据权利要求1所述的数据规则挖掘方法,所述在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则,包括:
在所述候选规则中筛选置信度满足置信度阈值的候选规则;
判断筛选出的候选规则的支持度是否大于支持度阈值;
若是,将支持度大于所述支持度阈值的候选规则作为所述目标规则。


9.根据权利要求1所述的数据规则挖掘方法,所述在所述候选规则中筛选支持度和置信度满足预设阈值的候选规则作为目标规则步骤执行之后,还包括:
将所述目标规则转换为数据核对脚本;
将所述数据核对脚本同步至线上存储,以使所述数据脚本在所述线上存储进行数据核对。


10.根据权利要求3所述的数据规则挖掘方法,所述将所述参数域的参数标识与所述数值域的参数值写入参数数据表,包括:
...

【专利技术属性】
技术研发人员:邵开来熊士强牟键
申请(专利权)人:蚂蚁智信杭州信息技术有限公司
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1