【技术实现步骤摘要】
本专利技术涉及数据信息监控，特别涉及一种三方数据平台的异常事故监控方法及系统。
技术介绍
1、目前，随着各个行业对大数据的认识不断加深，大数据的战略意义及重要性也在不断的展现，而战略的完成度则大大的依赖于产品的稳定性；
2、随着产品的多元化逐渐体现，传统的数据库监控将无法及时发现系统运行过程中潜在的问题，容易造成数据库数据丢失，给企业带来影响，而且数据复杂和多元增加了运维人员的工作，导致监控不全面，效率低下等问题；
3、为了更好地巩固产品的稳定性，需要将相关业务数据导入可视化的监控系统，通过不同的指标和数据得出相应的结论，从而在可控的时间范围内，超前的找出问题并解决问题。
技术实现思路
1、本专利技术提供一种三方数据平台的异常事故监控方法及系统，用以通过对发生事故的数据源及调用此数据源评分的客户机构进行全方位、多角度、跨时间的实时监控，得以及时了解异常事故的原因及影响，总结规律，便于杜绝事故的再次发生，并将对业务的影响最小化，以保障各条业务线正常且稳定的运行。
2、本专利技术提供了一种三方数据平台的异常事故监控方法，包括：
3、步骤1：采集三方数据平台对于数据源的数据源子分以及总评分，并基于数据源子分以及总评分对数据源进行预处理；
4、步骤2：基于预处理结果确定对数据源的监控维度，并基于所述监控维度对数据源进行监控，且将监控结果进行可视化处理；
5、步骤3：获取筛选指标，并基于筛选指标对可视化处理后的数据源进行
6、优选的，一种三方数据平台的异常事故监控方法，步骤1中，采集三方数据平台对于数据源的数据源子分以及总评分，包括：
7、获取预设数据采集任务，并对所述数据采集任务进行分析，得到所述预设数据采集任务对应的待采集数据源的数据属性以及对待采集数据源的采集时间段；
8、基于所述数据属性确定所述待采集数据源对应的目标三方数据平台，并访问所述目标三方数据平台的数据库；
9、基于所述采集时间段根据所述数据属性从所述目标三方数据平台的数据库中匹配待采集数据源，并提取所述目标三方数据平台对所述待采集数据源的数据源子分以及总评分。
10、优选的，一种三方数据平台的异常事故监控方法，提取所述目标三方数据平台对所述待采集数据源的数据源子分以及总评分，包括：
11、获取采集到的待采集数据源，并提取所述待采集数据源的数据特征，其中，所述待采集数据源至少为一种；
12、基于所述数据特征对所述待采集数据源进行聚类处理，并基于聚类结果确定每一类的数据中心，其中，每一类对应一个数据中心；
13、确定待采集数据源与各数据中心之间的汉明距离，且在汉明聚类小于预设阈值的待采集数据源对对应的数据中心归为一类，并将所述待采集数据源的数据源子分以及总评分分别于对应的类别进行关联。
14、优选的，一种三方数据平台的异常事故监控方法，步骤1中，基于数据源子分以及总评分对数据源进行预处理，包括：
15、获取三方数据平台对于数据源的数据源子分以及总评分，同时，获取三方数据平台对数据源的基准数据源子分以及基准总评分；
16、将所述数据源的数据源子分以及总评分分别与对应的基准数据源子分以及基准总评分进行做差运算，得到目标差值，并将所述目标差值与预设差值阈值进行比较；
17、若存在目标差值大于预设差值阈值，则判定当前数据源的数据源子分以及总评分存在异常，并对所述当前数据源的数据源子分以及总评分填充为预设指定数值；
18、否则，判定当前数据源的数据源子分以及总评分无异常。
19、优选的，一种三方数据平台的异常事故监控方法，步骤2中，基于预处理结果确定对数据源的监控维度，包括：调用量、均分、击中率、可打分率、超时比率以及影响机构数。
20、优选的，一种三方数据平台的异常事故监控方法，步骤2中，基于预处理结果确定对数据源的监控维度，并基于所述监控维度对数据源进行监控，且将监控结果进行可视化处理，包括：
21、获取对数据源的监控维度，并基于所述监控维度对所述数据源进行不同维度的监控，得到所述数据源分别在数据源层以及总评分层中的不同监控维度下的取值，其中，每一监控维度包括中少两组取值；
22、基于所述取值绘制数据源对应的异常事故现象概览图以及异常事故影响概览图，具体步骤包括：
23、其中，绘制数据源对应的异常事故现象概览图，包括：
24、获取数据源的数据类型，并基于所述数据类型生成第一可视化概览底图，同时，获取数据源分别在数据源层以及总评分层中的不同监控维度下的取值；
25、基于所述取值将所述可视化概览底图划分为第一可视化图像区域和第二可视化图像区域，并将数据源分别在数据源层以及总评分层中的取值与所述第一可视化图像区域以及第二可视化图像区域进行关联；
26、基于关联结果将所述数据源在数据源层以及总评分层中的取值分别转换为对应的二维坐标，并基于所述二维坐标得到数据源在数据源层以及总评分层中的不同监控维度下的折线图；
27、基于第一预设rgb色号分别对不同监控维度下的折线图进行色号设置，并基于设置结果分别与对应的第一可视化图像区域和第二可视化图像区域进行叠加，得到所述数据源对应的异常事故现象概览图；
28、其中，绘制数据源对应的异常事故影响概览图，包括：
29、基于数据源分别在数据源层以及总评分层中的不同监控维度下的取值确定异常事故对应的待展示数据组，并基于所述待展示数据组生成第二可视化概览底图；
30、提取所述待展示数据组的展示项目类型，并基于所述展示项目类型将所述第二可视化概览底图划分为第一区域、第二区域以及第三区域；
31、基于第一区域生成异常事故的影响总览图，基于第二区域生成影响总览图的详细图表，同时，基于第三区域生成影响总览图的详细报表；
32、基于第二预设rgb色号分别对所述影响总览图、影响总览图的详细图表以及影响总览图的详细报表设置对应的色号，并基于设置结果与所述第二可视化概览底图进行融合，得到异常事故影响概览图；
33、基于所述异常事故现象概览图以及异常事故影响概览图完成对监控结果进行可视化处理。
34、优选的，一种三方数据平台的异常事故监控方法，步骤3中，获取筛选指标，并基于筛选指标对可视化处理后的数据源进行筛选定位，确定异常数据事故，包括：
35、获取对监控结果进行可视化处理后的可视化处理结果，同时，获取对监控结果的筛选指标，并基于所述筛选指标生成目标筛选器，其中，所述筛选指标至少为一个；
36、基于所述筛选器确定待分析的数据源编号以及监控时间长度，并确定所述数据源编号对应的数据源子分以及总评分在监控时间长度内的变化趋势；
37、确定所述变化趋势中的异常变化趋势对应的异常图像区域，并基于预设标本文档来自技高网...
【技术保护点】
1.一种三方数据平台的异常事故监控方法，其特征在于，包括：
2.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤1中，采集三方数据平台对于数据源的数据源子分以及总评分，包括：
3.根据权利要求2所述的一种三方数据平台的异常事故监控方法，其特征在于，提取所述目标三方数据平台对所述待采集数据源的数据源子分以及总评分，包括：
4.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤1中，基于数据源子分以及总评分对数据源进行预处理，包括：
5.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤2中，基于预处理结果确定对数据源的监控维度，包括：调用量、均分、击中率、可打分率、超时比率以及影响机构数。
6.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤2中，基于预处理结果确定对数据源的监控维度，并基于所述监控维度对数据源进行监控，且将监控结果进行可视化处理，包括：
7.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征
8.根据权利要求7所述的一种三方数据平台的异常事故监控方法，其特征在于，将所述监控报告传输至管理终端，包括：
9.根据权利要求7所述的一种三方数据平台的异常事故监控方法，其特征在于，将所述监控报告传输至管理终端，包括：
10.一种三方数据平台的异常事故监控系统，其特征在于，包括：
...【技术特征摘要】
1.一种三方数据平台的异常事故监控方法，其特征在于，包括：
2.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤1中，采集三方数据平台对于数据源的数据源子分以及总评分，包括：
3.根据权利要求2所述的一种三方数据平台的异常事故监控方法，其特征在于，提取所述目标三方数据平台对所述待采集数据源的数据源子分以及总评分，包括：
4.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤1中，基于数据源子分以及总评分对数据源进行预处理，包括：
5.根据权利要求1所述的一种三方数据平台的异常事故监控方法，其特征在于，步骤2中，基于预处理结果确定对数据源的监控维度，包括：调用量、均分、击中率、可打分率、超时比率以及影响机构数...
【专利技术属性】
技术研发人员：王世今，龙泳先，孙冬琦，
申请(专利权)人：睿智合创北京科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。