System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及数据处理,尤其涉及一种单租户模式异常数据探测方法。
技术介绍
1、单租户模式中,每个客户都会有独立的软件和硬件环境支撑系统运行,每个数据库仅存储来自一个租户的数据,因此单租户模式通常也被称为多实例架构(multipleinstance)。单租户模式下,不同客户之间的应用软件和数据一般通过硬件来进行隔离,因此单租户模式被广泛应用在客户需要支持定制化的应用场景。
2、在单租户模式的系统的部署结构下,系统存在数万个不同类型的数据库。这些数据库中存在总量超过百亿的业务数据。数据之间存在着错综复杂的关系。复杂业务系统可能在一些异常情况下会产生不正确的数据会给客户造成业务损失。
3、在单租户的模式的系统中,每个租户的数据是千差万变的。但是具体到某个类型的数据,又体现出明显分类相似度。一旦某个客户的某个类型的数据,在趋势,分布等方面异于分类的的情况。往往说明客户的业务流程,或者系统设计上存在问题。这些问题如果不及时纠正,就会给带来损失,也会让产品设计方向出现战略上的误判。但是,这些问题需要从百亿级别的数据中找出来,并且持续监控困难重重。
技术实现思路
1、本专利技术提供了一种单租户模式异常数据探测方法,可以快速检测出单租户模式下百亿级别数据中的异常数据。
2、为了实现本专利技术的目的,所采用的技术方案是:单租户模式异常数据探测方法,包括精确探测和统计探测,精确探测包括如下步骤:
3、s1-1、按照规则集合执行数据探测;
4
5、s1-3、生成告警报告;
6、s1-4、生成纠错任务;
7、统计探测包括如下步骤:
8、s2-1、汇总数据,数据包括精确探测的结果数据、单租户数据的趋势情况和单租户数据的分布情况;
9、s2-2、判断数据是否异常,按照数据的异常程度生成预警报告或规则调整建议报告;
10、s2-3、对于步骤s2-2中生成的预警报告生成问题分析任务,对规则调整建议报告生成规则评审任务;
11、s2-4、跟进问题分析任务;对生成的规则评审任务修正规则或者检测方式。
12、作为本专利技术的优化方案,按照规则集合执行数据探测时,规则集合包括三种模式,第一种模式为结果数据由过程数据获得;第二种模式为数据存在明显规则;第三种模式为数据的一致性。
13、作为本专利技术的优化方案,在执行第一种模式时,在单租户的数据中,提取关键结果数据,由过程数据推导得出最终结果数据,计算关键结果数据与最终结果数据的符合度。
14、作为本专利技术的优化方案,在执行统计探测时,数据是连续变化的,当数据出现陡增或者陡降说明存在异常数据。
15、本专利技术具有积极的效果:1)本专利技术通过精确探测和统计探测两种方式,接合两种方式的优点,能够快速准确的找到具体问题的点,既可以定位问题也可以定义问题,实现异常数据的探测;
16、2)本专利技术能够对单租户模式百亿级别,同时千差万别的数据,快速探测出异常数据并进行及时纠正,有效的避免了损失。
本文档来自技高网...【技术保护点】
1.单租户模式异常数据探测方法,其特征在于:包括精确探测和统计探测,所述的精确探测包括如下步骤:
2.根据权利要求1所述的单租户模式异常数据探测方法,其特征在于:所述按照规则集合执行数据探测时,规则集合包括三种模式,第一种模式为结果数据由过程数据获得;第二种模式为数据存在明显规则;第三种模式为数据的一致性。
3.根据权利要求2所述的单租户模式异常数据探测方法,其特征在于:在执行第一种模式时,在单租户的数据中,提取关键结果数据,由过程数据推导得出最终结果数据,计算关键结果数据与最终结果数据的符合度。
4.根据权利要求1所述的单租户模式异常数据探测方法,其特征在于:在执行统计探测时,数据是连续变化的,当数据出现陡增或者陡降说明存在异常数据。
【技术特征摘要】
1.单租户模式异常数据探测方法,其特征在于:包括精确探测和统计探测,所述的精确探测包括如下步骤:
2.根据权利要求1所述的单租户模式异常数据探测方法,其特征在于:所述按照规则集合执行数据探测时,规则集合包括三种模式,第一种模式为结果数据由过程数据获得;第二种模式为数据存在明显规则;第三种模式为数据的一致性。
3.根...
【专利技术属性】
技术研发人员:王宏祥,汤定一,
申请(专利权)人:舟谱数据技术南京有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。