一种用于数据库的实时采集方法技术

技术编号:45536335 阅读:9 留言:0更新日期:2025-06-13 17:37
本发明专利技术涉及数据采集技术领域,尤其涉及一种用于数据库的实时采集方法,包括:基于异常频流系数以及兼容影响系数确定数据库状态,根据数据库状态确定调优设置方式;根据高频执行系数以及敏感瓶颈阈值确定调优语句类别,并针对高频影响语句进行调优;根据调优比对系数以及动态负载强度确定待分析变更日志的数据划分方式以获取若干数据片段;根据分发适配度确定数据片段集合,并根据片段差异度以及预延迟系数确定各数据片段集合的分发方式;根据延迟系数以及调节比对系数确定优化方式;本发明专利技术提高变更数据采集效率。

【技术实现步骤摘要】

本专利技术涉及数据采集,尤其涉及一种用于数据库的实时采集方法


技术介绍

1、随着业务系统的复杂化与数据量的指数级增长,数据库中的数据变更面临着采集滞后、同步延迟、实时性不足等严峻问题,导致下游系统无法及时、精准地反映业务动态变化,因此,如何提高变更数据采集效率是本领域技术人员亟待解决的技术问题。

2、中国专利公开号cn114547045a公布了一种基于实时数据库的数据采集存储方法,包括:s1、启动杀毒软件,对数据库进行扫描,确认无任何流氓软件或病毒植入后,启动数据源实时数据库设备数据;s2、通过以restful接口方式的java项目,定时采集数据;s3、采集到接口数据后,分别存储到实时数据表,n小时数据表和历史数据表。由此可见,上述技术方案存在以下问题:无法针对数据库中的语句进行精准调优,在面对复杂查询或高并发场景时,数据库性能瓶颈难以突破,进而导致变更数据采集效率较差。


技术实现思路

1、为此,本专利技术提供一种用于数据库的实时采集方法,用以克服现有技术中无法针对数据库中的语句进行精准调优,在本文档来自技高网...

【技术保护点】

1.一种用于数据库的实时采集方法,其特征在于,包括:

2.根据权利要求1所述的用于数据库的实时采集方法,其特征在于,若数据库状态为异常频流系数大于或等于预设异常频流系数或兼容影响系数大于或等于预设兼容影响系数,则调优设置方式为根据性能负载系数进行循环式调优。

3.根据权利要求2所述的用于数据库的实时采集方法,其特征在于,若数据库状态为异常频流系数小于预设异常频流系数且兼容影响系数小于预设兼容影响系数,则调优设置方式为根据触发影响系数进行触发式调优。

4.根据权利要求3所述的用于数据库的实时采集方法,其特征在于,根据高频执行系数以及敏感瓶颈阈值确定调优语...

【技术特征摘要】

1.一种用于数据库的实时采集方法,其特征在于,包括:

2.根据权利要求1所述的用于数据库的实时采集方法,其特征在于,若数据库状态为异常频流系数大于或等于预设异常频流系数或兼容影响系数大于或等于预设兼容影响系数,则调优设置方式为根据性能负载系数进行循环式调优。

3.根据权利要求2所述的用于数据库的实时采集方法,其特征在于,若数据库状态为异常频流系数小于预设异常频流系数且兼容影响系数小于预设兼容影响系数,则调优设置方式为根据触发影响系数进行触发式调优。

4.根据权利要求3所述的用于数据库的实时采集方法,其特征在于,根据高频执行系数以及敏感瓶颈阈值确定调优语句类别,调优语句类别包括:

5.根据权利要求4所述的用于数据库的实时采集方法,其特征在于,根据调优比对系数以及动态负载强度确定待分析变更日志的数据划分方式,包括:

6.根据权利要求5所述的用于数据库的实时采集方法,其特征在于,若属性...

【专利技术属性】
技术研发人员:高海玲高经郡刘必山
申请(专利权)人:北京科杰科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1