System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种信息处理方法及装置、存储介质制造方法及图纸_技高网

一种信息处理方法及装置、存储介质制造方法及图纸

技术编号:41228268 阅读:2 留言:0更新日期:2024-05-09 23:45
本申请实施例公开了一种信息处理方法及装置、存储介质,包括:接收利用数据采集组件在待检测数据库中采集的数据库查询日志;对数据库查询日志进行检测,得到检测结果;在检测结果为待检测数据库中的目标分片对应的目标查询操作为具有风险的操作的情况下,向待检测数据库传输阻断查询指令,以根据阻断查询指令,控制待检测数据库中的目标分片停止执行目标查询操作;目标分片为待检测数据库中的任一个执行分布式查询任务的分片。

【技术实现步骤摘要】

本申请涉及数据库,尤其涉及一种信息处理方法及装置、存储介质


技术介绍

1、clickhouse是一个高性能列式数据库管理系统,广泛应用于大数据分析、实时报表生成等场景。在处理大数据量的结构化查询语言(structured query language,sql)查询时,clickhouse具有出色的性能。然而,在执行大型查询时,可能会遇到一些问题,如内存,中央处理器(central processing unit,cpu)等资源消耗过大、导致性能下降、查询阻塞等。

2、相关技术中,在clickhouse实际运行过程中,常常因为某些大数据量的查询导致瞬间系统资源耗尽,造成查询卡顿,假死等情况,此时就需要工作人员对clickhouse中的查询进行人工检测,确定出异常的查询操作并停止该操作,从而避免clickhouse中的资源大量消耗,不会造成查询卡顿,假死等情况,使得clickhouse中的其他查询操作可以正常执行。由于人工检测的过程需要clickhouse先表现出查询卡顿,假死等现象,然后才能人工介入进行处理,如此,降低了在clickhouse中查询时的查询效率,即降低了在数据库中查询时的查询效率。


技术实现思路

1、为解决上述技术问题,本申请实施例期望提供一种信息处理方法及装置、存储介质,能够提高在数据库中查询时的查询效率。

2、本申请的技术方案是这样实现的:

3、本申请实施例提供一种信息处理方法,所述信息处理方法包括:

4、接收利用数据采集组件在待检测数据库中采集的数据库查询日志;

5、对所述数据库查询日志进行检测,得到检测结果;

6、在所述检测结果为所述待检测数据库中的目标分片对应的目标查询操作为具有风险的操作的情况下,向所述待检测数据库传输阻断查询指令,以根据所述阻断查询指令,控制所述待检测数据库中的目标分片停止执行所述目标查询操作;所述目标分片为所述待检测数据库中的任一个执行分布式查询任务的分片。

7、本申请实施例提供了一种信息处理装置,所述装置包括:

8、接收单元,用于接收利用数据采集组件在待检测数据库中采集的数据库查询日志;

9、检测单元,用于对所述数据库查询日志进行检测,得到检测结果;

10、传输单元,用于在所述检测结果为所述待检测数据库中的目标分片对应的目标查询操作为具有风险的操作的情况下,向所述待检测数据库传输阻断查询指令,以根据所述阻断查询指令,控制所述待检测数据库中的目标分片停止执行所述目标查询操作;所述目标分片为所述待检测数据库中的任一个执行分布式查询任务的分片。

11、本申请实施例提供了一种信息处理装置,所述装置包括:

12、存储器、处理器和通信总线,所述存储器通过所述通信总线与所述处理器进行通信,所述存储器存储所述处理器可执行的信息处理的程序,当所述信息处理的程序被执行时,通过所述处理器执行上述所述的信息处理方法。

13、本申请实施例提供了一种存储介质,其上存储有计算机程序,应用于信息处理装置,其特征在于,该计算机程序被处理器执行时实现上述所述的信息处理方法。

14、本申请实施例提供了一种信息处理方法及装置、存储介质,信息处理方法包括:接收利用数据采集组件在待检测数据库中采集的数据库查询日志;对数据库查询日志进行检测,得到检测结果;在检测结果为待检测数据库中的目标分片对应的目标查询操作为具有风险的操作的情况下,向待检测数据库传输阻断查询指令,以根据阻断查询指令,控制待检测数据库中的目标分片停止执行目标查询操作;目标分片为待检测数据库中的任一个执行分布式查询任务的分片。采用上述方法实现方案,信息处理装置通过接收利用数据采集组件在待检测数据库中采集的数据库查询日志,对数据库查询日志进行检测,确定出数据库查询日志对应的目标查询操作是否为存在风险的查询操作,即得到检测结果,以便在检测结果为待检测数据库中的目标分片对应的目标查询操作为具有风险的操作的情况下,可以及时向待检测数据库传输阻断查询指令,以利用阻断查询指令来阻断待检测数据库中的目标查询操作,使得待检测数据库中的其他查询操作可以正常执行,提高了在数据库中查询时的查询效率。

本文档来自技高网...

【技术保护点】

1.一种信息处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述数据库查询日志进行检测,得到检测结果,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述数据库查询语句和所述执行计划日志进行检测,得到所述检测结果,包括:

4.根据权利要求3所述的方法,其特征在于,所述对所述数据库查询语句进行语法检测,得到语法检测结果之后,所述方法还包括:

5.根据权利要求3所述的方法,其特征在于,所述检测所述数据库查询语句中是否携带查询限制条件之后,所述方法还包括:

6.根据权利要求3所述的方法,其特征在于,所述检测所述限制条件是否与数据库查询语句的第一预设限制规范匹配之后,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述向所述待检测数据库传输阻断查询指令之前,所述方法还包括:

8.一种信息处理装置,其特征在于,所述装置包括:

9.一种信息处理装置,其特征在于,所述装置包括:

10.一种存储介质,其上存储有计算机程序,应用于信息处理装置,其特征在于,该计算机程序被处理器执行时实现权利要求1至7任一项所述的方法。

...

【技术特征摘要】

1.一种信息处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述数据库查询日志进行检测,得到检测结果,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述数据库查询语句和所述执行计划日志进行检测,得到所述检测结果,包括:

4.根据权利要求3所述的方法,其特征在于,所述对所述数据库查询语句进行语法检测,得到语法检测结果之后,所述方法还包括:

5.根据权利要求3所述的方法,其特征在于,所述检测所述数据库查询语句中是否携带查询限制条件之后,所述方法...

【专利技术属性】
技术研发人员:张宁
申请(专利权)人:京东科技控股股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1