数据库监控方法、装置、电子设备及存储介质制造方法及图纸

技术编号:30312826 阅读:16 留言:0更新日期:2021-10-09 22:55
本公开提供一种数据库监控方法、装置、电子设备及存储介质,数据库监控方法包括:基于预先构建的数据可视化平台,在所述数据可视化平台中安装数据库插件,其中,所述数据库插件链接到目标数据库;基于目标监控对象,在所述数据可视化平台中构建监控脚本,和/或导入预先构建的监控脚本;所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象。本公开实施例的数据库监控方法不仅可以对ClickHouse运行状态及负载情况进行及时监控,而且有助于解决定位业务数据查询瓶颈。而且有助于解决定位业务数据查询瓶颈。而且有助于解决定位业务数据查询瓶颈。

【技术实现步骤摘要】
数据库监控方法、装置、电子设备及存储介质


[0001]本公开涉及数据库
,尤其涉及一种数据库监控方法、装置、电子设备及存储介质。

技术介绍

[0002]ClickHouse是由俄罗斯Yandex公司开发的C++开源高性能OLAP数据库,由于其在数据压缩,多核并行处理,分布式处理,横向水平扩展,支持SQL并且基于向量引擎的优化等特点,在较大吞吐量和存在大数据量的聚合操作的数据处理场景下,ClickHouse无疑成为了较为突出的选择。
[0003]虽然ClickHouse在存储及计算方面表现优秀,但是官方并未提供完善的监控方案,对于一个在生产环境上运行的数据库引擎没有监控无疑是一个灾难,无论在是数据库基础运行数据监控,还是对业务问题定位都造成了很多麻烦。
[0004]因此,如何提供一种解决上述问题的技术方案是本领域技术人员目前需要解决的技术问题。

技术实现思路

[0005]本公开实施例提供一种数据库监控方法、装置、电子设备及存储介质,不仅可以对ClickHouse运行状态及负载情况进行及时监控,而且有助于解决定位业务数据查询瓶颈。
[0006]本公开实施例的第一方面,提供一种数据库监控方法,所述数据库监控方法包括:
[0007]基于预先构建的数据可视化平台,在所述数据可视化平台中安装数据库插件,其中,所述数据库插件链接到目标数据库;
[0008]基于目标监控对象,在所述数据可视化平台中构建监控脚本,和/或导入预先构建的监控脚本;
[0009]所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象。
[0010]在一种可选的实施方式中,所述目标监控对象包括:
[0011]慢日志查询详细信息、数据库及表基础信息、每秒查询率、数据库读写吞吐量、各阶段等待耗时及数据库连接数中至少一种。
[0012]在一种可选的实施方式中,在所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象之后,所述方法还包括:
[0013]获取所述目标监控对象的特征信息,判断所述特征信息是否满足预设报警条件,
[0014]若满足预设报警条件,则向监控系统发送报警信息。
[0015]在一种可选的实施方式中,所述特征信息包括:
[0016]myisam引擎表,指定分区、各个分区的使用率、wsrep

ready标识、error标识、warning标识、进程关闭标识中至少一种。
[0017]本公开实施例的第二方面,提供一种数据库监控装置,所述数据库监控装置包括:
[0018]第一单元,用于基于预先构建的数据可视化平台,在所述数据可视化平台中安装
数据库插件,其中,所述数据库插件链接到目标数据库;
[0019]第二单元,用于基于目标监控对象,在所述数据可视化平台中构建监控脚本,和/或导入预先构建的监控脚本;
[0020]第三单元,用于所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象。
[0021]在一种可选的实施方式中,所述目标监控对象包括:
[0022]慢日志查询详细信息、数据库及表基础信息、每秒查询率、数据库读写吞吐量、各阶段等待耗时及数据库连接数中至少一种。
[0023]在一种可选的实施方式中,所述装置还包括第四单元,所述第四单元用于:
[0024]获取所述目标监控对象的特征信息,判断所述特征信息是否满足预设报警条件,
[0025]若满足预设报警条件,则向监控系统发送报警信息。
[0026]在一种可选的实施方式中,所述特征信息包括:
[0027]myisam引擎表,指定分区、各个分区的使用率、wsrep

ready标识、error标识、warning标识、进程关闭标识中至少一种。
[0028]本公开实施例的第三方面,提供一种电子设备,包括:
[0029]处理器;
[0030]用于存储处理器可执行指令的存储器;
[0031]其中,所述处理器被配置为调用所述存储器存储的指令,以执行前述任意一项所述的方法。
[0032]本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现前述任意一项所述的方法。
[0033]本公开的数据库监控方法,包括基于预先构建的数据可视化平台,在所述数据可视化平台中安装数据库插件,其中,所述数据库插件链接到目标数据库;
[0034]基于目标监控对象,在所述数据可视化平台中构建监控脚本,和/或导入预先构建的监控脚本;
[0035]所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象。
[0036]本公开的数据库监控方法,弥补了ClickHouse在数据库监控方面的漏洞,监控内容涉及慢日志查询详细信息、数据库及表基础信息、QPS、数据库读写吞吐量、各阶段等待耗时及数据库连接数等等。在采用该监控方案后不仅可以对ClickHouse运行状态及负载情况进行及时监控,而且有助于解决定位业务数据查询瓶颈。
附图说明
[0037]图1为本公开实施例数据库监控方法的流程示意图;
[0038]图2为本公开实施例在数据可视化平台中安装数据库插件的示意图;
[0039]图3为本公开实施例数据库监控装置的结构示意图。
具体实施方式
[0040]为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅
仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
[0041]本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
[0042]应当理解,在本公开的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本公开实施例的实施过程构成任何限定。
[0043]应当理解,在本公开中,“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0044]应当理解,在本公开中,“多个”是指两个或两个以上。“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据库监控方法,其特征在于,所述数据库监控方法包括:基于预先构建的数据可视化平台,在所述数据可视化平台中安装数据库插件,其中,所述数据库插件链接到目标数据库;基于目标监控对象,在所述数据可视化平台中构建监控脚本,和/或导入预先构建的监控脚本;所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象。2.根据权利要求1所述的数据库监控方法,其特征在于,所述目标监控对象包括:慢日志查询详细信息、数据库及表基础信息、每秒查询率、数据库读写吞吐量、各阶段等待耗时及数据库连接数中至少一种。3.根据权利要求1所述的数据库监控方法,其特征在于,在所述监控脚本通过所述数据库插件自动监控所述目标数据库的目标监控对象之后,所述方法还包括:获取所述目标监控对象的特征信息,判断所述特征信息是否满足预设报警条件,若满足预设报警条件,则向监控系统发送报警信息。4.根据权利要求3所述的数据库监控方法,其特征在于,所述特征信息包括:myisam引擎表,指定分区、各个分区的使用率、wsrep

ready标识、error标识、warning标识、进程关闭标识中至少一种。5.一种数据库监控装置,其特征在于,所述数据库监控装置包括:第一单元,用于基于预先构建的数据可视化平台,在所述数据可视化平台中安装数据库插件,其中,所述数据库插件链接...

【专利技术属性】
技术研发人员:ꢀ七四专利代理机构
申请(专利权)人:上海众言网络科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1