一种MySQL慢SQL日志实时收集和优化的方法及系统技术方案

本发明专利技术公开了一种MySQL慢SQL日志实时收集和优化的方法及系统，方法包括：对MySQL中的日志文件进行自动解析，收集到慢SQL日志；对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本发明专利技术通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。

【技术实现步骤摘要】
一种MySQL慢SQL日志实时收集和优化的方法及系统
本专利技术涉及数据处理
，尤其涉及一种MySQL慢SQL日志实时收集和优化的方法及系统。
技术介绍
目前，对于MySQL(关系型数据库管理系统)慢SQL(StructuredQueryLanguage，结构化查询语言)日志的收集、分析主要依赖pt-query-digest、mysqldumpslow等工具，可以方便对单实例的慢SQL日志文件进行统计聚合，但无法对集群或者某个组合的多个实例进行集中分析统计聚合，使用此类工具很难做到慢SQL日志的实时收集分析，一般都是定时分析统计。另外强依赖数据库管理员人工去对SQL日志进行解析，或者人工用开源工具去查看优化建议，并通知业务负责人进行优化。整个优化过程效率很低，在业务越来越多以及变更越来越频繁时无法及时发现慢SQL日志。因此，如何快速的收集慢SQL日志，以及如何提高慢SQL日志的优化效率，是一项亟待解决的问题。
技术实现思路
有鉴于此，本专利技术提供了一种MySQL慢SQL日志实时收集和优化的方法，能够快速的收集慢SQL日志，以及提高慢SQL日志的优化效率。本专利技术提供了一种MySQL慢SQL日志实时收集和优化的方法，包括：对MySQL中的日志文件进行自动解析，收集到慢SQL日志；对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。优选地，所述对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议，包括：对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；获取产生所述慢SQL日志的集群信息和业务信息；对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。优选地，所述方法还包括：对收集到的所述慢SQL日志进行展示。优选地，所述方法还包括：当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。优选地，所述方法还包括：当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。一种MySQL慢SQL日志实时收集和优化的系统，包括：收集模块，用于对MySQL中的日志文件进行自动解析，收集到慢SQL日志；分析模块，用于对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；发送模块，用于将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。优选地，所述分析模块包括：解析单元，用于对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；签名单元，用于对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；获取单元，用于获取产生所述慢SQL日志的集群信息和业务信息；分析单元，用于对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。优选地，所述系统还包括：展示模块，用于对收集到的所述慢SQL日志进行展示。优选地，所述系统还包括：报警模块，用于当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。优选地，所述报警模块还用于：当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。综上所述，本专利技术公开了一种MySQL慢SQL日志实时收集和优化的方法，首先对MySQL中的日志文件进行自动解析，收集到慢SQL日志；然后对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本专利技术通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的方法实施例1的方法流程图；图2为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的方法实施例2的方法流程图；图3为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的方法实施例3的方法流程图；图4为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的系统实施例1的结构示意图；图5为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的系统实施例2的结构示意图；图6为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的系统实施例3的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1所示，为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的方法实施例1的方法流程图，所述方法可以包括以下步骤：S101、对MySQL中的日志文件进行自动解析，收集到慢SQL日志；当需要实现慢SQL日志的实时收集和优化时，通过在每个MySQL实例所在机器部署的logParser程序对MySQL中的日志文件进行自动解析，收集到慢SQL日志。S102、对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；在收集到慢SQL日志后，进一步对收集到的每个慢SQL日志进行分析，得到每个慢SQL日志对应的优化建议。S103、将得到的慢SQL日志的优化建议自动发送给相关业务负责人。然后，将得到的慢SQL日志的优化建议字段发送给相关业务负责人，以便相关业务负责人根据接收到的优化建议对对应的慢SQL日志进行优化。综上所述，在上述实施例中，首先对MySQL中的日志文件进行自动解析，收集到慢SQL日志；然后对收集到的慢SQL日志进行分析，得到慢SQL日志的优化建议；将得到的慢SQL日志的优化建议自动发送给相关业务负责人。本专利技术通过对MySQL中的日志文件进行自动解析，能够快速的收集到慢SQL日志；以及对慢SQL日志分析得到的优化建议自动的发送给相关业务负责人，提高了慢SQL日志的优化效率。如图2所示，为本专利技术公开的一种MySQL慢SQL日志实时收集和优化的方法实施例2的方法流程图，所述方法可以包括以下步骤：S201、对MySQL中的日志文件进行自动解析，收集到慢SQL本文档来自技高网...

【技术保护点】
1.一种MySQL慢SQL日志实时收集和优化的方法，其特征在于，包括：/n对MySQL中的日志文件进行自动解析，收集到慢SQL日志；/n对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；/n将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。/n

【技术特征摘要】
1.一种MySQL慢SQL日志实时收集和优化的方法，其特征在于，包括：
对MySQL中的日志文件进行自动解析，收集到慢SQL日志；
对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议；
将得到的所述慢SQL日志的优化建议自动发送给相关业务负责人。


2.根据权利要求1所述的方法，其特征在于，所述对收集到的所述慢SQL日志进行分析，得到所述慢SQL日志的优化建议，包括：
对所述慢SQL日志进行解析，得到解析后的慢SQL日志信息；
对所述慢SQL日志进行签名，得到所述慢SQL日志的签名信息；
获取产生所述慢SQL日志的集群信息和业务信息；
对所述解析后的慢SQL日志信息、所述慢SQL日志的签名信息、所述集群信息和业务信息进行分析，得到所述慢SQL日志的优化建议。


3.根据权利要求2所述的方法，其特征在于，还包括：
对收集到的所述慢SQL日志进行展示。


4.根据权利要求3所述的方法，其特征在于，还包括：
当有新增慢SQL日志时，将新增的慢SQL日志报警到相关业务负责人。


5.根据权利要求4所述的方法，其特征在于，还包括：
当慢SQL日志量比例增长异常时，将异常信息报警到相关业务负责人。


6.一种MySQL慢SQL日...

【专利技术属性】
技术研发人员：丁国兴，马莉，
申请(专利权)人：湖南快乐阳光互动娱乐传媒有限公司，
类型：发明
国别省市：湖南;43