Redis慢日志的存储、展示方法、装置、设备和介质制造方法及图纸

本发明专利技术公开了一种Redis慢日志的存储、展示方法、装置、设备和介质。所述Redis慢日志的存储方法包括：从Redis存储设备中，获取至少一项慢日志；根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据；调用服务器接口，将各所述目标慢日志上传到日志服务器进行存储，所存储的所述目标慢日志用于根据用户的慢日志查询请求进行展示。使用本发明专利技术的技术方案，可以将Redis慢日志信息进行持久化保存和图形化展示，从而为系统调优和故障调查提供便利。

Redis slow log storage, display methods, devices, devices and media

【技术实现步骤摘要】
Redis慢日志的存储、展示方法、装置、设备和介质
本专利技术实施例涉及数据处理技术，尤其涉及一种Redis慢日志的存储、展示方法、装置、设备和介质。
技术介绍
慢日志存储机制是Redis用于记录执行时间过长请求的机制，能帮助运维人员追踪、分析问题。现有技术中，为提高慢日志的读写效率，以及不影响Redis的性能，一般将慢日志保存在内存中。专利技术人在实现本专利技术的过程中，发现现有技术存在以下缺陷：采用将Redis慢日志保存在内存中的方式时，为慢日志分配的内存空间有限，无法完整地保存Redis慢日志，也无法离线查看慢日志，为查看慢日志以进行系统调优和故障调查带来了不便。
技术实现思路
本专利技术实施例提供一种Redis慢日志的存储、展示方法、装置、设备和存储介质，以实现将Redis慢日志信息进行持久化保存和图形化展示，从而为系统调优和故障调查提供便利。第一方面，本专利技术实施例提供了一种Redis慢日志的存储方法，该方法包括：从Redis存储设备中，获取至少一项慢日志；根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据；调用服务器接口，将各所述目标慢日志上传到日志服务器进行存储，所存储的所述目标慢日志用于根据用户的慢日志查询请求进行展示。第二方面，本专利技术实施例还提供了一种Redis慢日志的展示方法，该方法包括：通过服务器接口，获取客户端上传的目标慢日志，所述目标慢日志为客户端将从Redis存储设备获取的慢日志进行格式转换后得到的，所述目标慢日志中包括至少一个键值对形式的日志数据；将所述目标慢日志存储于后台数据库中；获取用户的慢日志查询请求，将所述慢日志查询请求的查询条件与所述数据库中各目标慢日志进行匹配，筛选出与所述查询条件匹配的目标慢日志进行展示。第三方面，本专利技术实施例还提供了一种Redis慢日志的存储装置，该装置包括：慢日志获取模块，用于从Redis存储设备中，获取至少一项慢日志；慢日志格式转换模块，用于根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据；目标慢日志上传模块，用于调用服务器接口，将各所述目标慢日志上传到日志服务器进行存储，所存储的所述目标慢日志用于根据用户的慢日志查询请求进行展示。第四方面，本专利技术实施例还提供了一种Redis慢日志的展示装置，该装置包括：目标慢日志获取模块，用于通过服务器接口，获取客户端上传的目标慢日志，所述目标慢日志为客户端将从Redis存储设备获取的慢日志进行格式转换后得到的，所述目标慢日志中包括至少一个键值对形式的日志数据；目标慢日志存储模块，用于将所述目标慢日志存储于后台数据库中；目标慢日志展示模块，用于获取用户的慢日志查询请求，将所述慢日志查询请求的查询条件与所述数据库中各目标慢日志进行匹配，筛选出与所述查询条件匹配的目标慢日志进行展示。第五方面，本专利技术实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现本专利技术实施例中任一所述的Redis慢日志的存储方法。第六方面，本专利技术实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现本专利技术实施例中任一所述的Redis慢日志的展示方法。第七方面，本专利技术实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行本专利技术实施例中任一所述的Redis慢日志的存储方法。第八方面，本专利技术实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行本专利技术实施例中任一所述的Redis慢日志的展示方法。本专利技术通过从Redis存储设备中获取慢日志，并对慢日志进行格式转换，将转换后得到的键值对形式的目标慢日志上传到服务器；服务器获取目标慢日志后，将目标慢日志存储于后台数据库中，并根据用户的慢日志查询请求，筛选出与查询条件匹配的目标慢日志进行展示。解决了现有技术中慢日志只保存在内存中，无法完整地保存Redis慢日志，也无法离线查看慢日志的问题。实现了将Redis慢日志信息进行持久化保存和图形化展示，从而为系统调优和故障调查提供了便利。附图说明图1是本专利技术实施例一中的一种Redis慢日志的存储方法的流程图；图2a是本专利技术实施例二中的一种Redis慢日志的存储方法的流程图；图2b是适用于本专利技术实施例中的Redis慢日志信息的处理流程图；图3是本专利技术实施例三中的一种Redis慢日志的展示方法的流程图；图4是本专利技术实施例四中的一种Redis慢日志的展示方法的流程图；图5是本专利技术实施例五中的一种Redis慢日志的存储装置的结构示意图；图6是本专利技术实施例六中的一种Redis慢日志的展示装置的结构示意图；图7是本专利技术实施例七中的一种计算机设备的结构示意图。具体实施方式下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。实施例一图1为本专利技术实施例一提供的一种Redis慢日志的存储方法的流程图，本实施例可适用于需要对Redis慢日志进行持久化保存，以便运维人员进行系统调优和故障调查的情况，该方法可以由Redis慢日志的存储装置来执行，该装置可以由软件和/或硬件来实现，并一般可以集成在客户端中。相应的，如图1所示，本专利技术实施例具体包括如下步骤：步骤110、从Redis存储设备中，获取至少一项慢日志。其中，Redis存储设备可以为基于key-value键值对的数据库存储系统，可以存储字符串(string)、哈希表(hash)、列表(list)、集合(set)、有序集合(sortedset)等。慢日志可以帮助开发和运维人员定位系统存在的慢操作。系统在命令执行前后计算每条命令的执行时间，当超过预设时间阀值，就将这条命令的相关信息(慢查询ID，发生时间戳，耗时，命令的详细信息)记录下来，形成慢日志，慢日志一般保存在内存中。在本专利技术实施例中，要对Redis慢日志进行持久化保存，首先需要从Redis存储设备中获取慢日志。步骤120、根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据。其中，日志数据可以为慢日志中记载的相关信息。日志数据可以为若干行，每行的日志数据可以表示不同的内容。在一个具体的示例中，慢日志的日志数据中，第一行可以表示慢日志的唯一标识符，第二行可以表示慢日本文档来自技高网...

【技术保护点】
1.一种Redis慢日志的存储方法，其特征在于，包括：/n从Redis存储设备中，获取至少一项慢日志；/n根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据；/n调用服务器接口，将各所述目标慢日志上传到日志服务器进行存储，所存储的所述目标慢日志用于根据用户的慢日志查询请求进行展示。/n

【技术特征摘要】
1.一种Redis慢日志的存储方法，其特征在于，包括：
从Redis存储设备中，获取至少一项慢日志；
根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，所述目标慢日志中包括至少一个键值对形式的日志数据；
调用服务器接口，将各所述目标慢日志上传到日志服务器进行存储，所存储的所述目标慢日志用于根据用户的慢日志查询请求进行展示。


2.根据权利要求1所述的方法，其特征在于，从Redis存储设备中，获取至少一项慢日志，包括：
每隔预设等待时长，从所述Redis存储设备中获取当前存储的全部慢日志；
以当前系统时间为时间起点，沿时间延伸方向的反方向选取所述等待时长作为参考时间段；
在全部慢日志中，筛选出生产时间位于所述参考时间段内的所述慢日志。


3.根据权利要求1所述的方法，其特征在于，根据所述慢日志中日志数据的结构，将各所述慢日志进行格式转换，得到目标慢日志，包括：
获取目标慢日志模板，所述目标慢日志模板中包括至少一个待填充键值的键值对模板，所述键值对模板中的键名与所述慢日志中的日志行相关联；
在当前处理的慢日志中，获取与所述目标慢日志模板匹配的各日志行，并根据所述各日志行的日志数据生成键值对应填充于所述目标慢日志模板中，得到所述目标慢日志。


4.根据权利要求3所述的方法，其特征在于，所述目标慢日志模板中的键值对模板中的键名包括：网际协议地址以及端口号；与所述网际协议地址以及端口号的日志数据位于所述慢日志中的同一日志行中；
在当前处理的慢日志中，获取与所述目标慢日志模板匹配的各日志行分别对应的日志数据，并根据所述日志数据生成键值对应填充于所述目标慢日志模板中，得到所述目标慢日志，包括：
获取包含所述网际协议地址以及端口号的目标日志数据，并识别所述目标日志数据中包含的分隔符；
根据所述分隔符在所述目标日志数据中分别确定与所述网际协议地址对应的第一键值，以及与所述端口号对应的第二键值；
将所述第一键值与所述第二键值对应填充于所述目标慢日志模板中。


5.一种Redis慢日志的展示方法，其特征在于，包括：
通过服务器接口，获取客户端上传的目标慢日志，所述目标慢日志为客户端将从Redis存储设备获取的慢日志进行格式转换后得到的，所述目标慢日志中包括至少一个键值对形式的日志数据；
将所述目标慢日志存储于后台数据库中；
获取用户的慢日志查询请求，将...

【专利技术属性】
技术研发人员：张振威，
申请(专利权)人：广州虎牙科技有限公司，
类型：发明
国别省市：广东;44