分布式文件系统的监控方法、装置、终端及存储介质制造方法及图纸

本发明专利技术提供一种分布式文件系统的监控方法，包括：获取待监测的分布式文件系统输出的日志，识别日志中每行数据的操作类型，根据操作类型对日志中的数据进行归类，对同一操作类型的数据进行划分为不同的档次；计算同一操作类型中每个档次的响应参数；计算所述响应参数与对应预设基线数据的偏差值；当确定每个偏差值都在预设的偏差阈值范围内时，输出分布式文件系统运行正常的结果。本发明专利技术还提供一种分布式文件系统的监控装置、终端及存储介质。本发明专利技术通过计算不同类型中不同档次的响应参数与预设基线数据的偏差值，快速的定位出日志中异常数据对应的操作类型及具体的档次，提高了运维效率。

Monitoring methods, devices, terminals and storage media of distributed file system

【技术实现步骤摘要】
分布式文件系统的监控方法、装置、终端及存储介质
本专利技术涉及云存储
，具体涉及一种分布式文件系统的监控方法、装置、终端及存储介质。
技术介绍
随着云存储的广泛使用，如何保证云存储的稳定运行，早于用户发现云存储的运行问题并尽早解决掉，成为云存储建设方关注的重要问题。现有云存储的监控主要是针对云存储服务和存储硬件的监控，比如是服务被停掉，或者存储磁盘出现了坏盘的告警，出现这些异常发送监控告警，及时的解决异常问题保证云存储稳定运行，未考虑到当云存储运行过程中分布式文件系统底层的服务出现性能下降的问题，例如用户上传下载相同类型的文件时操作出现响应时间增大，直接就降低了用户的体验，严重的情况下还会引起用户的流失。因此，构建基于用户操作相同类型的文件的响应参数的性能监控的方案成为了亟待解决的问题。
技术实现思路
鉴于以上内容，有必要提出一种分布式文件系统的监控方法、装置、终端及存储介质，通过计算不同类型中不同档次的响应参数与预设基线数据的偏差值，快速的确定出具体的操作类型对应的具体的档次中的日志出现的异常，提高了运维效率。本专利技术的第一方面提供一种分布式文件系统的监控方法，所述方法包括：获取待监测的分布式文件系统输出的日志；识别所述日志中每行数据的操作类型；根据所述操作类型对所述日志中的数据进行归类；将同一操作类型的数据划分为不同的档次；计算同一操作类型中每个档次的响应参数；计算所述响应参数与对应预设基线数据的偏差值；判断每个偏差值是否在预设的偏差阈值范围内；当确定所述每个偏差值都在所述预设的偏差阈值范围内时，输出所述分布式文件系统运行正常的结果。优选的，所述计算同一操作类型中每个档次的响应参数包括：获取同一操作类型中每个档次的每个数据的响应参数；根据所述响应参数计算每个操作类型中每个档次的平均响应参数；将所述平均响应参数确定为对应档次的响应参数。优选的，所述预设基线数据的创建过程包括：获取预设时间段内的历史日志；根据所述历史日志记录的时间顺序将所述历史日志均分为多份子历史日志；识别每份子历史日志中每行数据的操作类型；根据所述操作类型对每份子历史日志中的数据进行归类；将每份子历史日志中同一操作类型的数据划分为不同的档次；计算所述每份子历史日志中同一操作类型中每个档次的每个数据的响应参数；根据所述响应参数计算同一份子历史日志中同一操作类型中每个档次的第一平均响应参数；根据所述第一平均响应参数计算同一操作类型中每个档次的多份子历史日志的第二平均响应参数；将所述第二平均响应参数作为所述对应类型-档次的预设基线数据。优选的，所述计算所述响应参数与对应预设基线数据的偏差值包括：获取对应类型-档次的预设基线数据；计算所述对应类型-档次的响应参数与所述对应类型-档次的预设基线数据的差值；将所述差值的绝对值除以所述对应类型-档次的预设基线数据得到的值作为偏差值。优选的，所述方法还包括：当确定有至少一个偏差值不在所述预设的偏差阈值范围内时，输出所述分布式文件系统运行异常的结果。优选的，在所述输出所述分布式文件系统运行异常的结果之后，所述方法还包括：向管理员发送告警信息。优选的，在所述向管理员发送告警信息之后，所述方法还包括：标识所述待监测的分布式文件系统输出的日志中的异常数据。本专利技术的第二方面提供一种分布式文件系统的监控装置，所述装置包括：获取模块，用于获取待监测的分布式文件系统输出的日志；识别模块，用于识别所述日志中每行数据的操作类型；归类模块，用于根据所述操作类型对所述日志中的数据进行归类；划分模块，用于将同一操作类型的数据划分为不同的档次；第一计算模块，用于计算同一操作类型中每个档次的响应参数；第二计算模块，用于计算所述响应参数与对应预设基线数据的偏差值；判断模块，用于判断每个偏差值是否在预设的偏差阈值范围内；输出模块，用于当所述判断模块确定所述每个偏差值都在所述预设的偏差阈值范围内时，输出所述分布式文件系统运行正常的结果。本专利技术的第三方面提供一种终端，所述终端包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现所述分布式文件系统的监控方法。本专利技术的第四方面提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现所述分布式文件系统的监控方法。综上所述，本专利技术所述的分布式文件系统的监控方法、装置、终端及存储介质，通过获取待监测的分布式文件系统输出的日志；识别所述日志中每行数据的操作类型；根据所述操作类型对所述日志中的数据进行归类；将同一操作类型的数据划分为不同的档次；计算同一操作类型中每个档次的响应参数；计算所述响应参数与对应预设基线数据的偏差值；判断每个偏差值是否在预设的偏差阈值范围内；当确定所述每个偏差值都在预设的偏差阈值范围内时，输出所述分布式文件系统运行正常的结果；当确定其中有一个偏差值不在预设的偏差阈值范围内时，输出所述分布式文件系统运行异常的结果。本专利技术通过计算不同类型中不同档次的响应参数与预设基线数据的偏差值，判断每一个偏差值是否符合预设阈值范围内，可以快速的确定出具体的操作类型对应的具体的档次中的日志出现了异常，缩短了排查异常数据的时间，提高了运维效率，同时提升了用户的体验和保证了分布式文件系统运行的稳定性。附图说明图1是本专利技术实施例一提供的分布式文件系统的监控方法的流程图。图2是本专利技术实施例二提供的分布式文件系统的监控装置的结构图。图3是本专利技术实施例三提供的终端的结构示意图。如下具体实施方式将结合上述附图进一步说明本专利技术。具体实施方式在下面的描述中阐述了很多具体细节以便于充分理解本专利技术，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。除非另有定义，本文所使用的所有的技术和科学术语与属于本专利技术的
的技术人员通常理解的含义相同。本文中在本专利技术的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本专利技术。实施例一图1是本专利技术实施例一提供的分布式文件系统的监控方法的流程图。在本实施例中，所述分布式文件系统的监控方法可以应用于终端中，对于需要进行分布式文件系统的监控终端，可以直接在终端上集成本专利技术的方法所提供的分布式文件系统的监控的功能，或者以软件开发工具包(SoftwareDevelopmentKit，SKD)的形式运行在终端中。如图1所示，所述分布式文件系统的监控方法具体包括以下步骤，根据不同的需求，该流程图中步骤的顺序可以改变，某些可以省略。S11：获取待本文档来自技高网...

【技术保护点】
1.一种分布式文件系统的监控方法，其特征在于，所述方法包括：/n获取待监测的分布式文件系统输出的日志；/n识别所述日志中每行数据的操作类型；/n根据所述操作类型对所述日志中的数据进行归类；/n将同一操作类型的数据划分为不同的档次；/n计算同一操作类型中每个档次的响应参数；/n计算所述响应参数与对应预设基线数据的偏差值；/n判断每个偏差值是否在预设的偏差阈值范围内；/n当确定所述每个偏差值都在所述预设的偏差阈值范围内时，输出所述分布式文件系统运行正常的结果。/n

【技术特征摘要】
1.一种分布式文件系统的监控方法，其特征在于，所述方法包括：
获取待监测的分布式文件系统输出的日志；
识别所述日志中每行数据的操作类型；
根据所述操作类型对所述日志中的数据进行归类；
将同一操作类型的数据划分为不同的档次；
计算同一操作类型中每个档次的响应参数；
计算所述响应参数与对应预设基线数据的偏差值；
判断每个偏差值是否在预设的偏差阈值范围内；
当确定所述每个偏差值都在所述预设的偏差阈值范围内时，输出所述分布式文件系统运行正常的结果。


2.如权利要求1所述的方法，其特征在于，所述计算同一操作类型中每个档次的响应参数包括：
获取同一操作类型中每个档次的每个数据的响应参数；
根据所述响应参数计算每个操作类型中每个档次的平均响应参数；
将所述平均响应参数确定为对应档次的响应参数。


3.如权利要求1所述的方法，其特征在于，所述预设基线数据的创建过程包括：
获取预设时间段内的历史日志；
根据所述历史日志记录的时间顺序将所述历史日志均分为多份子历史日志；
识别每份子历史日志中每行数据的操作类型；
根据所述操作类型对每份子历史日志中的数据进行归类；
将每份子历史日志中同一操作类型的数据划分为不同的档次；
计算所述每份子历史日志中同一操作类型中每个档次的每个数据的响应参数；
根据所述响应参数计算同一份子历史日志中同一操作类型中每个档次的第一平均响应参数；
根据所述第一平均响应参数计算同一操作类型中每个档次的多份子历史日志的第二平均响应参数；
将所述第二平均响应参数作为所述对应类型-档次的预设基线数据。


4.如权利要求1所述的方法，其特征在于，所述计算所述响应参数与对应预设基线数据的偏差值包括：
获取对应类型-档次的预设基线数据；
计算所述对应类型-档次的响应...

【专利技术属性】
技术研发人员：杨勇，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东;44