【技术实现步骤摘要】
一种分布式服务器系统的日志查找方法及装置
本专利技术涉及大数据集群领域,尤其涉及一种分布式服务器系统的日志查找方法及装置。
技术介绍
分布式服务器系统中有大量的服务器,而每台服务器每天都会产生大量的日志。在一些情况下,需要查找到特定条件下的日志。因此,如何快速地查找到需要的日志对服务器系统来说至关重要。现有方式中,一个查询任务执行时,通常要查询的日志会涉及到多个服务器,查询的字段需要匹配较多内容,一旦某个服务器因为某种原因(比如网络延迟,或者宕机,或者就是计算量太大)导致没有返回数据,那么会一直等待查询任务在这个服务器上的子任务,从而导致整个查询任务的耗时非常久,这是一个亟待解决的问题。
技术实现思路
本申请实施例提供一种分布式服务器系统的日志查找方法及装置,解决了现有技术中查询任务的耗时非常久的问题。第一方面,本申请实施例提供一种分布式服务器系统的日志查找方法,包括:创建查找任务;所述查找任务用于在分布式服务器系统上查找设定时段内设定对象的日志;所述查找任务包括多个查找子任务;在所述分布 ...
【技术保护点】
1.一种分布式服务器系统的日志查找方法,其特征在于,包括:/n创建查找任务;/n在所述分布式服务器系统上执行所述查找任务;/n在确定所述查找任务的查找子任务的数量满足上限条件时,上报所述子任务的日志;所述上限条件是根据在所述设定时段内所述设定对象的日志数量与所述分布式服务器系统在所述设定时段内的日志总数量确定的。/n
【技术特征摘要】 【专利技术属性】
1.一种分布式服务器系统的日志查找方法,其特征在于,包括:
创建查找任务;
在所述分布式服务器系统上执行所述查找任务;
在确定所述查找任务的查找子任务的数量满足上限条件时,上报所述子任务的日志;所述上限条件是根据在所述设定时段内所述设定对象的日志数量与所述分布式服务器系统在所述设定时段内的日志总数量确定的。
2.如权利要求1所述的方法,其特征在于,所述上限条件是根据在所述设定时段内所述设定对象的日志数量与所述分布式服务器系统在所述设定时段内的日志总数量确定的,包括:
根据在所述设定时段内所述分布式服务器系统在所述设定时段内的日志总数量和所述设定对象在所述设定时段内的日志数量,确定所述设定对象的日志占比;
根据所述日志占比确定第一上报比例阈值,所述日志占比与所述第一上报比例阈值呈负相关;
所述确定所述查找任务的查找子任务的数量满足上限条件,包括:
根据所述已返回查找结果的查找子任务的数量和所述查找任务的所有查找子任务,确定任务比值;
若确定所述任务比值不小于所述第一上报比例阈值,则确定已返回查找结果的查找子任务数量满足所述查找任务的上限条件。
3.如权利要求2所述的方法,其特征在于,所述日志占比为区间值;所述第一上报比例阈值为区间值;所述确定所述任务比值不小于所述第一上报比例阈值,包括:
确定所述任务比值不小于所述第一上报比例阈值的下限值;
所述将所述设定对象的已查到的日志上报,包括:在所述任务比值不小于所述第一上报比例阈值的上限值时,将所述设定对象的已查到的日志上报。
4.如权利要求2所述的方法,其特征在于,所述上限条件还包括第一预设时长;所述确定所述查找任务已返回查找结果的查找子任务的数量满足所述查找任务的上限条件,还包括:
若确定执行所述查找任务的查找时长不小于所述第一预设时长,则确定所述查找任务已返回查找结果的查找子任务的数量满足所述查找任务的上限条件。
技术研发人员:李鹏,
申请(专利权)人:网宿科技股份有限公司,
类型:发明
国别省市:上海;31
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。