一种生成用于压力测试的日志的方法及装置制造方法及图纸

技术编号:19023259 阅读:29 留言:0更新日期:2018-09-26 19:01
本申请公开了一种生成用于压力测试的日志的方法,生成所需数量的日志组,并且每个日志组采用下述方式生成:基于已有的日志拓扑模型,生成预设数量的主日志,每个主日志记录有相应的主日志信息以及主日志标识,并且所述各个主日志的主日志标识具有关联关系;根据所述日志拓扑模型所表征的每个主日志与每个类型的关联日志的关联关系,生成关联于每个主日志的关联日志;其中,每个关联日志记录有相应的关联日志信息以及相应的关联日志标识,且每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系。据此,本技术方案便于在利用所生成的用于压力测试的日志进行压力测试而网络系统中的设备运行错误时,查询到相关处理错误的日志。

【技术实现步骤摘要】
一种生成用于压力测试的日志的方法及装置
本申请涉及一种生成日志的方法,具体涉及一种生成用于压力测试的日志的方法,还涉及一种压力测试方法。本申请同时涉及一种生成用于压力测试的装置。本申请另外还涉及一种生成用于压力测试的电子设备,以及一种计算机可读存储介质。
技术介绍
网络系统在某些时间段通常要对大量的数据进行处理,例如,网络销售平台在举行大型销售活动期间就要处理大量的订单相关数据,并计算出相关统计结果。如果网络系统配置不合理,在面临大量数据的处理压力时,网络系统中的设备有可能运行错误,对生产生活造成不利影响。为防止网络系统中的设备面临大量数据处理压力时运行错误,通常需要知道网络系统所能承受的最大数据压力是多少,从而使网络系统运行在该最大数据压力之下,或者也可以根据可能面临的数据处理压力,适当增添网络设备,以弥补当前网络设备处理数据能力的不足。无论如何,总要知道当前网络系统所能承受的最大数据处理压力,这通常需要经过压力测试才能得出。现有技术中网络系统进行压力测试可以通过大量实际设备产生数据进行测试,然而这种测试方法虽然可靠,但难以组织大规模数量进行测试,同时成本也比较高。除此之外,通常进行压力测试时,都是通过压力测试工具产生大量用于压力测试数据,然后将所产生的大量数据作为待测设备的输入数据,同时通过监控待测设备的运行状况,得出待测设备处理数据的最大能力。但是,现有技术仍未能提供一种更切实可行的记录数据的日志产生方法。现有技术生成用于压力测试的日志的方法的缺陷主要在于,虽然主日志和关联日志之间存在关联,主日志之间也存在关联,但不同主日志的关联日志之间有时不存在关联关系,这将导致在利用这些日志进行压力测试并出现运行错误时,无法快速、准确地追溯到处理出错的日志。另外,现有技术生成用于压力测试的日志时,虽然也生成某些类型的关联日志,但难以生成较为切实地模拟实际场景下的行为数据的关联日志,比如生成记录具有热点性(出现次数多、出现概率大)数据的日志。
技术实现思路
本申请提供一种生成用于压力测试的日志的方法,以解决现有技术在利用日志进行压力测试并出现运行错误时,无法快速、准确地追溯到处理出错的日志的技术问题。另外,本申请还旨在解决现有技术生成用于压力测试的日志时,难以生成较为切实地模拟实际场景下的行为数据的关联日志的技术问题。本申请提供一种生成用于压力测试的日志的方法,生成所需数量的日志组,并且每个日志组采用下述方式生成:基于已有的日志拓扑模型,生成预设数量的主日志,每个主日志记录有相应的主日志信息以及主日志标识,并且所述各个主日志的主日志标识具有关联关系;根据所述日志拓扑模型所表征的每个主日志与每个类型的关联日志的关联关系,生成关联于每个主日志的关联日志;其中,每个关联日志记录有相应的关联日志信息以及相应的关联日志标识,且每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系。可选的,所述日志拓扑模型包括预设数量的主日志,以及分别与某一个主日志关联的关联日志,并且所述主日志彼此之间具有关联关系;所述主日志、关联日志为所述拓扑模型的节点,所述主日志之间的关联关系、主日志与关联日志之间的关联关系,为拓扑模型节点之间的连接关系;所述各个关联关系通过主日志、关联日志的日志标识记录。可选的,所述日志拓扑模型通过执行以下步骤生成:根据已有的用于记录用户各操作的各日志所记载的信息,解析各日志之间的关系;根据各日志之间的关系,确定预设数量的主日志、分别与每一个主日志关联的关联日志、各主日志之间的关联关系;所述主日志、关联日志为所述拓扑模型的节点,所述主日志之间的关联关系、主日志与关联日志之间的关联关系,为拓扑模型节点之间的连接关系;所述各个关联关系通过主日志、关联日志的日志标识记录。可选的,所述各个主日志的主日志标识具有关联关系,以及所述每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系,其中的所述关联关系具体是,日志标识相同。可选的,用于压力测试的日志的各个日志组的日志具有可识别为压力测试数据的压测标识。可选的,所述日志标识使用具有特定含义的标识。可选的,所述生成关联于每个主日志的关联日志的步骤中,基于为每个记录类型的关联日志字段预设的在所有关联日志字段中的占比,随机生成每个主日志所映射的各个记录类型的关联日志字段。可选的,所述关联日志信息中记录的具有范围限制的某个或者某些字段通过执行以下步骤生成:读取预先加载的目标维表;在所述目标维表对相关字段记录的可选择范围中,选择某个或者某些可选择值作为所述关联日志信息中所述字段的字段值。可选的,在所述维表中选择的字段值,满足预设峰度系数的概率分布规则。可选的,所述维表中的可选择值包括以下类型数据的任意一种:活动标识信息数据、用户地址信息数据。可选的,所述关联日志信息中的某个或者某些字段为枚举类型,则其字段值从预先确定的枚举值选择范围中,以预设的确定方式选择确定。可选的,所述关联日志信息中的某个或者某些字段为规则类型,则其字段值按照预定规则生成。可选的,所述生成所需数量的日志组,其中的日志组的数量在时间维度上按照预设的速率生成。可选的,所述生成所需数量的日志组,其中的日志组数量根据时间维度限定在预定的数量范围内。本申请还提供一种根据上述方法所生成的日志进行压力测试的方法,包括:根据每个日志组中各个主日志与其相应的关联日志的关联关系以及所记载的信息,确定客户端与服务器端的相应的数据交互过程;根据所确定的客户端与服务器端的相应的数据交互过程,利用脚本函数生成相应的脚本语句;根据相应的脚本语句,生成相应的进程或线程;获取待测设备的目标性能数据。本申请还提供一种生成用于压力测试的日志的装置,所述装置包括:主日志生成单元,配置用于基于已有的日志拓扑模型,生成预设数量的主日志,每个主日志记录有相应的主日志信息以及主日志标识,并且所述各个主日志的主日志标识具有关联关系;关联日志生成单元,配置用于根据所述日志拓扑模型所表征的每个主日志与每个类型的关联日志的关联关系,生成关联于每个主日志的关联日志;其中,每个关联日志记录有相应的关联日志信息以及相应的关联日志标识,且每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系。可选的,所述装置还包括:解析单元,配置用于根据已有的用于记录用户各操作的各日志所记载的信息,解析各日志之间的关系;关联关系确定单元,配置用于根据各日志之间的关系,确定预设数量的主日志、分别与每一个主日志关联的关联日志、各主日志之间的关联关系;所述主日志、关联日志为所述拓扑模型的节点,所述主日志之间的关联关系、主日志与关联日志之间的关联关系,为拓扑模型节点之间的连接关系;所述各个关联关系通过主日志、关联日志的日志标识记录。可选的,所述主日志生成单元还包括:关联日志字段生成子单元,配置用于基于为每个记录类型的关联日志字段预设的在所有关联日志字段中的占比,随机生成每个主日志所映射的各个记录类型的关联日志字段。可选的,所述主日志生成单元还包括:目标维表读取子单元,配置用于读取预先加载的目标维表;字段值选择子单元,配置用于选择某个或者某些可选择值在所述目标维表对相关字段记录的可选择范围中,选择某个或者某些可选择值作为所述关联日志信息中所述字段的字段值。本文档来自技高网
...

【技术保护点】
1.一种生成用于压力测试的日志的方法,其特征在于,生成所需数量的日志组,并且每个日志组采用下述方式生成:基于已有的日志拓扑模型,生成预设数量的主日志,每个主日志记录有相应的主日志信息以及主日志标识,并且所述各个主日志的主日志标识具有关联关系;根据所述日志拓扑模型所表征的每个主日志与每个类型的关联日志的关联关系,生成关联于每个主日志的关联日志;其中,每个关联日志记录有相应的关联日志信息以及相应的关联日志标识,且每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系。

【技术特征摘要】
1.一种生成用于压力测试的日志的方法,其特征在于,生成所需数量的日志组,并且每个日志组采用下述方式生成:基于已有的日志拓扑模型,生成预设数量的主日志,每个主日志记录有相应的主日志信息以及主日志标识,并且所述各个主日志的主日志标识具有关联关系;根据所述日志拓扑模型所表征的每个主日志与每个类型的关联日志的关联关系,生成关联于每个主日志的关联日志;其中,每个关联日志记录有相应的关联日志信息以及相应的关联日志标识,且每个关联日志的关联日志标识与所关联的主日志的主日志标识具有关联关系。2.根据权利要求1所述的生成用于压力测试的日志的方法,其特征在于,所述日志拓扑模型包括预设数量的主日志,以及分别与某一个主日志关联的关联日志,并且所述主日志彼此之间具有关联关系;所述主日志、关联日志为所述拓扑模型的节点,所述主日志之间的关联关系、主日志与关联日志之间的关联关系,为拓扑模型节点之间的连接关系;所述各个关联关系通过主日志、关联日志的日志标识记录。3.根据权利要求1所述的生成用于压力测试的日志的方法,其特征在于,所述日志拓扑模型通过执行以下步骤生成:根据已有的用于记录用户各操作的各日志所记载的信息,解析各日志之间的关系;根据各日志之间的关系,确定预设数量的主日志、分别与每一个主日志关联的关联日志、各主日志之间的关联关系;所述主日志、关联日志为所述拓扑模型的节点,所述主日志之间的关联关系、主日志与关联日志之间的关联关系,为拓扑模型节点之间的连接关系;所述各个关联关系通过主日志、关联日志的日志标识记录。4.根据权利要求1所述的生成用于压力测试的日志的方法,其特征在于,所述各个主日志的主日志...

【专利技术属性】
技术研发人员:陈凌宇曹铁铮谢成锦胡斌陈地树孟涛王小冬
申请(专利权)人:口碑上海信息技术有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1