一种大规模集群的配置一致性校验方法、系统及装置制造方法及图纸

技术编号:32326840 阅读:11 留言:0更新日期:2022-02-16 18:33
本发明专利技术提出的一种大规模集群的配置一致性校验方法、系统及装置,所述方法包括:在管理软件初始化安装时根据不同的配置文件按变更频率和重要性设置优先级,并根据配置文件的优先级生成所有配置文件的树;将配置文件的树的节点信息和配置文件的优先级信息存入预设数据库中;集群主节点在发送消息之前在消息中加入配置文件的摘要;当集群从节点收到消息后,校验配置文件的摘要的一致性,如果不一致,定位消息对应的配置文件;根据配置文件的定位信息,对从集群节点中配置文件对应的二叉树进行更新。本发明专利技术有效解决了系统数量繁多的配置文件在同步时出现不一致错误导致节点出错的问题,提高了系统的稳定性和可用性。提高了系统的稳定性和可用性。提高了系统的稳定性和可用性。

【技术实现步骤摘要】
一种大规模集群的配置一致性校验方法、系统及装置


[0001]本专利技术涉及计算机
,更具体的说是涉及一种大规模集群的配置一致性校验方法、系统及装置。

技术介绍

[0002]在大规模集群中,节点分为主节点和从节点,主节点上安装有管理软件来管理整个集群。而主节点的管理软件的运行需要很多配置文件,并且系统需要保证这些配置文件在主节点和从节点之间的一致性。当主节点对管理软件的配置文件进行更改后,需要将配置文件同步到其他节点。
[0003]但是,如果在同步过程中出现网络问题或者某个节点出现异常,出现配置文件不一致的情况,在这之后如果某个操作请求对配置文件不一致的节点进行操作,就很可能因为配置文件的差异导致错误。因为系统的配置文件数量和种类繁多,如果每次操作都对节点的配置文件进行逐个对比,就会耗费大量的资源,各个节点之间的请求响应时间就会很大程度上延长,影响系统性能和稳定性。
[0004]另外,在大规模集群中,不同的场景和业务的优先级并不相同,它们配置文件对应的使用频率并不相同,对于集群类的配置文件,如果不一致就会导致集群异常,而且使用频率很高,但是例如单个磁盘对应的配置文件,不仅频率相对更低,而且数量很大,在校验时浪费的时间更多。

技术实现思路

[0005]针对以上问题,本专利技术的目的在于提供一种大规模集群的配置一致性校验方法、系统及装置,保证了大规模集群节点配置文件的一致性,解决了系统数量繁多的配置文件在同步时出现不一致错误导致节点出错的问题,提高了系统的稳定性和可用性。
[0006]本专利技术为实现上述目的,通过以下技术方案实现:一种大规模集群的配置一致性校验方法,包括:
[0007]在管理软件初始化安装时根据不同的配置文件按变更频率和重要性设置优先级,并根据配置文件的优先级生成所有配置文件的树;
[0008]将配置文件的树的节点信息和配置文件的优先级信息存入预设数据库中;
[0009]集群主节点在每次发送消息之前在消息中加入配置文件的摘要;
[0010]当集群从节点收到消息后,先校验配置文件的摘要的一致性,如果一致则接受消息,如果不一致,则定位消息对应的配置文件;
[0011]根据配置文件的定位信息,对从集群节点中配置文件对应的二叉树进行更新。
[0012]进一步,所述根据配置文件的优先级生成所有配置文件的树,包括:
[0013]用SHA

256算法计算配置文件的哈希值;
[0014]将同优先级的配置文件的哈希值设置在同一棵二叉树中,二叉树中的每个父结点的值都是两个子结点的哈希值;
[0015]将低优先级的二叉树作为高优先级的树的叶子结点,生成所有配置文件的树。
[0016]进一步,所述预设数据库采用sqlite3数据库,预设数据库包括:配置文件优先级表和存储二叉树的结点信息;
[0017]所述配置文件优先级表的标识符为配置文件的文件名,配置文件优先级表的字段为配置文件的优先级信息;
[0018]所述存储二叉树的结点信息采用哈希值作为标识符,存储二叉树的结点信息的字段包括左子节点的哈希值和右子节点的哈希值。
[0019]进一步,所述在每次发送消息之前在消息中加入配置文件的摘要,具体为:在每次发送消息之前在消息中加入256位的头部信息,用于存储配置文件的摘要。
[0020]进一步,所述校验配置文件的摘要的一致性,包括:
[0021]获取从节点当前配置文件的摘要,并与消息中的配置文件的摘要进行比对,若相同,则配置文件一致;否则,配置文件不一致。
[0022]进一步,所述定位消息对应的配置文件,包括:
[0023]在所有配置文件的树中进行遍历查询,直至查询到与消息对应的配置文件的哈希值相同的结点。
[0024]进一步,所述对从集群节点中配置文件对应的二叉树进行更新,包括:若需要将集群从节点的配置文件更为集群主节点的配置文件的内容,根据集群主节点的配置文件,重新计算集群从节点的配置文件对应的叶结点的哈希值和向上到根结点路径上的所有结点的哈希值;
[0025]若需要在集群从节点的配置文件中增加集群主节点的配置文件的内容,在配置文件的树中根据配置文件的优先级找到集群主节点的配置文件对应的位置,新增一个结点,并重新计算配置文件的树的根。
[0026]进一步,所述对从集群节点中配置文件对应的二叉树进行更新,还包括:若需要删除集群从节点的配置文件,则在配置文件的树中删除对应的叶结点并重新计算所在路径上的哈希值。
[0027]相应的,本专利技术还公开了一种大规模集群的配置一致性校验系统,包括:系统初始化模块,用于在管理软件初始化安装时根据不同的配置文件按变更频率和重要性设置优先级,并根据配置文件的优先级生成所有配置文件的树;持久化模块,用于将配置文件的树的节点信息和配置文件的优先级信息存入预设数据库中;
[0028]消息预处理模块,用于集群主节点在每次发送消息之前在消息中加入配置文件的摘要;
[0029]配置校验模块,用于当集群从节点收到消息后,先校验配置文件的摘要的一致性,如果一致则接受消息,如果不一致,则定位消息对应的配置文件;
[0030]配置文件变更模块,用于根据配置文件的定位信息,对从集群节点中配置文件对应的二叉树进行更新。
[0031]相应的,本专利技术公开了一种大规模集群的配置一致性校验装置,包括:
[0032]存储器,用于存储大规模集群的配置一致性校验程序;
[0033]处理器,用于执行所述大规模集群的配置一致性校验程序时实现如上文任一项所述大规模集群的配置一致性校验方法的步骤。
[0034]相应的,本专利技术公开了一种可读存储介质,所述可读存储介质上存储有大规模集群的配置一致性校验程序,所述大规模集群的配置一致性校验程序被处理器执行时实现如上文任一项所述大规模集群的配置一致性校验方法的步骤。
[0035]对比现有技术,本专利技术有益效果在于:本专利技术提供了一种大规模集群的配置一致性校验方法、系统及装置,其目的在于保证通信时节点配置文件的一致性。具体通过在每个节点维护一棵配置文件的哈希值组成的二叉树,树中的每个父结点的值都是两个子结点的哈希值,将二叉树的根作为全部配置文件的摘要。通过在每次通信时通过对比配置文件的摘要来确保每次通信的节点的配置文件都相同;在发现配置文件不同时,高优先级的配置文件更先被发现,从而保证系统的稳定性和可用性,提高系统响应时间。
[0036]本专利技术将低优先级的树的根作为高优先级的二叉树的叶子结点,在进行查找时先对高优先级的配置文件进行查找,在集群配置文件数量庞大时有效的降低了定位和更改需要的哈希运算次数。
[0037]综上所述,本专利技术有效的保证了大规模集群节点配置文件的一致性。解决了系统数量繁多的配置文件在同步时出现不一致错误导致节点出错的问题,提高了系统的稳定性和可用性。
[0038]由此可见,本专利技术与现有技术相比,具有突出的实质性特点和显著本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种大规模集群的配置一致性校验方法,其特征在于,包括:在管理软件初始化安装时根据不同的配置文件按变更频率和重要性设置优先级,并根据配置文件的优先级生成所有配置文件的树;将配置文件的树的节点信息和配置文件的优先级信息存入预设数据库中;集群主节点在每次发送消息之前在消息中加入配置文件的摘要;当集群从节点收到消息后,先校验配置文件的摘要的一致性,如果一致则接受消息,如果不一致,则定位消息对应的配置文件;根据配置文件的定位信息,对从集群节点中配置文件对应的二叉树进行更新。2.根据权利要求1所述的大规模集群的配置一致性校验方法,其特征在于,所述根据配置文件的优先级生成所有配置文件的树,包括:用SHA

256算法计算配置文件的哈希值;将同优先级的配置文件的哈希值设置在同一棵二叉树中,二叉树中的每个父结点的值都是两个子结点的哈希值;将低优先级的二叉树作为高优先级的树的叶子结点,生成所有配置文件的树。3.根据权利要求2所述的大规模集群的配置一致性校验方法,其特征在于,所述预设数据库采用sqlite3数据库,预设数据库包括:配置文件优先级表和存储二叉树的结点信息;所述配置文件优先级表的标识符为配置文件的文件名,配置文件优先级表的字段为配置文件的优先级信息;所述存储二叉树的结点信息采用哈希值作为标识符,存储二叉树的结点信息的字段包括左子节点的哈希值和右子节点的哈希值。4.根据权利要求3所述的大规模集群的配置一致性校验方法,其特征在于,所述在每次发送消息之前在消息中加入配置文件的摘要,具体为:在每次发送消息之前在消息中加入256位的头部信息,用于存储配置文件的摘要。5.根据权利要求4所述的大规模集群的配置一致性校验方法,其特征在于,所述校验配置文件的摘要的一致性,包括:获取从节点当前配置文件的摘要,并与消息中的配置文件的摘要进行比对,若相同,则配置文件一致;否则,配置文件不一致。6.根据权利要求4所述的大规模集群的配置一致性校...

【专利技术属性】
技术研发人员:袁少辉
申请(专利权)人:济南浪潮数据技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1