数据写入方法、装置和电子设备制造方法及图纸

本发明专利技术提供了一种数据写入方法、装置和电子设备，该方法包括：接收针对目标数据的数据写入请求；基于存储节点的运行状态，确定用于写入目标数据的目标存储块，该目标存储块的主副本设置在本地节点，该目标存储块的从副本设置在除本地节点以外的存储节点；将目标数据写入目标存储块的主副本和从副本中。该方式在确定写入数据的存储块时，参考了各个存储节点的运行状态，因此可以减少将目标数据写入设置在异常状态的存储节点的从副本的概率，从而减少了写入失败的概率，也提升了整个分布式集群的稳定性和可用性。稳定性和可用性。稳定性和可用性。

【技术实现步骤摘要】
数据写入方法、装置和电子设备


[0001]本专利技术涉及数据存储
，尤其是涉及一种数据写入方法、装置和电子设备。

技术介绍

[0002]相关技术中，分布式存储系统的强一致性写入流程，通常是由客户端发送写请求到主节点，主节点接收写请求，并将写请求携带的数据写入本地，然后将写请求发送到所有从节点；该从节点写入成功后，会向主节点发送写入成功的消息，如果在指定时间内没有接收到从节点返回的写入成功的消息，主节点会再次向该从节点发送写请求，直到该从节点返回写入成功的消息；当所有从节点均写入成功后，主节点向客户端发送写入成功消息；当写请求达到预设时长，未收到所有从节点返回的写入成功的消息，向客户端发送写入失败的消息。
[0003]上述写入流程中，如果某个从节点宕机或者不可用，主节点将写请求发送到该节点后会无限重试，直到从节点恢复才能够写入成功，因此容易导致写请求超时，引起写入失败或者吞吐量抖动，从而影响整个分布式集群的稳定性和可用性。

技术实现思路

[0004]本专利技术的目的在于提供一种数据写入方法、装置和电子设备，以减少写入本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据写入方法，其特征在于，所述方法包括：接收针对目标数据的数据写入请求；基于存储节点的运行状态，确定用于写入所述目标数据的目标存储块；其中，所述目标存储块的主副本设置在本地节点；所述目标存储块的从副本，设置在除所述本地节点以外的存储节点；将所述目标数据写入所述目标存储块的主副本和从副本中。2.根据权利要求1所述的方法，其特征在于，所述存储节点的运行状态包括正常状态和异常状态；所述异常状态的存储节点的节点信息保存在预设的状态存储单元；所述基于存储节点的运行状态，确定用于写入所述目标数据的目标存储块的步骤，包括：基于所述状态存储单元保存的节点信息，确定异常状态的存储节点；将设置在处于所述异常状态的存储节点的从副本，确定为异常副本；从所述本地节点对应的多个存储块中，将所述异常副本对应的存储块之外的存储块，确定为备选存储块；从所述备选存储块中，确定用于写入所述目标数据的目标存储块。3.根据权利要求2所述的方法，其特征在于，所述从所述备选存储块中，确定用于写入所述目标数据的目标存储块的方式，包括下述中的一种：将所述备选存储块中，最后一次写入数据的时间距离当前时间最近的备选存储块确定为所述目标存储块；从所述备选存储块中，将存储空间剩余量最大的所述备选存储块确定为所述目标存储块；从所述备选存储块中，随机确定一个备选存储块作为所述目标存储块。4.根据权利要求1所述的方法，其特征在于，所述将所述目标数据写入所述目标存储块的主副本和从副本中的步骤之后，所述方法还包括：如果接收到所述从副本所处的存储节点返回的写入失败消息，将所述从副本所处的存储节点确定为处于异常状态的存储节点，提取所述写入失败消息携带的节点信息；其中，所述节点信息包括IP地址和端口号；将提取到的所述节点信息保存至预设的状态存储单元；其中，所述状态存储单元中保存有处于异常状态的存储节点的节点信息。5.根据权利要求4所述的方法，其特征在于，所述将提取到的所述节点信息保存至预设的状态存储单元的步骤之后，所述方法还包括：向返回写入失败消息的存储节点发送所述目标数据的数据写入请求；如果返回写入失败消息的所述存储节点返回写...

【专利技术属性】
技术研发人员：张丞，
申请(专利权)人：北京金山云网络技术有限公司，
类型：发明
国别省市：