数据写入更新方法、系统、装置及计算机可读存储介质制造方法及图纸

本发明专利技术公开了一种数据写入更新方法、系统、装置及计算机可读存储介质，涉及分布式存储系统领域，BlueStore接收到对应写入请求时，确定在存储模块中覆盖数据的待写入物理地址及已写入数据的已写入物理地址，基于已写入物理地址确定删除标识，将删除标识及覆盖数据发送至存储模块，以便存储模块基于删除标识控制已写入物理地址对应的工作状态标记为可删除状态并将覆盖数据写入待写入物理地址，在一次数据写入过程中既实现了覆盖数据的写入，又实现了已写入物理地址的工作状态标记，避免了写放大问题，提升了BlueStore的工作性能；后续该已写入物理地址将不会作为有效数据参与到对应处理逻辑，延长了存储模块的使用寿命。延长了存储模块的使用寿命。延长了存储模块的使用寿命。

【技术实现步骤摘要】
数据写入更新方法、系统、装置及计算机可读存储介质


[0001]本专利技术涉及分布式存储系统
，特别是涉及一种数据写入更新方法、系统、装置及计算机可读存储介质。

技术介绍

[0002]分布式存储系统ceph包括BlueStore及SSD(Solid State Disk，固态硬盘)，其中，BlueStore为分布式存储系统ceph的存储引擎，用于重定向写等工作。现有技术中，当存在写入数据的需求时，假定数据1待写入，则在BlueStore中申请逻辑地址1，最终写入SSD中对应的物理地址1，之后在存在与数据1对应的数据2想要覆盖原本的数据1以进行写入更新时，需要重新在BlueStore中申请到逻辑地址2，最终写入SSD中对应的物理地址2，数据2成功写入物理地址2之后，存在以下两种方式将数据1对应的位置标记为可删除状态以便使得该位置具备再利用资格：
[0003]第一种方式为由BlueStore再次向SSD发送一条trim指令，以将物理地址1标记为可删除状态，但是这种方式会造成写放大，原本只需要一条写io指令完成数据2的写入，但是上述数据2成功写入后再次发送trim指令就会使得多一条写io指令，最终造成iops(单位时间内处理的io请求数)的写放大，影响了BlueStore的工作性能；
[0004]第二种方式为数据2成功写入物理地址2后，不发送所述trim指令，而是将数据1对应的逻辑地址1重新放置到BlueStore的可申请队列中，但是此时由于未发送trim指令，SSD并不知晓该情况，对于SSD来说物理地址1存储的数据1仍然为有效数据而处于非可删除状态，直到逻辑地址1重新被申请时SSD才知晓该情况，进而将物理地址1标记为可删除状态，但是从逻辑地址1重新放置到BlueStore的可申请队列到其再次被申请的这段时间通常较长，这段时间内物理地址1存储的数据1均参与到有效数据的对应处理逻辑，影响了SSD的工作性能及使用寿命。
[0005]因此，如何寻找一种有效的方式实现分布式存储系统中的数据写入更新是当前亟待解决的问题。

技术实现思路

[0006]本专利技术的目的是提供一种数据写入更新方法、系统、装置及计算机可读存储介质，在一次数据写入过程中既实现了覆盖数据的写入，又实现了已写入物理地址的工作状态的标记，提升了BlueStore的工作性能，保证了存储模块的工作性能，延长了存储模块的使用寿命。
[0007]为解决上述技术问题，本专利技术提供了一种数据写入更新方法，包括：
[0008]BlueStore在接收到表征利用覆盖数据更新对应的已写入数据的写入请求时，确定所述覆盖数据在所述存储模块中的待写入物理地址；
[0009]基于所述写入请求及预存标识
‑
物理地址对应关系，确定所述已写入数据在所述存储模块中的已写入物理地址；
[0010]将所述删除标识及所述覆盖数据发送至所述存储模块，以便所述存储模块基于所述删除标识将所述已写入物理地址对应的工作状态标记为可删除状态并将所述覆盖数据写入所述待写入物理地址，其中，所述删除标识基于所述已写入物理地址对应确定。
[0011]优选的，将所述删除标识及所述覆盖数据发送至所述存储模块之后，还包括：
[0012]所述BlueStore基于接收到的所述存储模块发送的地址更新信息，将所述已写入数据对应的已用逻辑地址加入预设可申请逻辑地址队列；
[0013]基于所述地址更新信息更新预设地址映射关系，以使所述已用逻辑地址与所述存储模块中处于空闲状态的分配可写入物理地址映射对应。
[0014]优选的，还包括：
[0015]所述存储模块判断目标存储块中的存储利用率是否达到预设阈值，所述目标存储块中包括多个物理地址；
[0016]若是，将工作状态处于非可删除状态的物理地址中存储的数据转存至转运存储块；
[0017]对所述目标存储块进行数据擦除。
[0018]优选的，判断目标存储块中的存储利用率是否达到预设阈值之前，还包括：
[0019]所述存储模块判断所述目标存储块是否处于表征当前没有数据正在写入的非写入状态；
[0020]若是，进入所述判断目标存储块中的存储利用率是否达到预设阈值的步骤。
[0021]优选的，将所述删除标识及所述覆盖数据发送至所述存储模块，包括：
[0022]所述BlueStore调用写接口将所述删除标识及所述覆盖数据发送至用于管理所述存储模块的下层驱动组件，以使所述下层驱动组件将所述删除标识填充至所述存储模块遵循的传输协议的命令字中并将更新后的命令字及所述覆盖数据发送至所述存储模块，以便所述存储模块将所述覆盖数据写入所述待写入物理地址，根据所述更新后的命令字得到所述删除标识并基于所述删除标识将所述已写入物理地址对应的工作状态标记为可删除状态。
[0023]优选的，所述下层驱动组件将所述删除标识填充至所述存储模块遵循的传输协议的命令字中，包括：
[0024]所述下层驱动组件确定所述存储模块遵循的传输协议的命令字中的预留命令字的位置；
[0025]将所述删除标识依照预设填充规则写入所述预留命令字的位置，以生成更新后的命令字。
[0026]优选的，所述存储模块根据所述更新后的命令字得到所述删除标识，包括：
[0027]所述存储模块调用预设解析接口，以基于所述预设填充规则的逆规则解析所述更新后的命令字，得到所述删除标识。
[0028]为解决上述技术问题，本专利技术还提供了一种数据写入更新系统，包括：
[0029]待写入物理地址确定单元，用于BlueStore在接收到表征利用覆盖数据更新对应的已写入数据的写入请求时，确定所述覆盖数据在所述存储模块中的待写入物理地址；
[0030]已写入物理地址确定单元，用于基于所述写入请求及预存标识
‑
物理地址对应关系，确定所述已写入数据在所述存储模块中的已写入物理地址；
[0031]发送单元，用于将所述删除标识及所述覆盖数据发送至所述存储模块，以便所述存储模块基于所述删除标识将所述已写入物理地址对应的工作状态标记为可删除状态并将所述覆盖数据写入所述待写入物理地址，其中，所述删除标识基于所述已写入物理地址对应确定。
[0032]为解决上述技术问题，本专利技术还提供了一种数据写入更新装置，包括：
[0033]存储器，用于存储计算机程序；
[0034]处理器，用于执行所述计算机程序时实现如上述所述的数据写入更新方法的步骤。
[0035]为解决上述技术问题，本专利技术还提供了一种计算机可读存储介质，包括：
[0036]所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述的数据写入更新方法的步骤。
[0037]本申请提供了一种数据写入更新方法、系统、装置及计算机可读存储介质，已写入数据完成在存储模块中的写入后，BlueStore在接收到表征利用覆盖数据更新对应的已写入数据的写入请求时，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据写入更新方法，其特征在于，包括：BlueStore在接收到表征利用覆盖数据更新对应的已写入数据的写入请求时，确定所述覆盖数据在所述存储模块中的待写入物理地址；基于所述写入请求及预存标识
‑
物理地址对应关系，确定所述已写入数据在所述存储模块中的已写入物理地址；将所述删除标识及所述覆盖数据发送至所述存储模块，以便所述存储模块基于所述删除标识将所述已写入物理地址对应的工作状态标记为可删除状态并将所述覆盖数据写入所述待写入物理地址，其中，所述删除标识基于所述已写入物理地址对应确定。2.如权利要求1所述的数据写入更新方法，其特征在于，将所述删除标识及所述覆盖数据发送至所述存储模块之后，还包括：所述BlueStore基于接收到的所述存储模块发送的地址更新信息，将所述已写入数据对应的已用逻辑地址加入预设可申请逻辑地址队列；基于所述地址更新信息更新预设地址映射关系，以使所述已用逻辑地址与所述存储模块中处于空闲状态的分配可写入物理地址映射对应。3.如权利要求1所述的数据写入更新方法，其特征在于，还包括：所述存储模块判断目标存储块中的存储利用率是否达到预设阈值，所述目标存储块中包括多个物理地址；若是，将工作状态处于非可删除状态的物理地址中存储的数据转存至转运存储块；对所述目标存储块进行数据擦除。4.如权利要求3所述的数据写入更新方法，其特征在于，判断目标存储块中的存储利用率是否达到预设阈值之前，还包括：所述存储模块判断所述目标存储块是否处于表征当前没有数据正在写入的非写入状态；若是，进入所述判断目标存储块中的存储利用率是否达到预设阈值的步骤。5.如权利要求1至4任一项所述的数据写入更新方法，其特征在于，将所述删除标识及所述覆盖数据发送至所述存储模块，包括：所述BlueStore调用写接口将所述删除标识及所述覆盖数据发送至用于管理所述存储模块的下层驱动组件，以使所述下层驱动组件将所述删除标识填充至所述存储模块遵循的传输协议的...

【专利技术属性】
技术研发人员：刘亚宇，李文鹏，
申请(专利权)人：济南浪潮数据技术有限公司，
类型：发明
国别省市：