存储介质可靠性等级判断方法及系统、存储介质、设备技术方案

本发明专利技术提供了一种基于强化学习的存储介质可靠性等级判断方法及系统、存储介质、计算设备，该方法包括：获取存储系统中至少一存储单元的系统存储状态，将系统存储状态传输至代理器，由代理器基于系统存储状态确定存储单元对应的可靠性等级判断动作；通过存储系统对可靠性等级判断动作进行准确度评估得到评估结果，根据评估结果生成评估反馈参数；将评估反馈参数传输至代理器，基于评估反馈参数优化更新代理器。基于本发明专利技术提供的方案，能够根据实际运行环境进行动态优化，适用于不同类型的存储介质，且不需要通过预先测试获取存储介质可靠性与特征参数之间的关系。靠性与特征参数之间的关系。靠性与特征参数之间的关系。

【技术实现步骤摘要】
存储介质可靠性等级判断方法及系统、存储介质、设备


[0001]本专利技术涉及闪存寿命预测
，特别是一种基于强化学习的存储介质可靠性等级判断方法及系统、存储介质、计算设备。

技术介绍

[0002]随着电子技术的发展，存储器作为电子设备中存储数据的载体在现代生活中具有越来越重要的地位。可靠性降低一直是数据存储的主要问题之一。在存储器使用过程中，其单元存储的数据会出现各种错误并最终导致存储单元失效，若存储介质在运行时产生了无法纠正的数据错误将影响整个存储系统的正常使用，甚至导致重要数据丢失。
[0003]为了存储器预防失效，目前领域内采用测试一部分芯片，利用测试数据建立预测模型，通过模型预测存储器是否在一定操作周期数内发生失效。这种方法通过测试数据获取一部分存储器可靠性下降规律，在具备有效预防失效的能力前需要花费大量时间进行测试及模型建立。同时，由于制造过程中工艺差异的问题，即使是同型号的不同存储器其可靠性下降规律也不同。目前所采用的预测方法只能适用于已测试并建立模型的存储器类型，对于未建立模型的存储器无法有效预防失效。

技术实现思路

[0004]鉴于上述问题，提出了本专利技术以便提供一种克服上述问题或者至少部分地解决上述问题的基于强化学习的存储介质可靠性等级判断方法及系统、存储介质、计算设备，能够根据实际运行环境进行动态优化，适用于不同类型的存储介质，且不需要通过预先测试获取存储介质可靠性与特征参数之间的关系。
[0005]根据本专利技术的第一方面，提供了一种基于强化学习的存储介质可靠性等级判断方法，包括：
[0006]获取存储系统中至少一存储单元的系统存储状态，将所述系统存储状态传输至代理器，由所述代理器基于所述系统存储状态确定所述存储单元对应的可靠性等级判断动作；其中，所述代理器为能够执行存储单元可靠性等级判断动作的模块；
[0007]通过所述存储系统对所述可靠性等级判断动作进行准确度评估得到评估结果，根据所述评估结果生成评估反馈参数；
[0008]将所述评估反馈参数传输至所述代理器，基于所述评估反馈参数优化更新所述代理器。
[0009]可选地，所述由所述代理器基于所述系统存储状态确定所述存储单元的可靠性等级判断动作，包括：
[0010]由所述代理器采用强化学习算法获取与所述系统存储状态对应的映射权值，基于所述映射权值确定所述存储单元的可靠性等级判断动作；
[0011]其中，所述可靠性等级判断动作为所述判断存储单元在n次操作周期后的错误数或错误率是否满足预设条件；
[0012]其中，n为一个值或多个值的集合；
[0013]所述预设条件包括：错误数或错误率的值超过存储单元正常运行界限值；或，错误数或错误率的值在设定阈值内。
[0014]可选地，所述基于所述评估反馈参数优化更新所述代理器，包括：
[0015]在所述代理器接收到所述评估反馈参数后，根据所述评估反馈参数优化所述可靠性等级判断动作对应的映射权值；
[0016]将优化后的所述映射权值作为与所述系统存储状态对应的新映射权值，以更新所述代理器。
[0017]可选地，所述系统存储状态包括以下介质特征量中的任意一个或多个：存储单元的错误等级、错误比特数、错误率、存储单元当前经历过操作周期数、编程时间、读取时间、擦除时间、电流、功耗、阈值电压分布、存储单元编号和条件错误单元数。
[0018]可选地，所述错误等级包括：将存储单元错误比特数或错误率的取值范围划分为多个区间，每个区间对应一个错误等级；
[0019]所述条件错误单元数包括：阈值电压分布、编程时间、读取时间、擦除时间、错误数、错误率中的一个特征量或多个特征量满足一定取值条件的存储单元的数量。
[0020]可选地，所述方法还包括：
[0021]判断是否终止运行所述代理器；
[0022]若是，则终止运行所述代理器；
[0023]若否，则继续获取所述存储单元的系统存储状态后传输至所述代理器。
[0024]可选地，所述判断是否终止运行所述代理器，包括：
[0025]判断所述存储系统中各存储单元是否均无法正常运行；或，
[0026]判断是否接受到用户发送的代理器终止运行命令；或，
[0027]所述存储系统是否满足预设的代理器终止条件；其中，所述预设的代理器终止条件包括所述存储系统中各所述存储单元的最小错误数不小于设定值。
[0028]根据本专利技术的第二方面，提供了一种基于强化学习的存储介质可靠性等级判断系统，包括：
[0029]可靠性判断模块，用于获取存储系统中至少一存储单元的系统存储状态，将所述系统存储状态传输至代理器，由所述代理器基于所述系统存储状态确定所述存储单元对应的可靠性等级判断动作；其中，所述代理器为能够执行存储单元可靠性等级判断动作的模块；
[0030]评估模块，用于通过所述存储系统对所述可靠性等级判断动作进行准确度评估得到评估结果，根据所述评估结果生成评估反馈参数；
[0031]更新模块，用于将所述评估反馈参数传输至所述代理器，基于所述评估反馈参数优化更新所述代理器。
[0032]根据本专利技术的第三方面，提供了一种计算机可读存储介质，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行第一方面任一项所述的方法。
[0033]根据本专利技术的第四方面，提供了一种计算设备，所述计算设备包括处理器以及存储器：
[0034]所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；
[0035]所述处理器用于根据所述程序代码中的指令执行第一方面任一项所述的方法。
[0036]本专利技术实施例提供了一种基于强化学习的存储介质可靠性等级的判断方法及系统、存储介质、计算设备，在本专利技术提供的存储介质可靠性等级的判断方法中，通过获取存储系统中至少一存储单元的系统存储状后，由能够执行存储单元可靠性等级判断动作的模块的代理器确定所述存储单元对应的可靠性等级判断动作，无需通过预先测试获取存储单元可靠性与特征参数之间的关系，可直接确定存储单元的可靠性等级，能够解决当前存储单元领域中由于工艺差异导致的不同存储单元可靠性下降速度不同的问题。另外，代理器还可以根据存储系统对可靠性等级判断动作进行准确度评估后生成的评估反馈参数进行优化更新，从而使得代理器可以适用于不同类型的存储介质的同时，更加快速且准确地获取存储介质的可靠性等级。
[0037]上述说明仅是本专利技术技术方案的概述，为了能够更清楚了解本专利技术的技术手段，而可依照说明书的内容予以实施，并且为了让本专利技术的上述和其它目的、特征和优点能够更明显易懂，以下特举本专利技术的具体实施方式。
[0038]根据下文结合附图对本专利技术具体实施例的详细描述，本领域技术人员将会更加明了本专利技术的上述以及其他目的、优点和特征。
附图说明
[0039]通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于强化学习的存储介质可靠性等级判断方法，其特征在于，包括：获取存储系统中至少一存储单元的系统存储状态，将所述系统存储状态传输至代理器，由所述代理器基于所述系统存储状态确定所述存储单元对应的可靠性等级判断动作；其中，所述代理器为能够执行存储单元可靠性等级判断动作的模块；通过所述存储系统对所述可靠性等级判断动作进行准确度评估得到评估结果，根据所述评估结果生成评估反馈参数；将所述评估反馈参数传输至所述代理器，基于所述评估反馈参数优化更新所述代理器。2.根据权利要求1所述的方法，其特征在于，所述由所述代理器基于所述系统存储状态确定所述存储单元的可靠性等级判断动作，包括：由所述代理器采用强化学习算法获取与所述系统存储状态对应的映射权值，基于所述映射权值确定所述存储单元的可靠性等级判断动作；其中，所述可靠性等级判断动作为所述判断存储单元在n次操作周期后的错误数或错误率是否满足预设条件；其中，n为一个值或多个值的集合；所述预设条件包括：错误数或错误率的值超过存储单元正常运行界限值；或，错误数或错误率的值在设定阈值内。3.根据权利要求2所述的方法，其特征在于，所述基于所述评估反馈参数优化更新所述代理器，包括：在所述代理器接收到所述评估反馈参数后，根据所述评估反馈参数优化所述可靠性等级判断动作对应的映射权值；将优化后的所述映射权值作为与所述系统存储状态对应的新映射权值，以更新所述代理器。4.根据权利要求1所述的方法，其特征在于，所述系统存储状态包括以下介质特征量中的任意一个或多个：存储单元的错误等级、错误比特数、错误率、存储单元当前经历过操作周期数、编程时间、读取时间、擦除时间、电流、功耗、阈值电压分布、存储单元编号和条件错误单元数。5.根据权利要求4所述的方法，其特征在于，所述错误等级包括：将存储单元错误比特数或错误率的取值范围划分为多个区间，每个区间对应一个...

【专利技术属性】
技术研发人员：潘玉茜，张浩明，刘政林，
申请(专利权)人：置富科技深圳股份有限公司，
类型：发明
国别省市：