一种数据存储及处理控制方法技术

技术编号:39045229 阅读:7 留言:0更新日期:2023-10-10 11:58
本发明专利技术公开了一种数据存储及处理控制方法,涉及数据存储技术领域,通过信息采集单元采集数据存储过程中参数,再分析参数获取数据存储系统的稳定性程度,并进行相应的处理,以保证数据存储的稳定性和提高数据存储的可伸缩性;分析参数过程通过存储内容分析单元对比分析存储前后的文件信息得出存储偏差度,并通过用户请求分析单元判断得出访问错误值,还通过性能状态分析单元获取网页的存储效率系数并获取存储负载系数,从而获取存储稳定性的三个影响系数,并对影响系数进行归一化处理,获取存储稳定性的综合影响系数,使得分析更全面,并根据稳定性程度分别进行相应的优化处理,针对性处理效率高。针对性处理效率高。针对性处理效率高。

【技术实现步骤摘要】
一种数据存储及处理控制方法


[0001]本专利技术涉及数据存储
,尤其涉及一种数据存储及处理控制方法。

技术介绍

[0002]数据存储对象包括数据流在加工过程中产生的临时文件或加工过程中需要查找的信息,数据以某种格式记录在计算机内部或外部存储介质上,一般是磁盘或磁带;
[0003]例如,现阶段的毕业生个人档案大多是将纸质档原件存储到人才管理中心,档案需要多个单位之间开具调档函或证明等形式进行调取查看,限制条件多和操作过程十分繁琐不便,若通过扫描纸质档原件,采用电子档文件的形式进行档案的数据存储,能节约很多资源;
[0004]当采用电子档形式进行档案数据存储,可能会涉及到数据隐私保护,其中可以通过设置访问权限对个人档案信息加以保护,但是,系统可能会出现数据存储不稳定的问题,造成存储数据的损坏或丢失,以及越权访问的访问错误等情况,由于难以判定数据存储的稳定性程度,导致难以提前进行预防避免存储不稳定,以及当数据不稳定时难以针对性进行处理和高效控制;
[0005]针对上述的技术缺陷,现提出一种数据存储及处理控制方法。

技术实现思路

[0006]本专利技术的目的在于提供了一种数据存储及处理控制方法,解决了上述问题。
[0007]为了实现上述目的,本专利技术采用了如下技术方案:一种数据存储及处理控制方法,包括以下步骤:
[0008]步骤一:信息采集单元采集数据存储过程中的存储内容参数、用户请求参数和性能状态参数;
[0009]其中,存储内容参数包括存储前的文件信息A和存储后的文件信息B;用户请求参数包括用户访问请求的数量Sl、存储内容的类别Lb和访问权限的级别Jb;性能状态参数包括存储效率指标和存储负载指标;
[0010]步骤二:存储内容分析单元、用户请求分析单元和性能状态分析单元分别对存储内容参数、用户请求参数和性能状态参数进行分析,获取存储稳定性的影响系数;
[0011]存储内容分析单元对比分析文件信息A和文件信息B,得出存储偏差度,并获取存储稳定性的第一影响系数Y1;
[0012]用户请求分析单元根据存储内容的类别Lb和访问权限的级别Jb,经判断得出访问错误值,并结合用户访问请求的数量Sl,获取存储稳定性的第二影响系数Y2;
[0013]性能状态分析单元根据存储效率指标获取网页的存储效率系数Mx,并根据存储负载指标获取存储负载系数Mf,通过存储效率系数Mx和存储负载系数Mf获取存储稳定性的第三影响系数Y3;
[0014]步骤三:综合分析单元建立统一分析模型,综合分析存储稳定性的影响系数,判定
数据存储的稳定性程度;
[0015]对存储稳定性的第一影响系数Y1、第二影响系数Y2和第三影响系数Y3进行归一化处理,获取存储稳定性的综合影响系数Yzh;
[0016]步骤四:处理控制单元依据数据存储的稳定性程度,对网页系统进行相应的优化处理。
[0017]优选的,存储内容分析单元的处理过程如下:
[0018]A1:通过截图的方式对存储前的文件和存储后的文件进行信息采集,获取两组图片并分别标记为文件信息A和文件信息B,以文件信息A和文件信息B的同一位置为基点,将两组图片置入相同的平面直角坐标系中,以文件信息A中的任一位置为i0,将文件信息B中与i0相同坐标的位置标记为i1;
[0019]A2:对i0和i1处的颜色进行识别对比,设定偏差值P,预设采集的i0、i1均为Np个,当i0处的颜色与i1处颜色相同时,标记偏差值P=0;当i0处的颜色与i1处颜色不同时,标记偏差值P=1;根据Np个标记的偏差值P测算存储偏差度C1;
[0020]A3:设定文件信息的采集周期为Q、测算周期为Tc,则一个测算周期内文件信息的采集次数为Nc=Tc/Q;先计算Nc个存储偏差度C1的平均值Cx,再计算标准差以获取第一影响系数Y1,当存储偏差度越大时,第一影响系数Y1越大,存储稳定性越差。
[0021]优选的,用户请求分析单元的处理过程如下:
[0022]B1:根据隐私程度的等级将存储内容的类别Lb分为Ⅰ类、Ⅱ类、Ⅲ类,并设置访问权限,访问权限的级别Jb分为Ⅰ级、Ⅱ级、Ⅲ级;
[0023]当用户向存储端口发送访问请求时,在访问请求中赋予访问权限标识,若访问请求中含有
“Ⅰ
级”权限标识,则只允许对应访问Ⅰ类存储内容;若访问请求中含有
“Ⅱ
级”权限标识,则允许对应访问Ⅰ类与Ⅱ类存储内容;若访问请求中含有
“Ⅲ
级”权限标识,则允许对应访问Ⅰ类、Ⅱ类与Ⅲ类存储内容;
[0024]B2:预设错误次数为W,当用户访问请求中含有的权限标识的级别Jb与存储内容的类别Lb相对应时,标记错误次数W=0;
[0025]当Ⅱ类存储内容的端口接收到的用户访问请求为
“Ⅰ
级”权限标识时,以及当Ⅲ类存储内容的端口接收到的用户访问请求为
“Ⅰ
级”或
“Ⅱ
级”权限标识时,均判定为“访问错误”,并标记错误次数W=1;
[0026]累计错误次数W的数值,以获取访问错误值;
[0027]B3:预设测算周期为Tc,将测算周期分成Nw个子时间段,并将每个子时间段设定为单位周期,根据单位周期内的访问错误值,结合单位周期内的用户访问请求的数量Sl,获取单位周期内的访问错误率C2;
[0028]计算Nw个访问错误率C2的平均值Cy,再计算标准差以获取第二影响系数Y2,当访问错误率越大时,第二影响系数Y2越大,存储稳定性越差。
[0029]优选的,性能状态分析单元的处理过程如下:
[0030]C1:存储效率指标包括磁盘每秒的读写次数PS、带宽利用率Ld和响应时间Tx;存储负载指标包括平均负载Fz、内存利用率Ln和CPU利用率Lc;
[0031]预设测算周期为Tc,采集测算周期内的存储效率指标和存储负载指标;
[0032]C2:获取存储效率系数Mx和存储负载系数Mf;
[0033]C2

1:根据存储效率指标获取网页的存储效率系数Mx;
[0034]当磁盘每秒的读写次数PS越高、带宽利用率Ld越高、响应时间Tx越低时,存储效率系数Mx越高;
[0035]C2

2:根据存储负载指标获取存储负载系数Mf;
[0036]当平均负载Fz越高、内存利用率Ln越高、CPU利用率Lc越高时,存储负载系数Mf越高;
[0037]C3:通过存储效率系数Mx和存储负载系数Mf,获取存储稳定性的第三影响系数Y3;
[0038]当存储效率系数Mx越高、存储负载系数Mf越低时,第三影响系数Y3越大,存储稳定性越好。
[0039]优选的,获取存储稳定性的综合影响系数的过程如下:
[0040]s1:先进行数据的归一化处理:
[0041]根据第一影响系数Y1、第二影响系数Y2和第三影响系数Y3对存储稳定性的影响程度,分本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据存储及处理控制方法,其特征在于,包括以下步骤:步骤一:信息采集单元采集数据存储过程中的存储内容参数、用户请求参数和性能状态参数;其中,存储内容参数包括存储前的文件信息A和存储后的文件信息B;用户请求参数包括用户访问请求的数量Sl、存储内容的类别Lb和访问权限的级别Jb;性能状态参数包括存储效率指标和存储负载指标;步骤二:存储内容分析单元、用户请求分析单元和性能状态分析单元分别对存储内容参数、用户请求参数和性能状态参数进行分析,获取存储稳定性的影响系数;存储内容分析单元对比分析文件信息A和文件信息B,得出存储偏差度,并获取存储稳定性的第一影响系数Y1;用户请求分析单元根据存储内容的类别Lb和访问权限的级别Jb,经判断得出访问错误值,并结合用户访问请求的数量Sl,获取存储稳定性的第二影响系数Y2;性能状态分析单元根据存储效率指标获取网页的存储效率系数Mx,并根据存储负载指标获取存储负载系数Mf,通过存储效率系数Mx和存储负载系数Mf获取存储稳定性的第三影响系数Y3;步骤三:综合分析单元建立统一分析模型,综合分析存储稳定性的影响系数,判定数据存储的稳定性程度;对存储稳定性的第一影响系数Y1、第二影响系数Y2和第三影响系数Y3进行归一化处理,获取存储稳定性的综合影响系数Yzh;步骤四:处理控制单元依据数据存储的稳定性程度,对网页系统进行相应的优化处理。2.根据权利要求1中所述的一种数据存储及处理控制方法,其特征在于:存储内容分析单元的处理过程如下:A1:通过截图的方式对存储前的文件和存储后的文件进行信息采集,获取两组图片并分别标记为文件信息A和文件信息B,以文件信息A和文件信息B的同一位置为基点,将两组图片置入相同的平面直角坐标系中,以文件信息A中的任一位置为i0,将文件信息B中与i0相同坐标的位置标记为i1;A2:对i0和i1处的颜色进行识别对比,设定偏差值P,预设采集的i0、i1均为Np个,当i0处的颜色与i1处颜色相同时,标记偏差值P=0;当i0处的颜色与i1处颜色不同时,标记偏差值P=1;根据Np个标记的偏差值P测算存储偏差度C1;A3:设定文件信息的采集周期为Q、测算周期为Tc,则一个测算周期内文件信息的采集次数为Nc=Tc/Q;先计算Nc个存储偏差度C1的平均值Cx,再计算标准差以获取第一影响系数Y1。3.根据权利要求1中所述的一种数据存储及处理控制方法,其特征在于:用户请求分析单元的处理过程如下:B1:根据隐私程度的等级将存储内容的类别Lb分为Ⅰ类、Ⅱ类、Ⅲ类,并设置访问权限,访问权限的级别Jb分为Ⅰ级、Ⅱ级、Ⅲ级;当用户向存储端口发送访问请求时,在访问请求中赋予访问权限标识,若访问请求中含有
“Ⅰ
级”权限标识,则只允许对应访问Ⅰ类存储内容;若访问请求中含有
“Ⅱ
级”权限标识,则允许对应访问Ⅰ类与Ⅱ类存储内容;若访问请求中含有
“Ⅲ
级”权限标识,则允许对应访问

类、Ⅱ类与Ⅲ类存储内容;B2:预设错误次数为W,当用户访问请求中含有的权限标识的级别Jb与存储内容的类别Lb相对应时,标记错误次数W=0;当Ⅱ类存储内容的端口接收到的用户访问请求为
“Ⅰ
级...

【专利技术属性】
技术研发人员:朱安庆岑健秋曾华
申请(专利权)人:朱庆网络科技鄄城有限责任公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1