一种计算机系统的数据处理系统及方法技术方案

技术编号:34020312 阅读:20 留言:0更新日期:2022-07-02 16:46
本发明专利技术公开了一种计算机系统的数据处理系统,属于数据处理技术领域,分别对不同的存储区域和数据包进行数据采集和处理训练得到对应的存估系数和请估系数,基于存估系数和请估系数对不同的存储区域和数据包进行整体评估;通过分总的结构来对不同的存储区域和数据包进行分析以及综合评估,有效提高了存储区域和数据包分析的准确性和多样性;本发明专利技术还公开了一种计算机系统的数据处理方法,本发明专利技术可以解决现有方案中没有对计算机系统中不同的存储区域和请求处理的数据包进行预处理和分类,并自适应的动态调整存储区域的处理对象,导致不同存储区域和数据包的整体处理效果不佳的技术问题。技术问题。技术问题。

【技术实现步骤摘要】
一种计算机系统的数据处理系统及方法


[0001]本专利技术涉及大数据
,更具体地说,它涉及一种计算机系统的数据处理系统及方法。

技术介绍

[0002]计算机系统指用于数据库管理的计算机硬软件及网络系统。数据库系统需要大容量的主存以存放和运行操作系统、数据库管理系统程序、应用程序以及数据库、目录、系统缓冲区等,而辅存则需要大容量的直接存取设备。此外,系统应具有较强的网络功能。
[0003]现有的计算机系统的数据处理方案存在一定的缺陷:对请求处理的数据包没有进行预处理和分类,进而使得不同请求状态的请求包动态分配给对应处理状态的存储区域,并且也没有根据不同存储区域的外界因素与自身因素进一步进行评估和调整,使得不同存储区域和数据包的整体处理效果不佳。

技术实现思路

[0004]针对现有技术存在的不足,本专利技术的目的在于提供一种计算机系统的数据处理系统及方法,用于解决现有方案中没有对计算机系统中不同的存储区域和请求处理的数据包进行预处理和分类,并自适应的动态调整存储区域的处理对象,导致不同存储区域和数据包的整体处理效果不佳的技术问题。
[0005]本专利技术的目的可以通过以下技术方案实现:一种计算机系统的数据处理系统,包括内部数据处理模块、外部数据处理模块和评估调控模块;内部数据处理模块包含存储采集单元、存储处理单元和存储分析单元;存储采集单元用于采集计算机系统内不同存储区域的存储信息集;存储信息包含介质数据、已存数据和未存数据;存储处理单元用于对存储信息集中的介质数据、已存数据和未存数据进行数值化处理并标记,得到包含介质处理数据、已存处理数据和未存处理数据的存储处理集;存储分析单元用于根据存储处理集获取各个存储区域对应的存估系数,根据存估系数对各个存储区域的存储状态进行匹配评估得到存储分析集;外部数据处理模块包含运行采集单元、运行处理单元和运行分析单元;运行采集单元用于采集外部请求处理动作的数据包的数据信息集;数据信息集包含发送数据、类型数据和占用数据;运行处理单元用于对数据信息集中的发送数据、类型数据和占用数据进行数值字化处理并标记,得到包含发送处理数据、类型处理数据和占用处理数据的数据处理集;运行分析单元用于根据数据处理集获取各个外部请求处理动作对应的请估系数,根据请估系数对各个外部请求处理动作的请求状态进行匹配评估得到请求分析集;评估调控模块用于将存储分析集和请求分析集联立动态分配不同外部请求处理
动作至不同的存储区域,并对不同存储区域的处理行为进行追踪和调整。
[0006]优选地,获取存储处理集的具体步骤包括:获取存储信息集中的介质数据、已存数据和未存数据;提取介质数据的存储类型和最大存储速率,将存储类型与预设的存储类型表进行匹配获取对应的存储关联值并标记为CGi,i=1,2,3,...,n;n为正整数,表示为总的数量;其中,存储类型表由若干个不同的存储类型及其对应的存储关联值构成,不同的存储类型预先设置一个不同的存储关联值;提取最大存储速率的数值并标记为CSi;标记的若干个存储关联值与最大存储速率按时间顺序排列组合得到介质处理数据;提取已存数据中已存占存的数值并标记为YCi;提取已存数据中预设的监测时间内的已存次数并标记为CCi;标记的若干个已存占存与已存次数按时间顺序排列组合得到已存处理数据;提取未存数据中的未存占存的数值并标记为WCi;标记的若干个未存占存按时间顺序排列组合得到未存处理数据;介质处理数据、已存处理数据和未存处理数据按时间顺序排列得到存储处理集。
[0007]优选地,获取存储分析集的具体步骤包括:在预设的监测时间内,将存储处理集中的介质处理数据、已存处理数据和未存处理数据输入至数据处理模型中通过存储评估函数进行训练获取存估系数CGXi;该存储评估函数为CGXi=CGi
×
[a1
×
CSi+a2
×
WCi/(YCi+0.2847)];a1和a2均为不同的比例因子且均大于零,取值范围均为(0,4);将存估系数与预设的存估阈值进行匹配;若存估系数小于存估阈值,则判定对应存储区域的存储状态不佳并生成第一存估信号;根据第一存估信号将对应存储区域设定为第一标记区域;若存估系数不小于存估阈值且不大于存估阈值的p%,则判定对应存储区域的存储状态中等并生成第二存估信号;根据第二存估信号将对应存储区域设定为第二标记区域;p为大于零的实数;第二标记区域的优先级高于第一标记区域的优先级;若存估系数大于存估阈值的p%,则判定对应存储区域的存储优秀不佳并生成第三存估信号;根据第三存估信号将对应存储区域设定为第三标记区域;第三标记区域的优先级高于第二标记区域的优先级;存估系数、第一存估信号与第一标记区域、第二存估信号与第二标记区域、第三存估信号与第三标记区域构成存储分析集。
[0008]优选地,获取数据处理集的具体步骤包括:获取数据信息集中的发送数据、类型数据和占用数据;获取发送数据中的地址IP,根据地址IP获取与所有存储区域之间的距离并取值标记为SJi;标记的若干个距离按时间顺序排列组合得到发送处理数据;获取类型数据中的数据包类型,将数据包类型与预设的数据包关联表进行匹配获取对应的类型关联值并标记为LGi;其中,类型关联表包含若干个不同的数据包类型及其对应的类型关联值,不同的数据包类型预先设定一个对应的类型关联值;
标记的若干个类型关联值按时间顺序排列组合得到类型处理数据;提取占用数据中占用内存的数值并标记为ZNi;标记的若干个占用内存按时间顺序排列组合得到占用处理数据;发送处理数据、类型处理数据和占用处理数据按时间顺序排列得到数据处理集。
[0009]优选地,获取请求分析集的具体步骤包括:在预设的监测时间内,将数据处理集中的发送处理数据、类型处理数据和占用处理数据输入至数据处理模型中通过请求评估函数进行训练获取请估系数QGXi;请求评估函数为QGXi=(b1
×
SJi+b2
×
LGi+b3
×
ZNi)/(1/b1+1/b2+1/b3+0.9728);b1、b2和b3均为不同的比例因子且均大于零,取值范围均为(0,10);将请估系数与预设的请估阈值进行匹配;若请估系数小于请估阈值,则判定请求处理动作对应的数据包的请求状态优秀并生成第一请估信号;根据第一请估信号将对应数据包设定为第一标记数据包;若请估系数不小于请估阈值且不大于请估阈值的q%,则判定请求处理动作对应的数据包的请求状态一般并生成第二请估信号;根据第二请估信号将对应数据包设定为第二标记数据包;q为大于零的实数;第二标记数据包的优先级高于第一标记标记数据包的优先级;若请估系数大于存估阈值的q%,则判定请求处理动作对应的数据包的请求状态不佳并生成第三请估信号;根据第三请估信号将对应数据包设定为第三标记数据包;第三标记数据包的优先级高于第二标记数据包的优先级;请估系数、第一请估信号与第一标记数据包、第二请估信号与第二标记数据包、第三请估信号与第三标记数据包构成请求分析集。
[0010]优选地,动态分配不同外部请求处本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种计算机系统的数据处理系统,包括内部数据处理模块、外部数据处理模块和评估调控模块,其特征在于;内部数据处理模块:采集计算机系统内不同存储区域的存储信息集;对存储信息集中的介质数据、已存数据和未存数据进行数值化处理并标记,得到包含介质处理数据、已存处理数据和未存处理数据的存储处理集;根据存储处理集获取各个存储区域对应的存估系数,存估系数是将不同存储区域的各项数据进行联立来对其存储状态进行整体评估的数值;根据存估系数对各个存储区域的存储状态进行匹配评估得到存储分析集;外部数据处理模块:采集外部请求处理动作的数据包的数据信息集;对数据信息集中的发送数据、类型数据和占用数据进行数值字化处理并标记,得到包含发送处理数据、类型处理数据和占用处理数据的数据处理集;根据数据处理集获取各个外部请求处理动作对应的请估系数,请估系数是用于将外部请求处理动作的数据包的各方面数据进行联立来对其整体请求状态进行评估的数值;根据请估系数对各个外部请求处理动作的请求状态进行匹配评估得到请求分析集;评估调控模块:将存储分析集和请求分析集联立动态分配不同外部请求处理动作至不同的存储区域,并对不同存储区域的处理行为进行追踪和调整。2.根据权利要求1所述的一种计算机系统的数据处理系统,其特征在于,获取存储处理集的具体步骤包括:获取存储信息集中的介质数据、已存数据和未存数据;获取介质数据中的存储类型及其对应的存储关联值并标记;提取介质数据中的最大存储速率的数值并标记;分别提取已存数据中的已存占存和预设的监测时间内已存次数的数值并标记;提取未存数据中的未存占存的数值并标记;标记的各项数据按时间顺序排列得到存储处理集。3.根据权利要求1所述的一种计算机系统的数据处理系统,其特征在于,获取存储分析集的具体步骤包括:在预设的监测时间内,将存储处理集中标记的各项数据输入至数据处理模型中进行训练获取存估系数;将存估系数与预设的存估阈值进行匹配得到包含第一存估信号与第一标记区域、第二存估信号与第二标记区域、第三存估信号与第三标记区域的存储分析集。4.根据权利要求1所述的一种计算机系统的数据处理系统,其特征在于,获取数据处理集的具体步骤包括:获取数据信息集中的发送数据、类型数据和占用数据;获取发送数据中地址IP与所有存储区域之间的距离并取值标记;获取类型数据中的数据包类型及其对应的类型关联值并标记;提取占用数据中占用内存的数值并标记;标记的各项数据按时间顺序排列得到数据处理集。5.根据权利要求1所述的一种计算机系统的数据处理系统,其特征在于,获取请求分析集的具体步骤包括:在预设的监测时间...

【专利技术属性】
技术研发人员:邹水龙
申请(专利权)人:北京梦蓝杉科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1