当前位置: 首页 > 专利查询>章稳建专利>正文

基于工业互联网的大数据存储速率优化方法及云计算中心技术

技术编号:25271195 阅读:14 留言:0更新日期:2020-08-14 23:04
本申请是关于基于工业互联网的大数据存储速率优化方法及云计算中心。首先确定第一存储速率和第二存储速率。其次基于获取第一存储速率和第二存储速率之间的每个目标存储速率进行参数调整,得到每个目标存储速率对应的目标数据传输协议。然后在目标数据传输协议及其对应的目标存储速率的基础上进行测试数据的存储以得到第一存储结果和第二存储结果。进而计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率。最后根据数据匹配率确定针对第一终端设备和第二终端设备的通用存储速率。基于通用存储速率对第一终端设备和第二终端设备上传的数据进行存储,不仅可以改善数据丢失的现象,还可以减少云计算中心的运行负荷。

【技术实现步骤摘要】
基于工业互联网的大数据存储速率优化方法及云计算中心
本申请涉及工业互联网的大数据处理
,尤其涉及基于工业互联网的大数据存储速率优化方法及云计算中心。
技术介绍
随着工业互联网的快速发展,大数据存储已然成为现目前重要的数据处理手段之一。例如,基于大数据处理的云计算中心能够将不同终端设备的数据进行存储以便于后期对这些数据进行调用、分析和挖掘。由于不同终端设备与云计算中心的之间的接口类型不同,云计算中心对终端设备上传的数据进行存储的速率也不同。若云计算中心以其中一个终端设备对应的存储速率对与云计算中心通信的各个终端设备上传的数据进行存储,在接收数据的过程中可能导致数据的大面积丢失。若云计算中心针对不同终端设备开启不同存储速率的线程,则会极大地增加云计算中心的运行负荷。
技术实现思路
本申请提供基于工业互联网的大数据存储速率优化方法及云计算中心,以改善现有技术存在的上述问题。第一方面,提供一种基于工业互联网的大数据存储速率优化方法,应用于与第一终端设备和第二终端设备通信的云计算中心,所述方法包括:分别基于第一终端设备对应的第一接口类型和第二终端设备对应的第二接口类型,确定对所述第一终端设备上传的数据进行存储的第一存储速率以及对所述第二终端设备上传的数据进行存储的第二存储速率;获取所述第一存储速率和所述第二存储速率之间的多个目标存储速率;根据每个目标存储速率进行参数调整,得到每个目标存储速率对应的目标数据传输协议;对每个目标存储速率对应的目标数据传输协议进行使用,并基于每个目标存储速率对所述第一终端设备上传的第一测试数据以及所述第二终端设备上传的第二测试数据进行存储,得到所述第一测试数据对应的第一存储结果以及所述第二测试数据对应的第二存储结果;计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率;其中,所述数据匹配率用于表征所述第一存储结果和所述第二存储结果之间的相似度;根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率;其中,所述云计算中心在存储所述第一终端设备上传的数据以及在存储所述第二终端设备上传的数据时均使用所述通用存储速率。优选地,所述根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率,包括:将最大数据匹配率对应的目标存储速率确定为所述通用存储速率。优选地,所述获取所述第一存储速率和所述第二存储速率之间的多个目标存储速率,包括:确定当前性能参数;其中,所述当前性能参数为所述云计算中心与所述第一终端设备和所述第二终端设备进行通信时所占用的内存资源的映射值,所述映射值通过预设的映射关系列表确定;根据所述当前性能参数确定速率步长;其中,所述速率步长用于表征所述第一存储速率和所述第二存储速率之间的相邻两个存储速率的差值;按照所述速率步长从所述第一存储速率和所述第二存储速率之间确定多个目标存储速率。优选地,所述根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率,包括:判断计算出的最大数据匹配率是否大于或等于设定匹配率;在判定出所述最大数据匹配率大于或等于所述设定匹配率时,将所述最大数据匹配率对应的目标存储速率确定为所述通用存储速率;在判定出所述最大数据匹配率小于所述设定匹配率时,确定与所述最大数据匹配率对应的目标存储速率相邻的第一目标存储速率和第二目标存储速率;对所述速率步长进行缩短得到当前速率步长;按照当前速率步长从所述第一目标存储速率和所述第二目标存储速率之间确定出多个中间存储速率;计算每个中间存储速率对应的第中间数据匹配率;判断最小中间数据匹配率是否大于或等于所述设定匹配率;在最小中间数据匹配率大于或等于所述设定匹配率时,将所述最大中间数据匹配率对应的中间存储速率确定为所述通用存储速率;在最小中间数据匹配率小于所述设定匹配率时,确定与所述最大中间数据匹配率对应的中间存储速率相邻的第一中间存储速率和第二中间存储速率,改变当前速率步长并返回执行与按照当前速率步长从所述第一目标存储速率和所述第二目标存储速率之间确定出多个中间存储速率类似的步骤。优选地,所述计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率,包括:分别将所述第一存储结果和所述第二存储结果以字符编码的形式列出,得到所述第一存储结果对应的第一编码字符串以及所述第二存储结果对应的第二编码字符串;确定所述第一测试数据或所述第二测试数据对应的第三编码字符串;确定所述第一编码字符串与所述第三编码字符串的第一相似度以及所述第二编码字符串与所述第三编码字符串的第二相似度;将所述第一编码字符串与所述第二编码字符串进行逐位比较,得到所述第一编码字符串与所述第二编码字符串之间的第三相似度;按照所述第一相似度与所述第二相似度的比值对所述第三相似度进行加权得到第四相似度并将所述第四相似度确定为所述第一存储结果和所述第二存储结果之间的数据匹配率。优选地,所述分别基于第一终端设备对应的第一接口类型和第二终端设备对应的第二接口类型,确定对所述第一终端设备上传的数据进行存储的第一存储速率以及对所述第二终端设备上传的数据进行存储的第二存储速率,包括:计算以所述第一接口类型进行数据传输的第一失真率以及以所述第二接口类型进行数据传输的第二失真率;分别在预设的关系曲线中获取所述第一失真率对应的第一节点值以及所述第二失真率对应的第二节点值;其中,所述关系曲线为失真率与存储速率的曲线,节点值用于表征存储速率;确定所述第一接口类型的第一类型参数以及所述第二接口类型的第二类型参数,通过所述第一类型参数对所述第一节点值进行修正得到所述第一存储速率,通过所述第二类型参数对所述第二节点值进行修正得到所述第二存储速率。优选地,所述根据每个目标存储速率进行参数调整,得到每个目标存储速率对应的目标数据传输协议,包括:在开启预设的参数调整线程时,获取所述参数调整线程对应的线程脚本序列,确定目标存储速率对应的速率响应序列,所述线程脚本序列和所述速率响应序列分别包括多个具有不同序列优先级的节点单元;提取所述参数调整线程在所述线程脚本序列的任一节点单元的参数调整因子,将所述速率响应序列中具有最小序列优先级的节点单元确定为第一节点单元;根据预设的通信协议参数将所述参数调整因子输入到所述第一节点单元,在所述第一节点单元中得到参考因子,并根据所述参数调整因子以及所述参考因子,生成所述参数调整线程和所述目标存储速率之间的关系转换列表;以所述参考因子为拟合点在所述第一节点单元中获取协议报文字符,基于所述关系转换列表将所述协议报文字符导入到所述参数调整因子所在节点单元,在所述参数调整因子所在节点单元中得到所述协议报文字符对应的映射参数;按照所述通信协议参数对应的每个参数节点的连接关系对所述映射参数进行整合,得到所述映射参数对应的参数序列;将所述参数序列加载至所述参数调整线程并获本文档来自技高网...

【技术保护点】
1.一种基于工业互联网的大数据存储速率优化方法,其特征在于,应用于与第一终端设备和第二终端设备通信的云计算中心,所述方法包括:/n分别基于第一终端设备对应的第一接口类型和第二终端设备对应的第二接口类型,确定对所述第一终端设备上传的数据进行存储的第一存储速率以及对所述第二终端设备上传的数据进行存储的第二存储速率;/n获取所述第一存储速率和所述第二存储速率之间的多个目标存储速率;根据每个目标存储速率进行参数调整,得到每个目标存储速率对应的目标数据传输协议;/n对每个目标存储速率对应的目标数据传输协议进行使用,并基于每个目标存储速率对所述第一终端设备上传的第一测试数据以及所述第二终端设备上传的第二测试数据进行存储,得到所述第一测试数据对应的第一存储结果以及所述第二测试数据对应的第二存储结果;/n计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率;其中,所述数据匹配率用于表征所述第一存储结果和所述第二存储结果之间的相似度;/n根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率;其中,所述云计算中心在存储所述第一终端设备上传的数据以及在存储所述第二终端设备上传的数据时均使用所述通用存储速率。/n...

【技术特征摘要】
1.一种基于工业互联网的大数据存储速率优化方法,其特征在于,应用于与第一终端设备和第二终端设备通信的云计算中心,所述方法包括:
分别基于第一终端设备对应的第一接口类型和第二终端设备对应的第二接口类型,确定对所述第一终端设备上传的数据进行存储的第一存储速率以及对所述第二终端设备上传的数据进行存储的第二存储速率;
获取所述第一存储速率和所述第二存储速率之间的多个目标存储速率;根据每个目标存储速率进行参数调整,得到每个目标存储速率对应的目标数据传输协议;
对每个目标存储速率对应的目标数据传输协议进行使用,并基于每个目标存储速率对所述第一终端设备上传的第一测试数据以及所述第二终端设备上传的第二测试数据进行存储,得到所述第一测试数据对应的第一存储结果以及所述第二测试数据对应的第二存储结果;
计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率;其中,所述数据匹配率用于表征所述第一存储结果和所述第二存储结果之间的相似度;
根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率;其中,所述云计算中心在存储所述第一终端设备上传的数据以及在存储所述第二终端设备上传的数据时均使用所述通用存储速率。


2.如权利要求1所述的方法,其特征在于,所述根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率,包括:
将最大数据匹配率对应的目标存储速率确定为所述通用存储速率。


3.如权利要求1所述的方法,其特征在于,所述获取所述第一存储速率和所述第二存储速率之间的多个目标存储速率,包括:
确定当前性能参数;其中,所述当前性能参数为所述云计算中心与所述第一终端设备和所述第二终端设备进行通信时所占用的内存资源的映射值,所述映射值通过预设的映射关系列表确定;
根据所述当前性能参数确定速率步长;其中,所述速率步长用于表征所述第一存储速率和所述第二存储速率之间的相邻两个存储速率的差值;
按照所述速率步长从所述第一存储速率和所述第二存储速率之间确定多个目标存储速率。


4.如权利要求3所述的方法,其特征在于,所述根据所述数据匹配率确定针对所述第一终端设备和所述第二终端设备的通用存储速率,包括:
判断计算出的最大数据匹配率是否大于或等于设定匹配率;
在判定出所述最大数据匹配率大于或等于所述设定匹配率时,将所述最大数据匹配率对应的目标存储速率确定为所述通用存储速率;
在判定出所述最大数据匹配率小于所述设定匹配率时,确定与所述最大数据匹配率对应的目标存储速率相邻的第一目标存储速率和第二目标存储速率;
对所述速率步长进行缩短得到当前速率步长;按照当前速率步长从所述第一目标存储速率和所述第二目标存储速率之间确定出多个中间存储速率;
计算每个中间存储速率对应的第中间数据匹配率;判断最小中间数据匹配率是否大于或等于所述设定匹配率;在最小中间数据匹配率大于或等于所述设定匹配率时,将所述最大中间数据匹配率对应的中间存储速率确定为所述通用存储速率;在最小中间数据匹配率小于所述设定匹配率时,确定与所述最大中间数据匹配率对应的中间存储速率相邻的第一中间存储速率和第二中间存储速率,改变当前速率步长并返回执行与按照当前速率步长从所述第一目标存储速率和所述第二目标存储速率之间确定出多个中间存储速率类似的步骤。


5.如权利要求1-4任一项所述的方法,其特征在于,所述计算每个目标存储速率对应的第一存储结果和第二存储结果之间的数据匹配率,...

【专利技术属性】
技术研发人员:章稳建
申请(专利权)人:章稳建
类型:发明
国别省市:江苏;32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1