System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种数据存储方法以及相关装置制造方法及图纸_技高网

一种数据存储方法以及相关装置制造方法及图纸

技术编号:41183317 阅读:4 留言:0更新日期:2024-05-07 22:16
本发明专利技术实施例提供一种数据存储方法以及相关装置,属于数据处理技术领域。该方法包括:获得待存储数据,对待存储数据进行压缩获得待存储数据对应的压缩数据和冗余数据;计算压缩数据进行数据存储时所消耗的能量,获得消耗能量值,并根据消耗能量值确定压缩数据进行数据存储时对应的目标存储节点;根据目标存储节点和压缩数据进行映射处理,将压缩数据映射到对应的目标存储节点中,获得压缩数据对应的第一存储结果;采用遗传算法对冗余数据进行分配,获得冗余数据对应的目标分配策略;根据目标分配策略将冗余数据进行数据存储,获得冗余数据对应的第二存储结果;根据第一存储结果和第二存储结果确定待存储数据对应的目标存储结果。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种数据存储方法以及相关装置


技术介绍

1、随着互联网的发展,在工业环境中可通过不同类型的传感器或者监控设备获得工业设备对应的运行数据。工业设备产生的数据量通常非常庞大,需要能够高效的存储和管理这些大规模的数据,但是,在采集得到的运行数据中往往存在较多的冗余数据,相关技术中对大数据进行存储时,无法有效分配运行数据中存在的冗余数据,进而导致数据存储方法存在带宽占用率高和数据存储量低的问题。从而导致网络拥堵导致数据传输延迟增加,从而影响数据实时性的应用。此外,存储量低意味着无法容纳足够多的数据,可能导致部分数据被覆盖或删除,从而增加数据丢失的风险。如果发生数据丢失,可能会导致信息不完整或不准确,影响业务的正常运行和决策的准确性。


技术实现思路

1、本专利技术实施例的主要目的在于提供一种数据存储方法以及相关装置,旨在解决相关技术中对大数据进行存储时,无法有效分配运行数据中存在的冗余数据,进而导致数据存储方法存在带宽占用率高和数据存储量低的问题。

2、第一方面,本专利技术实施例提供一种数据存储方法,包括:

3、获得待存储数据,对所述待存储数据进行压缩获得所述待存储数据对应的压缩数据和冗余数据;

4、计算所述压缩数据进行数据存储时所消耗的能量,获得消耗能量值,并根据所述消耗能量值确定所述压缩数据进行数据存储时对应的目标存储节点;

5、根据所述目标存储节点和所述压缩数据进行映射处理,将所述压缩数据映射到对应的所述目标存储节点中,获得所述压缩数据对应的第一存储结果;

6、采用遗传算法对所述冗余数据进行分配,获得所述冗余数据对应的目标分配策略;

7、根据所述目标分配策略将所述冗余数据进行数据存储,获得所述冗余数据对应的第二存储结果;

8、根据所述第一存储结果和所述第二存储结果确定所述待存储数据对应的目标存储结果。

9、第二方面,本专利技术实施例提供一种数据存储装置,包括:

10、数据获取模块,用于获得待存储数据,对所述待存储数据进行压缩获得所述待存储数据对应的压缩数据和冗余数据;

11、节点确认模块,用于计算所述压缩数据进行数据存储时所消耗的能量,获得消耗能量值,并根据所述消耗能量值确定所述压缩数据进行数据存储时对应的目标存储节点;

12、第一存储模块,用于根据所述目标存储节点和所述压缩数据进行映射处理,将所述压缩数据映射到对应的所述目标存储节点中,获得所述压缩数据对应的第一存储结果;

13、数据分配模块,用于采用遗传算法对所述冗余数据进行分配,获得所述冗余数据对应的目标分配策略;

14、第二存储模块,用于根据所述目标分配策略将所述冗余数据进行数据存储,获得所述冗余数据对应的第二存储结果;

15、目标存储模块,用于根据所述第一存储结果和所述第二存储结果确定所述待存储数据对应的目标存储结果。

16、第三方面,本专利技术实施例还提供一种终端设备,所述终端设备包括处理器、存储器、存储在所述存储器上并可被所述处理器执行的计算机程序以及用于实现所述处理器和所述存储器之间的连接通信的数据总线,其中所述计算机程序被所述处理器执行时,实现如本专利技术说明书提供的任一项数据存储方法的步骤。

17、第四方面,本专利技术实施例还提供一种存储介质,用于计算机可读存储,其特征在于,所述存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如本专利技术说明书提供的任一项数据存储方法的步骤。

18、本专利技术实施例提供一种数据存储方法以及相关装置,该方法包括:获得待存储数据,对待存储数据进行压缩获得待存储数据对应的压缩数据和冗余数据;在对所述待存储数据进行重要性排序中,所述压缩数据的第一重要性大于所述冗余数据的第二重要性;计算压缩数据进行数据存储时所消耗的能量,获得消耗能量值,并根据消耗能量值确定压缩数据进行数据存储时对应的目标存储节点;根据目标存储节点和压缩数据进行映射处理,将压缩数据映射到对应的目标存储节点中,获得压缩数据对应的第一存储结果;采用遗传算法对冗余数据进行分配,获得冗余数据对应的目标分配策略;根据目标分配策略将冗余数据进行数据存储,获得冗余数据对应的第二存储结果;根据第一存储结果和第二存储结果确定待存储数据对应的目标存储结果。本申请通过对待存储数据进行压缩,减少了存储所需的空间,从而减少了存储设备的能耗。通过计算压缩数据进行存储所消耗的能量,并根据消耗能量值确定目标存储节点,可以实现能量消耗的优化。此外,通过映射处理将压缩数据映射到目标存储节点中,以及采用遗传算法对冗余数据进行分配,可以优化存储资源的利用。这有助于提高存储系统的性能和效率,减少资源浪费。采用遗传算法对冗余数据进行分配,并将其存储在不同的目标节点中,可以实现数据的冗余备份。这有助于提高数据的可靠性和容错能力,防止数据丢失或损坏。最后得到的目标存储结果,可以确保待存储数据以最有效的方式进行存储。这有助于提高数据存储的效率和性能,保证数据的及时可用性和完整性。解决了相关技术中对大数据进行存储时,无法有效分配运行数据中存在的冗余数据,进而导致数据存储方法存在带宽占用率高和数据存储量低的问题。

本文档来自技高网...

【技术保护点】

1.一种数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述待存储数据进行压缩获得所述待存储数据对应的压缩数据和冗余数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述计算所述压缩数据进行数据存储时所消耗的能量,获得消耗能量值,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述消耗能量值确定所述压缩数据进行数据存储时对应的目标存储节点,包括:

5.根据权利要求1所述的方法,其特征在于,所述采用遗传算法对所述冗余数据进行分配,获得所述冗余数据对应的目标分配策略,包括:

6.根据权利要求5所述的方法,其特征在于,根据下列公式获得所述第一通信代价:

7.根据权利要求1所述的方法,其特征在于,所述根据所述第一存储结果和所述第二存储结果确定所述待存储数据对应的目标存储结果,包括:

8.一种数据存储装置,其特征在于,包括:

9.一种终端设备,其特征在于,所述终端设备包括处理器、存储器;

10.一种计算机存储介质,用于计算机存储,其特征在于,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现权利要求1至7中任一项所述的数据存储方法的步骤。

...

【技术特征摘要】

1.一种数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述待存储数据进行压缩获得所述待存储数据对应的压缩数据和冗余数据,包括:

3.根据权利要求1所述的方法,其特征在于,所述计算所述压缩数据进行数据存储时所消耗的能量,获得消耗能量值,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述消耗能量值确定所述压缩数据进行数据存储时对应的目标存储节点,包括:

5.根据权利要求1所述的方法,其特征在于,所述采用遗传算法对所述冗余数据进行分配,获得所述冗余数据对应的目标分配策略,包括...

【专利技术属性】
技术研发人员:蔡毅夏映辉刘刚游东东张建富向海民
申请(专利权)人:广东力创信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1