一种基于存储系统的在线数据存储优化方法技术方案

本发明专利技术公开了一种基于存储系统的在线数据存储优化方法，属于数据存储技术领域。包括以下步骤：步骤S1，根据待处理数据的数据信息，建立分布式数据存储库；步骤S2，将存储设备划分得到N个区间，N为大于1的整数；确定所述N个区间中每一个区间的访问密度；步骤S3，接收需要存储的所述待处理数据，确定所述需要存储的所述待处理数据的类型；步骤S4，基于需要存储的所述待处理数据的类型，将所述待处理数据发送至所述N个区间中存储；步骤S5，所述N个区间中接收的数据进行分析，将异常数据进行反馈，同时可将数据类型进行区间转换；步骤S6，所述N个区间将所述待处理数据存至系统内存中，并进行加密。本发明专利技术使用方便，适合推广使用。

An Online Data Storage Optimization Method Based on Storage System

The invention discloses an online data storage optimization method based on a storage system, which belongs to the technical field of data storage. It includes the following steps: (1) building a distributed data repository according to the data information of the data to be processed; (2) dividing the storage device into N intervals, N being an integer greater than 1; determining the access density of each interval in the N intervals; receiving the data to be processed, and determining the type of data to be stored. Fourth, the data to be processed is sent to the N intervals for storage based on the type of data to be processed; fifth, the data received in the N intervals are analyzed, the abnormal data is fed back, and the data type can be converted into intervals; fifth, the N intervals store the data to be processed in the system memory and carry out the storage. Encryption. The invention has convenient use and is suitable for popularization and use.

【技术实现步骤摘要】
一种基于存储系统的在线数据存储优化方法
本专利技术涉及数据存储
，尤其涉及一种基于存储系统的在线数据存储优化方法。
技术介绍
数据存储，是数据流在加工过程中产生的临时文件或加工过程中需要查找的信息；常用的存储介质为磁盘和磁带。存储组织方式因存储介质而异；在磁带上数据仅按顺序文件方式存取；在磁盘上则可按使用要求采用顺序存取或直接存取方式；数据存储方式与数据文件组织密切相关，其关键在于建立记录的逻辑与物理顺序间对应关系，确定存储地址，以提高数据存取速度。在磁带上数据仅按顺序文件方式存取；在磁盘上则可按使用要求采用顺序存取或直接存取方式。数据存储方式与数据文件组织密切相关，其关键在于建立记录的逻辑与物理顺序间对应关系，确定存储地址，以提高数据存取速度。但，现有的在线数据存储优化方法在使用时仍存在一定的缺陷，现有的数据存储方式在数据读取时，效率低下，且数据杂乱，不便于使用者进行读取。因此，针对上述问题提出一种基于存储系统的在线数据存储优化方法。
技术实现思路
本专利技术的目的就在于为了解决上述数据存储存在读取缓慢，且浪费存储空间的问题而提供一种基于存储系统的在线数据存储优化方法，具有存储方便的优点。为实现上述目的，本专利技术采用如下技术方案：一种基于存储系统的在线数据存储优化方法，包括以下步骤：步骤S1，根据待处理数据的数据信息，建立分布式数据存储库；步骤S2，将存储设备划分得到N个区间，N为大于1的整数；确定所述N个区间中每一个区间的访问密度；步骤S3，接收需要存储的所述待处理数据，确定所述需要存储的所述待处理数据的类型；步骤S4，基于需要存储的所述待处理数据的类型，将所述待处理数据发送至所述N个区间中存储；步骤S5，所述N个区间中接收的数据进行分析，将异常数据进行反馈，同时可将数据类型进行区间转换；步骤S6，所述N个区间将所述待处理数据存至系统内存中，并进行加密。进一步的技术方案，步骤2中确定所述N个区间中任一区间的访问密度包括：判断该区间是否存在周期性频繁访问，若是，则将该区间在所述周期性频繁访问对应的一个周期内的访问次数作为访问密度，若否，则将该区间在整体使用期内访问次数作为访问密度。进一步的技术方案，步骤S1中，所述分布式数据存储库与云端数据库连接，且分布式数据存储库与云端数据库之间可进行数据传输。有益效果本专利技术与现有技术相比，具有如下显著优点：1、本专利技术的在线数据存储优化方法通过数据库的建立，然后对数据进行分析处理，数据分析处理后进行分类处理，且可将异常数据进行反馈，同时可将数据类型进行区间转换，最后将待处理数据存至系统内存中，并进行加密，提高磁盘使用率，对用户来讲，节省了存储空间，从而降低了投入成本，有效的在线数据存储优化，可以降低磁盘介质进行重复数据删除时的存储消耗。2、本专利技术的使用方便，实用性强，适合推广使用。具体实施方式下面将结合本专利技术实施例，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。一种基于存储系统的在线数据存储优化方法，包括以下步骤：步骤S1，根据待处理数据的数据信息，建立分布式数据存储库；步骤S2，将存储设备划分得到N个区间，N为大于1的整数；确定所述N个区间中每一个区间的访问密度；步骤S3，接收需要存储的所述待处理数据，确定所述需要存储的所述待处理数据的类型；步骤S4，基于需要存储的所述待处理数据的类型，将所述待处理数据发送至所述N个区间中存储；步骤S5，所述N个区间中接收的数据进行分析，将异常数据进行反馈，同时可将数据类型进行区间转换；步骤S6，所述N个区间将所述待处理数据存至系统内存中，并进行加密。步骤2中确定所述N个区间中任一区间的访问密度包括：判断该区间是否存在周期性频繁访问，若是，则将该区间在所述周期性频繁访问对应的一个周期内的访问次数作为访问密度，若否，则将该区间在整体使用期内访问次数作为访问密度。步骤S1中，所述分布式数据存储库与云端数据库连接，且分布式数据存储库与云端数据库之间可进行数据传输。对于本领域技术人员而言，显然本专利技术不限于上述示范性实施例的细节，而且在不背离本专利技术的精神或基本特征的情况下，能够以其他的具体形式实现本专利技术。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本专利技术的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本专利技术内。此外，应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施例中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。本文档来自技高网...

【技术保护点】
1.一种基于存储系统的在线数据存储优化方法，其特征在于：包括以下步骤：步骤S1，根据待处理数据的数据信息，建立分布式数据存储库；步骤S2，将存储设备划分得到N个区间，N为大于1的整数；确定所述N个区间中每一个区间的访问密度；步骤S3，接收需要存储的所述待处理数据，确定所述需要存储的所述待处理数据的类型；步骤S4，基于需要存储的所述待处理数据的类型，将所述待处理数据发送至所述N个区间中存储；步骤S5，所述N个区间中接收的数据进行分析，将异常数据进行反馈，同时可将数据类型进行区间转换；步骤S6，所述N个区间将所述待处理数据存至系统内存中，并进行加密。

【技术特征摘要】
1.一种基于存储系统的在线数据存储优化方法，其特征在于：包括以下步骤：步骤S1，根据待处理数据的数据信息，建立分布式数据存储库；步骤S2，将存储设备划分得到N个区间，N为大于1的整数；确定所述N个区间中每一个区间的访问密度；步骤S3，接收需要存储的所述待处理数据，确定所述需要存储的所述待处理数据的类型；步骤S4，基于需要存储的所述待处理数据的类型，将所述待处理数据发送至所述N个区间中存储；步骤S5，所述N个区间中接收的数据进行分析，将异常数据进行反馈，同时可将数据类型进行区间转换；步骤S6，所述N个区间...

【专利技术属性】
技术研发人员：葛星，
申请(专利权)人：安徽大尺度网络传媒有限公司，
类型：发明
国别省市：安徽,34