一种基于超融合存储系统的数据分层方法、终端及系统技术方案

本发明专利技术公开了一种基于超融合存储系统的数据分层方法、终端及系统，涉及数据处理技术领域，主要目的在于基于用户的访问操作对超融合存储系统中各个节点的数据进行分层存储，以提高用户的数据访问效率。本发明专利技术主要的技术方案为：从超融合存储系统中的多个第一类型节点分别获取日志统计信息，所述日志统计信息中记录有数据的访问频率；根据所述日志统计信息确定所述数据的存储类型，所述存储类型包括冷数据和热数据；根据所述数据的存储类型调整所述数据的存储位置。本发明专利技术主要用于对存储数据的迁移存储。

A data stratification method, terminal and system based on the hyper fusion storage system

The invention discloses a data hierarchical method, super fusion storage system based on terminal and system, relates to the technical field of data processing, the main purpose of user access operation based on the super fusion of each node in the storage system data are layered storage, to improve user efficiency of data access. The technical scheme of the invention is mainly from the super fusion of multiple types of nodes in the first storage system were used to obtain the log log statistics, statistical information is recorded with the frequency of data access; according to the type of the data storage is determined by the log statistics, the data storage types including cold and heat data; according to the storage location storage type adjustment of the data of the data. The present invention is mainly used for migrating storage of stored data.

【技术实现步骤摘要】
一种基于超融合存储系统的数据分层方法、终端及系统
本专利技术涉及数据处理
，尤其涉及一种基于超融合存储系统的数据分层方法、终端及系统。
技术介绍
超融合存储系统是一种面向对象的分布式存储系统。超融合是指在同一套单元设备中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术，而且还包括云管理软件，数据重构，多副本，快照技术等元素，而多节点可以通过网络聚合起来，实现模块化的无缝横向扩展，形成统一的资源池。而在超融合场景下，数据的访问性能显得尤为重要，能快速响应用户的数据请求是衡量超融合存储的一个重要指标，在这样的指标面前，存储设备的性能就是决定用户数据请求速度的重要因素，相较于传统的机械硬盘(HardDiskDrive，HDD)，固态硬盘(SolidStateDrives，SSD)具有很好的弹性，并提供对数据的快速访问，但其拥有写入次数限制。而超融合存储系统结合两者的优缺点，采取SSD+HDD的混合存储方式，将所有物理服务器上的硬盘组成一个存储资源池。其中所有机械硬盘组成存储容量层，SSD闪存盘组成存储性能层，两者一起构建了分层持久存储。针对这种分层环境，就需要将SSD和HDD区分本文档来自技高网...

【技术保护点】
一种基于超融合存储系统的数据分层方法，其特征在于，所述方法包括：从超融合存储系统中的多个第一类型节点分别获取日志统计信息，所述日志统计信息中记录有数据的访问频率；根据所述日志统计信息确定所述数据的存储类型，所述存储类型包括冷数据和热数据；根据所述数据的存储类型调整所述数据的存储位置。

【技术特征摘要】
1.一种基于超融合存储系统的数据分层方法，其特征在于，所述方法包括：从超融合存储系统中的多个第一类型节点分别获取日志统计信息，所述日志统计信息中记录有数据的访问频率；根据所述日志统计信息确定所述数据的存储类型，所述存储类型包括冷数据和热数据；根据所述数据的存储类型调整所述数据的存储位置。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：监控所述第一类型节点中的第一节点是否存在数据访问操作；若存在，则将所述数据访问操作对应的数据访问日志异步记录在所述第一节点中，所述数据访问日志中记录有所述第一节点的节点信息、访问类型以及数据存储位置信息。3.根据权利要求2所述的方法，其特征在于，所述从超融合存储系统中的多个第一类型节点分别获取日志统计信息包括：由所述第一节点获取预置时间间隔内的本地记录的数据访问日志；根据所述数据访问日志统计对应数据的访问频率，生成所述第一节点对应的日志统计信息；由所述第一节点上报所述日志统计信息。4.根据权利要求3所述的方法，其特征在于，根据所述数据访问日志统计对应数据的访问频率包括：根据所述数据访问日志中记录的访问类型确定数据访问操作对应的权重值；利用所述权重值统计同一数据在预置时间间隔内的访问频率。5.根据权利要求1-4中任一项所述的方法，其特征在于，根据所述日志统计信息确定所述数据的存储类型包括：提取所述日志统计信息中记录的数据的访问频率；判断所述访问频率是否达到阈值；若达到，则确定所述数据的存储类型为热数据，否则，确定所述数据的存储类型为冷数据。6.根据权利要求5所述的方法，其特征在于，根据所述数据的存储类型调整所述数据的存储位置包括：当所述数据的存储类型为热数据时，获取访问所述数据的各个节...

【专利技术属性】
技术研发人员：李俊鹤，
申请(专利权)人：北京联想超融合科技有限公司，
类型：发明
国别省市：北京,11