一种分布式存储IO卸载方法、系统、设备和存储介质技术方案

本发明专利技术提出了一种分布式存储IO卸载方法、系统、设备和存储介质，该方法包括接收复制请求之后进行IO切片处理；根据分布式存储实现方式进行资源协调；如果实现方式为带有元数据管理的的分布式存储，使源卷obj文件的位置和目的卷obj文件的位置位于相同节点上，并下发内部数据拷贝；如果实现方式为没有带有元数据的分布式存储，计算源卷的切片所有副本的位置和目的卷的切片所有副本的位置；使源卷的切片所有副本和目的卷的切片所有副本均在本地处理。基于该方法，还提出了一种分布式存储IO卸载系统、设备和存储介质。本发明专利技术使得分布式存储复制内部进行IO分流和卸载，减少了分布式存储资源损耗和网络转发，达到更好的卸载存储流量。达到更好的卸载存储流量。达到更好的卸载存储流量。

【技术实现步骤摘要】
一种分布式存储IO卸载方法、系统、设备和存储介质


[0001]本专利技术属于分布式存储
，特别涉及一种分布式存储IO卸载方法、系统、设备和存储介质。

技术介绍

[0002]在信息爆炸增长的时代，CPU发展遇到瓶颈，摩尔定律在CPU的发展中逐步失效，因此如何提高单机性能提上议题：其中一个方式就是通过旁路卸载，减少耗时应用对CPU的使用，让CPU只关注计算，提高CPU的利用率；因此提出网络卸载和存储卸载。海量数据的增长，传统存储成本高，效率低下无法满足用户数据的增长速度，高效智能的分布式存储技术解决这一痛楚；分布式存储具有以下几个特征：高性能、高可靠性、高可扩展性、透明性、自治性。分布式存储数据存放首先要进行分片切割处理，之后通过一定算法或者是元数据服务，计算或查找出数据存放位置，由于用户数据被分为多个数据块，因此任何一个数据块丢失都可以造成数据不可用，因此分布式存储必须考虑合理的冗余存储模型，为用户的数据分块提供多个冗余的存储副本，从而保证数据的安全性和可靠性，同时提供了海量数据存储，降低存储成本，因此分布式存储需要支持硬件卸载指令，通过分本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种分布式存储IO卸载方法，其特征在于，包括以下步骤：接收复制请求之后通过分布式存储进行IO切片处理；根据分布式存储实现方式进行资源协调；如果分布式存储实现方式为带有元数据管理的的分布式存储，使源卷obj文件的位置和目的卷obj文件的位置位于相同节点上，并下发内部数据拷贝；如果分布式存储实现方式为没有带有元数据的分布式存储，计算源卷的切片所有副本的位置和目的卷的切片所有副本的位置；使源卷的切片所有副本和目的卷的切片所有副本均在本地处理。2.根据权利要求1所述的一种分布式存储IO卸载方法，其特征在于，所述接收复制请求之后通过分布式存储进行IO切片处理具体包括：修改分布式存储对SCSI协议xcopy支持，收到xcopy请求之后通过分布式存储实现切片大小进行切片处理。3.根据权利要求1所述的一种分布式存储IO卸载方法，其特征在于，在所述分布式存储实现方式为带有元数据管理的的分布式存储时，如果一个节点中无法容纳目的卷的obj文件，则发送读写请求到源卷所在的主机，在所述源卷所在的主机内部进行读取操作，之后进行网络转发写入目的卷所在的主机中。4.根据权利要求1所述的一种分布式存储IO卸载方法，其特征在于，所述如果没有带有元数据的分布式存储收到xcopy请求时，首先通过一致性算法计算出源卷的切片所有副本的位置和目的卷的切片所有副本的位置。5.根据权利要求4所述的一种分布式存储IO卸载方法，其特征在于，所述计算源卷的切片所有副本的位置和目的卷的切片所有副本的位置；使源卷的切片所有副本和目的卷的切片所有副本均在本地处理具体包括：如果源卷的切片所有副本和目的卷的切片所有副本均位于同一主机，在主机内发送内部读写请求，在主机内部中完成源卷数据和目的卷数据的内部拷贝；如果源卷的切片部分副本和目的卷的切片部分副本位于同一主机，则部分副本在节点内部下发，同时通过网络转发达到其他副本IO正常...

【专利技术属性】
技术研发人员：马怀旭，
申请(专利权)人：苏州浪潮智能科技有限公司，
类型：发明
国别省市：