超融合一体机及其软件定义存储SDS处理方法和系统技术方案

本发明专利技术实施例提供一种超融合一体机及其软件定义存储SDS处理方法和系统，包括：将待存储的文件进行分片处理，分成多个对象数据；根据虚拟磁盘所属的存储池和对象数据的标识，通过哈希算法和取模，得出所属的逻辑放置组标识；将所述逻辑放置组标识传给存储位置算法，由所述存储位置算法得出对应的主从存储设备，所述主从存储设备包括缓存盘和持久化存储磁盘；将所述对象数据写入到与所述主从存储设备所对应的缓存盘中；向上层的业务系统返回写入成功的信息；将所述缓存盘中的数据刷写到持久化存储磁盘中。该方法可以提高可靠性、可用性低、存取效率中的至少一个。

【技术实现步骤摘要】
超融合一体机及其软件定义存储SDS处理方法和系统
本专利技术涉及分布式存储
，具体涉及一种超融合一体机及其软件定义存储SDS处理方法和系统。
技术介绍
随着互联网的普及和物联网的诞生，网络上面的信息量呈现出爆炸性的增长，市场调研机构IDC预计，未来全球数据总量年增长率将维持在50％左右，到2020年，全球数据总量将达到40ZB。其中我国数据量将达到8.6ZB，占全球的21％左右。应用厂商的业务急剧膨胀，必然需要更加灵活的服务器资源、网络资源和存储资源的扩展方式，而数个月的业务上线周期远远无法满足业务增长的需求。随着互联网的发展，各种APP、应用服务提供商如雨后春笋般的出现，服务商要求企业数据中心架构既能够灵活的分配回收服务器计算资源，又能够方便的扩展存储空间，更重要的是能够按需建设、随需扩展。于是，传统的虚拟化平台和传统的分布式存储自然而然的结合在了一起，形成了计算、网络和存储融合于x86服务器的超融合架构超融合架构HCI(Hyper-ConvergedInfrastructure)。超融合架构HCI的主要组件是虚拟化和分本文档来自技高网...

【技术保护点】
1.一种超融合一体机的软件定义存储SDS处理方法，其特征在于，包括：/n将待存储的文件进行分片处理，分成多个对象数据；/n根据虚拟磁盘所属的存储池和对象数据的标识，通过哈希算法和取模，得出所属的逻辑放置组的标识；/n将所述逻辑放置组的标识传给存储位置算法，由所述存储位置算法得出对应的主从存储设备，所述主从存储设备包括缓存盘和持久化存储磁盘；/n将所述对象数据写入到与所述主从存储设备所对应的缓存盘中；/n向上层的业务系统返回写入成功的信息；/n将所述缓存盘中的数据刷写到持久化存储磁盘中。/n

【技术特征摘要】
1.一种超融合一体机的软件定义存储SDS处理方法，其特征在于，包括：
将待存储的文件进行分片处理，分成多个对象数据；
根据虚拟磁盘所属的存储池和对象数据的标识，通过哈希算法和取模，得出所属的逻辑放置组的标识；
将所述逻辑放置组的标识传给存储位置算法，由所述存储位置算法得出对应的主从存储设备，所述主从存储设备包括缓存盘和持久化存储磁盘；
将所述对象数据写入到与所述主从存储设备所对应的缓存盘中；
向上层的业务系统返回写入成功的信息；
将所述缓存盘中的数据刷写到持久化存储磁盘中。


2.根据权利要求1所述的方法，其特征在于，所述缓存盘是SSD，所述持久化存储磁盘是HDD，所述方法还包括：将热数据缓存到所述缓存盘中，以应对随机I/O并发访问；根据业务负载自动调整所述缓存盘的读写缓存比例。


3.根据权利要求1所述的方法，其特征在于，所述方法还包括：当读取任意一个数据块的任意副本数据失败时，通过从其他副本读取数据，然后重新写入该副本的方法进行恢复，以保证数据副本总数不减少。


4.根据权利要求1所述的方法，其特征在于，所述方法还包括：在节点或者磁盘发生故障导致数据不一致时，通过自检机制比较不同节点上的副本分片，发现数据故障并启动数据恢复。


5.根据权利要求1所述的方法，其特征在于，所述方法还包括：检测是否存在坏盘，当检测到坏盘时，将所述坏盘隔离，并且将所述坏盘上的数据副本自动并行重建；所述磁盘或缓存盘具有硬盘定位灯。


6.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据平均读...

【专利技术属性】
技术研发人员：马金祥，郭亮，胡明，陈杰，张达，李建东，周逵，米保军，董瑞柯，撖伟，黄春旭，郑建忠，胡晓宇，张志标，唐延恺，冯志超，周国贞，黄立薇，林永昌，仇爱超，李华勇，林益溪，郭健海，郭雷，王兴龙，牛春营，李立霞，陈雪发，
申请(专利权)人：广东韶钢松山股份有限公司，
类型：发明
国别省市：广东;44