一种双活存储系统及其处理数据的方法技术方案

本申请实施例提供一种双活存储系统及基于所述双活存储系统对数据处理的方法。所述双活存储系统包括第一存储设备和第二存储设备。所述第一存储设备用于接收客户端集群发送给文件系统的第一文件的数据，存储所述第一文件的数据，并且将所述第一文件的数据的第一副本数据发送给所述第二存储设备。所述第二存储设备用于接收所述客户端集群发送给所述文件系统的第二文件的数据，存储所述第二文件的数据，并且将所述第二文件的第二副本数据发送给所述第一存储设备。由于本申请实施例中第一存储设备和第二存储设备都可以通过同样的文件系统进行文件数据的存储，并可以备份对端的文件的数据，从而实现了Active

【技术实现步骤摘要】
一种双活存储系统及其处理数据的方法


[0001]本申请涉及存储领域，特别涉及一种双活存储系统及其处理数据的方法。

技术介绍

[0002]对于网络存储集群，例如网络附加存储(Network Attached Storage，NAS)集群，在实现双活时，其中的第一存储设备在接收到写入数据时，会将所接收到的写入数据写到本地的同时，会同步到对端存储设备作为备份数据，这样，在第一存储设备故障，或者第一存储设备与第二存储设备断开连接时，第二存储设备可利用所述备份数据接管第一存储设备的业务，从而保证业务不中断，即实现了Active
‑
Passive模式的双活。但是无法实现Active
‑
Active 模式的双活。

技术实现思路

[0003]本申请提供一种双活存储系统及实现双活存储系统的方法，用于实现Active
‑
Active模式的双活，使双活存储系统中的存储设备可以访问同一文件系统中的数据。
[0004]本申请第一方面提供一种双活存储系统。所述双活存储系统包括第一存储设备和第二存储设备。所述第一存储设备用于接收客户端集群发送给文件系统的第一文件的数据，存储所述第一文件的数据，并且将所述第一文件的数据的第一副本数据发送给所述第二存储设备。所述第二存储设备用于接收所述客户端集群发送给所述文件系统的第二文件的数据，存储所述第二文件的数据，并且将所述第二文件的第二副本数据发送给所述第一存储设备。
[0005]由于第一存储设备和第二存储设备都可以通过同样的文件系统进行文件数据的存储，并可以备份对端的文件数据，从而实现了Active
‑
Active模式双活存储系统。传统的NAS设备也具有文件系统，但Active
‑
Passive模式下的两个存储设备各自拥有独立的文件系统，两个独立的文件系统都需要占用存储设备的计算/存储资源，使得资源的利用效率低，管理起来也较为复杂，这并非真正意义上双活。在本申请中，第一存储设备和第二存储设备拥有同一个文件系统，可以提高资源的利用效率，降低了管理复杂度。另外，由于客户端给存储设备发送访问请求时，对它而言也是向同一个文件系统发送请求。因此对客户端而言其访问效率也提高了。
[0006]在本申请第一方面的一种可能的实现中，所述双活存储系统还包括虚拟节点集合，所述虚拟节点集合包括多个虚拟节点，每个虚拟节点分配有计算资源，所述计算资源来源于所述第一存储设备或所述第二存储设备中的物理节点。
[0007]所述物理节点可以为所述第一存储设备及所述第二存储设备控制节点，也可以是控制节点中的CPU,或者CPU中的内核。虚拟节点是逻辑上的概念，它作为资源分配的媒介用于实现该系统中计算资源的隔离。按照这种资源管理方式，各个虚拟节点分配有独立的计算资源，那么对应不同虚拟节点的文件/目录所使用的计算资源也是独立的。由此有利于所述双活存储系统的扩容或减容，也有利于实现计算资源之间的免锁机制，降低了复杂度。
[0008]在本申请第一方面的一种可能的实现中，所述双活存储系统还包括管理设备，所述管理设备还用于创建全局视图，所述全局视图用于记录每个虚拟节点与其分配的计算资源之间的对应关系；所述管理设备还用于将所述全局视图发送给所述第一存储设备及所述第二存储设备，所述第一存储设备及所述第二存储设备保存所述全局视图。
[0009]所述管理设备可以作为一个软件模块，安装在第一存储设备或第二存储设备上，也可以为一个独立的设备，在作为安装在第一存储设备上的软件模块时，在生成全局视图后，通过与存储设备中的其他模块的交互，将所述全局视图发送至第一存储设备及所述第二存储设备存储。
[0010]通过全局视图的方式将虚拟节点集合中的虚拟节点分别呈现给第一存储设备及第二存储设备中的应用，第一存储设备及第二存储设备中的应用会将对端的物理节点作为本端的资源进行使用，从而更方便与对端物理节点进行交互。
[0011]在本申请第一方面的一种可能的实现中，在存储所述第一文件的数据时，所述第一存储设备根据所述第一文件的数据的地址确定所述第一文件对应的第一虚拟节点，根据所述第一虚拟节点以及所述全局视图确定为所述第一虚拟节点分配的计算资源，并基于为所述第一虚拟节点分配的计算资源，将所述第一文件的数据发送给所述计算资源对应的物理节点，由所述物理节点将所述第一文件的数据存储至所述物理节点的内存中。
[0012]通过全局视图提供的虚拟节点集合，第一存储设备可以接收归属于所述虚拟节点集合中的任意虚拟节点对应的物理节点的文件的数据，并将所接收的文件的数据转发至所述文件归属的物理节点进行处理，这样，用户在写数据的时候，不必感知文件实际存储的位置，可通过任意一个存储设备对文件进行操作。
[0013]在本申请第一方面的一种可能的实现中，所述第一虚拟节点具有至少一个备份虚拟节点，所述第一虚拟节点对应的物理节点与所述备份虚拟节点对应的物理节点位于不同的存储设备中，在确定第一文件对应的第一虚拟节点后，所述第一存储设备还会确定所述第一虚拟节点对应的备份虚拟节点；根据所述备份虚拟节点以及所述全局视图确定所述备份虚拟节点对应的物理节点；将所述第一副本数据发送给所述备份虚拟节点对应的物理节点，由所述备份虚拟节点对应的物理节点将所述第一备份数据存储在所述物理节点中。
[0014]通过将写入第一存储设备的文件的数据备份到第二存储设备中，在第一存储设备故障或者与第二存储设备断开连接后，可通过所述备份数据接管第一存储设备的业务，从而提升了系统的可靠性。
[0015]在本申请第一方面的一种可能的实现中，所述文件系统所包括的文件和目录分布在所述虚拟节点集合中的多个虚拟节点对应的物理节点中。
[0016]所述文件系统所包括的文件和目录分布在所述虚拟节点集合中的多个虚拟节点对应的物理节点中，具体指将所述文件系统所包括的文件和目录打散给多个物理节点处理。这样，可以充分利用第一存储设备和第二存储设备的物理资源，提高文件的处理效率。
[0017]在本申请第一方面的一种可能的实现中，所述虚拟节点集合中的每个虚拟节点设置有一个或多个分片标识，所述文件系统中的每个目录及文件分配一个分片标识，所述第一存储设备和第二存储设备中的物理节点根据每个目录及文件的分片标识将所述目录和文件分布式至所述分片标识所属的虚拟节点对应物理节点中。
[0018]通过分片标识可以更方便的将所述文件系统所包括的文件和目录分布至第一存
储设备及第二存储设备的各个物理节点。
[0019]在本申请第一方面的一种可能的实现中，所述第一存储设备中的第一物理节点用于接收所述第一文件的创建请求，从为所述第一物理节点对应的虚拟节点设置的一个或多个分片标识中为所述第一文件选择一个分片标识，在所述存储设备中创建所述第一文件。
[0020]在创建文件时，通过给文件分配接收到所述文件创建请求对应的物理节点的虚拟节点的分片标识，避免将所述文件创建请求转发至其他物理节点，从而提高了处本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种双活存储系统，其特征在于，包括第一存储设备和第二存储设备，所述第一存储设备用于接收客户端集群发送给文件系统的第一文件的数据，存储所述第一文件的数据，并且将所述第一文件的数据的第一副本数据发送给所述第二存储设备；所述第二存储设备用于接收所述客户端集群发送给所述文件系统的第二文件的数据，存储所述第二文件的数据，并且将所述第二文件的第二副本数据发送给所述第一存储设备。2.根据权利要求1所述的系统，其特征在于，所述双活存储系统还包括虚拟节点集合，所述虚拟节点集合包括多个虚拟节点，每个虚拟节点分配有计算资源，所述计算资源来源于所述第一存储设备或所述第二存储设备中的物理节点。3.根据权利要求2所述的系统，其特征在于，所述双活存储系统还包括管理设备，所述管理设备还用于创建全局视图，所述全局视图用于记录每个虚拟节点与其分配的计算资源之间的对应关系；所述管理设备还用于将所述全局视图发送给所述第一存储设备及所述第二存储设备；所述第一存储设备还用于保存所述全局视图；所述第二存储设备还用于保存所述全局视图。4.根据权利要求3所述的系统，其特征在于，所述第一存储设备在存储所述第一文件的数据时具体用于：根据所述第一文件的数据的地址确定所述第一文件对应的第一虚拟节点；根据所述第一虚拟节点以及所述全局视图确定为所述第一虚拟节点分配的计算资源；基于为所述第一虚拟节点分配的计算资源，将所述第一文件的数据发送给所述计算资源对应的物理节点，由所述物理节点将所述第一文件的数据存储至所述物理节点的内存中。5.根据权利要求4所述的系统，其特征在于，所述第一虚拟节点具有至少一个备份虚拟节点，所述第一虚拟节点对应的物理节点与所述备份虚拟节点对应的物理节点位于不同的存储设备中；所述第一存储设备还用于：确定所述第一虚拟节点对应的备份虚拟节点；根据所述备份虚拟节点以及所述全局视图确定所述备份虚拟节点对应的物理节点；将所述第一副本数据发送给所述备份虚拟节点对应的物理节点，由所述备份虚拟节点对应的物理节点将所述第一备份数据存储在所述物理节点中。6.根据权利要求2
‑
5任意一项所述的系统，其特征在于，所述文件系统所包括的文件和目录分布在所述虚拟节点集合中的多个虚拟节点对应的物理节点中。7.根据权利要求6所述的系统，其特征在于，所述虚拟节点集合中的每个虚拟节点设置有一个或多个分片标识，所述文件系统中的每个目录及文件分配一个分片标识，所述第一存储设备和第二存储设备中的物理节点根据每个目录及文件的分片标识将所述目录和文件分布至所述分片标识所属的虚拟节点对应物理节点中。8.根据权利要求7所述的系统，其特征在于，所述第一存储设备中的第一物理节点用于接收所述第一文件的创建请求，从为所述第一物理节点对应的虚拟节点设置的一个或多个分片标识中为所述第一文件选择一个分片标识，在所述存储设备中创建所述第一文件。
9.根据权利要求2
‑
8任意一项所述的系统，其特征在于，当所述第二存储设备故障或所述第一存储设备与所述第二存储设备之间的链路断开后，所述第一存储设备还用于基于所述第二文件的第二副本数据恢复所述第二文件，并接管所述客户端集群发送给所述第二存储设备的业务。10.根据权利要求9所述的系统，其特征在于，所述第一存储设备还用于从所述全局视图中删除所述第二存储设备的计算资源对应的虚拟节点。11.根据权利要求1所述的系统，其特征在于，所述第一存储设备还具有第一文件系统，所述第二存储设备还具有第二文件系统。12.一种数据处理方法，应用于双活存储系统，所述双活存储系统包括第一存储设备和第二存储设备，其...

【专利技术属性】
技术研发人员：杜翔，翁宇佳，李小华，张鹏，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：