一种数据处理方法和装置制造方法及图纸

本发明专利技术公开了一种数据处理方法和装置，方法包括：当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所述第一存储单元为所述第一数据的写入单元；如果否，确定所述第一数据的数据流的目的节点，将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层；如果是，将所述第一数据的数据流发送到缓存层，通过本发明专利技术保证了数据的一致性。

【技术实现步骤摘要】
一种数据处理方法和装置
本专利技术涉及数据处理
，更具体的说是涉及一种数据处理方法和装置。
技术介绍
现有的存储系统大多数为双节点存储系统，在一个节点出现故障时，可以使用另一个节点来缓存数据，从而保证业务的正常进行。近年来，为了进一步提高数据缓存的安全性，在双节点存储系统的基础上，提出了多节点存储系统，多节点存储系统仍沿用双节点方式来进行数据的缓存。具体的，针对某一数据进行缓存时，该数据的数据流会被转发到任一节点上，从而出现数据不一致的技术问题。
技术实现思路
有鉴于此，本专利技术提供一种数据处理方法和装置，以解决现有技术中数据不一致的技术问题。为实现上述目的，本专利技术提供如下技术方案：一种数据处理方法，包括：当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所述第一存储单元为所述第一数据的写入单元；如果否，确定所述第一数据的数据流的目的节点，将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层；如果是，将所述第一数据的数据流发送到缓存层。优选的，所述判断本节点是否为所述第一数据的数据流的目的节点之前，还包括：判断本节点是否为第一存储单元所属节点组中的节点；如果是，触发所述判断本节点是否为所述第一数据的数据流的目的节点的步骤；如果否，触发所述确定所述第一数据流的目的节点的步骤。优选的，所述将所述第一数据的数据流发送到缓存层之后，还包括：当本节点为所述第一存储单元的所属节点时，将所述第一数据镜像到所述所属节点的合作节点；当本节点为所述第一存储单元的所属节点的合作节点时，将所述第一数据镜像到本节点的前置节点；其中，所述本节点的前置节点为所述第一存储单元的所属节点。优选的，所述确定所述第一数据流的目的节点包括：从所述所属节点和所述所属节点的合作节点中选取数据处理能力大的节点为目的节点。优选的，所述从所述所属节点和所述所属节点的合作节点中选取数据处理能力大的节点为目的节点，包括：从所述所属节点和所述所属节点的合作节点中确定上一次进行数据处理的节点；确定除所述上一次进行数据处理的节点的另一节点为目的节点。一种数据处理装置，包括：第一判断单元，用于当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所述第一存储单元为所述第一数据的写入单元；确定转发单元，用于当本节点不是所述第一数据的数据流的目的节点时，确定所述第一数据的数据流的目的节点，将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层；第一发送单元，用于当本节点是所述第一数据的数据流的目的节点时，将所述第一数据的数据流发送到缓存层。优选的，还包括：第二判断单元，用于当第一数据的数据流到达转发层后，判断本节点是否为第一存储单元所属节点组中的节点；第一触发单元，用于当本节点为第一存储单元所属节点组中的节点时，触发所述第一判断单元执行判断本节点是否为所述第一数据的数据流的目的节点的操作；第二触发单元，用于当本节点不是第一存储单元所属节点组中的节点时，触发所述确定转发单元执行确定所述第一数据流的目的节点的操作。优选的，还包括：第一镜像单元，用于当本节点为所述第一存储单元的所属节点时，将所述第一数据镜像到所述所属节点的合作节点；第二镜像单元，用于当本节点为所述第一存储单元的所属节点的合作节点时，将所述第一数据镜像到本节点的前置节点；其中，所述本节点的前置节点为所述第一存储单元的所属节点。优选的，所述确定转发单元包括：第一确定模块，用于当本节点不是所述第一数据的数据流的目的节点时，从所述所属节点和所述所属节点的合作节点中选取数据处理能力大的节点为目的节点；第一转发模块，用于将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层。优选的，所述第一确定模块具体用于从所述所属节点和所述所属节点的合作节点中确定上一次进行数据处理的节点，从而确定除所述上一次进行数据处理的节点的另一节点为目的节点。经由上述的技术方案可知，与现有技术相比，本专利技术公开提供了一种数据处理方法，具体的，当第一数据的数据流到达转发层后，判断本节点是否为第一数据的数据流的目的节点，目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所第一存储单元为所述第一数据的写入单元；如果否，则确定出第一数据的数据流的目的节点，将第一数据的数据流转发至目的节点，最终由目的节点将第一数据的数据流发送到缓存层。由此可见，本申请中的第一数据的数据流会转发到目的节点上，由目的节点缓存到缓存层，保证了数据的一致性。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本专利技术公开的一种多节点存储系统的结构示意图；图2为本专利技术实施例一公开的一种数据处理方法的流程示意图；图3为本专利技术实施例二公开的一种数据处理方法的流程示意图；图4为本专利技术实施例三公开的一种数据处理方法的流程示意图；图5为本专利技术实施例四公开的一种数据处理装置的结构示意图；图6为本专利技术实施例五公开的一种数据处理装置的结构示意图；图7为本专利技术实施例六公开的一种数据处理装置的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一本专利技术实施一公开了一种数据处理方法，该数据处理方法应用于多节点存储系统中，具体的，图1示出了本专利技术公开的一种多节点存储系统的结构示意图，如图1所示，客户端Host与N个节点相连，N个节点组成一个节点组，其中，一个节点为与其相邻的前一个节点的合作节点，为与其相邻的后一个节点的前置节点。也就是说，两个相邻的节点之间是单方合作关系，并不是互为合作关系。即，Node1为Node0的合作节点，为Node2的前置节点；Node2为Node1的合作节点，为Node3的前置节点，…以此类推。需说明的是，多节点存储系统包括至少一个节点组，图1以客户端对应一个节点组为例，当然客户端可以对应多个节点组，本专利技术对此并不做限定。而每个节点组包括至少两个节点。图2示出了一种数据处理方法的流程示意图，如图2所示，该方法包括以下步骤：步骤201：当第一数据的数据流到达转发层后，判断本节点是否为第一数据的数据流的目的节点；若否，进入步骤202；若是，进入步骤203；本节点指代为其转发层上接收到第一数据的数据流的节点。其中，目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点。第一存储单元为第一数据的写入单元，具体的，第一存储单元为LUN(LogicalUnitNumber，逻辑本文档来自技高网...

【技术保护点】
一种数据处理方法，其特征在于，包括：当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所述第一存储单元为所述第一数据的写入单元；如果否，确定所述第一数据的数据流的目的节点，将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层；如果是，将所述第一数据的数据流发送到缓存层。

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和第一存储单元的所属节点的合作节点；其中，所述第一存储单元为所述第一数据的写入单元；如果否，确定所述第一数据的数据流的目的节点，将所述第一数据的数据流转发至所述目的节点，由所述目的节点将所述第一数据的数据流发送到缓存层；如果是，将所述第一数据的数据流发送到缓存层。2.根据权利要求1所述的方法，其特征在于，所述判断本节点是否为所述第一数据的数据流的目的节点之前，还包括：判断本节点是否为第一存储单元所属节点组中的节点；如果是，触发所述判断本节点是否为所述第一数据的数据流的目的节点的步骤；如果否，触发所述确定所述第一数据流的目的节点的步骤。3.根据权利要求1所述的方法，其特征在于，所述将所述第一数据的数据流发送到缓存层之后，还包括：当本节点为所述第一存储单元的所属节点时，将所述第一数据镜像到所述所属节点的合作节点；当本节点为所述第一存储单元的所属节点的合作节点时，将所述第一数据镜像到本节点的前置节点；其中，所述本节点的前置节点为所述第一存储单元的所属节点。4.根据权利要求1所述方法，其特征在于，所述确定所述第一数据流的目的节点包括：从所述所属节点和所述所属节点的合作节点中选取数据处理能力大的节点为目的节点。5.根据权利要求4所述的方法，其特征在于，所述从所述所属节点和所述所属节点的合作节点中选取数据处理能力大的节点为目的节点，包括：从所述所属节点和所述所属节点的合作节点中确定上一次进行数据处理的节点；确定除所述上一次进行数据处理的节点的另一节点为目的节点。6.一种数据处理装置，其特征在于，包括：第一判断单元，用于当第一数据的数据流到达转发层后，判断本节点是否为所述第一数据的数据流的目的节点；所述目的节点包括第一存储单元的所属节点和...

【专利技术属性】
技术研发人员：范聪聪，
申请(专利权)人：郑州云海信息技术有限公司，
类型：发明
国别省市：河南,41