数据处理方法、装置、计算机可读存储介质和处理器制造方法及图纸

技术编号:28464746 阅读:23 留言:0更新日期:2021-05-15 21:30
本发明专利技术公开了一种数据处理方法、装置、计算机可读存储介质和处理器。其中,该方法包括:获取第一集群的第一请求,其中,第一请求用于请求获取目标数据;响应第一请求,判断是否存在存储有目标数据的第一共享数据空间,第一共享数据空间属于第二集群,且第一共享数据空间中存储的数据为多个集群所共享,多个集群包括第一集群和第二集群;如果判断出未存在第一共享数据空间,则向上游系统发送第二请求,第二请求用于请求上游系统下发目标数据;如果判断出存在第一共享数据空间,则向第一集群返回目标数据的第一存储信息,其中,第一存储信息用于表示目标数据已存储至第二集群中的第一共享数据空间中。本发明专利技术解决了数据处理的效率低的技术问题。的技术问题。的技术问题。

【技术实现步骤摘要】
数据处理方法、装置、计算机可读存储介质和处理器


[0001]本专利技术涉及数据处理领域,具体而言,涉及一种数据处理方法、装置、计算机可读存储介质和处理器。

技术介绍

[0002]目前,当集群需要获取数据时,集群需要从数据源导入数据,并将数据存储在本集群中,这样才能提供给用户使用。
[0003]当存在较多集群重复使用相同数据时,这种方式需要重复导入和重复存储这些数据,并且每次都需要向上游系统数据,较多的数据请求对上游系统造成了压力,存在对数据处理的效率低的技术问题。
[0004]针对上述数据处理的效率低的技术问题,目前尚未提出有效的解决方案。

技术实现思路

[0005]本专利技术实施例提供了一种数据处理方法、装置、计算机可读存储介质和处理器,以至少解决数据处理的效率低的技术问题。
[0006]根据本专利技术实施例的一个方面,提供了一种数据处理方法。该方法可以包括:获取第一集群的第一请求,其中,第一请求用于请求获取目标数据;响应第一请求,判断是否存在存储有目标数据的第一共享数据空间,其中,第一共享数据空间属于第二集群,且第一共享数据空间中存储的数据为多个集群所共享,多个集群包括第一集群和第二集群;如果判断出未存在第一共享数据空间,则向上游系统发送第二请求,其中,第二请求用于请求上游系统下发目标数据;如果判断出存在第一共享数据空间,则向第一集群返回目标数据的第一存储信息,其中,第一存储信息用于表示目标数据已存储至第二集群中的第一共享数据空间中。
[0007]可选地,在向上游系统发送第二请求之后,该方法还包括:将目标数据存储至第二共享数据空间,其中,第二共享数据空间属于第三集群,多个集群包括第三集群,第二共享数据空间为多个共享数据空间中的空闲共享数据空间,多个共享数据空间与多个集群一一对应;保存目标数据的第二存储信息,其中,第二存储信息用于表示目标数据已存储至第三集群中的第二共享数据空间中。
[0008]可选地,空闲共享数据空间为多个共享数据空间中的最大空闲共享数据空间。
[0009]可选地,在第二共享数据空间存储目标数据失败的情况下,返回提示信息,其中,提示信息用于表示请求获取目标数据失败。
[0010]可选地,如果第三集群与第一集群相同,则目标数据由第一集群直接查询到;如果第三集群与第一集群不相同,则目标数据由第一集群从第三集群的第二共享数据空间中查询到。
[0011]可选地,在向第一集群返回目标数据的第一存储信息之前,在已记录的多个存储信息中查找第一存储信息,其中,每个存储信息用于表示请求的数据已存储至对应的集群
中的共享数据空间中。
[0012]可选地,在向第一集群返回目标数据的第一存储信息之后,记录请求信息,其中,请求信息用于表示第一集群请求从第二集群中的第一共享数据空间中获取目标数据。
[0013]可选地,在向上游系统发送第二请求,或者向第一集群返回目标数据的第一存储信息之后,该方法还包括:获取第四集群的第三请求,其中,多个集群包括第四集群,第三请求用于请求删除目标数据;在多个集群中未有请求获取目标数据的集群的情况下,允许在目标数据所存储的共享数据空间中删除目标数据;在多个集群中有请求获取目标数据的集群的情况下,禁止在目标数据所存储的共享数据空间中删除目标数据。
[0014]可选地,响应第一请求,包括:在目标数据的属性为共享属性的情况下,响应第一请求,其中,共享属性用于表示目标数据允许由多个集群共享。
[0015]可选地,该方法还包括:在目标数据的属性为私有属性的情况下,向上游系统发送第二请求,其中,私有属性用于表示目标数据由第一集群私有;将上游系统下发的目标数据存储至第一集群的私有数据空间中。
[0016]根据本专利技术实施例的另一方面,还提供了一种数据处理装置。该装置包括:获取单元,用于获取第一集群的第一请求,其中,第一请求用于请求获取目标数据;判断单元,用于响应第一请求,判断是否存在存储有目标数据的第一共享数据空间,其中,第一共享数据空间属于第二集群,且第一共享数据空间中存储的数据为多个集群所共享,多个集群包括第一集群和第二集群;发送单元,用于在判断出未存在第一共享数据空间时,向上游系统发送第二请求,其中,第二请求用于请求上游系统下发目标数据;返回单元,用于在判断出存在第一共享数据空间时,向第一集群返回目标数据的第一存储信息,其中,第一存储信息用于表示目标数据已存储至第二集群中的第一共享数据空间中。
[0017]根据本专利技术实施例的另一方面,还提供了一种计算机可读存储介质。该计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行本专利技术实施例的数据处理方法。
[0018]根据本专利技术实施例的另一方面,还提供了一种处理器。该处理器用于运行程序,其中,程序被处理器运行时执行本专利技术实施例的数据处理方法。
[0019]在本专利技术实施例中,采用获取第一集群的第一请求,其中,第一请求用于请求获取目标数据;响应第一请求,判断是否存在存储有目标数据的第一共享数据空间,其中,第一共享数据空间属于第二集群,且第一共享数据空间中存储的数据为多个集群所共享,多个集群包括第一集群和第二集群;如果判断出未存在第一共享数据空间,则向上游系统发送第二请求,其中,第二请求用于请求上游系统下发目标数据;如果判断出存在第一共享数据空间,则向第一集群返回目标数据的第一存储信息,其中,第一存储信息用于表示目标数据已存储至第二集群中的第一共享数据空间中。也就是说,本申请的数据共享模块可以获取各个集群的数据申请,并判断当前的共享数据空间中是否已经存在所需要的数据,如果不存在所需要的数据,则从上游系统申请该数据;如果存在所需要的数据,则返回已保存的数据的存储信息,这样在多集群场景下,数据仅需要申请一次,也仅需要存储一次,就可以由多集群共享使用,从而避免了相同数据重复申请,节省了数据申请的时间,且节省了数据重复存储所占用的空间,降低了数据提供方提供数据的压力,从而解决了数据处理的效率低的技术问题,达到了提高数据处理的效率的技术效果。
附图说明
[0020]此处所说明的附图用来提供对本专利技术的进一步理解,构成本申请的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:
[0021]图1是根据本专利技术实施例的一种数据处理方法的流程图;
[0022]图2是根据本专利技术实施例的一种在多集群中共享数据的系统的示意图;
[0023]图3是根据本专利技术实施例的一种集群的数据申请的方法的流程图;
[0024]图4是根据本专利技术实施例的一种集群请求删除数据的方法的流程图;
[0025]图5是根据本专利技术实施例的一种数据处理装置的示意图。
具体实施方式
[0026]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:获取第一集群的第一请求,其中,所述第一请求用于请求获取目标数据;响应所述第一请求,判断是否存在存储有所述目标数据的第一共享数据空间,其中,所述第一共享数据空间属于第二集群,且所述第一共享数据空间中存储的数据为多个集群所共享,所述多个集群包括所述第一集群和所述第二集群;如果判断出未存在所述第一共享数据空间,则向上游系统发送第二请求,其中,所述第二请求用于请求所述上游系统下发所述目标数据;如果判断出存在所述第一共享数据空间,则向所述第一集群返回所述目标数据的第一存储信息,其中,所述第一存储信息用于表示所述目标数据已存储至所述第二集群中的所述第一共享数据空间中。2.根据权利要求1所述的方法,其特征在于,在向上游系统发送第二请求之后,所述方法还包括:将所述目标数据存储至第二共享数据空间,其中,所述第二共享数据空间属于第三集群,所述多个集群包括所述第三集群,所述第二共享数据空间为多个共享数据空间中的空闲共享数据空间,所述多个共享数据空间与所述多个集群一一对应;保存所述目标数据的第二存储信息,其中,所述第二存储信息用于表示所述目标数据已存储至所述第三集群中的所述第二共享数据空间中。3.根据权利要求2所述的方法,其特征在于,所述空闲共享数据空间为所述多个共享数据空间中的最大空闲共享数据空间。4.根据权利要求2所述的方法,其特征在于,所述方法还包括:在所述第二共享数据空间存储所述目标数据失败的情况下,返回提示信息,其中,所述提示信息用于表示请求获取所述目标数据失败。5.根据权利要求2所述的方法,其特征在于,如果所述第三集群与所述第一集群相同,则所述目标数据由所述第一集群直接查询到;如果所述第三集群与所述第一集群不相同,则所述目标数据由所述第一集群从所述第三集群的所述第二共享数据空间中查询到。6.根据权利要求1所述的方法,其特征在于,在向所述第一集群返回所述目标数据的第一存储信息之前,所述方法还包括:在已记录的多个存储信息中查找所述第一存储信息,其中,每个所述存储信息用于表示请求的数据已存储至对应的集群中的共享数据空间中。7.根据权利要求1所述的方法,其特征在于,在向所述第一集群返回所述目标数据的第一存储信息之后,所述方法还包括:记录请求信息,其中,所述请求信息用于表示所述第一集群请求从所述第二集群...

【专利技术属性】
技术研发人员:郝冰陈震宇刘国华
申请(专利权)人:中国邮政储蓄银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1