一种数据处理方法、装置及电子设备制造方法及图纸

技术编号:24121018 阅读:13 留言:0更新日期:2020-05-13 03:05
本申请公开了一种数据处理方法、装置及电子设备,所述方法包括:获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;在所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。可见,本申请中即使内存数据中存在修改,也可以在内存数据写入完成之后,将恢复数据写入到磁盘的相应地址以覆盖掉磁盘中相应的被修改的数据,从而在不对内存进行加锁的情况下,避免内存数据的修改对磁盘数据准确性的影响,由此,提高磁盘数据的准确性。

A data processing method, device and electronic equipment

【技术实现步骤摘要】
一种数据处理方法、装置及电子设备
本申请涉及数据快照
,尤其涉及一种数据处理方法、装置及电子设备。
技术介绍
数据快照是指:将电子设备内存中实时的易失的全量数据持久化保存到磁盘中。为了保证电子设备的正常运行,在磁盘进行数据快照的过程中,不能禁止电子设备的数据读写指令对内存中数据的修改操作,即不能对内存加锁。但这种情况下,内存中数据的修改会直接影响快照到磁盘中的数据的准确性。
技术实现思路
有鉴于此,本申请提供一种数据处理方法、装置及电子设备,用以解决现有技术中内存数据的修改影响快照到磁盘数据准确性的技术问题,如下:一种数据处理方法,包括:获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;在所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。上述方法,优选的,获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据,包括:在所述内存数据向所述磁盘写入的过程中,确定针对所述内存数据所处理的至少一个目标请求;至少获得所述目标请求对应的恢复数据。上述方法,优选的,确定针对所述内存数据所处理的至少一个目标请求,包括:从所述内存数据开始向所述磁盘写入起,标记待处理的数据处理请求,直到所述内存数据写入完成;所述待处理的数据处理请求包括:在所述内存数据开始向所述磁盘写入时未处理结束的数据处理请求和/或新接收到的数据处理请求;对标记的数据处理请求进行请求类型的识别,以得到至少一个对所述内存数据进行修改操作的目标请求。上述方法,优选的,还包括:在所述内存数据开始向所述磁盘写入时,暂停对所述未处理结束的数据处理请求的处理操作;在标记所述未处理结束的数据处理请求之后,所述方法还包括:恢复对所述未处理结束的数据处理请求的处理操作。上述方法,优选的,还包括:获得所述恢复数据在所述磁盘中对应的地址偏移量;其中,将所述恢复数据写入到所述磁盘中的相应地址,包括:将所述恢复数据写入到所述磁盘中与所述地址偏移量对应的地址。上述方法,优选的,将所述恢复数据写入到所述磁盘中的相应地址之前,所述方法还包括:如果存在至少两个所述目标请求是针对所述内存数据中同一行数据进行修改操作的,获得所述至少两个所述目标请求中的处理时序最小的请求在所述内存数据中对应的原始数据;将获得的原始数据替换所述至少两个所述目标请求中每个所述目标请求的恢复数据。上述方法,优选的,将所述恢复数据写入到所述磁盘中的相应地址之前,所述方法还包括:如果所述目标请求被处理结束且所述目标请求为所述内存数据开始向所述磁盘写入时未处理完成的请求,获得所述目标请求对应的回滚数据,并将所述回滚数据替换为所述目标请求对应的恢复数据。一种数据处理装置,包括:数据写入单元,用于将内存数据向磁盘写入;数据获得单元,用于获得所述内存数据向所述磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;恢复写入单元,用于在所述数据写入单元将所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。上述装置,优选的,还包括:数据更新单元,用于在所述恢复写入单元将所述恢复数据写入到所述磁盘中的相应地址之前,如果存在至少两个所述目标请求是针对所述内存数据中同一行数据进行修改操作的,获得所述至少两个所述目标请求中的处理时序最小的请求在所述内存数据中对应的原始数据;将获得的原始数据替换所述至少两个所述目标请求中每个所述目标请求的恢复数据。一种电子设备,包括:存储器,用于存储应用程序及所述应用程序运行所产生的数据;处理器,用于执行所述应用程序,以实现:获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;在所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。从上述技术方案可以看出,本申请提供的一种数据处理方法、装置及电子设备中,在内存数据向磁盘写入的过程中,通过获得对内存数据进行修改操作的请求对应的原始数据作为恢复数据,而在内存数据在写入完成之后,将恢复数据写入到磁盘的相应地址,由此即使内存数据中存在修改,也可以在内存数据写入完成之后,将恢复数据写入到磁盘的相应地址以覆盖掉磁盘中相应的被修改的数据,从而在不对内存进行加锁的情况下,避免内存数据的修改对磁盘数据准确性的影响,由此,提高磁盘数据的准确性。附图说明为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本申请实施例一提供的一种数据处理方法的流程图;图2为本申请实施例的应用示例图;图3为本申请实施例一提供的一种数据处理方法中的部分流程图;图4为本申请实施例二提供的一种数据处理装置的结构示意图;图5为本申请实施例三提供的一种电子设备的结构示意图。具体实施方式下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。如图1所示,为本申请实施例一提供的一种数据处理方法的实现流程图,该方法可以适用于能够进行数据处理的电子设备中,如计算机或服务器等。本实施例中的方法主要用于在电子设备中的内存数据向磁盘写入过程中,提高写入到磁盘的数据的准确性。具体的,本实施例中的方法可以包括以下步骤:步骤101:获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据。其中,目标请求为在处理中会对内存数据进行修改操作的请求,而恢复数据则是内存数据中进行修改操作之前目标请求所对应的原始数据。需要说明的是,目标请求为从内存数据开始向磁盘写入开始,直到内存数据写入完成之间,电子设备所需要进行处理的对内存数据进行修改操作的请求,如图2中所示。其中可能包括有在内存数据开始向磁盘写入时电子设备未处理结束的请求A,也可能包含有:在内存数据开始向磁盘写入后,电子设备新接收到的需要进行处理的请求B。而恢复数据则是目标请求在内存数据中对应的没有进行修改操作的原始数据。需要说明的是,本实施本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:/n获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;/n在所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据;其中,所述目标请求为对所述内存数据进行修改操作的请求,且所述恢复数据为所述内存数据中进行修改操作之前所述目标请求对应的原始数据;
在所述内存数据写入完成的情况下,将所述恢复数据写入到所述磁盘中的相应地址。


2.根据权利要求1所述的方法,其特征在于,获得内存数据向磁盘写入过程中所处理的至少一个目标请求的恢复数据,包括:
在所述内存数据向所述磁盘写入的过程中,确定针对所述内存数据所处理的至少一个目标请求;
获得所述目标请求对应的恢复数据。


3.根据权利要求2所述的方法,其特征在于,确定针对所述内存数据所处理的至少一个目标请求,包括:
从所述内存数据开始向所述磁盘写入起,标记待处理的数据处理请求,直到所述内存数据写入完成;所述待处理的数据处理请求包括:在所述内存数据开始向所述磁盘写入时未处理结束的数据处理请求和/或新接收到的数据处理请求;
对标记的数据处理请求进行请求类型的识别,以得到至少一个对所述内存数据进行修改操作的目标请求。


4.根据权利要求3所述的方法,其特征在于,还包括:
在所述内存数据开始向所述磁盘写入时,暂停对所述未处理结束的数据处理请求的处理操作;
在标记所述未处理结束的数据处理请求之后,所述方法还包括:
恢复对所述未处理结束的数据处理请求的处理操作。


5.根据权利要求1或2所述的方法,其特征在于,还包括:
获得所述恢复数据在所述磁盘中对应的地址偏移量;
其中,将所述恢复数据写入到所述磁盘中的相应地址,包括:
将所述恢复数据写入到所述磁盘中与所述地址偏移量对应的地址。


6.根据权利要求1或2所述的方法,其特征在于,将所述恢复数据写入到所述磁盘中的相应地址之前,所述方法还包括:
如果存在至少两个所述目标请求是针对所述内存数据中同一行数据进行修改操...

【专利技术属性】
技术研发人员:蔡哲军曹升东褚华兴张智佳宋凯龚岩
申请(专利权)人:广州亚信技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1