数据更新方法及装置制造方法及图纸

本发明专利技术公开了一种数据更新方法及装置。其中，该方法包括：获取历史用户数据并存储于当前处理任务的分布式处理设备的预设内存中，其中，历史用户数据为访问网站的历史过程中产生的用户数据；判断是否需要更新预设内存中的历史用户数据；若判断出需要更新预设内存中的历史用户数据，将需更新的用户数据更新至对应的预设内存中，得到当前用户数据；在所有分布式处理设备都完成处理任务后，将每个分布式处理设备对应的预设内存中的当前用户数据更新至预设数据库中。本发明专利技术解决了相关技术中在更新数据时由于数据处理设备的多样性导致数据更新效率低，数据无法准确更新的技术问题。

Data Updating Method and Device

【技术实现步骤摘要】
数据更新方法及装置
本专利技术涉及数据处理
，具体而言，涉及一种数据更新方法及装置。
技术介绍
相关技术中，对于用户的访问日志数据需要进行分析处理，而在对数据库中的数据进行更新时，一般采用即时更新策略，即如果有新的数据产生(如用户的访问时间产生变化)，就会立即对数据库中存储的数据进行更新(如更新数据库中的用户ID对应的访问时间)。但是，这种更新方案对于有多个数据处理器同时更新同一个数据库时，会出现对数据库中的内容频繁反复的更新，这样会与程序发生错误的情况，会导致重复执行错误，尤其是在数据库更新后，若需要将数据库恢复至原始状态，这样会导致原来正确更新数据的处理装置也要重新执行，数据处理的效率低，并且数据库中的数据被反复改变，导致无需利用原始数据的处理设备也无法调取数据，会导致数据处理出现错误，无法准确更新数据。针对上述相关技术中在更新数据时由于数据处理设备的多样性导致数据更新效率低，数据无法准确更新的技术问题，目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种数据更新方法及装置，以至少解决相关技术中在更新数据时由于数据处理设备的多样性导致数据更新效率低，数据无法准确更新的技术问题。根据本专利技术实施例的一个方面，提供了一种数据更新方法，包括：获取历史用户数据并存储于当前处理任务的分布式处理设备的预设内存中，其中，所述历史用户数据为访问网站的历史过程中产生的用户数据，所述历史用户数据预先存储在预设数据库中，所述预设数据库对应有多个分布式处理设备；判断是否需要更新所述预设内存中的历史用户数据；若判断出需要更新所述预设内存中的历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据；在所有分布式处理设备都完成处理任务后，将每个所述分布式处理设备对应的预设内存中的所述当前用户数据更新至所述预设数据库中。进一步地，在将需更新的用户数据更新至对应的所述预设内存中之后，包括：分别判断所述多个分布式处理设备中的每个分布式处理设备的运行程序是否出现异常；若所述多个分布式处理设备中存在分布式处理设备的运行程序异常，将出现异常的分布式处理设备作为目标分布式处理设备；删除所述目标分布式处理设备对应的预设内存中的所述当前用户数据；对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据。进一步地，在对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据之后，包括：重新判断是否需要更新所述预设内存中的所述历史用户数据；若判断出需要更新所述预设内存中的所述历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据。进一步地，在分别判断所述多个分布式处理设备中的每个分布式处理设备的运行程序是否出现异常之后，还包括：若判断出所述多个分布式处理设备中的任一分布式处理设备的运行程序正常执行，则在所述运行程序执行完成后，发送预设通知信息，其中，所述预设通知消息用于告知与该分布式处理设备并行执行的其它所述分布式处理设备成功完成处理任务；在所述运行程序执行完成的情况下，监听其它所述分布式处理设备的执行状态。进一步地，所述用户数据包括下述至少之一：用户标识、用户当前访问时间、累计访问次数。根据本专利技术实施例的另一方面，还提供了一种数据更新装置，包括：获取单元，用于获取历史用户数据并存储于当前处理任务的分布式处理设备的预设内存中，其中，所述历史用户数据为访问网站的历史过程中产生的用户数据，所述历史用户数据预先存储在预设数据库中，所述预设数据库对应有多个分布式处理设备；判断单元，用于判断是否需要更新所述预设内存中的历史用户数据；第一更新单元，用于若判断出需要更新所述预设内存中的历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据；第二更新单元，用于在所有分布式处理设备都完成处理任务后，将每个所述分布式处理设备对应的预设内存中的所述当前用户数据更新至所述预设数据库中。进一步地，包括：判断模块，用于在将需更新的用户数据更新至对应的所述预设内存中之后，分别判断所述多个分布式处理设备中的每个分布式处理设备的运行程序是否出现异常；确定模块，用于若所述多个分布式处理设备中存在分布式处理设备的运行程序异常，将出现异常的分布式处理设备作为目标分布式处理设备；删除模块，用于删除所述目标分布式处理设备对应的预设内存中的所述当前用户数据；重新加载模块，用于对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据。进一步地，包括：重新判断模块，用于在对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据之后，重新判断是否需要更新所述预设内存中的所述历史用户数据；更新模块，用于若判断出需要更新所述预设内存中的所述历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据。根据本专利技术实施例的另一方面，还提供了一种存储介质，其上存储有程序，所述程序执行上述任一项所述的数据更新方法。根据本专利技术实施例的另一方面，还提供了一种处理器，所述处理器用于运行程序，所述程序运行时执行上述任一项所述的数据更新方法。在本专利技术实施例中，可以先获取历史用户数据，该历史用户数据为访问网站的历史过程中产生的用户数据，然后可以将历史用户数据存储于当前处理任务的分布式处理设备的预设内存中，之后，可以判断是否需要更新预设内存中的历史用户数据，并在判断出需要更新预设内存中的历史用户数据后，将需更新的用户数据更新至预设内存中，在所有分布式处理设备都完成处理任务后，将每个分布式处理设备对应的预设内存中的当前用户数据更新至预设数据库中。在该实施例中，将数据库中的数据读取到分布式处理设备的预设内存中，这样在分布式处理设备处理任务时，不会对数据库中的数据进行修改，保证了分布式处理设备发生异常处理任务时，重新到预设数据库中读取历史用户数据，进而解决相关技术中在更新数据时由于数据处理设备的多样性导致数据更新效率低，数据无法准确更新的技术问题。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1是根据本专利技术实施例的数据更新方法的流程图；图2是根据本专利技术实施例的数据更新装置的示意图。具体实施方式为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元本文档来自技高网...

【技术保护点】
1.一种数据更新方法，其特征在于，包括：获取历史用户数据并存储于当前处理任务的分布式处理设备的预设内存中，其中，所述历史用户数据为访问网站的历史过程中产生的用户数据，所述历史用户数据预先存储在预设数据库中，所述预设数据库对应有多个分布式处理设备；判断是否需要更新所述预设内存中的历史用户数据；若判断出需要更新所述预设内存中的历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据；在所有分布式处理设备都完成处理任务后，将每个所述分布式处理设备对应的预设内存中的所述当前用户数据更新至所述预设数据库中。

【技术特征摘要】
1.一种数据更新方法，其特征在于，包括：获取历史用户数据并存储于当前处理任务的分布式处理设备的预设内存中，其中，所述历史用户数据为访问网站的历史过程中产生的用户数据，所述历史用户数据预先存储在预设数据库中，所述预设数据库对应有多个分布式处理设备；判断是否需要更新所述预设内存中的历史用户数据；若判断出需要更新所述预设内存中的历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据；在所有分布式处理设备都完成处理任务后，将每个所述分布式处理设备对应的预设内存中的所述当前用户数据更新至所述预设数据库中。2.根据权利要求1所述的方法，其特征在于，在将需更新的用户数据更新至对应的所述预设内存中之后，包括：分别判断所述多个分布式处理设备中的每个分布式处理设备的运行程序是否出现异常；若所述多个分布式处理设备中存在分布式处理设备的运行程序异常，将出现异常的分布式处理设备作为目标分布式处理设备；删除所述目标分布式处理设备对应的预设内存中的所述当前用户数据；对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据。3.根据权利要求2所述的方法，其特征在于，在对所述目标分布式处理设备对应的预设内存重新加载所述预设数据库中存储的所述历史用户数据之后，包括：重新判断是否需要更新所述预设内存中的所述历史用户数据；若判断出需要更新所述预设内存中的所述历史用户数据，将需更新的用户数据更新至对应的所述预设内存中，得到当前用户数据。4.根据权利要求2所述的方法，其特征在于，在分别判断所述多个分布式处理设备中的每个分布式处理设备的运行程序是否出现异常之后，还包括：若判断出所述多个分布式处理设备中的任一分布式处理设备的运行程序正常执行，则在所述运行程序执行完成后，发送预设通知信息，其中，所述预设通知消息用于告知与该分布式处理设备并行执行的其它所述分布式处理设备成功完成处理任务；在所述运行程序执行完成的情况下，监听其它所述分布式处理设备的执行状态。5.根据权利要求1所述的方法，其...

【专利技术属性】
技术研发人员：陈熹荣，
申请(专利权)人：北京国双科技有限公司，
类型：发明
国别省市：北京,11