一种数据处理方法、装置、服务器及介质制造方法及图纸

本申请适用于数据处理技术领域，提供了一种数据处理方法、装置、服务器及介质，所述方法包括：获取变更服务器数量的临界时间；根据所述临界时间，确定待处理数据的存储目录；根据所述待处理数据的存储目录，将所述待处理数据分发至对应的运算服务器，以指示所述运算服务器对所述待处理数据进行处理。通过上述方法，可以合理分配资源，提升数据处理能力。

【技术实现步骤摘要】
一种数据处理方法、装置、服务器及介质
本申请属于数据处理
，尤其涉及一种数据处理方法、装置、服务器及介质。
技术介绍
随着信息技术和网络技术的发展，数据的产生规模越来越大，且一直在产生新的数据，统计数据所需的运算服务器数量也需要不断增加。在一种情况下，预设的进行数据处理的运算服务器数量暂时无法满足突发的数据统计需求，解决方式通常有两个，一种是不增加运算服务器，按序延时处理数据，二是需要停止现有的所有数据统计进程，等服务器增配完成后再重新开始处理数据，第一种处理方法导致数据处理的整体进展延迟，第二种处理方法会使中断期间的数据无法处理，两种处理方式均会影响到整体运行质量。
技术实现思路
本申请实施例提供了一种数据处理方法、装置、服务器及介质，可以在利用服务器数量变更提高数据处理速率的同时，不影响原本的数据统计。第一方面，本申请实施例提供了一种数据处理方法，包括：获取变更服务器数量的临界时间；根据所述临界时间，确定待处理数据的存储目录；根据所述待处理数据的存储目录，将所述待处理数据分发至对应的运算服务器，以指示所述运算服务器对所述待处理数据进行处理。第二方面，本申请实施例提供了一种数据处理装置，包括：临界时间获取模块，用于获取变更服务器数量的临界时间；存储目录确定模块，用于根据所述临界时间，确定待处理数据的存储目录；发送模块，用于根据所述待处理数据的存储目录，将所述待处理数据分发至对应的运算服务器，以指示所述运算服务器对所述待处理数据进行处理。第三方面，本申请实施例提供了一种服务器，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的方法。第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上述第一方面所述的方法。第五方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在服务器上运行时，使得服务器执行上述第一方面中所述的方法。本申请实施例与现有技术相比存在的有益效果是：在本申请实施例中，当处理数据的服务器数量发生变化时，可以获取到变更服务器数量的临界时间；然后根据临界时间，确定待处理数据的存储目录；再根据待处理数据的存储目录，将待处理数据分发至对应的运算服务器，以指示运算服务器对待处理数据进行处理。在数据处理过程中，将待处理数据分发至各个运算服务器进行分布式处理，提高了数据处理的效率；但是当需要的服务器数量进行变更时，一些待处理数据对应的运算服务器会发生变化，使得数据处理时比较繁琐，在本申请中，会获取到变更服务器数量的临界时间，该临界时间可以晚于当前时间，在临界时间之前的待处理数据按照变更之前的服务器数量进行处理，在临界时间之后的待处理数据按照变更之后的服务器数量进行处理，因此可以在数据产生量发生变化时，通过变更服务器数量，提高处理效率，合理利用资源，且不影响数据统计。附图说明为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本申请实施例一提供的一种数据处理方法的流程示意图；图2是本申请实施例二提供的一种数据处理方法的流程示意图；图3是本申请实施例三提供的一种数据处理方法的流程示意图；图4是本申请实施例四提供的一种数据处理装置的结构示意图；图5是本申请实施例五提供的服务器的结构示意图。具体实施方式以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。如在本申请说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。图1是本申请实施例一提供的一种数据处理方法的流程示意图，如图1所示，所述方法包括：S101，获取变更服务器数量的临界时间；本实施例的执行主体为暂存服务器，所述暂存服务器为具有存储功能的计算设备，可以包括云服务器。上述变更服务器数量，变更的为运算服务器的数量，包括运算服务器数量的增加和减少。随着互联网技术的普及和信息化发展，越来越多的业务可以通过计算机来完成，越来越多的用户开始使用计算机处理事务，因此产生的数据也越来越多，此时，之前的运算服务器已经不能满足需求，因而需要增加运算服务器数量，使得数据处理能够更及时；另外一些情况下，受时间等因素影响，一些数据的产生量会减少，则之前进行数据处理的运算服务器可能经常处于空闲状态，会造成资源浪费，因而需要减少运算服务器数量。当检测到需要对运算服务器数量进行变化时，可以获取一个变更运算服务器数量的临界时间。在临界时间之前的数据，可以按照变更前的运算服务器数量进行处理；在临界时间之后的数据，可以根据变更后的运算服务器数量进行处理。具体地，临界时间可以晚于当前系统时间，因而，当前正在处理的待处理数据仍然会按照自己的处理方式进行处理，不会受到运算服务器数量变更的影响，在进行数据统计和分析时，临界时间之前的待处理数据也是在原来的运算服务器本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，包括：/n获取变更服务器数量的临界时间；/n根据所述临界时间，确定待处理数据的存储目录；/n根据所述待处理数据的存储目录，将所述待处理数据分发至对应的运算服务器，以指示所述运算服务器对所述待处理数据进行处理。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：
获取变更服务器数量的临界时间；
根据所述临界时间，确定待处理数据的存储目录；
根据所述待处理数据的存储目录，将所述待处理数据分发至对应的运算服务器，以指示所述运算服务器对所述待处理数据进行处理。


2.如权利要求1所述的方法，其特征在于，所述获取变更服务器数量的临界时间，包括：
当检测到配置文件中的服务器数量值字段发生变化时，提取所述服务器数量值字段中的变更所述服务器数量的临界时间；或，
当接收到变更所述服务器数量的通知信息时，提取所述通知信息中的变更所述服务器数量的临界时间。


3.如权利要求1所述的方法，其特征在于，所述待处理数据包括对应的流水号，根据所述临界时间，确定待处理数据的存储目录，包括：
从所述待处理数据的流水号中提取所述待处理数据的发送时间；
若所述待处理数据的发送时间早于或等于所述临界时间，则基于变更前的服务器数量，确定所述待处理数据的存储目录；
若所述待处理数据的发送时间晚于所述临界时间，则基于变更后的服务器数量，确定所述待处理数据的存储目录。


4.如权利要求3所述的方法，其特征在于，所述若所述待处理数据的发送时间早于或等于所述临界时间，则基于变更前的服务器数量，确定所述待处理数据的存储目录，包括：
若所述待处理数据的发送时间早于或等于所述临界时间，则根据所述发送时间确定所述待处理数据的第一存储目录，根据所述流水号和变更前的服务器数量确定所述待处理数据的第二存储目录；
根据所述第一存储目录和所述第二存储目录，确定所述待处理数据的存储目录。


5.如权利要求4所述的方法，其特征在于，所述根据所述发送时间确定所述待处理数据的第一存储目录，根据所述流水号和变更前的服务器数量确定所述待处理数据的第二存储目录，包括：
识别所述发送时间中的多个时间单位，所述多个时间单位包括年单位、月单位、日单位和时单位；
建立与所述年单位相对应的年存储目录，并在所述年存储目录下顺序建立与所述月单位、日单位和时单位相对应的存储目录，以所述时单位对应的存储目录作为第一存储...

【专利技术属性】
技术研发人员：余文胜，吴晋龙，汪茂伙，
申请(专利权)人：深圳市梦网科技发展有限公司，
类型：发明
国别省市：广东;44