【技术实现步骤摘要】
一种数据处理方法及装置
本申请涉及数据处理
，特别是涉及一种数据处理方法及装置。
技术介绍
随着互联网技术的发展，适用于各种场景的业务不断出现。服务提供商为了更好的为用户提供服务，可能会收集用户在业务使用过程中产生的数据，并对所收集的数据进行及时处理，进而为用户提供高质量的服务。然而，用户在一天中的各个时段使用业务的频繁程度不同，进而服务提供商在一天的不同时段所收集到数据的数据量也会有所差异。例如，一天中的某些时段所收集到数据的数据量较小，这样需要较少的处理资源即可完成及时处理，而有些时段所收集到数据的数据量较大，这样则需要较多的处理资源才能完成及时处理，这种情况下一旦进行数据处理的资源不足，易出现数据数据累积、资源长期被占用、及时性差的情况。鉴于上述情况，易导致数据处理过程稳定性差。
技术实现思路
本申请实施例的目的在于提供一种数据处理方法及装置，以提高数据处理过程的稳定性。具体技术方案如下：第一方面，本申请实施例提供了一种数据处理方法，所述方法包括：按照第一线程每次读取第一数据量的数据的规则，获取所述第一线程读取待处理数据的当前数据量；判断所述当前数据量是否...
【技术保护点】
1.一种数据处理方法，其特征在于，所述方法包括：按照第一线程每次读取第一数据量的数据的规则，获取所述第一线程读取待处理数据的当前数据量；判断所述当前数据量是否大于第二数据量；在所述当前数据量大于第二数据量的情况下，判断所述待处理数据的数据量是否超出所述第一线程的处理能力，若是，则调用第二线程，以使所述第二线程读取待处理数据并处理所读取的数据。
【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：按照第一线程每次读取第一数据量的数据的规则，获取所述第一线程读取待处理数据的当前数据量；判断所述当前数据量是否大于第二数据量；在所述当前数据量大于第二数据量的情况下，判断所述待处理数据的数据量是否超出所述第一线程的处理能力，若是，则调用第二线程，以使所述第二线程读取待处理数据并处理所读取的数据。2.根据权利要求1所述的方法，其特征在于，所述判断所述待处理数据的数据量是否超出所述第一线程的处理能力，包括：确定所述第一线程各次读取所述待处理数据时所读取到数据的量大于所述第二数据量的次数；判断所述次数是否大于预设次数阈值；若为是，判定所述待处理数据的数据量超出所述第一线程的处理能力。3.根据权利要求1或2所述的方法，其特征在于，在所述获取所述第一线程读取待处理数据的当前数据量之后，还包括：判断所述当前数据量是否小于所述第一数据量；若为否，增大所述第一数据量的取值；若为是，减小所述第一数据量的取值。4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：在所述当前数据量不大于所述第二数据量的情况下，增大所述第一数据量的取值；在所述当前数据量小于所述第一数据量的情况下，减小所述第一数据量的取值。5.一种数据处理方法，其特征在于，应用于第一线程，所述方法包括：按照每次读取第一数量的数据的规则，获取读取待处理数据的当前数据量；判断所述当前数据量是否大于第二数据量；在所述当前数据量大于所述第二数据量的情况下，判断所述待处理数据的数据量是否超出所述第一线程自身的处理能力，若是，请求管理线程调用第二线程，以使得所述第二线程读取待处理数据并处理所读取的数据。6.一种数据处理装置，其特征在于，所述装置包括：第一数据量获取模块，用于按照第一线程每次读取第一数据量的数据的规则，获取所述第一线程读取待处理数据的当前数据量；第一数据量判断模块，用于判断所述当前数据量是否大于第二数据量；线程调用模块，用于在所述当前数据量大于第二数据量的情况下，判断所述待处理数据的...
【专利技术属性】
技术研发人员：李成，
申请(专利权)人：新华三信息安全技术有限公司，
类型：发明
国别省市：安徽,34
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。