基于大数据的信息智能处理方法及装置制造方法及图纸

本发明专利技术提供一种基于大数据的信息智能处理方法及装置，涉及信息处理技术，通过实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；然后获取待处理的总信息量，将总信息量分为多个子信息；获取各所述子信息的数据量，根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数，将所述子信息分发给对应个数的所述第一处理单元。本发明专利技术通过将每个待处理的数据拆分成多个子信息，然后分发给处理器中的多个处于空闲状态的处理单元，使得每一个子信息的处理单元都是最佳处理状态，从而充分利用处理器的处理性能，提高处理的效率，同时还可以提高处理器的处理性能。

【技术实现步骤摘要】
基于大数据的信息智能处理方法及装置
本专利技术涉及信息处理技术，尤其涉及一种基于大数据的信息智能处理的方法及装置。
技术介绍
在大数据的背景下，信息时代的特征之一就是数据的密集爆发,即数据的爆发式增长，人们需要处理的数据越来越多,对于数据处理的效率以及处理性能要求也越来越高。目前，对数据进行处理的处理器在接收需要处理的数据后，对数据没有一个预处理的过程，而是进行统一批量的处理，导致处理器的利用率较低，从而导致处理效率低下，导致处理延迟等现象出现。
技术实现思路
本专利技术实施例提供一种基于大数据的信息智能处理方法及装置，可以提高数据的处理效率。本专利技术实施例的第一方面，提供一种基于大数据的信息智能处理方法，包括：实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；获取待处理的总信息量，将所述总信息量分为多个子信息；获取各所述子信息的数据量；根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数；将所述子信息分发给对应个数的所述第一处理单元。可选地，在第一方面的一种可能实现方式中，所述获取待处理的总信息量，将所述总信息量分为多个子信息，包括：获取待处理的总信息量；统计所述总信息量包含子信息的数量，按照数量将所述总信息量分为多个所述子信息。可选地，在第一方面的一种可能实现方式中，在所述获取各所述子信息的数据量之后，还包括：按照所述数据量对所述子信息进行降序排序；相应的，将所述子信息分发给对应个数的所述第一处理单元，包括：按照排序后的顺序，将所述子信息依次分发给对应个数的所述第一处理单元。可选地，在第一方面的一种可能实现方式中，所述将所述子信息分发给对应个数的所述第一处理单元，包括：将所述子信息均匀分发给对应个数的所述第一处理单元。可选地，在第一方面的一种可能实现方式中，还包括:将除所述第一处理单元以外的处理单元标记为第二处理单元；若所述第一处理单元个数为0，且所述子信息的数据量大于0，统计多个所述第二单元的剩余处理量；若所述剩余处理量大于所述第一处理单元的处理量，将多个所述第二单元标记为第三处理单元；将所述子信息分发给所述第三处理单元。可选地，在第一方面的一种可能实现方式中，所述将所述子信息分发给所述第三处理单元，包括：获取各所述子信息的数据量；根据所述数据量和所述第三处理单元的处理量，获取所需所述第三处理单元的个数；将所述子信息分发给对应个数的所述第三处理单元。可选地，在第一方面的一种可能实现方式中，所述将所述子信息分发给对应个数的所述第三处理单元，包括：以所述第二单元的剩余处理量，将所述子信息分发给所述第三处理单元。本专利技术实施例的第二方面，提供一种基于大数据的信息智能处理装置，包括：检测模块，用于实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；拆分模块，用于获取待处理的总信息量，将所述总信息量分为多个子信息；统计模块，用于获取各所述子信息的数据量；计算模块，用于根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数；分发模块，用于将所述子信息分发给对应个数的所述第一处理单元。本专利技术实施例的第三方面，提供一种基于大数据的信息智能处理设备，包括：存储器、处理器以及计算机程序，所述计算机程序存储在所述存储器中，所述处理器运行所述计算机程序执行本专利技术第一方面及第一方面各种可能涉及的所述方法。本专利技术实施例的第四方面，提供一种可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时用于实现本专利技术第一方面及第一方面各种可能涉及的所述方法。本专利技术提供的基于大数据的信息智能处理方法及装置，通过实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元，即将处理器分为多个处理单元，然后实时检测多个处理单元的处理状态；然后获取待处理的总信息量，将总信息量分为多个子信息；获取各所述子信息的数据量，根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数，将所述子信息分发给对应个数的所述第一处理单元。即根据需要处理的数据量，来查到需要几个对应的第一处理单元进行处理，然后分配个这几个第一处理单元进行处理即可。本专利技术通过将每个待处理的数据拆分成多个子信息，然后分发给处理器中的多个处于空闲状态的处理单元，使得每一个子信息的处理单元都是最佳处理状态，从而充分利用处理器的处理性能，提高处理的效率，同时还可以提高处理器的处理性能。附图说明图1是本专利技术实施例提供的一种基于大数据的信息智能处理方法的流程示意图；图2是本专利技术实施例提供的另一种基于大数据的信息智能处理方法的流程示意图；图3是本专利技术实施例提供的一种基于大数据的信息智能处理装置；图4是本专利技术实施例提供的一种基于大数据的信息智能处理设备的硬件结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等（如果存在）是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。应当理解，在本专利技术的各种实施例中，各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本专利技术实施例的实施过程构成任何限定。应当理解，在本专利技术中，“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。应当理解，在本专利技术中，“多个”是指两个或两个以上。“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。“包含A、B和C”、“包含A、B、C”是指A、B、C三者都包含，“包含A、B或C”是指包含A、B、C三者之一，“包含A、B和/或C”是指包含A、B、C三者中任1个或任2个或3个。应当理解，在本专利技术中，“与A对应的B”、“与A相对应的本文档来自技高网...

【技术保护点】
1.一种基于大数据的信息智能处理方法，其特征在于，包括：/n实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；/n获取待处理的总信息量，将所述总信息量分为多个子信息；/n获取各所述子信息的数据量；/n根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数；/n将所述子信息分发给对应个数的所述第一处理单元。/n

【技术特征摘要】
1.一种基于大数据的信息智能处理方法，其特征在于，包括：
实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；
获取待处理的总信息量，将所述总信息量分为多个子信息；
获取各所述子信息的数据量；
根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数；
将所述子信息分发给对应个数的所述第一处理单元。


2.根据权利要求1所述的方法，其特征在于，所述获取待处理的总信息量，将所述总信息量分为多个子信息，包括：
获取待处理的总信息量；
统计所述总信息量包含子信息的数量，按照数量将所述总信息量分为多个所述子信息。


3.根据权利要求1或2所述的方法，其特征在于，在所述获取各所述子信息的数据量之后，还包括：
按照所述数据量对所述子信息进行降序排序；
相应的，将所述子信息分发给对应个数的所述第一处理单元，包括：
按照排序后的顺序，将所述子信息依次分发给对应个数的所述第一处理单元。


4.根据权利要求1所述的方法，其特征在于，所述将所述子信息分发给对应个数的所述第一处理单元，包括：
将所述子信息均匀分发给对应个数的所述第一处理单元。


5.根据权利要求1所述的方法，其特征在于，还包括:
将除所述第一处理单元以外的处理单元标记为第二处理单元；
若所述第一处理单元个数为0，且所述子信息的数据量大于0，统计多个所述第二单元的剩余处理量；
若所述剩余处理量大于所述第一处理单元的处理量，将...

【专利技术属性】
技术研发人员：刘雄，
申请(专利权)人：达科小艾南京人工智能技术研发有限公司，
类型：发明
国别省市：江苏;32