数据流任务处理装置及方法制造方法及图纸

本申请提供一种数据流任务处理装置及方法，装置包括：处理模块，用于进行数据处理；以及，数据流任务激活模块，用于检测数据流任务的输入数据是否准备完成，并当数据流任务准备完成后，控制处理模块对数据流任务进行数据处理。本申请提供的数据流任务处理装置对数据流任务需要的输入数据的准备情况进行监控，当监控到数据流任务的输入数据准备完成时即调用数据流任务进行处理，本申请通过硬件监控并直接触发数据流任务的执行，无需再一一读取内存中保存的数据流计算运行状态，从而加速了数据流任务的激活速度，提高了数据流任务的处理速度。

【技术实现步骤摘要】
数据流任务处理装置及方法
本专利技术属于数据处理
，尤其涉及一种数据流任务处理装置及方法。
技术介绍
目前处理器的发展方向已经从单纯提高处理器运行速度的方向向多核处理器的方向发展，而且大型分布式系统也越来越普遍。传统上程序设计采用顺序执行命令的结构进行编程，在该模式下数据往往是“静态“的，需不断的对数据进行存取的操作。这使得程序对于多核处理器以及大型分布式系统的支持不是特别好。而数据流编程强调以数据为驱动动力，明确定义输入以及输出的连接操作。不采用命令的方式，每当数据准备好即输入有效，相关操作就会立即执行，所以数据流编程本质是并行的，可以很好的运行在多核处理器以及大型分布式系统。目前，对数据流任务的判断以及调度等有关数据流计算运行的操作，是由操作系统之上的程序通过读取内存中保存的数据流计算运行状态来进行的。然而在未来的大型计算机中，不仅处理器核数众多，甚至包含IMC存内计算部件(每个任务的执行时间非常短)，调度的触发时间就现得非常关键。光靠程序通过内存的读取判断，其数据处理速度已经不能满足数据流计算的需求。
技术实现思路
本专利技术提供一种数据流任务处理装置及方法，用以解决目前程序通过读取内存中保存的数据流运行状态来对数据流任务的判断以及调度，处理速度较低的技术问题。本专利技术第一方面提供一种数据流任务处理装置，装置包括：处理模块，用于进行数据处理；以及，数据流任务激活模块，用于检测数据流任务的输入数据是否准备完成，并当所述数据流任务准备完成后，控制所述处理模块对所述数据流任务进行数据处理。进一步地，所述装置还包括：输入数据监听模块，用于监听是否有数据输入，当有数据输入时，提醒所述数据流任务激活模块当前数据准备完成。进一步地，所述输入数据监听模块包括：监听地址确定子模块，用于根据所述数据流任务确定监听的地址；监听子模块，用于监听所述地址是否有数据输入；提醒子模块，用于当所述地址有数据输入时，提醒所述数据流任务激活模块。进一步地，所述数据流任务激活模块，包括：输入计数子模块，用于对所述数据输入监听模块监听到的数据进行计数；控制子模块，当所述输入计数子模块的计数数量达到预设数量时，控制所述处理模块对所述数据流任务进行数据处理。本申请第二方面提供一种数据流任务处理方法，应用于第一方面提供的数据流任务处理装置，方法包括：数据流任务激活模块检测数据流任务的输入数据是否准备完成；若所述数据流任务的输入数据准备完成，处理模块对所述数据流任务进行处理。进一步地，所述数据流任务激活模块检测数据流任务输入数据是否准备完成，包括：当检测到有数据流任务输入数据准备完成时，所述数据流任务激活模块进行计数；当所述数据流任务激活模块计数的数值达到预设数值时，确定所述数据流任务数据准备完成。根据上述描述可知，本申请提供的数据流任务处理装置，装置包括：处理模块，用于进行数据处理；以及，数据流任务激活模块，用于检测数据流任务的输入数据是否准备完成，并当数据流任务准备完成后，控制处理模块对数据流任务进行数据处理。本申请提供的数据流任务处理装置对数据流任务需要的输入数据的准备情况进行监控，当监控到数据流任务的输入数据准备完成时即调用数据流任务进行处理。无需再一一读取内存中保存的数据流计算运行状态，从而加速了数据流任务的激活速度，提高了数据流任务的处理速度。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本申请实施例提供的数据流任务处理装置的结构示意图；图2为本申请实施例提供的数据流任务处理装置的又一结构示意图；图3为本申请实施例提供的输入数据监听模块的结构示意图；图4为本申请实施例提供的数据流任务激活模块的结构示意图；图5为本申请实施例提供的数据流任务处理方法的流程示意图；图6为本申请实施例提供的一个数据流处理有向图；图7为本申请实施例提供的数据流任务处理装置部分硬件实现示意图。具体实施方式为使得本专利技术的专利技术目的、特征、优点能够更加的明显和易懂，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而非全部实施例。基于本专利技术中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1所示，为本申请提供的数据流任务处理装置的结构示意图，该装置包括如下模块：处理模块101，用于进行数据处理；以及，数据流任务激活模块102，用于监控数据流任务的输入数据是否准备完成，并当数据流任务准备完成后，控制处理模块对数据流任务进行数据处理。数据流编程是一种解决多核处理器的效率利用问题的高性能并行编程模型。数据流编程与传统编程语言有着明显区别，它通过数据驱动的方式执行将数据的计算与通信相分离，通过任务调度与分配，以及将数据传送到任务所在核上，利用软件流水的并行特性来充分的挖掘流程序中潜在的并行性，使各个核之间负载均衡。在数据流范例中，一个数据流程序的静态实例会按照他的结构被描述成一张有向图。图中节点表示计算单元，边表示数据传输路径。相邻节点间通过边传输数据，节点消耗数据进行计算，并将产生的数据输出到输入输出序列作为下一个计算单元的输入。在本申请实施例中，数据流任务处理装置的处理模块101用于在有向图的节点中进行数据处理，即数据计算功能。数据流任务激活模块102用于对当前节点进行数据计算所需要的数据进行监控，以确定这些需要使用到的数据是否已经准备完成。此处数据已经准备完成，是指当前节点运行所需要的所有数据的输出节点已经运行结束并将运行结果通过有向图的边传输至当前节点。例如，当前节点运行需要三个数据，其中一个数据是一个常数，可以直接传输至当前节点。一个数据是对某一数据进行平方操作，还有一个数据是对某一数据进行取倒数操作。那么，只有这两个操作均计算完成并将输出数据传输至当前节点，才确定当前节点的数据流任务的输入数据准备完成。数据流任务激活模块102可以在接收到每个输入数据时更新其状态，并设定当输入数据全部准备完成时到达设定状态。当数据流任务激活模块102达到设定状态时，控制处理模块对数据流任务进行数据处理。即当数据流任务激活模块102达到设定状态时，控制处理模块101对当前节点进行数据计算。根据上述描述可知，本申请提供的数据流任务处理装置，包括：处理模块，用于进行数据处理；以及，数据流任务激活模块，用于检测数据流任务的输入数据是否准备完成，并当数据流任务准备完成后，控制处理模块对数据流任务进行数据处理。本申请提供的数据流任务处理装置对数据流任务需要的输入数据的准本文档来自技高网...

【技术保护点】
1.一种数据流任务处理装置，其特征在于，所述装置包括：/n处理模块，用于进行数据处理；以及，/n数据流任务激活模块，用于监控数据流任务的输入数据是否准备完成，并当所述数据流任务准备完成后，控制所述处理模块对所述数据流任务进行数据处理。/n

【技术特征摘要】
1.一种数据流任务处理装置，其特征在于，所述装置包括：
处理模块，用于进行数据处理；以及，
数据流任务激活模块，用于监控数据流任务的输入数据是否准备完成，并当所述数据流任务准备完成后，控制所述处理模块对所述数据流任务进行数据处理。


2.根据权利要求1所述的数据流任务处理装置，其特征在于，所述装置还包括：
输入数据监听模块，用于监听是否有数据输入，当有数据输入时，提醒所述数据流任务激活模块当前数据准备完成。


3.根据权利要求2所述的数据流任务处理装置，其特征在于，所述输入数据监听模块包括：
监听地址确定子模块，用于根据所述数据流任务确定监听的地址；
监听子模块，用于监听所述地址是否有数据输入；
提醒子模块，用于当所述地址有数据输入时，提醒所述数据流任务激活模块。


4.根据权利要求2所述的数据流任务处...

【专利技术属性】
技术研发人员：王梅，李粤平，罗秋明，
申请(专利权)人：深圳职业技术学院，
类型：发明
国别省市：广东;44