数据流图的节点调度方法、系统、服务器及存储介质技术方案

技术编号:24361973 阅读:31 留言:0更新日期:2020-06-03 03:51
本发明专利技术实施例公开了一种数据流图的节点调度方法、系统、服务器及存储介质。其中,所述方法包括:接收基于数据流图的多个第一计算节点的数据;从多个第一计算节点中确认具有逻辑关系的至少两个第一计算节点,根据预设规则合并具有逻辑关系的至少两个第一计算节点得到第二计算节点,将多个第一计算节点中未被合并的第一计算节点定义为第三计算节点;发送第二计算节点的数据至第一计算单元进行计算,发送第三计算节点的数据到第二计算单元中进行数据处理,第一计算单元和第二计算单元为不同类型的计算单元。本发明专利技术实施例通过合并需要在同一设备中进行数据处理的互相存在逻辑关系的节点,达到了提高节点计算效率和简化IO操作的技术效果。

Node scheduling method, system, server and storage medium of data flow graph

【技术实现步骤摘要】
数据流图的节点调度方法、系统、服务器及存储介质
本专利技术实施例涉及软硬件的节点调度技术,例如涉及一种数据流图的节点调度方法、系统、服务器及存储介质。
技术介绍
网络拓扑(NetworkTopology)结构是指用传输介质互连多种设备的物理布局,构成网络的成员间特定的物理的(即真实的)、或者逻辑的(即虚拟的)排列方式。如果两个网络的连接结构相同,即它们的网络拓扑相同,尽管它们各自内部的物理接线、节点间距离可能会有不同。网络拓扑中的节点计算是按照拓扑顺序依次在相应的设备上完成计算的,每个节点在过程中需要在主机与设备之间通过输入/输出(Input/Output,I/O)完成数据交换。这样就使得节点计算的效率较低,I/O操作较为复杂。
技术实现思路
本专利技术提供一种数据流图的节点调度方法、系统、服务器及存储介质,以实现提高节点计算效率的技术效果。第一方面,本专利技术实施例提供了一种数据流图的节点调度方法,包括:接收基于数据流图的多个第一计算节点的数据;从多个第一计算节点中确认具有逻辑关系的至少两个本文档来自技高网...

【技术保护点】
1.一种数据流图的节点调度方法,其特征在于,包括:/n接收基于数据流图的多个第一计算节点的数据;/n从所述多个第一计算节点中确认具有逻辑关系的至少两个第一计算节点,根据预设规则合并所述具有逻辑关系的至少两个第一计算节点得到第二计算节点,将所述多个第一计算节点中未被合并的第一计算节点定义为第三计算节点;/n发送所述第二计算节点的数据至第一计算单元进行计算,发送所述第三计算节点的数据到第二计算单元中进行数据处理,所述第一计算单元和所述第二计算单元为不同类型的计算单元。/n

【技术特征摘要】
1.一种数据流图的节点调度方法,其特征在于,包括:
接收基于数据流图的多个第一计算节点的数据;
从所述多个第一计算节点中确认具有逻辑关系的至少两个第一计算节点,根据预设规则合并所述具有逻辑关系的至少两个第一计算节点得到第二计算节点,将所述多个第一计算节点中未被合并的第一计算节点定义为第三计算节点;
发送所述第二计算节点的数据至第一计算单元进行计算,发送所述第三计算节点的数据到第二计算单元中进行数据处理,所述第一计算单元和所述第二计算单元为不同类型的计算单元。


2.根据权利要求1所述的方法,其特征在于,所述第一计算单元包括现场可编辑门阵列FPGA、图像处理器GPU、网络接口控制器NIC或显示适配器VGA,所述第二计算单元包括中央处理器CPU。


3.根据权利要求1所述的方法,其特征在于,所述第二计算节点包括至少一组第一前节点和第一后节点,所述第一后节点的数据的计算引用所述第一前节点的数据的计算结果。


4.根据权利要求3所述的方法,其特征在于,所述第一前节点的数据的计算结果和所述第一后节点的数据的计算结果通过第一总线存储于片上存储器。


5.根据权利要求4所述的方法,其特征在于,所述第三计算节点的数据通过第二总线从片外存储器...

【专利技术属性】
技术研发人员:黄雪辉熊超牛昕宇蔡权雄
申请(专利权)人:深圳鲲云信息科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1