图数据的计算任务发布方法、装置、设备和存储介质制造方法及图纸

技术编号:23860122 阅读:31 留言:0更新日期:2020-04-18 13:21
本申请涉及一种图数据的计算任务发布方法、装置、计算机设备和存储介质,所述方法包括:获取与待处理图数据相对应的任务信息;任务信息包括任务可执行文件的获取路径、以及对待处理图数据进行任务计算的算法参数;创建新区块;将任务信息写入新区块;当新区块通过区块链网络验证后,将新区块加入区块链网络;在区块链网络中广播任务信息;广播的任务信息,用于指示处于区块链网络中的计算节点获取从待处理图数据中划分出的子图数据,并根据获取路径拉取任务可执行文件,根据算法参数执行任务可执行文件,以迭代执行对于子图数据的计算任务,获得计算结果。本申请提供的方案可以提高图数据的计算任务的发布效率。

Figure calculation task release method, device, equipment and storage medium of data

【技术实现步骤摘要】
图数据的计算任务发布方法、装置、设备和存储介质本申请是于2018年05月16日提交中国专利局,申请号为201810467817.8,专利技术名称为“图数据处理方法和图数据的计算任务发布方法”的分案申请,其全部内容通过引用结合在本申请中。
本申请涉及图计算
,特别是涉及一种图数据的计算任务发布方法、装置、计算机设备和存储介质。
技术介绍
随着计算机技术的发展,出现了以“图论”为基础的对现实世界的一种图结构的抽象表达,以及在这种数据结构上的计算模式,也就是图计算。在具体应用中,可以用图数据表示社交网络、商品购买关系、道路交通网络、通信网络等等信息,而基于图数据的计算需求也越来越多,越来越复杂。传统的图计算方法通常是基于中心化思想的图计算方法,在图计算过程中常常使用参数服务器对需要进行共享的数据进行存储和更新。虽然参数服务器可以将需要共享的数据分布式地存储在各个服务器节点上,以在一定程度上避开单点故障,但在数据更新时却需要依赖一个中心化的驱动程序来协调处理。这在图计算过程中往往会导致巨大的网络吞吐量,从而使得网络通信成为图计算系本文档来自技高网...

【技术保护点】
1.一种图数据的计算任务发布方法,应用于控制节点,所述方法包括:/n获取与待处理图数据相对应的任务信息;所述任务信息包括任务可执行文件的获取路径、以及对所述待处理图数据进行任务计算的算法参数;/n创建新区块;/n将所述任务信息写入所述新区块;/n当所述新区块通过区块链网络验证后,将所述新区块加入所述区块链网络;/n在所述区块链网络中广播所述任务信息;广播的任务信息,用于指示处于所述区块链网络中的计算节点获取从待处理图数据中划分出的子图数据,并根据所述获取路径拉取任务可执行文件,根据所述算法参数执行所述任务可执行文件,以迭代执行对于所述子图数据的计算任务,获得计算结果。/n

【技术特征摘要】
1.一种图数据的计算任务发布方法,应用于控制节点,所述方法包括:
获取与待处理图数据相对应的任务信息;所述任务信息包括任务可执行文件的获取路径、以及对所述待处理图数据进行任务计算的算法参数;
创建新区块;
将所述任务信息写入所述新区块;
当所述新区块通过区块链网络验证后,将所述新区块加入所述区块链网络;
在所述区块链网络中广播所述任务信息;广播的任务信息,用于指示处于所述区块链网络中的计算节点获取从待处理图数据中划分出的子图数据,并根据所述获取路径拉取任务可执行文件,根据所述算法参数执行所述任务可执行文件,以迭代执行对于所述子图数据的计算任务,获得计算结果。


2.根据权利要求1所述的方法,其特征在于,所述获取与待处理图数据相对应的任务信息包括:
接收任务添加指令;
根据所述任务添加指令展示任务编辑界面;
获取输入至所述任务编辑界面中的与待处理图数据相对应的任务信息。


3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
在所述任务编辑界面中分条目展示与各所述计算任务对应的相关信息;所述相关信息包括任务名称、运行时间、运行命令、以及任务进度中的至少一种;所述计算任务对应的相关信息用于实时显示所述计算任务的执行情况。


4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
在所述任务编辑界面中分条目展示与各所述计算任务对应的处理控件;所述处理控件用于对所述计算任务的执行状态进行变更;
当产生对于所述处理控件的变更指令时,响应于所述变更指令对所述计算任务的执行状态进行变更。


5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取对已存在的计算任务的任务信息的修改内容;
创建新区块,并将所述修改内容写入创建的所述新区块中,以在所述区块链网络中根据所述修改内容更新所述任务信息。


6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定待终止的计算任务;
将所述待终止的计算任务标记为不可用状态;
创建新区块,并将所述待终止的计算任务处于不可用状态的标记信息写入创建的所述新区块中,以在所述区块链网络中广播所述标记信息。


7.根据权利要求1所述的方法,其特征在于,所述在所述区块链网络中广播所述任务信息之后,所述方法还包括:
在计算节点的负载状态满足负载条件时,接收所述计算节点发送的任务信息拉取指令;
响应于所述任务信息拉取指令,反馈广播的所述任务信息。


8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收任务执行状态展示指令;
根据所述任务执行状态展示指令在所述区块链网络中访问相应的计算节点所对应的计算任务执行日志,以获取任务执行状态信息;

【专利技术属性】
技术研发人员:郑博刘日佳刘志斌陈谦
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1