【技术实现步骤摘要】
任务处理方法及装置
[0001]本文件涉及数据处理
,尤其涉及一种任务处理方法及装置。
技术介绍
[0002]对问题进行求解以得到目标结果是运筹优化方向中的数学规划分支,也是应用数学的一个分支,主要指在一定约束条件下,选取某种研究方案使目标达到预期效果的一种方法。对问题进行求解以得到目标结果在机器学习、人工智能、图像和信号处理、金融和经济、管理科学等众多领域有着极其广泛的应用。优化问题按数学方程式的特征可分为整数规划、线性规划、非线性规划、二次规划和几何规划等等。
技术实现思路
[0003]本说明书一个或多个实施例提供了一种任务处理方法。所述任务处理方法,包括:对待处理任务的任务描述信息进行解析处理,获得所述待处理任务的数据操作指令。根据所述待处理任务的任务参数以及处理单元集群中候选处理单元的可用资源信息,在所述处理单元集群中筛选至少一个处理单元。将所述数据操作指令转换为与所述至少一个处理单元的输入适配的输入数据。加载处理引擎的处理配置,以通过所述处理引擎按照所述处理配置将所述输入数据输入对应的处理单元进行任务处理,并确定所述待处理任务的任务处理结果。
[0004]本说明书一个或多个实施例提供了一种任务处理装置,包括:解析处理模块,被配置为对待处理任务的任务描述信息进行解析处理,获得所述待处理任务的数据操作指令。处理单元筛选模块,被配置为根据所述待处理任务的任务参数以及处理单元集群中候选处理单元的可用资源信息,在所述处理单元集群中筛选至少一个处理单元。转换模块,被配置为将所述数据操作指令 ...
【技术保护点】
【技术特征摘要】
1.一种任务处理方法,包括:对待处理任务的任务描述信息进行解析处理,获得所述待处理任务的数据操作指令;根据所述待处理任务的任务参数以及处理单元集群中候选处理单元的可用资源信息,在所述处理单元集群中筛选至少一个处理单元;将所述数据操作指令转换为与所述至少一个处理单元的输入适配的输入数据;加载处理引擎的处理配置,以通过所述处理引擎按照所述处理配置将所述输入数据输入对应的处理单元进行任务处理,并确定所述待处理任务的任务处理结果。2.根据权利要求1所述的任务处理方法,所述对待处理任务的任务描述信息进行解析处理,获得所述待处理任务的数据操作指令,包括:解析所述任务描述信息,获得所述任务描述信息中的多个关键信息片段;按照各关键信息片段的片段特征对所述多个关键信息片段进行片段拼接,获得所述数据操作指令。3.根据权利要求1所述的任务处理方法,所述根据所述待处理任务的任务参数以及处理单元集群中候选处理单元的可用资源信息,在所述处理单元集群中筛选至少一个处理单元,包括:确定所述待处理任务的任务类别和/或任务数据数量;在所述处理单元集群中筛选出所述任务类别和/或所述任务数据数量匹配的至少一个中间处理单元;按照所述至少一个中间处理单元中各中间处理单元的可用资源信息,对所述至少一个中间处理单元进行二次筛选,获得所述至少一个处理单元。4.根据权利要求1所述的任务处理方法,所述将所述数据操作指令转换为与所述至少一个处理单元的输入适配的输入数据,包括:确定所述至少一个处理单元中各处理单元的可识别数据类别;按照所述可识别数据类别对所述数据操作指令进行建模处理,获得所述各处理单元对应的输入数据。5.根据权利要求4所述的任务处理方法,所述按照所述可识别数据类别对所述数据操作指令进行建模处理,获得所述各处理单元对应的输入数据,包括:解析所述数据操作指令获得所述数据操作指令的指令要素;按照所述可识别数据类别对所述指令要素进行类别转换处理,获得所述指令要素在所述可识别数据类别下的可识别要素;对所述可识别要素进行要素拼接,获得所述输入数据。6.根据权利要求1所述的任务处理方法,所述加载处理引擎的处理配置,包括:加载所述待处理任务的任务类别对应的历史处理配置;若所述历史处理配置不为空,则将所述历史处理配置确定为所述处理配置;若所述历史处理配置为空,则加载默认处理配置。7.根据权利要求1所述的任务处理方法,所述处理配置,包括下述至少一项:迭代次数上限、迭代次数下限、处理时间、线程数量、进程数量、缓存状态。8.根据权利要求1所述的任务处理方法,所述待处理任务的任务处理结果,采用如下方式确定:
将所述至少一个处理单元中目标处理单元输出的任务处理结果确定为所述待处理任务的任务处理结果;其中,所述目标处理单元包括所述至少一个处理单元中处理耗时小于其他处理单元的处理单元。9.根据权利要求1所述的任务处理方法,所述待处理任务的任务处理结果,采用如下...
【专利技术属性】
技术研发人员:魏文文,曾维,
申请(专利权)人:支付宝杭州信息技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。