参数优化控制方法、装置和分布式计算系统制造方法及图纸

本公开提供一种参数优化控制方法、装置和分布式计算系统，涉及分布式计算领域。其中参数优化控制装置提取目标计算任务的特征，以生成任务特征标识，在数据库中提取与任务特征标识相对应的配置参数优化方案，根据配置参数优化方案对环境默认配置参数进行优化处理以得到优化配置参数，以便根据优化配置参数执行目标计算任务。从而使得所配置参数与所执行任务的特点相匹配，提高了分布式计算的整体性能。

Parameter Optimizing Control Method, Device and Distributed Computing System

【技术实现步骤摘要】
参数优化控制方法、装置和分布式计算系统
本公开涉及分布式计算领域，特别涉及一种参数优化控制方法、装置和分布式计算系统。
技术介绍
分布式计算环境已经成为企业最重要的IT(InformationTechnology，信息技术)基础设施之一。为适应不同特征的分布式计算任务，在现有的通用分布式计算坏境中都提供了一些控制参数，同时提供默认的参数数值，用于控制分布式计算任务在环境中的运行。这些参数配置和分布式计算任务的运行效能密切相关，参数的调优需要分布式任务的提交者有足够的经验。在目前的实际使用场景下，相关任务在分布式环境中运行时，与计算任务密切相关参数配置通常都是采用默认参数配置，这些默认配置一般适用于通用场景，不一定符合特定任务自身的特点，从而会影响分布式计算的整体效能。
技术实现思路
本公开的实施例解决的一个技术问题是：由于分布式计算中的默认参数配置无法根据具体任务的特点进行动态调整，因此会影响分布式计算的整体效能。根据本公开的一个或多个实施例的一个方面，提供一种参数优化控制方法，包括：提取目标计算任务的特征，以生成任务特征标识；在数据库中提取与任务特征标识相对应的配置参数优化方案；根据配本文档来自技高网...

【技术保护点】
1.一种参数优化控制方法，包括：提取目标计算任务的特征，以生成任务特征标识；在数据库中提取与所述任务特征标识相对应的配置参数优化方案；根据所述配置参数优化方案、所述目标计算任务的配置参数和环境默认配置参数，评估是否需要对所述环境默认配置参数进行调整；在需要对所述环境默认配置参数进行调整的情况下，对所述环境默认配置参数进行优化处理以得到优化配置参数，以便根据所述优化配置参数执行所述目标计算任务。

【技术特征摘要】
1.一种参数优化控制方法，包括：提取目标计算任务的特征，以生成任务特征标识；在数据库中提取与所述任务特征标识相对应的配置参数优化方案；根据所述配置参数优化方案、所述目标计算任务的配置参数和环境默认配置参数，评估是否需要对所述环境默认配置参数进行调整；在需要对所述环境默认配置参数进行调整的情况下，对所述环境默认配置参数进行优化处理以得到优化配置参数，以便根据所述优化配置参数执行所述目标计算任务。2.根据权利要求1所述的方法，其中：在所述目标计算任务执行完毕后，将所述目标计算任务的任务特征标识以及相应的任务执行统计信息添加到所述数据库中。3.根据权利要求1所述的方法，其中：在需要对所述环境默认配置参数进行调整的情况下，还包括：获取当前分布式环境的资源信息；在所述资源信息支持对所述环境默认配置参数进行优化的情况下，对所述环境默认配置参数进行优化处理。4.根据权利要求1-3中任一项所述的方法，还包括：根据预定规则对所述优化配置参数进行二次调整。5.根据权利要求1-3中任一项所述的方法，还包括：通过在所述数据库中提取具有相同任务特征标识的任务统计信息；通过对所述任务统计信息进行分析挖掘，以得到相应任务的配置参数优化方案。6.一种参数优化控制装置，包括：特征标识生成模块，被配置为提取目标计算任务的特征，以生成任务特征标识；优化方案提取模块，被配置为在数据库中提取与所述任务特征标识相对应的配置参数优化方案；评估模块，被配置为根据所述配置参数优化方案、所述目标计算任务的配置参数和环境默认配置参数，评估是否需要对所述环境默认配置参...

【专利技术属性】
技术研发人员：乔宏明，谢晓军，胡颖茂，姚文胜，陈春华，李嫚，梁奂，
申请(专利权)人：中国电信股份有限公司，
类型：发明
国别省市：北京,11