通过支持向量回归机辅助xgboost调参的方法技术

技术编号:37999051 阅读:22 留言:0更新日期:2023-06-30 10:13
本发明专利技术属于人工智能领域,涉及一种通过支持向量回归机进行辅助xgboost调参的方法,使用随机搜索方式进行参数搜索;生成若干条不同的参数与评估结果的记录,评估结果是指使用xgboost生成的预测值与实际值的差值除以实际值;针对这些记录,通过支持向量回归机svr算法训练出不同参数与评估结果的对应模型,不同参数是指常用参数通过随机搜索算法得到的参数;再进行随机搜索,通过支持向量回归机svr算法输出评估结果,在不同结果中选取最优结果,最优结果即评估结果值最接近1的参数组合,由此确定最优参数。本发明专利技术将大批量的数据从直接进行xgboost训练而转换为进行支持向量回归机svr的预测,在选取最优参数时节省大量时间。在选取最优参数时节省大量时间。在选取最优参数时节省大量时间。

【技术实现步骤摘要】
通过支持向量回归机辅助xgboost调参的方法


[0001]本专利技术属于人工智能
,具体涉及一种通过支持向量回归机进行辅助xgboost调参的方法。

技术介绍

[0002]当前xgboost在人工智能领域大放异彩,很多领域都在广泛应用这一算法。xgboost是大规模并行boosted tree的工具,它是目前最快最好的开源boosted tree工具包之一,比常见的工具包快10倍以上。但在该工具包的算法中,调参是一项繁琐但至关重要的任务,因为它很大程度上影响了算法的性能。手动调参十分耗时,网格和随机搜索不需要人力,但需要很长的运行时间。调参指的是机器学习模型的超参数。

技术实现思路

[0003]为解决上述技术问题,本专利技术提出一种通过支持向量回归机辅助xgboost调参的方法,本专利技术所采用的技术方案如下:
[0004]通过支持向量回归机辅助xgboost调参的方法,包括以下步骤:
[0005]步骤1、确定xgboost常用参数的取值范围;
[0006]步骤2、使用随机搜索的方式进行参数搜索,本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.通过支持向量回归机辅助xgboost调参的方法,其特征在于,包括以下步骤:步骤1、确定xgboost常用参数的取值其返回对应关系;步骤2、使用随机搜索的方式进行参数搜索,即:在每一组常用参数中随机选定某个参数参与建模;步骤3、生成若干条不同的参数与评估结果的记录,此处评估结果是指使用xgboost生成的预测值与实际值的差值...

【专利技术属性】
技术研发人员:李祥马中雨刘帅陈兴厅肖志超
申请(专利权)人:青岛积成电子股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1