一种成本有效的面向超参数优化的工作流执行优化方法

来源：计算机集成制造系统杂志2020年第6期北京时间：

作者：姚艳,曹健

单位：1.齐鲁工业大学(山东省科学院)计算机科学与技术学院2.上海交通大学计算机科学与工程系

摘要：随着云计算技术的成熟,越来越多的数据分析任务被放在云计算平台中处理。而面向数据分析应用的机器学习算法的超参数优化是一个非常耗时且耗费资源的过程。超参数优化执行的成本开销是用户关注的一个重要因素之一。目前,针对超参数优化的研究大部分以学习模型性能为目标,考虑成本开销的研究工作较少。由此研究了基于当前的超参数优化方法,在不改变学习模型性能(如准确率、查准率、召回率等)的基础上,使得超参数优化执行尽可能快的同时成本开销尽可能低。首先,生成一个包含多个并行分支的超参数优化工作流,每个分支上的所有任务都运行在同一台服务器上。然后通过有色装箱算法来决策这些分支所包含的任务。实验结果表明所提算法可以在保证执行时间的前提下减少成本开销。

关键词：云计算,云工作流,执行优化,超参数优化

基金资助：国家重点研发计划资助项目(2018YFB1003800);国家自然科学基金资助项目(61772334)。