基于无梯度进化的神经架构搜索算法研究综述

来源：计算机工程杂志2020年第9期北京时间：

作者：尚迪雅, 孙华, 洪振厚, 曾庆亮

单位：1. 新疆大学 软件学院 软件工程技术重点实验室, 乌鲁木齐 830002;2. 深圳大学 光电工程学院 光电子器件与系统教育部/广东省重点实验室, 广东 深圳 518060

摘要：自动化深度学习是目前深度学习领域的研究热点，神经架构搜索算法是实现自动化深度学习的主要方法之一，该类算法可以通过对搜索空间、搜索策略或优化策略进行不同定义来自动设计神经网络结构。阐述进化算法和进化神经网络的发展历程，分类介绍以进化算法为搜索策略实现神经架构搜索的方法和过程，并比较基于进化算法的不同神经架构搜索算法的特点和现状，在此基础上，对神经架构搜索算法的搜索空间、搜索策略以及算法的未来发展方向进行探讨和展望。

关键词：神经架构搜索,自动化深度学习,进化算法,搜索策略,进化神经网络

基金资助：新疆维吾尔自治区自然科学基金（2015211C263）。