神经网络架构搜索(NAS)最佳科学研究实践指南
论文:Best Practices for Scientific Research on Neural Architecture Search[1]
下图给出了 https://www.ml4aad.org/automl/literature-on-neural-architecture-search/ 网站自2015年统计的NAS论文数量,可以看到,近三年NAS论文数量暴增。尽管越来越多的研究人员提出了不同NAS的改进算法,但是相比于机器学习其他领域的研究,NAS算法的评估方法还处在一个初级阶段,而且一些工作也对NAS的有效性提出质疑,比如随机搜索也能很高效地搜索得到表现很好的模型。

该论文提供了一个checklist (http://automl.org/nas_checklist.pdf) 来帮助得到更好的NAS实践,下面是三个方面的checklist:



微信公众号:AutoML机器学习

MARSGGBO♥原创
如有意合作或学术讨论欢迎私戳联系~
邮箱:marsggbo@foxmail.com
2020-11-11 10:34:59
参考资料
[1] Best Practices for Scientific Research on Neural Architecture Search: https://arxiv.org/abs/1909.02453