ComeTender的博客

EcoNAS论文阅读笔记论文链接：https://arxiv.org/pdf/2001.01233.pdf论文贡献：1. 通过大量的实验较为系统地分析了NAS搜索效率提升的几个关键因素；2. 构建了一套基于进化算法的层次化搜索框架；论文方法：1. 系统调研代理任务中的关键因素​ 在NAS搜索中，受限于时间、计算资源等，采样的子网络往往会在代理任务上进行训练，从而获得评价指标。而寻...

Fair DartsFair\space DartsFair Darts 阅读笔记论文贡献：1. 指出Origin Darts中存在的两个现象: 即搜索的后期skip-connection数量过多，与由连续近似到离散结构的过程中存在性能差距的gap；2. 分别根据上述两个问题，给出对应的解决方法: 包括将操作权重的筛选独立，提出一个新的loss来抑制近似过程中的性能差距；...