一、迁移学习与fine-tuning有什么区别？

一、迁移学习

举个例子，假设boss让你做一下目标检测，这个数据集是关于光纤箱喷码字符检测的。问题是，数据集很少（只有1000张数据），里面有多干扰的信息，你发现从零训练开始训练yolo的效果很差，很容易过拟合。怎么办呢，于是你想到了使用Transfer Learning，用别人已经训练好的Imagenet的模型来做。

二、迁移学习有哪些手法

1. 把Alexnet里卷积层最后一层输出的特征拿出来，然后直接用SVM分类。这是Transfer Learning，因为你用到了Alexnet中已经学到了的“知识”。
2. Vggnet卷积层最后的输出拿出来，用贝叶斯分类器分类。思想基本同上。
3. 至你可以把Alexnet、Vggnet的输出拿出来进行组合，自己设计一个分类器分类。这个过程中你不仅用了Alexnet的“知识”，也用了Vggnet的“知识”。
4. 最后，你也可以直接使用fine-tune这种方法，在Alexnet的基础上，重新加上全连接层，再去训练网络。

三、fine-tune使用策略

决定如何使用迁移学习的因素有很多，这是最重要的只有两个：新数据集的大小、以及新数据和原数据集的相似程度。有一点一定记住：网络前几层学到的是通用特征，后面几层学到的是与类别相关的特征。这里有使用的四个场景：

1. 新数据集比较小且和原数据集相似。因为新数据集比较小，如果fin