大雄的专栏

1.前言    传统的CNN网络只能给出图像的LABLE，但是在很多情况下需要对识别的物体进行分割实现end to end，然后FCN出现了，给物体分割提供了一个非常重要的解决思路，其核心就是卷积与反卷积，所以这里就详细解释卷积与反卷积。     对于1维的卷积，公式（离散）与计算过程（连续）如下，要记住的是其中一个函数（原函数或者卷积函数）在卷积前要翻转180度 图1     对于离散卷积，f的大

Recurrent Neural Networks 人类并不是每时每刻都从一片空白的大脑开始他们的思考。在你阅读这篇文章时候，你都是基于自己已经拥有的对先前所见词的理解来推断当前词的真实含义。我们不会将所有的东西都全部丢弃，然后用空白的大脑进行思考。我们的思想拥有持久性。 传统的神经网络并不能做到这点，看起来也像是一种巨大的弊端。例如，假设你希望对电影中的每个时间点的时间类型进行分类。传统的神经网络

转载地址：http://blog.youkuaiyun.com/shuzfan/article/details/54565776 最近一段时间MultiTask网络比较流行，比如做人脸检测的时候，一个网络完成（人脸和非人脸）二分类任务的同时也要进行boudingbox回归或者人脸关键点回归。以人脸检测MTCNN为例，一个网络包含三个任务。训练的时候，一个batch中的图片，一部分用于二分类

理论介绍上式中，L(w)L(w)为前向loss，N为一个mini-batch的batchsize，fw(x(i))f_{w}(x^{(i)})是单个输入数据x(i)x^{(i)}的输出loss，λ\lambda 是正则项的权重，在caffe中是weight_decay，r(w)r(w)是一个关于参数ww的正则项，在caffe中默认为L2正则项，即r(w)=w2r(w)=w^{2}。在caffe中，f

以下错误均为编译caffe过程中常见的错误 fatal error: caffe/proto/caffe.pb.h: No such file or directory完美解决办法 protoc src/caffe/proto/caffe.proto –cpp_out=. mkdir include/caffe/proto mv src/caffe/proto/caffe.pb.h includ

PoolingLayerLayerSetUp//主要对pooling的kernel、pad、stride进行初始化 template <typename Dtype> void PoolingLayer<Dtype>::LayerSetUp(const vector<Blob<Dtype>*>& bottom, const vector<Blob<Dtype>*>& top) { P

BaseConvolutionLayer BaseConvolutionLayer：：LayerSetUp 在调用layer->LayerSetUp时，其实是调用的BaseConvolutionLayer::LayerSetUp，虽然BaseConvolutionLayer::LayerSetUp是虚函数，但是在其子类ConvolutionLayer里并没有重写。卷积层的LayerSetU

这次来写写caffe是如何来solve的 在成员函数Solve()内部，template <typename Dtype> void Solver<Dtype>::Solve(const char* resume_file) { ...... // For a network that is trained by the solver, no bottom or top vecs //

第一次实实在在的写博客，感觉挺好玩的！ 首先入口函数caffe.cpp int main(int argc, char** argv) { ...... if (argc == 2) { #ifdef WITH_PYTHON_LAYER try { #endif return GetBrewFunction(caffe::string(argv[1]))();

最近在做re-di任务时，经常要用到parts信息，因此slice层是非常有用的，但是caffe中这一层的参数需要弄明白，这里将slice层的代码解读一下。——————————————————————–caffe.proto———————————————————————–message SliceParameter { // The axis along which to slice -- ma

在用BatchNorm层的时候有use_global_stats和moving_average_fraction不知道什么时候用，特别是在fine-tune的时候，因此把BatchNorm层的代码给解读一下。 ————————————————————–caffe.proto——————————————————————– 首先来看BatchNorm有哪些参数。 message BatchNor

最近在Re-ID任务中有不少网络都是sharing weights的。一般都是有一个已经训练好的模型比如resnet-50，然后自己造的主网络都是有几个resnet-50的分支的，而每个分支的卷积层权重又是共享的，caffe是怎样处理的呢？经过一番折腾，终于整明白了，其实很简单。首先定位到caffe.proto，LayerParameter中有这样一项repeated ParamSpec param