yhl_leo

当我们设计好网络结构后，在神经网络训练的过程中，迭代输出的log信息中，一般包括，迭代次数，训练损失代价，测试损失代价，测试精度等。本文提供一段python代码，简单讲述如何绘制训练曲线。

之前发布的仿照CIFAR10数据集格式，制作自己的数据集 (C++版本)，得到一些网友的关注，并且不断有网友在评论区或者私信里询问，怎样制作python版本的。趁着下午有点闲时间，把制作方法整理发布在这里，希望对大家有所帮助。

本文简单整理了网上公布的基于 TensorFlow 实现图像语义分析的一些经典网络，方便大家参考学习。

今天我要讲的内容是在深度学习的卷积神经网络中，如何减弱过拟合问题的相关研究，最近刚好在修改论文，就把相关的方法和技术整理出来，对于怎样选择和设计网络模型具有一定的指导性，希望对大家有所帮助。

简单整理了一下目前深度学习中提出的激活函数.

本文简单介绍两篇基于CNN进行图像修复的论文.

A Neural Algorithm of Artistic Style 论文阅读及简介。

在以前的一篇博客中，我整理了如何根据CIFAR10的数据组织方式，制作自己的数据集，然后略微调整tensorflow 提供的demo进行训练，获得了一些关注，现在重新公布一个简单的方法，不需要制作像CIFAR10那样的数据文件......

把前段时间自己整理的一个关于卷积神经网络应用于图像语义分割的PPT整理发布在本篇博客内，由于部分内容还在研究或发表过程中，就只上传PPT前两部分的内容。

根据图像中文本字符的坐标信息，生成文本区域mask图像。

VOC Segmentation GT图像颜色表生成分析

Noisy Actiation Functions是ICML 2016年新发表的一篇关于激活函数的论文，其中对以往的激活函数进行了深入的分析，并提出了训练过程中添加噪声的新方法，效果不错，觉得很有意义。

在数学中，函数的不动点（Fixed point, or shortened to fixpoint, also knowns as invariant point），指的是在函数定义域内的某一个值，经过函数映射后的值还是其本身。

Sigmodi 函数是一种数学函数，函数图像具有“S”形状（也称Sigmoid curve）。

神经网络中常说的闸门机制（Gate Mechanism）或者闸门理论（Gate Theory）源自 Gate Control Theory of Pain。

在深度学习中有一类研究热点，目标检测，从2012年AlexNet到2016年，尤其是2015年开始，深度学习中的深层的卷积神经网络发展迅猛，其中不但衍生出了例如VGG16, GoogleNet等越发区域标准化的深层网络，也相继提出一系列检测加速的策略，例如针对快速提取proposal的方法，像selective search， edge box， BING，RPN等，这些方法的发展和完善...