- 博客(18)
- 收藏
- 关注
原创 如何实现MathType公式转换LaTeX代码
本教程向大家介绍将MathType公式转换为LaTeX代码的三种方法,现归纳如下:方法一、使用剪切和复制预置,在txt文件中显示LaTeX代码1.打开MathType编辑软件,编辑好公式后,点击“预置(P)”菜单,选择“剪切和复制预置(C)”。点击预置下的剪切和复制预置(C)2.弹出剪切和复制预置对话框,点选“MathML或Tex”,并去掉“在转换中包括MathType数据(D)”前面的勾,点击“确定”。剪切和复制预置窗口进行相应设置3.回到MathType,选中公式,按“Ctr
2021-03-22 20:56:44
5166
原创 超参数 learning rate,weight decay和momentum
先看几个公式! ........ (1)......(2).........(3)超参数是指机器学习模型里面的框架参数,和训练过程中学习的参数(权重)不一样,超参数通常是手工设定,不断试错调整,或者对一系列穷举出来的参数组合一通进行枚举(网格搜索)。深度学习和神经网络模型,有很多这样的参数需要学习。时至今日,非参数学习研究正在帮助深度学习更加自动的优化模型参数选择,当然有经验的专家仍然是必须的。Learning Rate (gradient coefficient)...
2020-09-15 10:59:51
1242
转载 Reasons why your Neural Network is not working
The network had been training for the last 12 hours. It all looked good: the gradients were flowing and the loss was decreasing. But then came the predictions: all zeroes, all background, nothing detected. “What did I do wrong?” — I asked my computer, who
2020-09-14 16:00:24
688
原创 train loss相关问题
目录一、train loss 收敛慢,把learning_rate调高二、train loss不下降:1、观察数据中是否有异常样本或异常label导致数据读取异常2、调小初始化权重,以便使softmax输入的feature尽可能变小3、降低学习率,这样就能减小权重参数的波动范围,从而减小权重变大的可能性。这条也是网上出现较多的方法。4、调大batch_size5、如果有BN(batch normalization)层,finetune时最好不要冻结BN的参数,否则数据分布不一致时很..
2020-09-14 15:10:29
6930
原创 keras GAN训练是loss不发生变化,accuracy一直为0.5怎么办
给大家分享一下keras GAN训练是loss不发生变化,accuracy一直为0.5怎么办,希望大家阅读完这篇文章后大所收获,下面让我们一起去探讨方法吧!首先谈谈我的是如何解决的:网络结构:AlexNet 优化器:Adam (这里正是问题所在) 框架:PyTorch关于优化器,我最开始使用的的是torch.optim.Adam(),但是训练100个Epoch后,准确率始终在 49% ~ 50%。解决方法:换个优化器!我使用的是torch.optim.SGD(),其他的或许也行,但我...
2020-09-14 14:40:01
4931
2
原创 神经网络模型、loss不收敛、不下降,loss=87.33,loss=0.6931,原因和解决办法
一、模型不收敛主要有以下几个原因:1、learning rate设大了会带来跑飞(loss突然一直很大)的问题 这个是新手最常见的情况——为啥网络跑着跑着看着要收敛了结果突然飞了呢?可能性最大的原因是你用了relu作为激活函数的同时使用了softmax或者带有exp的函数做分类层的loss函数。当某一次训练传到最后一层的时候,某一节点激活过度(比如100),那么exp(100)=Inf,发生溢出,bp后所有的weight会变成NAN,然后从此之后weight就会一直保持NAN,于是loss...
2020-09-10 10:48:30
12951
1
原创 调用lssvm训练好的模型
最近要实现异步电机的LSSVM逆控制,参考文献《基于LS-SVM的异步电机解耦控制方法》已附。遇到的问题是:训练得到的模型model挺好的,为什么单独拿出来调用,效果却很差?我的程序贴出来如下:1,训练程序 lssvm_um.m ,保存训练好的model ,文件名为 LSSVM1223%% 文件:LS-SVM 程序学习,数据:MTdata1126.mat,具有6000组数据 日期:20141209...
2019-06-18 23:09:12
4244
4
原创 优快云如何收藏别人的博客文章
如果你是一个优快云用户,经常浏览博客的文章,发现比较好的文章想收藏在自己的账户内,应该怎么操作呢?这里就讲一下如何使用优快云博客的收藏功能?右侧,点击“收藏”(在头像下面的一排位置中) 验证是否收藏:1 鼠标移动到右上角的个人头像上,在弹出的框中点击进入“个人中心”2 在“我的收藏”中,找到已经收藏的文章--------------------- ...
2018-12-05 09:14:01
840
原创 U盘可见空间只有200M的解决方法
之前重装系统的时候用手头上一个8G的SanDisk U盘做了Mac系统的启动盘。想用这个U盘来给Windows 10做安装盘的时候突然发现这个U盘在Windows下可见空间只有200M了。如果去磁盘管理器里查看磁盘空间使用情况,会发现这个其他空间还在,但是不能使用,尝试格式化U盘,发现也无法找回空间。后面折腾了半天终于解决了,记录一下解决方法:打开命令行窗口敲入diskpart回车先用list d...
2018-06-05 13:51:30
10397
2
原创 解决PyCharm ImportError: No module named tensorflow 详解
环境:PyCharm 问题:ImportError: No module named tensorflow出现问题的原因:使用Anaconda安装TensorFlow1.0版本.所用到的python解释器和我们当前PyCharm所用的python解释器不一致说导致.故解决方案,将PyCharm的解释器更改为TensorFlow下的python解释器。1. 找到TensorFlow下的python解...
2018-05-29 22:43:27
5533
1
原创 Ubuntu16.04 基于Anaconda(py3.6)安装TensorFlow(CPU)的方法
1、安装Anaconda下载地址:https://www.continuum.io/downloads/(我安装的是linux-64-python3.6) 2、安装tensorflow(cpu版)创建环境的命令为:conda create -n tensorflow python=3.6先下载安装包,下载路径为:https://storage.googleapis.com/tensorflow/l...
2018-05-29 18:53:16
1601
原创 深度学习数据集图片resize
from PIL import Imageimport os.pathimport globdef convertjpg(pgmfile,outdir,width=128,height=128): img=Image.open(pgmfile) try: new_img=img.resize((width,height),Image.BILINEAR) ...
2018-05-29 11:19:33
4896
原创 vi命令
如图,vi 文件名,接着按回车即可打开对应的文件,如果没有对应的文件,那么vi命令就会自动创建一个新的。如图,vi打开文件后是命令模式状态,要用i或者a命令才可进入可编辑的状态哟。这里我就按a进入了编辑模式了哦。以下是VI有关文件修改与保存的命令:插入命令i 在当前位置生前插入I 在当前行首插入a 在当前位置后插入A 在当前行尾插入o 在当前行之后插入一行O 在当前行之...
2018-05-28 22:31:58
217
原创 Caffe学习系列:训练和测试自己的图片
1.数据准备 在 caffe_master/data 中新建文件夹 myself,在myself/train/cat文件里存放训练猫的图片 40 张(名称为cat1~cat40),在myself/train/dog文件里存放训练狗的图片 40 张(名称为cat1~cat40),在myself/val文件里测试狗的图片 10 张和测试猫的图片10张。 根据训练和测试的图片生成...
2018-05-28 20:22:12
345
原创 Ubuntu16.04安装Caffe(CPU Only)
本文是第一次在Ubuntu 16.04上安装Caffe(CPU Only)的过程。主要参考了以下链接:官方安装文档:http://caffe.berkeleyvision.org/installation.html官方Ubuntu安装文档:http://caffe.berkeleyvision.org/install_apt.html1、安装依赖库sudo apt-get install libp...
2018-05-19 23:38:53
624
原创 win7安装Anaconda3-5.1.0+TensorFlow1.7
先总结自己遇到的坑:(回头想想其实安装很简单)第一大坑:anaconda安装版本都行,但必须指导他配置的Python和要配置的TensorFlow是否合适。 第二坑: google那群人已经将安装进一步简化,千万不要像过去安装还用conda 命令,很容易把安装的位置神马搞错,血泪史的到处找问题。 第三坑:cmd进行Tensflow安装的时候,必须以管理员身份运行,进行安装。下面开始...
2018-04-28 09:31:25
1443
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人