Ray's Coding Island | 编码之岛

参考以下教程：https://blog.youkuaiyun.com/happyeveryday62/article/details/107673477https://www.cnblogs.com/snow-flakes/p/9887698.htmlhttps://hpzhao.github.io/2016/07/19/非root权限源码安装GCC/\

可能原因：没有安装CUDNN pytorch和cuda版本不对应。具体来说，是pytorch编译时cuda的版本和环境cuda版本不一致。 内存不足，dataloder每次处理的数据过大 显存不足，OOM。有时候显存不足不会报OOM，会报cuDNN根据我的经验，如果在代码刚跑的时候就报cuDNN error，应该是前两种原因。如果是运行一段时间之后再报错，应该是第3,4个原因。https://blog.youkuaiyun.com/qq_44420246/article/details/108.

通过conda安装torch, cuda,cudnn的例子。需要注意的是，通过conda安装的cuda版本按理说要小于等于本机的cuda。conda install pytorch==0.4.1 cuda92 torchvision==0.2.1 cudatoolkit=9.2 cudnn=7.2.1 -c pytorch 一些关于conda的cuda和本机cuda的讨论：https://www.cnblogs.com/yhjoker/p/10972795.htmlhttps:/.

转载自：https://mp.weixin.qq.com/s/i3kLW1Lnm0-8lrhbmuJ34g

转载自：https://mp.weixin.qq.com/s/XYFTPNs-qCn8QlubCaY8og

论文标题：K-Adapter: Infusing Knowledge into Pre-Trained Models with Adapters论文作者：Ruize Wang, Duyu Tang, Nan Duan, Zhongyu Wei, Xuanjing Huang, Jianshu ji, Cuihong Cao, Daxin Jiang, Ming Zhou论文链接：https://arxiv.org/abs/2002.01808近年来，预训练模型...

方便在不同CUDA版本之间临时进行切换export CUDA_HOME=/home/rzwang/Downloads/cuda-10.1export PATH=$PATH:$CUDA_HOME/binexport LD_LIBRARY_PATH=/home/rzwang/Downloads/cuda-10.1/lib64...

前言使用FFmpeg分割视频非常方便， 但是我在使用的过程中发现，截取的视频时间并不精确。参考：https://zhuanlan.zhihu.com/p/27366331https://www.cnblogs.com/ilym/p/8003858.htmlhttps://blog.youkuaiyun.com/matrix_laboratory/article/details/531...

目录(1) 查看新增的的磁盘(2) 分区格式化(3) 将新硬盘临时挂载在一个目录下（比如/mnt/home）(4) 同步（复制）原/home路径下的资料到新硬盘中(5) 重新挂载硬盘到/home下(6) 设置开机自动挂载在服务器的使用过程中，往往会随着使用时间增长，出现home空间不够的问题。比如一开始挂载了一块100g的硬盘。那么在买了新的大容量硬盘之后，应该怎么把新...

更新刚发现ffmpeg居然也有人开发了python的包，所以也可以直接使用ffmpeg-python [https://github.com/kkroening/ffmpeg-python]，更方便一些。pip install ffmpeg-python------------有时候我们获取文件夹里面的所有视频的长度，或者挑选出大于某个长度的视频，这时候可以使用ffmepg，也可...

有时候我们想要将一个包含很多文件路径的list分为几块，方便后续的多线程，或者分块处理等操作。注，以下为Python代码# 把arr分成m块def split_list(arr, m): n = int(math.ceil(len(arr) / float(m))) return [arr[i:i + n] for i in range(0, len(arr), n)]...

之前我写过一篇Pycharm如何配置远程服务器的教程《Pycharm专业版配置远程服务器并自动同步代码https://blog.youkuaiyun.com/wz22881916/article/details/82670969》。后来发现有同学会经常遇到几个问题，下面我来介绍一下：问题1：在Pycharm中直接run程序，但是import tensorflow时报错ImportError:...

在训练模型的时候遇到了以下问题：OutOfRangeError (see above for traceback): RandomShuffleQueue '_2_shuffle_batch_join/random_shuffle_queue' is closed and has insufficient elements (requested 10, current size 0) ...

samples = tf.train.batch(read_and_decode(filename_queue, pr, input_types), batch_size=32)在生成完TFRecords，然后在通过tf.train.batch()读取的时候遇到了以下问题：OutOfRangeError (see above for traceback): FIFOQueue '_1...

---更新刚发现ffmpeg居然也有人开发了python的包，所以也可以直接使用ffmpeg-python [https://github.com/kkroening/ffmpeg-python]，更方便一些。pip install ffmpeg-python-------由于在用服务器的时候，常常遇到包是在root权限下安装的，但是往往自己没有root权限。这时候可能怎么办呢？...

转载自：https://www.jianshu.com/p/5eed417e04ca服务器上配置有多个conda的Python环境，在使用jupyter notebook时需要使用其中的一个环境，但是其默认还是使用系统python环境，因此需要解决这个问题.解决方案其实很简答，参考这个帖子.首先，安装nb_conda_kernels包:conda install nb_conda_k...

没有Wget的日子是非常难过的，强大的Mac OS 下安装Wget非常简单。 以下提供两种方法：①源码安装下载一个Wget的源码包，http://www.gnu.org/software/wget/ 或者点此处下载http://download.youkuaiyun.com/download/wz22881916/10158549打开终端，cd到下载目录后：输入：tar zxvf wget-1.9.12.

Hello 2018

糖果领取网址（较为稳定）：https://candy.one/i/1474564 用微信和QQ打开的朋友请复制到其他浏览器打开糖果领取网址（较为稳定）：https://candy.one/i/1474564网站的服务时好时坏。侥幸能挤进去的，就能无条件领到100个糖果。步骤一：填写手机号步骤二：等待验证码，输入即可。（如果出现Error，只需要多刷新几次，或是晚些时候...

前几天弄了个腾讯云，然后今天建了一个WordPress站点，但是发现访问 固定链接文章时出现404错误。搜了下，但是网上的教程都是对于使用apache的，然而笔者用的是apache2。ubuntu下的apache2和网上的大部分教程不一样，首先要用命令： sudo a2enmod rewrite开启位于/etc/apache2/mods_avilable里面的rewrite模...

前言Keras中提供了一个神经网络可视化的函数plot_model，并可以将可视化结果保存在本地。使用方法如下：from keras.utils import plot_modelplot_model(encoder_model, to_file='encomodel.png',show_shapes=True)笔者在使用过程中遇到了这样一个问题RuntimeError: F...

先放上电脑配置笔者用的是2013款的macbook pro，配置目前看来还可以。机身上带有雷电2而不是雷电3接口，因为这个原因用外置显卡的效果就会大打折扣。即使如此，笔者用来训练的时候，时间上也比用cpu缩短了20多倍。为什么要买外置显卡本来感觉自己的小mbp用着还不错，用了4年多了和买的时候也差不多，一点都不卡，非常的流畅。但是最近用来训练深度学习的网络就发现用cpu训练慢的...

在装完pytorch_gpu版之后遇到了一些问题，几个关于numpy的error如下：Error：module compiled against API version 0xc but this version of numpy is 0xbError: from torch._C import * ImportError: numpy.core.multiarray fail...

前段时间用wordpress搭建了一个新博客 http://www.codingisland.cn http://www.codingisland.xyz

解决方法 如下  在 Finder 找到你的User 根目录下 的一个 文件  叫  .gitconfig （这个文件是隐藏的）然后双击点开它 然后在 最后面  加入  [http] postBuffer = 524288000 最后保存   原因： 因为仓库过大导致出现POST git-receive-pack (chunked) ，那么即使重新修改了配置文件，仍然要耐...

frommatplotlib.backends import_macosxRuntimeError: Python isnotinstalled asa framework. The Mac OS X backend will notbe able to function correctly ifPython isnotinstalled asa framework. See the Pyt...

原因1：cuda9.0以及cudnn7未能安装或正确安装。解决方案：安装cuda及对应cudnn，已安装情况下检查路径usr/local/cuda-9.0/lib64下是否有 libcublas.so.9.0文件原因2：tensorflow版本与cuda不对应。解决方案：升级tensorflow原因3：路径未加入环境解决方案：sudo gedit ~/.bashrc    ...

某天贫僧在训♂练模型的时候遇到了这个错误提示。其实这个错误提示很模糊（非常模糊），基本上是没有办法定位到出错的地方的，在查找资料之后发现了一下解决方法（在这里总结下）：方法1. 改为在CPU上运行这是因为当模型在GPU上运行的时候其实是没办法显示出真正导致错误的地方的（按照PyTorch Dev的说法：“Because of the asynchronous nature of cud...

更新：发现是机房空调太差了，显卡温度过高的原因在跑程序的时候遇到了这个问题，还没有找到解决的方法：Unable to determine the device handle for GPU 0000:83:00.0: GPU is lost. Reboot the system to recover this GPU...

想用brew安装wget，但是提示失败，然后想先 brew update，然后再重新试一下，结果在brew update后出现了这个情况：$ brew update/System/Library/Frameworks/Ruby.framework/Versions/2.0/usr/lib/ruby/2.0.0/rubygems/core_ext/kernel_require.rb:55:in `r