- 博客(203)
- 资源 (2)
- 收藏
- 关注
原创 Linux服务器无法使用conda和pip安装对应的库包
Linux服务器无法使用conda和pip安装库包出错,但服务器网络是能ping通的,可能是域名解析问题。
2023-03-26 17:14:49
746
原创 深度学习搭建环境的坑
使用conda来管理环境conda和pip安装库可以混用,但一般选pip,因为pip的官网库更多更全,下载更快尽量安装pytorch GPU版本,TensorFlow GPU版本pip install torch1.7.0+cu101 torchvision0.8.1+cu101 torchaudio===0.7.0 -f https://download.pytorch.org/whl/torch_stable.html -i https://pypi.douban.com/simple-模型.
2022-05-09 20:38:26
421
转载 unzip版本问题
unzip版本在6.0以下的,最大只能解压4G的压缩包使用unzip -v 查看版本升级命令,root权限下,使用 apt-get update,apt-get upgrade不行就手动升级unzip,首先下载最新unzip源码包https://sourceforge.net/projects/infozip/files/上传下载的安装包到服务器安装,参考 https://www.cnblogs.com/kedarui/p/3521450.html重新查看版本,并解压大于4G的压缩包.
2022-05-08 01:55:25
2389
转载 利用python多进程加速日常工作中的for循环操作,如处理数据集
https://blog.youkuaiyun.com/u011345885/article/details/123767679要尝试使用多线程而不是多进程,只需执行from multiprocessing.pool import ThreadPool并将代码中的Pool替换为ThreadPoolhttps://blog.youkuaiyun.com/weixin_46554582/article/details/115701664Python多重处理:map和imap有什么区别?是map返回实际数组或集合,而imap返.
2022-05-07 15:16:32
5664
1
原创 关于conda安装包的问题
conda安装各种库包失败的常规原因(首先要激活进入到需要安装包的Python环境中,如conda activate py37):1.安装命令没问题时(如果没有更换channels的话),一般是由于网络速度原因,需要更换镜像源地址或者配置国内channels。2.安装命令有问题,注意区分conda和pip安装各种包时候的格式区别,比如安装命令后面直接更换镜像源的格式就不一样3.安装命令格式没问题,并且配置了channels时,还是无法安装的话,直接在已经激活的Python环境中使用pip安装命令,.
2022-04-21 14:31:10
6477
1
转载 深度学习笔记
关于深度学习源码中经常看到logits深度学习源码中经常出现的logits其实和统计中定义的logit=log(p/1-p)没什么太大关系,就是定义的神经网络的一层输出结果(也可与为全连接层的输出结果)。该输出一般会再接一个softmax layer输出normalize 后的概率,用于多分类。见下图:参考:What is the meaning of the word logits in TensorFlow?https://www.tensorflow.org/tutorial…..
2022-04-19 23:50:29
142
转载 实验的学习笔记关于.detach()方法,激活函数的作用,批标准化的作用,Linear(),view()
在使用PyTorch的过程中,我们经常会遇到detach() 、detach_()和 data这三种类别,如果你不详细分析它们的使用场所,的确是很容易让人懵逼。https://blog.youkuaiyun.com/u013289254/article/details/102557070https://blog.youkuaiyun.com/qq_31244453/article/details/112473947?spm=1001.2101.3001.6650.4&utm_medium=distribute.p.
2022-03-30 16:14:06
307
转载 Noise-Contrastive Estimation
https://leimao.github.io/article/Noise-Contrastive-Estimation/
2022-03-23 12:37:59
264
转载 关于nn.Module及其他容器
https://www.cnblogs.com/shiyublog/p/10800614.htmlhttps://zhuanlan.zhihu.com/p/75206669
2022-03-23 10:41:20
133
转载 交叉熵的理解
https://baike.baidu.com/item/%E4%BA%A4%E5%8F%89%E7%86%B5/8983241?fr=aladdinhttps://blog.youkuaiyun.com/tsyccnh/article/details/79163834
2022-03-22 10:55:27
132
转载 下采样和池化的区别
下采样(subsampled),或称为降采样(downsampled),指缩小图像。其主要目是使得图像符合显示区域的大小,生成对应图像的缩略图。池化(Pooling)则是卷积神经网络中一个重要的概念,它是降采样的一种形式。它会压缩输入的特征图,一方面减少了特征,导致了参数减少,进而简化了卷积网络计算时的复杂度;另一方面保持了特征的某种不变性(旋转、平移、伸缩等)。池化的方法:max-pooling:对邻域内特征点取最大值;mean-pooling:对邻域内特征点求平均。池化的作用:..
2022-03-21 17:08:21
822
原创 cv2.imshow() is disabled in Colab, because it causes Jupyter sessions for google colab
# matplotlib interprets images in RGB format, but OpenCV uses BGR format# so to convert the image so that it's properly loaded, convert it before loadingimg = cv2.imread('filename.ext') # this is read in BGR formatrgb_img = cv2.cvtColor(img, cv2.COLO
2022-03-18 15:34:41
3431
转载 为什么需要智能计算系统?
1.智能计算系统的定义现阶段的智能计算系统通常是集成CPU和智能芯片的异构系统,软件上通常包括一套面向开发者的智能计算编程环境(包括编程框架和编程语言)。2.智能计算系统的迭代https://zhuanlan.zhihu.com/p/1126302173.为什么需要智能计算系统?目前世界智能计算发展还处于第二代智能计算时代,现阶段关于智能计算系统的实际应用也是百花齐放,不断在迭代更新,例如超级计算机、云计算、边缘计算、数据中心、智能手机、嵌入式设备、药物研发、自动翻译、图像分析、消费类电子等诸多领
2022-03-02 10:48:32
710
转载 python关于print函数的基本使用
https://blog.youkuaiyun.com/dgn541256803/article/details/82853814https://www.cnblogs.com/helenlee01/p/12617484.html
2021-12-15 00:46:07
123
转载 谱聚类分类算法
参考:https://blog.youkuaiyun.com/weixin_36474809/article/details/8992750289669623.pc_v2_rank_blog_default&utm_term=sklearn%E8%B0%B1%E8%81%9A%E7%B1%BB&spm=1018.2226.3001.4450https://blog.youkuaiyun.com/qq_30159015/article/details/83271065https://blog.csdn.ne
2021-12-15 00:00:26
160
转载 随机森林详解
参考:https://www.pianshen.com/article/1972256796/https://blog.youkuaiyun.com/weixin_43499818/article/details/108688431https://scikit-learn.org/stable/modules/generated/sklearn.ensemble.RandomForestClassifier.html?highlight=random%20forest#sklearn.ensemble.Rand
2021-12-13 16:59:12
115
原创 pycharm专业版配置ssh连接服务器
只有pycharm专业版才有ssh通能配置最后一步同步项目到远程服务器上时,目录不要选择/tmp目录,会被清除,如果不是root用户不要用/mnt目录,因为只有root用户才有写入权限,一般放在用户的目录下即可,既不会被清除,也不会有权限问题。这种情况一般是在使用学校的服务器时多见。远程服务器的话一般直接给的root用户,那么一定要使用/mnt目录,防止项目别清除!参考:https://www.matpool.com/supports/doc-pycharm-connect-matpool/...
2021-12-12 16:33:11
1492
转载 选择哪个版本的CUDA?
参考的https://zj-image-processing.readthedocs.io/zh_CN/latest/pytorch/cuda/%E5%AE%89%E8%A3%85%E5%93%AA%E4%B8%AA%E7%89%88%E6%9C%AC%E7%9A%84CUDA/问题最近在做课程的综合设计,方向是nlp,打算搞一下中文文本摘要相关的内容,想着跑一下https://github.com/qingkongzhiqian/GPT2-Summary这个例子,装好环境后,一直报“段错误(核心已转储
2021-12-11 21:14:06
8807
原创 M1 Pro MacBookPro使用tmux
通过安装homebrew来安装tmux,安装完毕后。使用tmux,在电脑自带终端中直接输入 tmux 即可进入。关闭tmux,直接输入 exit 即可退回自带的终端模式。参考:https://www.matpool.com/supports/doc-tmux-matpool/https://zhuanlan.zhihu.com/p/222051528...
2021-12-10 20:43:40
961
转载 M1pro MacBookPro安装Homebrew
执行homebrew的安装命令报错:Failed to connect to raw.githubusercontent.com port 443: Connection refused解决办法:修改hostssudo vim /etc/hosts添加如下内容:199.232.28.133 raw.githubusercontent.com重新执行安装命令/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com
2021-12-10 19:20:22
916
原创 M1 pro芯片Macbook Pro连接服务器
使用MacBook Pro自带的终端通过ssh命令直接连接服务器ssh 用户名@服务器IP如果报错 Permission denied (publickey,password),使用如下ssh -p端口号 用户名@服务器IP注: 如果不是公网服务器,必须在局域网内才能直接登录或者通过专用VPN后使用!!!...
2021-12-10 14:11:22
1553
转载 KNN算法
参考:https://zhuanlan.zhihu.com/p/53084915https://www.cnblogs.com/listenfwind/p/10685192.html
2021-12-09 11:27:56
78
转载 Mac和Linux终端文件打包解包命令
tar解包:tar xvf FileName.tar打包:tar cvf FileName.tar DirName(注:tar是打包,不是压缩!)———————————————.gz解压1:gunzip FileName.gz解压2:gzip -d FileName.gz压缩:gzip FileName.tar.gz 和 .tgz解压:tar zxvf FileName.tar.gz压缩:tar zcvf FileName.tar.gz DirName———————————————
2021-12-07 22:12:15
970
原创 英语作文题目格式
位置题目应写在第一行的中间,题目左右两边的空白距离大致相等。大小写(1)题目的第一个单词的第一个字母必须大写。从第二个单词起,其中每个实义词的第一个字母大写,而冠词、介词和连词等虚词的第一个字母则一般小写。这种写法比较正规。如:A Day to Remember;Let’s Go in for Sports,The Importance of Creativity and Independent Thinking.(2)题目的另一种写法是所有单词的第一个字母全部用大写。如:My Life As Fa.
2021-12-06 15:55:18
11743
原创 Mac中从pdf文件中提取指定页的方法
一个完整的pdf文件中,如果我们只需要挑选其中几页组成新的pdf,该如何操作呢?用Mac自带软件“预览”就可以实现首先,打开一个pdf文件,将视图模式切换到第二个“缩略图”或者第四个“名片纸”,这样方便选择页面。选中你所需要的页面后,将其拖曳到桌面桌面上会自动生成一个新的pdf了,名字为“原名(被拖移)”...
2021-12-02 20:58:33
13522
1
转载 Python学习*和**的用法
参考:https://www.cnblogs.com/empty16/p/6229538.htmlhttps://blog.youkuaiyun.com/xrinosvip/article/details/83542245
2021-12-02 15:11:24
89
原创 百度AI studio飞浆使用pytorch训练模型
百度AI studio 可以免费使用GPU,有基础版本不提供GPU,高级版本和智至尊版本会提供不同的云服务器使用GPU,同时百度AI studio是已经配置了anaconda环境的,可以直接使用conda相关命令。但百度的AI studio每次启动后环境都是需要重新配置的。如果每次重新配置环境的话会比较浪费时间。解决办法(更换国内的镜像源,实现快速配置部署):1.自己选择一个目录或者新建一个目录,然后新建一个sh格式的shell文件(命令为env.sh)。2.编辑该文件 vim env.sh,并.
2021-12-01 15:41:50
11894
4
原创 Apple M1安装miniforge3使用bash miniforge3......sh并且conda install numpy后,pycharm如法导入numpy库
conda环境配置后,创建了Python环境,pycharm能正常使用conda的Python环境,但项目import相关依赖库(numpy,sklearn,tqdm,torch等)报错:No module named 'xxxx'使用sudo conda install numpy成功下载安装后,pycharm仍然上面的错误。(下载安装numpy前,已经切换到了创建的py39Python环境中了)但经过排查(conda list 命令也能查看到下载的numpy),发现下载安装的numpy包.
2021-12-01 01:42:52
2535
1
原创 mac终端使用 ‘conda activate‘报错,以及conda install package_name报错
在M1PRO芯片的MacBook Pro上配置Python环境遇到的问题:配置好conda的Python环境后,切换环境使用conda activate env_name #如 conda activate py39报错如下:CommandNotFoundError: Your shell has not been properly configured to use 'conda activate'解决办法:在终端直接输入:conda init zsh退出Mac的zs.
2021-11-30 16:03:07
3507
转载 M1系列芯片安装miniforge3及配置python深度学习相关环境
参考:https://v3u.cn/a_id_189(看完再接着下面步骤)https://blog.youkuaiyun.com/weixin_48077303/article/details/118073063
2021-11-30 12:44:58
2544
原创 python函数添加函数注解 - >符号
你写好了一个函数,然后想为这个函数的参数增加一些额外的信息,这样的话其他使用者就能清楚的知道这个函数应该怎么使用?def add(x:int, y:int) -> int: return x + y->符号这种写法通常是写在函数的函数名后面 ,元数据可以理解为一种函数注释,这里可以理解为函数返回了int类型的数据;函数参数冒号后面表名参数的数据类型。python解释器不会对这些注解添加任何的语义。它们不会被类型检查,运行时跟没有加注解之前的效果也没有任何差距。 然而,对于那些.
2021-11-27 14:18:05
507
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人