Cs231N_学习笔记

cs231n学习笔记-2017 chapter-1 chapter-2 chapter-3 chapter-4 chapter-5 chapter-6 chapter-7 chapter-8 chapter-9 chapter-10 chapter-11 chapter-12 chapter-13 chapter-14 chapter-15 chapter-16 阅读详情

No module named 'cPickle' python3.6.1 Anaconda4.3.21下pickle模块解决

import cPickle as pickle
错误:ModuleNotFoundError: No module named 'cPickle'
cPickle and pickle 它是一个将任意复杂的对象转成对象的文本或二进制的模块。
如何解决?
先看看pickle是干啥的?
持久性就是指保持对象,甚至在多次执行同一程序之间也保持对象
您希望将对象存储在磁盘上,便于以后检索,这就是持久性(你想啥呢!)。
要达到这个目的,有几种方法,每一种方法都有其优缺点
如果希望透明地存储 Python 对象,而不丢失其身份和类型等信息
则需要某种形式的对象序列化
序列化:是一个将任意复杂的对象转成对象的文本或二进制表示的过程
在 Python 中,这种序列化过程称为 pickle、
可以将对象 pickle 成字符串、磁盘上的文件或者任何类似于文件的对象
也可以将这些字符串、文件或任何类似于文件的对象 unpickle 成原来的对象

先把问题解决了吧!
原来再这里,集成到了,pandas里面了
操作方法:直接在anaconda 安装的文件夹D:\Anaconda\Lib下搜索
上图
然后就会发现只需要写
import pandas as pd
import pickle然后就可以了
记得先导入pandas
--------------------- 

 

解决UnicodeDecodeError: 'ascii' codec can't decode byte 0x8b in position 6: ordinal not in range(128)

 

关于利用pickle.load()载入文件出现如下错误的解决办法。

UnicodeDecodeError                        Traceback (most recent call last)
<ipython-input-16-9506c06e646a> in <module>()
      1 # Load the raw CIFAR-10 data.
      2 cifar10_dir = 'cs231n/datasets/cifar-10-batches-py'
----> 3 X_train, y_train, X_test, y_test = load_CIFAR10(cifar10_dir)
      4 
      5 # As a sanity check, we print out the size of the training and test data.

D:\python3wp\assignment1\cs231n\data_utils.py in load_CIFAR10(ROOT)
     20   for b in range(1,6):
     21     f = os.path.join(ROOT, 'data_batch_%d' % (b, ))
---> 22     X, Y = load_CIFAR_batch(f)
     23     xs.append(X)
     24     ys.append(Y)

D:\python3wp\assignment1\cs231n\data_utils.py in load_CIFAR_batch(filename)
      7   """ load single batch of cifar """
      8   with open(filename, 'rb') as f:
----> 9     datadict = pickle.load(f)
     10     X = datadict['data']
     11     Y = datadict['labels']

UnicodeDecodeError: 'ascii' codec can't decode byte 0x8b in position 6: ordinal not in range(128)

首先给出pickle.load()的函数解释:
pickle.load()
pickle.load(file, *, fix_imports=True, encoding=”ASCII”, errors=”strict”)
Read a pickled object representation from the open file object file and return the reconstituted object hierarchy specified therein. This is equivalent to Unpickler(file).load().
The protocol version of the pickle is detected automatically, so no protocol argument is needed. Bytes past the pickled object’s representation are ignored.
The argument file must have two methods, a read() method that takes an integer argument, and a readline() method that requires no arguments. Both methods should return bytes. Thus file can be an on-disk file opened for binary reading, an io.BytesIO object, or any other custom object that meets this interface.
Optional keyword arguments are fix_imports, encoding and errors, which are used to control compatibility support for pickle stream generated by Python 2. If fix_imports is true, pickle will try to map the old Python 2 names to the new names used in Python 3. The encoding and errors tell pickle how to decode 8-bit string instances pickled by Python 2; these default to ‘ASCII’ and ‘strict’, respectively. The encoding can be ‘bytes’ to read these 8-bit string instances as bytes objects.

import pickle
li = [1, 2, 3]
pickle.dump(li, open('db', 'wb'))
ret = pickle.load(open('db', 'rb'))
print(ret)

也就是说pickle.load()默认解码是以encoding=”ASCII”解码的,而我们要载入的文件并不是以”ASCII”形式存储的,所以要改变参数encoding=” ”
解决方式如下:

pickle.load(f,encoding='bytes')

这样编码可以用“字节”来读取这些8位字符串实例作为字节对象。

 

KeyError:’data’

这里是在实现李飞飞-深度学习与机器视觉课程的课后作业的时候遇到的问题。使用的代码是官方给出的代码,自己只是照着敲一遍,但是却出现了KeyError:’data’。
经过查询也没有发现问题所在。出错的代码是这一段

def load_CIFAR_batch(filename):
  """ load single batch of cifar """
  with open(filename, 'rb') as f:
    datadict = pickle.load(f, encoding='bytes')
    Y = datadict['labels']
    X = datadict['data']
    X = X.reshape(10000, 3, 32, 32).transpose(0,2,3,1).astype("float")
    Y = np.array(Y)
    return X, Y

   

因为这个问题就是说字典datadict里面没有data这个字段罢了,所以百度了也没有办法。后来进行了debug,观察了datadict的数据发现,在key值data和labels 的前面都有一个b,后来了我就加了一个b在data和labels 前面。如下

    Y = datadict[b'labels']
    X = datadict[b'data']

 

然后正常了……
百度之后才发现这个是python2和python3的问题,我使用了官方给的一个代码库,不过这个是用python2写的,而官方的训练数据也是使用python2生成的。结果我使用的python3去运行,就出现了这个错误。
这里是百度之后的结果:

b:bytes
python3.x里默认的str是unicode, bytes是py2.x的str, b''前缀代表的就是bytes
python2.x里, b前缀没什么具体意义,只是为了兼容python3.x的这种写法

 

参考博客

所以我这里加上b''前缀就可以让python2的代码兼容python3了。

最后再说一句:坑的一匹的python2和3,简直坑小白神器
---------------------  
作者:kejizuiqianfang  
来源:优快云  
原文:https://blog.youkuaiyun.com/kejizuiqianfang/article/details/81625067  
版权声明:本文为博主原创文章,转载请附上博文链接!

CS231N 卷积神经网络课程学习笔记 CS21N 是斯坦福大学教授李菲菲的课程,主要讲卷积神经网络相关内容,为了更好的记忆,整理下笔记。文中有些不对的术语和理解还请大家指正。   一、卷积神经网络的结构     传统的神经网络一般由输入,点乘,非线性变换组成,由于每一层和前一层都是全连接,网络的复杂度和输入的图像大小有很大的关系,如果图像过大,输入层的参数会非常多。卷积神经网络则利用输入图像的一些特征,可以更有效地学习同时也大大 阅读详情

相关推荐

【CS231N】学习笔记---assignment1(自用)

Assigment1作业网址:https://cs231n.github.io/assignments2020/assignment1/ 课程主页 http://cs231n.stanford.edu/index.html 课件下载 http://cs231n.stanford.edu/syllabus.html Assigment1要求完成的作业为: KNN;SVM;softmax分类器;一个简单的两层神经网络的实现 注:PASS为占位语句 KNN 训练过程 KNN的训练过程只是简单的记住数据的过程。

诗尾没有篇章 的博客 317

Python pickle读取文件 ModuleNotFoundError: No module named

问题 当使用 pickle.load() 读取存储在文件中的类实例时,出现错误 ModuleNotFoundError: No module named 解决方法 在加载pickle之前,将类模块地址加入 sys.path import sys sys.path.append(<path>)

桃子小迷妹 7439

CS231n学习笔记

反向传播与神经网络初步 神经网络中神经元越多越好,有助于提高模型的表达能力。但也需要加入正则化,要注意正确的防止神经网络过拟合的方法并不是减少神经元,使得神经网络变小,而是加入合适的正则化系数。 实际上考虑到时间、算力等成本,会使用小一点的神经网络。 神经网络越宽越好还是越深越好,往往没有一个标准答案。 一般图片问题,层数会更重要些。 一般整个神经网络都用同一个激活函数,比如ReLU。 ...

休的博客 514

pickle.load报错 ModuleNotFoundError: No module named ‘sklearn.svm.classes‘

项目场景: 在一个OpenCV项目中加载p文件时出问题 问题描述 PyCharm中运行项目写了如下代码,执行时这一行报错 ModuleNotFoundError: No module named 'sklearn.svm.classes' dist_pickle = pickle.load(open("train_dist.p", "rb")) 原因分析: 从网上找到大概率因为sklearn版本过新的问题(>=0.24),0.23.2版的,导入这个的时候已经警告该模块(sklearn.svm.

qq_34685294的博客 7000

matlab集成c代码-CS231n:斯坦福大学的CS231n作业

matlab集成c代码 CS231n Assignment #1 详情见 环境配置 推荐使用 Anaconda 新建环境,使用 pip3 install -r requirements.txt 进行环境配置。 一些可能出现的错误: 在 jupyter notebook 中启用 conda 环境,使用如下命令可看到切换内核选项: conda install nb_conda conda install ipykernel ModuleNotFoundError: No module named 'past' pip3 install future TypeError: slice indices must be integers or None or have an index method 将报错的位置下标运算中的浮点除法 '/' 改成整除 '//' 即可。 KNN KNN 部分比较简单,主要内容是向量化编程以及熟悉 numpy,对 MATLAB 有了解的话上手会很快。除此之外还涉及到交叉验证等基础知识。 首先实现使用双层循环计算距离矩阵 def compute_distances_t

BIOS硬件监控实战:如何手动读取IT8738芯片的温度与风扇数据(附代码)

本文深入探讨了如何绕过操作系统和HWMonitor等监控软件,直接通过寄存器级操作读取IT8738超级I/O芯片的硬件监控数据。文章提供了从动态定位EC空间、构建底层读写函数到解码传感器寄存器映射的完整实战指南,并附有C语言代码示例,帮助开发者理解BIOS硬件监控的底层原理,适用于定制硬件开发与故障诊断。

weixin_29192211的博客 111

pickle.load 读取类,ModuleNotFoundError: No module named “XXX“

问题描述:使用pickle.load() 读取存储的类,出现错误:ModuleNotFoundError: No module named "XXX" 错误原因: 使用 pickle.dumps()或pickle.dump() 对类对象封装时,会根据所加载的类对象对数据进行对象化,同时也会把类对象的路径也打包进去,记录下它是根据那个目录下的哪个类进行封装的,同样解析时也要找到对应目录下的对应类进行解析还原。 因此,在同一个项目或文件中可以使用,因为类对象路径没有变化 ...

桃子小迷妹 3849

【Android14 ShellTransitions】Transition就绪:双Transaction与SurfaceControl显示时机剖析

本文深入剖析了Android14 ShellTransitions框架中Transition就绪阶段的核心机制。重点解释了为何需要“双Transaction”来精确控制SurfaceControl的显示与隐藏时机,以确保Activity切换动画的流畅性。通过分析onTransactionReady流程、窗口绘制状态机及动画目标提升策略,揭示了系统如何协调WMCore与WMShell,实现从状态收集到动画播放的无缝衔接。

ooo22的博客 530

使用Pickle.load()导入模型的时候,出现No module named ‘model‘

代码如下: import pickle path = r'E:/DA/ocr_project/capture/source/models/findnewword/root.pkl' def load_model(filename): with open(filename,'rb') as fr: model = pickle.load(fr) return model 调用出现如下错误: ...

houpeng1215的博客 2889

YOLOv5改进——添加SimAM注意力机制

这样可以使注意力机制看到整个backbone部分的特征图,将具有全局视野,类似于一个小的transformer结构。注意:很多改进教程都是将代码直接复制到common.py文件,如果改进机制多了容易造成混乱。在models文件夹下新建modules文件夹,在modules文件夹下新建一个py文件。这里为simam.py。在models文件夹下,复制yolov5s.yaml文件,粘贴并重命名为yolov5s-simam.yaml。运行yolo.py,出现刚刚加入的SimAM注意力机制,说明加入成功。

2302_80099075的博客 1654

扫地机器人解决方案:工作原理与硬件构成

房间里柜子,鞋子,床,座椅,人都在什么地方?3、数字信号处理器。这主要是为控制芯片进行路径规划后,下发指令给执行的电机,包括舵轮(扫地机人前进,转向的轮子),扫地刷的电机,吸尘器的电机,让这些电机工作。扫地机器人的大脑主要用来规划路径,避障,以及人机交互,例如:人类设定打扫范围,以及语音指导扫地机器人进行打扫,都需要处理器进行处理后,将指令下发到执行机构。小脑属于跟执行层最近的控制区域,例如我们上面说的,后面两个处理器:数字信号处理器和微控制器都是对执行层(电机),进行控制和回馈外部信息的处理器。

迷途 7409

python封装函数、实现将任意的对象序列化到磁盘上_No module named 'cPickle' python3.6.1 Anaconda4.3.21下pickle模块解决...

import cPickle as pickle错误:ModuleNotFoundError: No module named 'cPickle'如何解决?先看看pickle是干啥的?持久性就是指保持对象,甚至在多次执行同一程序之间也保持对象您希望将对象存储在磁盘上,便于以后检索,这就是持久性(你想啥呢!)。要达到这个目的,有几种方法,每一种方法都有其优缺点如果希望透明地存储 Python 对象,...

weixin_39622628的博客 363

Windows 10下Carla 0.9.15安装避坑指南:从下载到运行的全流程解析

本文详细解析了在Windows 10系统上安装和运行Carla 0.9.15自动驾驶仿真平台的全流程。内容涵盖从系统环境准备、资源下载、Python依赖安装,到首次启动验证及常见错误(如DLL缺失、显卡驱动问题)的深度解决方案,旨在帮助用户快速搭建稳定的开发环境,并运行第一个自动驾驶Python脚本。

alice7model的博客 549

CS231n 2025——作业参考与学习笔记导航页

CS231n 2025 个人实现的作业代码 & 全章节学习笔记 & 课程资源

x2114754480的博客 9028

网络攻防实验——网络监听

利用CAIN实现ARP监听。

Trieyes_of_feng的博客 3197

AUTOSAR&UDS 理论要点及isolar实战-DEM模块

从这节开始,将讲解UDS诊断中非常重要的知识点:故障事件触发、故障信息上报、故障信息处理、故障信息存储和故障系统降级,后续会陆续更新。

cqaa11的博客 553

CS231n学习笔记1-1: kNN

CS231n课程 Assignment1-Q1: kNN

x2114754480的博客 4416

Vue3 - vite 项目报错:Uncaught ReferenceError: require is not defined(解决 vue3 vite 项目无法识别 require 语法导致报错)

vue3,vite,报错解决,vue3+vite报错requireisnotdefined,vue3vite引插件不识别require,老插件必须用require怎么办,vite项目插件要求使用require引入但报错,vue3不兼容require导致第三方包插件无法使用,vue3vite中使用require报错怎么办,解决Vite+vue3使用第三方依赖报错“requireisnotdefined”问题,vite项目require语法兼容问题解决requireisnotdefine

🏆 前端领域优质创作者 2万+

CS231n 学习笔记

rca_finforc的博客 117

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

Computer Vision(CS131,CS231n)学习笔记(1)

选用了Stanford University的CS131还有CS231n这两门课程作为素材,很多资料已经可以在这两门课程的网站上找到。开这个新坑的目的是为了督促自己学习,同时也顺路把自己的研究项目合并到一块。目录: cs231 Lecture 2: Image Classification Pipeline 图像识别的流水线 Python Numpy Tutorial 图像识别是计算机视觉

淡然如水,随性如风 6395

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

CS231n学习笔记——SGD、AdaGrad、RMSProp、Adam

CS231n学习笔记——更好的优化算法 SGD的缺点: 优化的轨迹会如图所示,因为很多函数的梯度方向并不是直接朝向最小值的,所以沿着梯度前进的时候可能会来回反复。这个问题在高维空间中更加普遍, 而且SGD很容易陷入局部最小值 而且在mini batch训练中,每次都取出一小部分数据学习梯度,导致学习到的梯度与正真的梯度有些偏差,特别是在存在噪声的数据中,这样的SGD可能需要更多时间去找到最小值点...

wildridder的博客 517

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

【学习笔记】cs231n-assignment2-FullyConnectedNets

    前言 大家好,我是Kay,小白一个。以下是我完成斯坦福 cs231n-assignment2-FullyConnectedNets 这份作业的做题过程、思路、踩到的哪些坑、还有一些得到的启发和心得。希望下面的文字能对所有像我这样的小白有所帮助。 在之前我们有训练过一个两层的全连接网络,但是我们把求损失函数和求梯度放在同一个 function 里了,这不够“模块化”,等以后遇到更大型的网...

KammyIsTheBest的博客 2833

cs231n assignment_01学习笔记

cs231n assignment_01学习笔记关键知识点numpy方法matplotlibcrossvalidation 关键知识点 你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章,了解一下Markdown的基本语法知识。 numpy方法 numpy.concatenate: 将array的列表拼接成一个大的...

linshengchao123的专栏 241

CS231n学习笔记——批量归一化(Batch Normalization)、监视训练

CS231n学习笔记——批量归一化(Batch Normalization) 想要保持单位高斯激活,那么就需要做批量归一化,即在神经网络中额外加入一层,以使得中间的激活值均值为0方差为1。 如果我们想要正确的激活单位高斯函数,我们可以取目前处理的批数据的均值,利用均值和方差来进行归一化,如果我们要在训练的每一层都保持良好的高斯分布,就需要进行批量归一化。而且需要它能够微分,这样才能在梯度反向传播...

wildridder的博客 1268

【学习笔记】cs231n-assignment1-SVM

    前言        大家好,我是Kay,小白一个。以下是我完成斯坦福 cs231n-assignment1-SVM 这份作业的做题过程、思路、踩到的哪些坑、还有一些得到的启发和心得。希望下面的文字能对所有像我这样的小白有所帮助。        在第一份作业里,我们使用的 kNN 其实有很多缺陷,比如要和全部训练集比较一遍才能得到结果、每张图存的信息太多了内存容易不足等等。现在我们来学习一种...

KammyIsTheBest的博客 751

CS231n学习笔记(十三)

CS231n学习笔记(十三):生成式模型(无监督学习) 有无监督学习对比 有监督学习 无监督学习 对比 生成式模型(Generative Models) PixelRNN/CNN(显式密度估计) 变分自编码器(Variational Autoencoder)(显式密度估计) GAN(隐式密度估计) PixelRNN/CNN(利用神经网络显式的计算最大似然函数) PixelRNN PixelCNN pixelCNN训练要比pixelRNN快,因为在每一个像素位置,我们想要

kongshaohao的博客 389
上一篇: Linux Ubuntu下Jupyter Notebook的安装
下一篇: OpenStack
zero_china
博客等级 码龄16年 10粉丝 0原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值