小心Jupyter Notebook导入文件的天坑！

最新推荐文章于 2024-03-19 11:28:20 发布
原创 最新推荐文章于 2024-03-19 11:28:20 发布 · 3.9k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python

本文揭示了在使用Jupyter Notebook时直接拖拽大文件（如数据集）可能导致的数据不完整上传问题。作者通过亲身经历指出，45MB的文件仅成功导入了1000多个样本，远未达到预期的6万个样本。建议对于大型数据集，应避免直接拖拽上传，而采用手动文件夹放置的方式。

我们有时会直接按住鼠标左键拖一个文件到jupyter notebook里，比如这样
在这里插入图片描述
如果文件（数据集）比较大，就会提示这个
在这里插入图片描述
我寻思着这也不是上传到云，不就是本地的文件操作吗，还upload

但是要注意，我今天这样拖一个数据集进去就出问题了

选择ok后，开始“上传”这个文件

结果。。。。后面写代码时反复报错，试了好久才发现，这tm根本没把完整文件导进来啊！！！

45MB的文件，里面应该有6万个样本，结果测试发现才传进来1000多个，就不传了，完了我也不知道是不是完整数据，给我气的

**

所以小伙伴们，以后一些比较大的数据集还是辛苦一下打开文件夹把文件放进去吧

**

一些代码啥的还好，打开还能看到，数据集这个东西就不好说了

Tip:Jupyter notebook导入数据方法介绍（jupyter notebook导入pkl数据集）
Tsehooo的博客
06-30 4万+
写在前面： 本人写文章主要是为了在学习过程中做笔记用，也希望自己的一些亲身经历能帮助到某些砥砺奋进的小伙伴，只渡有缘人！我还有些文章是私密文章，写的太菜，就不拿出来献丑了，我也是个菜鸟，很多不对的地方希望高人指点批评！ 这是是困扰了我挺久的问题（没办法是我太菜！！！） 首先最重要的是要事先准备好自己要导入的数据集，并将其放入到工作路径下，我的jupyter notebook 工作路径在安装anaconda的时候就已经设置好了，本人电脑工作路径如下： 大家可以随便设置工作路径，安装时的默认路径也可，唯一缺点
使用Jupyter notebooks上传文件夹或大量数据到服务器
09-17
主要介绍了使用Jupyter notebooks上传文件夹或大量数据到服务器，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
jupyter notebook中导入文件模块
爱昵容儿 的专栏
08-31 2731
目录下需要有这两个格式的文件： 新建文件py格式的文件： 验证可进行模块的导入，运行以下未出错：
【jupyter notebook】Jupyter Notebook如何导入导出文件
Wynne的博客
05-31 1万+
如何用jupyter notebook导入和导出文件？
如何在jupyter notebook中上传文件夹
热门推荐
wzw2887的博客
09-25 3万+
方法一：直接把文件夹复制到jupyter notebook的系统目录下面: 随便点击一个文件夹前面的小正方形框，再从Move这里可以找到jupyter notebook的系统目录：C:\User\74127(一般情况下都会在自己电脑的默认安装目录下)，找到后，就复制到该目录下面，再刷新notebook就能看见文件夹了 方法二：压缩后再解压缩 在jupyter notebook默认目录上传文件夹的压缩包； 新建python文件，输入以下代码，就可以解压缩压缩包到默认目录下...
jupyter中导入本地文件
weixin_44887200的博客
08-28 7847
jupyter中导入本地文件 切换盘符： D: 转入盘符中指定文件： cd 文件名 导入到jupyter: jupyter lab
如何在jupyter notebook上面上传文件夹
Anneaisun1995的博客
10-30 1万+
用jupyter做数据分析时，要读取很多csv文件，需要先将这些文件上传到jupyter工作目录，upload只能上传单个文件，怎样一次性上传所有的文件，节约时间呢？可以将这些要上传的文件打包，压缩上传之后，再解压 import zipfile import os files = zipfile.ZipFile('需要解压的文件路径', 'r') files.extractall('解压到的目录'...
使用jupyter notebook直接打开.md格式的文件
01-20
jupyter notebook是一个比较比较不错的网页版python编辑器，但是，由于很多“技术文档”都是直接以markdown(.md格式的文件)的格式编写的，而且jupyter notebook的代码文件(.ipynb)也可以转换成.md格式的文件，更为...
浅谈在JupyterNotebook下导入自己的模块的问题
09-17
这是因为Jupyter Notebook的内核在启动后会加载所有导入的模块，即使你修改了模块文件，内核中的旧版本仍然会被使用，直到你重启内核。 为了提高效率，尤其是当你的Notebook加载了大量的数据或者执行时间较长时，不...
jupyter 导入csv文件方式
09-17
通过本文的介绍，我们不仅学习了如何在Jupyter Notebook中导入CSV文件，还了解了解决读取CSV文件时遇到的一些常见问题的方法。希望这篇文章能为大家在实际工作中处理CSV文件提供帮助。如果遇到其他类型的数据文件，...
批量上传文件（夹）到 Jupyter notebook
forever_008的博客
12-10 7878
原创博客，转载请注明出处 通常来讲，jupyter notebook 只能逐一上传数据，当我们上传的数据量小的时候当然没问题，但是当我们需要上传大量的数据时，这个工作就会耗费我们大量的时间，且枯燥无味，下面介绍两种方法来解决这个问题 方法一：上传.zip压缩文件 第一步，将想要上传的文件压缩为.zip压缩文件； 第二步，上传压缩文件，如图： 第三步，使用一下代码解压.zip 文件 import z...
怎么往jupyter中放文件？
weixin_44062451的博客
11-13 1831
Jupyter Notebook 提供了文件上传功能，可以将本地文件上传至 Jupyter Notebook 中。1. 打开 Jupyter Notebook，新建一个 Notebook。4. 文件上传成功后，在当前目录下会出现上传的文件。2. 点击上方菜单栏中的 Upload 按钮。3. 选择要上传的文件，点击打开即可。
如何将文件夹上传到 jupyter notebook 中？看这一篇就够了！
最新发布
一些让你少走弯路的分享！
03-19 1万+
如何将文件夹上传到 jupyter notebook 中？看这一篇就够了！
jupyter notebook加载文件夹
muqing123456的博客
10-22 1842
jupyter 打开文件夹
jupyter中python3如何导入文件_【Jupyter教程1】如何优雅地在Jupyter Notebook中同时运行R和IPython...
weixin_39938165的博客
11-28 243
目前我的电脑上已经安装好了Anaconda Python 和 R，需要将Jupyter Notebook中添加R内核，以使得Jupyter Notebook可以同时运行Python 和 R 若还未安装R的话 可以尝试另一个方法：Jupyter notebook安装R内核和简单实例一、安装需要的R包在R Studio console中运行（或者R命令行中运行也可以）install.packages(...
jupyterlab上传文件到服务器,PHP上传大文件到cdn
weixin_39880318的博客
08-06 770
PHP上传大文件到cdn 内容精选换一换大文件(大于100MB的文件)针对大文件，建议使用OBS服务上传文件。使用OBS客户端，将本地文件上传至OBS桶中，然后使用ModelArts SDK从OBS下载文件至Notebook本地。使用OBS客户端上传文件的操作指导：上传文件使用SDK从OBS下载文件至Notebook本地的接口说明：从OBS下载数据针对大文件，建议使用OBS服务下载小于100MB的...
使用jupyter notebook时，查询大量数据出现省略号，不显示完整数据
XING_Gou的博客
08-23 9441
一般出现这种情况是因为，你所查询的数据量超过了jupyter notebook默认设定的可见范围，故出现了省略号，忽略显示了中间大多数据信息。因此我们只需要增大其行和列的容纳量即可！！！ 我们可以使用以下语句： pd.set_option('display.width', 1000) # 设置字符显示宽度 pd.set_option('display.max_rows', None) # 设置显示最大 使用语句后，再次执行查询： 这样就可以通过翻滚鼠标对所有数据进行查看！！！ ...
解决机器学习中anaconda jupyternotebook对于代码需要的计算量太大，导致内存崩溃（out of memory），无法进入的问题（有Pycharm专业版情况下）
m0_61018181的博客
10-12 3147
jupyter notebook 打不开页面，out of memory,的解决办法
【在Jupyter Notebook上传完整文件的方法】
m0_66706847的博客
08-15 3461
使用Jupyter Notebook时，无法直接上传电脑里的一整个文档，只能上载单个文件，本文尝试提供解决方法。
jupyter notebook 导入文件
09-19
Jupyter Notebook可以通过以下几种方式导入文件： 1）在Jupyter Notebook界面中，点击上方的“文件”选项，然后选择“上传”选项，即可在本地文件系统中选择要导入的文件进行上传。 2）使用Jupyter Notebook中的代码单元格，通过编写Python代码来导入文件。可以使用pandas库的read_csv方法来导入csv文件，例如： ``` import pandas as pd data = pd.read_csv('文件路径') ``` 其中，'文件路径'要替换为实际的文件路径。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值