weixin_43184252的博客

jupyter notebook由于超过内存限制而“锁死”的解决这两天用爬虫爬数据的时候由于print了大量的爬取内容，让notebook内存溢出停止运行，连带着localhost:8888也崩溃了。Google Chrome的处理机制应该是杀掉内存溢出的页面，所以localhost:8888刷新一下就恢复了。但是！我的code找不回来了！不知道是什么机制，在文件里看到的大小只有不到45MB...

Python爬虫遇到的问题——中文转URL编码在用Python爬京东数据的时候，如果通过URL访问搜索页面，表面上看到的是这样的：但是用requests.get这串URL发现报错（如果“机器学习”是中文的话）而且注意到在粘贴到jupyter notebook的时候已经帮我们自动转换成了URL格式，即https://search.jd.com/Search?keyword=%E6%9C%BA...

Pandas.read_csv格式奇怪的问题除了常见的utf-8，gbk，今天发现还有utf-8-sig用默认格式打开是这样的：明显是编码问题，但是用utf-8打开文件发现是这样的：用open打开文件看到是这样的：可以看到在文件的首部有一个\ufeff字段，那么feff是什么意思呢？feff是一个BOM(Byte Order Mark)，是一个不显示的标识字段，在utf-16或者...