Throne的博客

趁着暑假的空闲，把在上个学期学到的Python数据采集的皮毛用来试试手，写了一个爬取豆瓣图书的爬虫，总结如下： 下面是我要做的事： 1. 登录 2. 获取豆瓣图书分类目录 3. 进入每一个分类里面，爬取第一页的书的书名，作者，译者，出版时间等信息，放入MySQL中，然后将封面下载下来。第一步首先，盗亦有道嘛，看看豆瓣网的robots协议：User-agent: *Disallow: /su

关于登陆的问题，可以参考我的另一篇博客： http://blog.youkuaiyun.com/weixin_37656939/article/details/77142204在这里记录一下我在爬取温酒小故事的时候遇到的问题以及解决办法：CSS选择器无效，只好通过观察，用正则表达式直接从html里提取信息。 温酒小故事专栏会以随着拖动越来越多的方式呈现文章，于是通过开发者工具观察，发现是通过GET方法将l

Jupyter Notebook 有两种键盘输入模式。编辑模式，允许你往单元中键入代码或文本；这时的单元框线是绿色的。命令模式，键盘输入运行程序命令；这时的单元框线是灰色。命令模式 (按键 Esc 开启)Enter : 转入编辑模式Shift-Enter : 运行本单元，选中下个单元Ctrl-Enter : 运行本单元Alt-Enter : 运行本单元，在其下插入新单元Y : 单元转入代码

Python Socket 编程详细介绍转自https://gist.github.com/kevinkindom/108ffd675cb9253f8f71Python 提供了两个基本的 socket 模块：Socket 它提供了标准的BSD Socket API。SocketServer 它提供了服务器重心，可以简化网络服务器的开发。下面讲解下 Socket模块功能。...