python3.6+pyspider实现知乎和v2ex的爬取
PySpider:一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写,分布式架构,支持多种数据库后端,强大的WebUI支持脚本编辑器,任务监视器,项目管理器以及结果查看器。条件:安装PySpider和pyMySQL直接pip3 install 安装即可然后启动PySpider的话在cmd中直接输入PySpider启动即可默认的是在127.0.0.1:5000打开,当然...
原创
2018-06-30 14:57:12 ·
1906 阅读 ·
0 评论