荒野雄兵的专栏

前言在做Python爬虫的时候使用火狐浏览器的时候每次爬取都会弹出一个浏览器 有没有一种更好的办法呢？ 搜索发现有一个无界面浏览器，叫做PhantomJS。安装的过程中遇到一些问题，这里记录一下。 安装的时候是直接去官网下载最新版安装的，但是安装部署好以后一直报错，于是自己编译，发现太慢。于是改换之前的版本，把PhantomJS2.1.3降为2.1.1还是按2.1.3的步骤配置，一次成功

操作系统：CentOS6.9 64位 Python版本：3.6.2 报错： Using cached pycurl-7.43.0.1.tar.gz Complete output from command python setup.py egg_info: Traceback (most recent call last): File "/tmp/pi...

操作系统：CentOS6.9 64位 Python版本：3.6.2 安装pyspider的时候报错：[root@cm01 software]# pip3 install pyspiderCollecting pyspider Using cached pyspider-0.3.9.tar.gz...Collecting pycurl (from pyspider) Usi...