安装pyspider遇到的坑,执行到pycurl就错误。

Collecting pycurl (from pyspider)
  Using cached pycurl-7.43.0.2.tar.gz
    Complete output from command python setup.py egg_info:
    Traceback (most recent call last):
      File "/tmp/pip-build-7572xl8l/pycurl/setup.py", line 104, in configure_unix
        stdout=subprocess.PIPE, stderr=subprocess.PIPE)
      File "/usr/local/python3/lib/python3.6/subprocess.py", line 707, in __init__
        restore_signals, start_new_session)
      File "/usr/local/python3/lib/python3.6/subprocess.py", line 1333, in _execute_child
        raise child_exception_type(errno_num, err_msg)
    FileNotFoundError: [Errno 2] No such file or directory: 'curl-config'

到这一步大家都是很疑惑，怀疑各种权限啊，网络环境啊。我都是试了都是不行，仔细看是curl-config不存在。

安装pyspider的时候依赖于pycurl,于是程序就先安装pycurl了。需要先安装pycurl-7.43.0.2.tar.gz，但是单独的pip install pycurl时候又出问题了 还是提示curl-config不存在。最后没辙了百度了一下要法安装curl。

第一步：下载curl
 

wget https://curl.haxx.se/download/curl-7.43.0.tar.gz

第二步： 解压
 

tar -zxf curl-7.43.0.tar.gz

第三步：编译
 

cd curl-7.43.0
./configure

第四步：安装curl
 

make && make install

第五步：下载pycurl，自己手动安装

注意：自己复制pip的时候选的哪个版本，下载前回到上一层文件

Collecting pycurl (from pyspider)
  Using cached https://files.pythonhosted.org/packages/e8/e4/0dbb8735407189f00b33d84122b9be52c790c7c3b25286826f4e1bdb7bde/pycurl-7.43.0.2.tar.gz

我的话就是输入代码：

wget https://files.pythonhosted.org/packages/e8/e4/0dbb8735407189f00b33d84122b9be52c790c7c3b25286826f4e1bdb7bde/pycurl-7.43.0.2.tar.gz

第六步 解压pycurl

tar -zxf pycurl-7.43.0.2.tar.gz

第七步 进入pycurl

cd pycurl-7.43.0.2

第八步使用--curl-config=制定curl-config的路径

python setup.py install --curl-config=/usr/local/bin/curl-config

最后执行 pip install pyspider 就ok了，如果网络不是很好，设置超时时间把。pip --default-timeout=100 install pyspider