Ubuntu 17 安装scrapy爬虫
第一步 安装pip:输入:sudo apt-get install python-pip
第二步 再执行:输入:sudo apt-get install python-dev
第三步 安装Scrapy :输入:pip install Scrapy -i https://pypi.mirrors.ustc.edu.cn/simple
输入:sudo apt-get install python-scrapy
安装成功并且提示已经获取了哪些包:
测试例子:
单机版的srcapy:
1.新建项目(Project)
sudo scrapy startproject weibo