Yohohaha的博客

scrapy提供的几种方便的将提取出来的链接继续爬取的方法

一、安装scrapy 创建虚拟环境 运行命令：conda create -n scrapy python=3.7 ，会在anaconda安装目录下的envs文件夹下创建出scrapy运行环境：~/anaconda3/envs/scrapy/ 切换到刚刚创建的scrapy虚拟环境，运行命令：pip install scrapy pycharm设置刚刚创建的解释器 二、创建爬虫py文件 im...