kn的博客

配置centos7网络 首先我们打开网络编辑器 选择VMnet8 点击NAT设置 记住网关IP地址 接下来进入linux界面，输入如下命令： cd /etc/sysconfig/network-scripts 找到"ifcfg-"开头的文件，比如下图的ifcfg-ens33： 我们进入ifcfg-ens33文件进行编辑 vi ifcfg-ens33 修改下图划线的几处配置，其中GATEWAY需要改为上述的网关IP地址，IPADDR可以自己设置一个ip地址 然后我们重启

一.scrapy简介 scrapy结构 items.py：用来存放爬虫爬取下来数据的模型 middlewares.py：用来存放各种中间件的文件 pipelines.py：用来将items的模型存储到本地磁盘中 settings.py：本爬虫的一些配置信息（比如请求头、多久发送一次请求、IP代理池等） scrapy.cfg：项目的配置文件 spiders包：以后所有的爬虫都是存放到这里 二.目标 爬取https://www.xyyuedu.com/wgmz/dongyeguiwu/mimi/284492.