1,Redis下载地址:https://github.com/MSOpenTech/redis/releases
2.根据自己实际情况选择,下载到的Redis支持32bit和64bit,将下载文件拷贝到自定义盘符,解压后将目录取名redis, 如 C:\reids,我的是放在了C盘下
3.存放完毕后,打开Redis文件夹,“shift+鼠标右键”打开命令窗口,然后按下图步骤操作:
4.开启成功后,不要关闭命令窗口,不然Redis服务会关闭,重新另外打开一个命令窗口,然后进入Redis安装目录下,如果环境是虚拟环境,先进入虚拟环境,然后测试是否可以远程连接redis:
5.如果redis想访问远程的redis服务器,需要解除保护模式
做法
1) 在远程服务器登录redis-cli
2) 输入命令
config set protected-mode "no" 回车
6.了解客户端,添加爬虫,配置起始网址(lpush 爬虫名称:start urls 爬虫起始地址)
如果使用的是虚拟环境要先在虚拟环境下进行上图操作
7.修改访问权限,允许其他主机能够远程访问,进行如下操作:
修改后,保存,如下所示:
8.修改爬虫项目:
(1)修改spider下的爬虫文件:
(2)修改sittings文件: