本文介绍了如何安装scrapyd和scrapyd-client，启动scrapyd服务，并配置及部署爬虫项目。详细步骤包括部署前的检查、scrapyd-deploy的测试、查看可用爬虫以及在scrapyd服务中查看已部署的项目信息，如状态、项目名称、版本号和爬虫数量。
- 需要安装scrapyd=1.2.0 scrapyd-client=1.2.0a1
- 启动scrapyd服务
- 配置爬虫项目
- 开始向scrapyd中部署项目
通过scrapyd-deploy命令测试scrapyd-deploy是否可用。
查看当前可用于部署到scrapyd服务中的爬虫有哪些。
参数1： [deploy: jobbole]
参数2： scrapy.cfg文中中的url
命令scrapy list用来查看当前项目中，可用的爬虫。
列举scrapyd服务中已经部署的爬虫项目：
status: 上传至scrapyd的状态
project： 上传的项目名称
version: 此次上传项目的版本号，因为项目可以多次打包上传，每次上传都会有不同的版本号
spiders: 该项目中包含的爬虫个数
扫一扫
1280
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
