weixin_43875570的博客

原创 scrapyd-爬虫的远程部署和监控

scrapydweb：实现scrapyd集群管理，scrapy日志分析和可视化 第一步：安装scrapyd服务端和客服端工具 安装scrapyd服务端：sudo pip install scrapyd 安装scrapy客服端工具：sudo pip install scrapyd-client 启动scrapy服务端：scrapyd 第二步：修改scrapyd的配置文件 sudo vi /usr/l...