scrapy
编程_人生
能干的人解决问题。智慧的人绕开问题
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
关于 twisted.internet.error.CannotListenError 报错
关于运行scrapyd服务时报错 twisted.internet.error.CannotListenError: Couldn't listen on 0.0.0.0:6800: [Errno 98] Address already in use. 解决办法: 在运行scrapyd试试:原创 2014-12-05 21:52:53 · 2255 阅读 · 0 评论 -
scrapy分布式的应用学习笔记(一)
1. 创建项目,在项目目录执行命令 scrapy startproject webbot 生成下面的目录和文件 scrapy.cfg: 项目配置文件webbot//: 项目的 python 源代码 modulewebbot//items.py: 定义 item 类,用来存储爬取的数据.webbot//pipelines.py: pipelines文件,定义清洗,处理数据的类webbot原创 2014-12-06 21:09:08 · 421 阅读 · 0 评论
分享