scrapy
关注
分享
扫一扫
毒小枭
这个作者很懒，什么都没留下…
展开
-
关于spiderKeeper参数传参问题
以下为SpiderKeeper的源码解析 SpiderKeeper/app/spider/controller.py中的job_add()添加任务到sqlite库 1.if request.form['daemon'] != 'auto': 2. spider_args = [] 3. if request.form['spider_arguments']...原创 2019-12-20 16:11:57 · 314 阅读 · 0 评论 -
scrapy的logging设置
个人代码 spider代码（见else） layNum = 0 for lay in info: layNum += 1 layoutID = self.newspaperID + publishDate + '{:0>2}'.format(layNum) itemLay...转载 2018-10-09 09:29:08 · 1956 阅读 · 1 评论