为spider指定不同的pipline

马立弘

于 2016-11-30 00:12:54 发布

阅读量654

点赞数

CC 4.0 BY-SA版权

分类专栏： python

本文链接：https://blog.youkuaiyun.com/manimanihome/article/details/53402611

python 专栏收录该内容

19 篇文章

订阅专栏


为spider指定不同的pipline

def process_item(self, item, spider):
    if spider.name == 'news':
        #这里写存入 News 表的逻辑
        news = News()
        ...（省略部分代码）
        self.session.add(news)
        self.session.commit()
     elif spider.name == 'bsnews':
        #这里写存入 News 表的逻辑
        bsnews = BsNews()
        ...（省略部分代码）
        self.session.add(bsnews)
        self.session.commit()

      return item