python scrapy 不断从数据库或者文件中获取网址抓取采集
python小白一个对scrapy不是很熟悉,今天想要从数据库中提取url然后遍历抓取,但是百度了大半天都没有找到案例,特此在此留下记录。
import scrapy
from scrapy import signals
import time
class scrapy_xiangmuSpider(scrapy.Spider):
name = "scrapy_xiangmu"
def start_requests(self):
for url in self.get_
原创
2022-05-08 16:39:25 ·
1185 阅读 ·
1 评论