scrapy中默认发送get请求 : 不带参数
start_requests
: 指定第一批发送带参数的请求方式
start_requests()
方法用以处理 start_urls里的每个请求发送方式,可以重写该方法自定义处理。
def start_requests(self):
for url in self.start_urls:
yield scrapy.Request(url, callback=self.parse, dont_filter=True)
scrapy中默认发送get请求 : 不带参数
start_requests
: 指定第一批发送带参数的请求方式
start_requests()
方法用以处理 start_urls里的每个请求发送方式,可以重写该方法自定义处理。
def start_requests(self):
for url in self.start_urls:
yield scrapy.Request(url, callback=self.parse, dont_filter=True)