qq_41571224的博客

Python爬百度贴吧介绍一下大概流程：获取需要爬取的url —>发请求获取响应 —>保存响应数据实现逻辑：1、使用循环生成url列表2、遍历url列表发送请求，获取响应3、将响应保存#coding=utf-8import requestsclass TiebaSpider: def __init__(self,tieba_name): self.tieba_name = tieba_name self.url_temp = "http

Python爬虫带header报错解决方法不得不说爬虫理论看起来简单，操作起来就报这个错那个错，今天记录一下爬百度贴吧报过的错，以及解决方案。1.requests.exceptions.InvalidHeader: Invalid return character or leading space in header: User-Agent这个报错是说request里面带了无效的header，无效的返回字符或者前面的几个字符有问题。问题发生背景：我的header是直接从fiddler里面复制出来放到