使用python的requests库爬取数据时候遇到的ConnectionError

最新推荐文章于 2025-06-13 17:44:56 发布

Student_JiMeiLin

最新推荐文章于 2025-06-13 17:44:56 发布

阅读量2.5w

点赞数 6

CC 4.0 BY-SA版权

分类专栏： python 文章标签： python

本文链接：https://blog.youkuaiyun.com/Student_JiMeiLin/article/details/80017921

最近刚得到一个爬取网络数据的源代码，刚开始爬取少量数据的时候，一切顺利。可是随着爬取的数据越来越庞大，问题也就越来越多了。遇到的一个比较头疼的问题就是连接错误。具体错误信息如下:

Traceback (most recent call last):
File "new_request2.py", line 82, in <module>
result = requests.put(page_url, headers=headers, data=json.dumps(info_payload))
File "C:\Users\12611\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\api.py", line 126, in put
return request('put', url, data=data, **kwargs)
File "C:\Users\12611\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\api.py", line 58, in request
return session.request(method=method, url=url, **kwargs)
File "C:\Users\12611\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\sessions.py", line 508, in request
resp = self.send(prep, **send_kwargs)
File "C:\Users\12611\AppData\Local\Programs\Python\Python36-32\lib\site-pac