python爬虫过程报错：http.client.RemoteDisconnected: Remote end closed connection without response

最新推荐文章于 2025-11-15 18:58:40 发布
转载 最新推荐文章于 2025-11-15 18:58:40 发布 · 3.5w 阅读 · 8

本文介绍了当爬虫遇到服务器因UA而拒绝连接的情况时的解决方案。通过设置headers中的User-Agent字段为常见的浏览器标识，可以有效避免服务器拒绝爬虫请求。
Python3.11

Python3.11

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

爬虫过程报错：http.client.RemoteDisconnected: Remote end closed connection without response

因为服务器根据 UA 来判断拒绝了 python 爬虫。

添加
headers = {'User-Agent': 'User-Agent:Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36'}
伪装成google浏览器


您可能感兴趣的与本文相关的镜像

Python3.11

Python3.11

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

成功解决：http.client.RemoteDisconnected: Remote end closed connection without response
安静到无声
04-07 8821
运行程序超时，有时可以正常运行，有时候显示如下错误：。 问题定位 问题分析：加载模型可能是由于网络问题，导致与训练权重难以下载，从而失败。 通过远程访问github进行权重和网络模型的加载（有时候是可以成功的）： 将加载的权重和模型离线另存： 最后再加载保存的离线模型和权重即可：
python爬虫 请求网站时报错：http.client.RemoteDisconnected
qq_41595507的博客
10-11 3106
请求网站时报错：http.client.RemoteDisconnected: Remote end closed connection without response 原因：服务器限制了部分User-Agent的访问 解决方案: 添加User-Agent 原代码： data = urllib.request.urlopen(url).read().decode("utf-8", "ignore...
成功解决：python爬虫http.client.RemoteDisconnected: Remote end closed connection without response
weixin_46569877的博客
07-14 1万+
python爬虫
爬虫请求网站时报错http.client.RemoteDisconnected: Remote end closed connection without response 请求网站时报错
wangyifan123456zz的博客
11-03 1万+
USER_AGENTS = [ "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; AcooBrowser; .NET CLR 1.1.4322; .NET CLR 2.0.50727)", "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; Acoo Browser; SLCC1; .NET CLR 2.0.50727; Media Center PC 5.0; .NET CLR 3.0
Akshare接口：stock_zh_a_spot_em问题RemoteDisconnected解决方案
最新发布
weixin_52248200的博客
11-15 1478
大家好，最近在用 Akshare 的接口获取 A 股实时行情数据时，是不是经常遇到下面这个令人抓狂的错误？这个错误。：从家里换到公司，甚至用了代理。：加了time.sleep，但错误依然随机出现。：发现已经是最新版本了。：找到的零星解答都说是“网络问题”，但根本无法根治。：这个错误会导致你的量化交易程序、数据监控脚本突然中断，数据缺失，严重影响项目的稳定性和可靠性。我曾经也被这个问题折磨了整整一周，但经过深入分析 Akshare 的源码和网络请求，我发现了问题的，并找到了一个。
【Python】py3.6请求网站时报错：http.client.RemoteDisconnected: Remote end closed connection without response
小白兔的窝
02-25 2万+
爬虫代码报错：http.client.RemoteDisconnected: Remote end closed connection without response 原因：服务器限制了User-Agent的访问。 1.什么是user-agent? 有一些网站不喜欢被爬虫程序访问，所以会检测连接对象，如果是爬虫程序，也就是非人点击访问，它就会不让你继续访问，所以为了要让程序可以正常运行...
http.client.RemoteDisconnected: Remote end closed connection without response相关问题的解决
weixin_73817187的博客
02-22 6756
这里我用的是http协议，请求的url也是http协议 ，这个位置测试网站换成https://blog.csdn.net/lovlu18 协议时，它还是可以得到响应，这个因为没有。通俗点来说，就是如果添加了UA之后，问题还没有得到解决，就看一下你请求的网站，是不是https,如果是，就改为http试一下，即建议大家使用。大多数网站都会对用户请求中的 User-Agent 进行检测，如果没有在请求头中设置 User-Agent，那么就会抛出异常。遇到这类的问题，在使用 Python 爬虫库中的。
yolov5 http.client.RemoteDisconnected: Remote end closed connection without response
09-13
当你在使用yolov5时，遇到了报错http.client.RemoteDisconnected: Remote end closed connection without response。这个错误通常发生在你的程序试图与远程服务器建立连接时，但是远程服务器在没有响应的情况下关闭...
python RemoteDisconnected: Remote end closed connection without response
03-18
当在 Python 的爬虫程序中使用 `urllib` 或 `requests` 库获取数据时，可能会遇到 `http.client.RemoteDisconnected: Remote end closed connection without response` 这类错误。这种错误通常发生在目标服务器关闭...
Python做有道翻译的的时候报http.client.RemoteDisconnected: Remote end closed connection without response
xiaosheng
06-26 5656
一开始只是加了头部信息，然后运行就报错， 后来想着不是不没有加form信息，最后发现果然是这样， form = { "i":"inout", "from":"AUTO", "to":"AUTO", "smartresult":"dict", "client":"fanyi
爬取网页过程报错：RemoteDisconnected: Remote end closed connection without response
the_beginner的博客
06-28 1万+
有问题的代码： import urllib.request # 代码002：(未声明headers，会报错） response = urllib.request.urlopen("http://www.baidu.com") print(response) print(response.read()) 运行结果： Traceback (most recent call last): File "D:/PycharmProjects/pythonProject/douban/test1/temp.py"
Python 爬虫：http.client.RemoteDisconnected: Remote end closed connection without response 问题解决
疯魔coding君的博客
04-11 1万+
在使用 Python 爬虫库中的 urllib 或者 requests 库获取数据时，大多数网站都会对用户请求中的 User-Agent 进行检测，如果没有在请求头中设置 User-Agent，那么就会抛出如下异常： http.client.RemoteDisconnected: Remote end closed connection without response urllib 设置 User-Agent 示例如下： from urllib.request import urlopen, Req
Python3.6请求网站时报错：http.client.RemoteDisconnected: Remote end closed connection without response
热门推荐
东虫虾草博客
05-27 4万+
调整前的代码段： data = urllib.request.urlopen(url).read() 运行时报错：     http.client.RemoteDisconnected: Remote end closed connection without response 调整后代码段： headers = {'User-Agent': 'User-
RemoteDisconnected: Remote end closed connection without response
weixin_30293135的博客
01-24 2378
爬智联招聘数据时候报错：“RemoteDisconnected: Remote end closed connection without response” 利用 urllib 发起的请求，UA 默认是 Python-urllib/3.5 而在 chrome 中访问 UA 则是 User-Agent:Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_...
人工智能 -- python3 爬虫：如何应对“反爬虫”？ ---- 爬虫时Request网站时报错：http.client.RemoteDisconnected
Acegem的博客
11-30 1322
请求网站时报错：http.client.RemoteDisconnected: Remote end closed connection without response 原因：服务器限制了部分User-Agent的访问 解决方案: 添加User-Agent 例： 源代码： data = urllib.request.urlopen(url).read().decode("utf-8", "ign...
Remote end closed connection without response
m0_50061234的博客
08-09 1万+
目录 问题描述： 1.Remote end closed connection without response 在我丰富了我的headers之后报了下面这个错误。 2.ConnectionResetError: [WinError 10054] 远程主机强迫关闭了一个现有的连接。 问题解决： 问题描述： 最近在python学习的时候，按照老师教的方法敲的代码（因为是过去的视频），已经不管用了。 看了网上的 原因， 1.频繁访问导致远程怀疑是恶意攻击 2.User-Agent被网
使用ip付费的代理是遇到http.client.RemoteDisconnected: Remote end closed connection without response 解决方法
zonewan
04-12 2万+
上图是我们使用代理是的报错信息，在网上搜索了一下，答案都是这个问题不需要的。这里我用的是http协议,ip是从X宝买的。请求的url也是http协议，下图是我测试ip的百度网站。这个位置犯了错误，https://www.baidu.com/ 百度真确写法。当然这个位置测试网站换成https://blog.csdn.net/lovlu18 协议时，它还是可以得到响应，这个因为没有ssl加密应用层的介...
python怎么连接远程服务器没有按时响应_python请求http.client.remotedisconnected:远程端已关闭连接,但没有响应:。(...
weixin_39678525的博客
12-07 1341
Traceback (most recent call last):File "/Users/kozo4/Library/Python/3.6/lib/python/site-packages/urllib3/connectionpool.py", line 600, in urlopenchunked=chunked)File "/Users/kozo4/Library/Python/3.6/l...
评论 5
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值