python访问网页返回503错误

本文介绍了解决Python爬虫中出现HTTP 503 Service Temporarily Unavailable错误的方法,包括检查header设置、使用代理及应对服务器拒绝服务的策略。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Traceback (most recent call last):
  File "test.py", line 30, in <module>
    gethtml()
  File "test.py", line 13, in scanurl
    src = urllib2.urlopen(url).read()
  File "/usr/lib/python2.6/urllib2.py", line 126, in urlopen
    return _opener.open(url, data, timeout)
  File "/usr/lib/python2.6/urllib2.py", line 397, in open
    response = meth(req, response)
  File "/usr/lib/python2.6/urllib2.py", line 510, in http_response
    'http', request, response, code, msg, hdrs)
  File "/usr/lib/python2.6/urllib2.py", line 435, in error
    return self._call_chain(*args)
  File "/usr/lib/python2.6/urllib2.py", line 369, in _call_chain
    result = func(*args)
  File "/usr/lib/python2.6/urllib2.py", line 518, in http_error_default
    raise HTTPError(req.get_full_url(), code, msg, hdrs, fp)
urllib2.HTTPError: HTTP Error 503: Service Temporarily Unavailable
1、若浏览器能打开响应网页,则是你的访问头header有问题,修改header或者采用我这一篇文章的方法(python获取代理(终极版本)),多个header随即使用
2、若浏览器也打不开,则一般会有两种可能,第一种是对方服务器被动式拒绝服务,比如对方服务器瘫痪,网络问题等,一般很快会被修复。第二种主动式拒绝服务,有可能是因为你短时间内多次访问服务器(一般爬虫会遇到这个问题),这种情况就要看对方服务器的拉黑时间,像我,之前被拉黑过12小时的。
最后说一句:时代在进步,爬虫最少也要用个代理,不要裸奔,这样很容易被“捉奸在床”的啦....偷笑偷笑偷笑

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值