python爬虫学习之路(3) urllib.error异常

最新推荐文章于 2024-11-28 16:08:23 发布

QEcode

最新推荐文章于 2024-11-28 16:08:23 发布

阅读量445

点赞数

CC 4.0 BY-SA版权

分类专栏： python

本文链接：https://blog.youkuaiyun.com/QEcode/article/details/81037126

python 专栏收录该内容

10 篇文章

订阅专栏

本文介绍了如何使用Python的urllib.error模块处理网络请求中的异常，包括URLError和HTTPError两个异常类的区别及应用。通过实例演示了不同类型的异常捕获方式，并提供了获取异常详细信息的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

urllib.error可以捕获有urllib.request产生的异常。urllib.error有两个方法，URLError和HTTPError。
URLError是OSError的一个子类，HTTPError是URLError的一个子类，服务器上HTTP的响应会返回一个状态码，根据这个HTTP状态码，我们可以知道我们的访问是否成功。例如200状态码，表示请求成功，再比如常见的404错误等。
下面我们来学习这两个异常:
一, URLError

from urllib import request
from urllib import error

if __name__ == '__main__':
    # 访问一部不存在的网站
    url = "http://www.bucunzai.com/"
    req = request.Request(url)
    # 捕获异常
    try:
        response = request.urlopen(req)
        html = response.read().decode("utf-8")
        print(html)
    except error.URLError as e:
        # 输出异常
        print(e.reason)

我们可以看见输出的结果是:
这里写图片描述

二, HTTPError
修改了捕获异常的的方法

from urllib import request
from urllib import error

if __name__ == '__main__':
    # 访问一部不存在的网站
    url = "http://www.douyu.com/Qcode.html"
    req = request.Request(url)
    # 捕获异常
    try:
        response = request.urlopen(req)
        html = response.read().decode("utf-8")
        print(html)
    except error.HTTPError as e:
        # 输出异常
        print(e.code)

这里写图片描述

三, URLError和HTTPError混合使用
如果想用HTTPError和URLError一起捕获异常，那么需要将HTTPError放在URLError的前面，因为HTTPError是URLError的一个子类。如果URLError放在前面，出现HTTP异常会先响应URLError，这样HTTPError就捕获不到错误信息了。

四, 其他获取异常信息方法
使用hasattr函数判断URLError含有的属性，如果含有reason属性表明是URLError，如果含有code属性表明是HTTPError。