python第七次作业

# 定义目标URL
url = "https://www.3bqg.cc/book/10376/"
# 初始化章节字典作全局变量，用于存储章节链接和章节标题，并方便后续使用
chapter = {}

# 获取章节信息并保存到文件中
def get_chapter():
    """
    该函数发送HTTP请求获取网页内容，并使用正则表达式提取章节名称和链接，
    然后将这些信息以自定义格式写入文件中。
    """
    # 导入requests库用于发送HTTP请求
    import requests
    # 设置请求头，模拟浏览器访问
    headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36"
    }
    # 发送请求
    response = requests.get(url, headers=headers)
    # 设置编码
    response.encoding = "utf-8"
    # 查看数据
    content = response.text
    # 正则提取章节名称和链接
    import re
    # 定义正则表达式模式，用于匹配章节链接和章节标题
    p = r'<a href ="/book/10376/(\d+).html">(.*?)</a>'
    # 使用正则表达式查找所有匹配的章节链接和章节标题
    chs = re.findall(p, content, re.DOTALL)
    # 遍历匹配结果，构造章节字典
    for ch in chs:
        # 获取原始章节名
        original_name = ch[1].strip()
        # 获取章节名
        chapter[original_name] = "https://www.3bqg.cc/book/10376/" + ch[0] + ".html"
    # 将章节字典以自定义格式写入文件（更清晰展示章节名和链接对应关系）
    with (open("chapter.txt", mode="w", encoding="utf-8") as file):
        for name, link in chapter.items():
            file.write(f"{name}: {link}\n")
            print(f"{name}: {link}")

# 调用函数
get_chapter()