利用python3爬取小说

最新推荐文章于 2025-06-11 16:04:45 发布

雨破尘

最新推荐文章于 2025-06-11 16:04:45 发布

阅读量4.9k

点赞数 2

CC 4.0 BY-SA版权

分类专栏： python 文章标签： python 网络爬虫

本文链接：https://blog.youkuaiyun.com/wang454592297/article/details/79178636

博主分享了在学习Python3网络爬虫后，如何从‘笔趣看’网站爬取小说《亵渎》的经验，感谢并致敬教程作者Jack-Cui。代码实现已给出。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

此博客是在学习了大神Jack-Cui的专栏Python3网络爬虫入门之后写的，代码也是在他的一篇博客代码上稍做了下改动，在这里感谢下大神，从他那里学了很多，向大神致敬。
实现的主要功能是从笔趣看上爬取小说《亵渎》，代码如下：

from urllib import request
from bs4 import BeautifulSoup
import re
import os

header = {
    'User-Agent': 'Mozilla/5.0 (Linux; Android 4.1.1; Nexus 7 Build/JRO03D) App' \
                       'leWebKit/535.19 (KHTML, like Gecko) Chrome/18.0.1025.166  Safari/535.19'
}
content_url = "http://www.biqukan.com/3_3876/"  # 小说目录链接
url = conte