python爬取百度贴吧(urllib库)

最新推荐文章于 2024-02-02 14:05:29 发布

LLLLLLLLLLLLIU

最新推荐文章于 2024-02-02 14:05:29 发布

阅读量694

点赞数 1

分类专栏： Python 文章标签： python

本文链接：https://blog.youkuaiyun.com/weixin_44851971/article/details/109426246

版权

Python 专栏收录该内容

45 篇文章

订阅专栏

由于未提供博客具体内容，无法生成包含关键信息的摘要。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import urllib.parse
import urllib.request

url = "https://tieba.baidu.com/f?"
tieba_name = input("请输入要查询的贴吧")
kwvalue = urllib.parse.urlencode({"kw":tieba_name})
page = int(input("请输入要爬取的页数"))
headers = {"user-agent":"Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36"}

for i in range(1,page+1):
    allurl = url + kwvalue + "&pn=" + str((i-1)*50)
    # print(allurl)
    urr = urllib.request.Request(allurl,headers=headers)
    response = urllib.request.urlopen(urr).read()
    filename = r"C:\Users\Administrator\Desktop\a" + "\第" +str(i) + "页.html"
    try:
        f  = open(filename,"wb")
        f.write(response)
        f.close()
    except Exception as e:
        print(e)