python requests 和正则表达式提取贴吧图片

最新推荐文章于 2024-10-15 10:30:00 发布

原创最新推荐文章于 2024-10-15 10:30:00 发布 · 1.5k 阅读

1 ·

CC 4.0 BY-SA版权

python 专栏收录该内容

1 篇文章

订阅专栏

利用requests库的get方法获取网页内容，再通过正则表达式匹配提取图片URL，最终将图片保存到本地。这是作者初次尝试的Python爬虫项目，适合初学者，欢迎交流指正。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

通过requests的get方法得到对应url 的页面，然后直接使用re 的正则表达式来查找对应的图片的地址，最后将图片保存在本地。
这个可以算的上是自己的第一个python 爬虫了吧。。。。
新手，有很多不好的地方，欢迎交流

import requests
import sys
import io
import re
import os

url = "http://c.tieba.baidu.com/p/5287949986"

html=requests.get(url)
url_list = re.findall(r"http://imgsrc.baidu.com/forum/.*?\.jpg",html.text)

root = "E://pics//"
file=open(root+"demo.txt","a")
for url in url_list:
     file.write(url+"\n")
file.close()
'''
for i in url_list:
     with open(root+"demo.txt","w")as p:
          p.write(i)
          p.close()
'''
print("url_list download success!")
num=0
failed_count=0
for url in url_list:
    path = root+str(num+1)+".jpg"
    with open(path,"wb") as f:
         try:
             res=requests.get(url,timeout=30)
             f.write(res.content)
             f.close()
             num+=1
         except:
             print("failed")
             failed_count+=1

print("download compelete!\n"+"successful{}\n failed {}".format(num,failed_count))