python3抓取糗百图片

最新推荐文章于 2023-02-27 22:10:59 发布

原创最新推荐文章于 2023-02-27 22:10:59 发布 · 311 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍了一个使用Python编写的简单爬虫程序，该程序能够从糗事百科网站上抓取指定页数内的图片，并保存到本地指定文件夹中。程序使用了BeautifulSoup库解析网页内容，通过urllib库发送HTTP请求。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

from bs4 import BeautifulSoupimport urllib.requestimport ospath = os.getcwd() new_path = os.path.join(path,"photos")if not os.path.isdir(new_path): os.mkdir(new_path)os.chdir(new_path)t=1n=input("请输入获取的页数:")user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'headers = { 'User-Agent' : user_agent }for x in range(int(n)): html=urllib.request.Request("http://www.qiushibaike.com/pic/page/"+str(x+1),headers=headers) response = urllib.request.urlopen(html).read() soup = BeautifulSoup(response, "html.parser") #print (soup) for i in soup.find_all('div', {"class":{'thumb',"author clearfix"}}): pic_name = str(t) + '.jpg' img_src = i.find('img').get('src') #print (img_src) urllib.request.urlretrieve(img_src, pic_name) t+=1 print ("已经获取页数"+str(x+1))print("获取完成")