一个简单的python爬虫爬取糗百图片

本文介绍了一种利用Python的requests模块爬取糗事百科图片的方法,并提供了完整的代码示例。需要注意的是,对于某些网站如百度图片,由于其对header的要求,此方法可能会导致请求失败。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

使用requests模块,不过注意一点的是get的时候没加header,而糗百是不检测的,如果百度图片的话使用这种方法会被认为是机器而get失败。

#! /usr/bin/python
import os
import requests
import re

def get_img_url(page_content):
        s = r'src="(.+?\.jpg)"'
        return re.findall(s,page_content)

xiubai_url = r'http://www.qiushibaike.com/imgrank/'

pic_list = get_img_url(requests.get(xiubai_url).content)

#print pic_list

i = 0

for pic_url in pic_list:
        fd = open(str(i) + '.jpg','w+')
        print fd
        pic = requests.get('http:' + pic_url)
        if pic.status_code is not 200:
                fd.close()
                continue
        else:
                fd.write(pic.content)
                i += 1
                fd.close()
总共爬取了25张图片。


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值