scrapy框架下载图片

步骤

第一步:设置图片存储路径

  • 必须为(IMAGES_STORE)
    这里写图片描述

第二步:管道中定义图片下载类

第二步:重写get_media_requests()方法

  • 此方法返回图片链接,框架会自动下载图片,前提必须有图片存储路径,不然没法下载

第三步:重写item_completed()方法

  • 从setting中获取数据,导入方法:
  • 这里写图片描述
  • 获取路径
    这里写图片描述
  • 通过os模块更新每个图片路径,并定义图片地址字段
    • 注意:result返回值为一个列表,里面是元祖
    • os.sep:返回“/”
      这里写图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值