用request，cheerio进行网页图片下载

最新推荐文章于 2024-10-18 10:39:06 发布

RunTianMa

最新推荐文章于 2024-10-18 10:39:06 发布

阅读量455

点赞数

CC 4.0 BY-SA版权

分类专栏： node 文章标签： request cheerio 网页图片下载

本文链接：https://blog.youkuaiyun.com/RunTianMa/article/details/87860952

node 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一个使用Node.js、request、cheerio和fs模块的自动化脚本，该脚本能够从指定网页抓取所有图片链接并下载到本地。首先通过request发送HTTP请求获取网页内容，然后利用cheerio解析HTML，提取img标签的src属性即图片链接，最后使用fs模块将图片保存至本地目录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

网页图片下载
request node.js中模块支持http，https和重定向；
cheerio获取目标html里的img标签；
fs：node.js中内置模块，可以操作文件，用于对系统文件及目录进行读写操作。所有方法分为同步和异步两种方法。

const fs=require('fs')
const request = require('request');
const cheerio = require('cheerio');
function patu(url) { 
    request(url, function (error, response, body) {
      console.log('error:', error); // Print the error if one occurred
      console.log('statusCode:', response && response.statusCode); // Print the response status code if a response was received
    
      const $ = cheerio.load(body);
     let num = [];
      $('img').each((i,e)=>{
          num.push($(e).attr('src'))
      })
      for (let index = 0; index < num.length; index++) {
        if(num[index].indexOf('http')!==-1){
            let p=num[index].substr(num[index].length-4);
            request(num[index]).pipe(fs.createWriteStream(`./img/${index}${p}`))
        }
        else{
            num[index]="http:"+num[index];
            // console.log(num[index])
            let p=num[index].substr(num[index].length-4);
            request(num[index]).pipe(fs.createWriteStream(`./img/${index}${p}`))
        } 
      }
    });
}
//调用函数；
patu('https://www.qunar.com')