2021-01-08

最新推荐文章于 2025-11-30 09:20:25 发布

原创最新推荐文章于 2025-11-30 09:20:25 发布 · 147 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#nodejs #javascript #http #爬虫

node 专栏收录该内容

1 篇文章

订阅专栏

该博客介绍了如何使用Node.js编写一个简单的网络爬虫，通过GET请求抓取yuedu.163.com的数据，并利用正则表达式匹配特定内容。步骤包括安装Node.js、编写代码、运行程序及访问localhost:3001查看结果。这是一个适合初学者的Node.js实战教程。

Node 做个简单小爬虫

你也想做这个小demo?
总共有四步：

安装node
复制一下代码
node运行下
localhost:3001直接访问
很简单，想即可操作~

let http = require('http');

http.createServer(function(req, res) {
    let client = http.request({
        host: 'yuedu.163.com',
        method: 'get',
        port: '80'
    }, function(db) {
        let bookArr = [];
        db.on('data', function(data) {
            bookArr.push(data);
        });
        db.on('end', function() {
            let result = Buffer.concat(bookArr).toString();
            let matches = result.match(/<div class="category">([\s\S]*?)<\/div>/gm);
            res.setHeader('Content-Type', 'text/html;charset=utf8');
            res.end(matches.join(''));
        })
    });
    client.end();
}).listen(3001);

在这里插入图片描述你也可以给坚持贡献的蛙蛙一点奖励哟~