爬虫cheerio乱码问题

最新推荐文章于 2022-03-09 16:32:45 发布

转载最新推荐文章于 2022-03-09 16:32:45 发布 · 2k 阅读

1 ·

CC 4.0 BY-SA版权

原文链接：https://juejin.im/post/5c0640f7f265da615876eb1e

文章标签：

#爬虫 #php

没有检索到摘要

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

现在乱码问题是

res.write(爬到的内容),在页面上显示是正常的

但是直接在node端打印console.log(爬到的内容)是乱码

调整乱码问题的关键属性是cheerio.load中的{decodeEntities:false}属性

代码一

  var cheerio = require('cheerio')
  , superagent = require('superagent')
  , express = require('express');

var url = 'http://acm.hdu.edu.cn/statistic.php?pid=1000';
var app = express();

app.get('/', function (req, res, next) {

  superagent.get(url)
.end(function (err, pres) {
  var html = pres.text;
  var $ = cheerio.load(html, {decodeEntities: false});
  var ans = $('.r_search_item').eq(0).html();
  res.write(ans);
});
  });

app.listen(3000, function () {
  console.log('app is listening at port 3000');
});
复制代码

代码二

 var cheerio = require('cheerio')
  , superagent = require('superagent')
  , express = require('express');

var url = 'http://acm.hdu.edu.cn/statistic.php?pid=1000';
var app = express();

app.get('/', function (req, res, next) {

  superagent.get(url)
.end(function (err, pres) {
  var html = pres.text;
  var $ = cheerio.load(html);
  var ans = $('.r_search_item').eq(0).html();
  res.write(ans);
});
  });

app.listen(3000, function () {
  console.log('app is listening at port 3000');
});
复制代码