
nodejs
文章平均质量分 89
[Object object]
这个作者很懒,什么都没留下…
展开
-
nodejs 爬取动态网页
前言准备工作创建工程今日头条爬虫代码后记前言昨天实现了草榴的爬取 nodejs 做一个简单的爬虫爬草榴,今天对代码做了一部分修改,增加了可以指定开始页和结束页,并且给所有文件都单独创建了文件夹。那么问题来了,说好的爬 街拍图片 呢?毕竟爬完草榴的东西并不适合展示,所以,今天又尝试了一下爬今日头条的街拍图片。Talk is cheap,show ...原创 2018-06-25 09:40:35 · 12962 阅读 · 1 评论 -
nodejs 实现异步并发爬虫
前言修改完代码后记前言前两天实现了简单的爬草榴和今日头条的图片。但是他们都有一个缺点,就是只有当前任务完成以后才会进行下一个任务。所以就在网上搜了一下。 因为之前不是计算机专业的,所以刚开始的时候花了一部分时间来理解异步和并发的概念。知乎上面有一篇解释阻塞非阻塞与异步同步区别的问题回答还不错 怎样理解阻塞非阻塞与同步异步的区别?。 自己理解异步和...原创 2018-05-05 11:52:47 · 5300 阅读 · 0 评论 -
nodejs 做一个简单的爬虫
前言准备工作创建工程武大计算机学院新闻爬虫代码草榴技术讨论区爬虫后记前言(前言是废话可以略过)感觉我写的已经很基础了,就算没有编程经验的人应该也能做出来吧? 起因是昨天中午在 stromzhang 的知识星球(会不会有广告嫌疑)上看到一个球友分享了这么一篇东西 链接如下: 今日头条街拍,又到养眼的季节 作为一个程序员,到现在还...原创 2018-04-29 13:16:54 · 91051 阅读 · 1 评论 -
nodejs 爬取前端面经并生成词云
前言准备工作网页结构分析分词生成词云完整代码效果图github 地址前言最近有 CVTE 的面试但是一直没有到我,昨天下午牛客网上 CVTE 前端的面经突然多了起来,大致看了一下,和自己之前整理的知识点差的不多,但是基本都问了 nodejs 的问题。正好之前的爬虫都没有做过词云,借着这个机会爬一下牛客网的前端面经,顺便生成词云,看看面试中哪些比较重...原创 2018-07-28 18:43:31 · 3369 阅读 · 2 评论