
Spider
atopx
一个真正热爱编程且具有极客精神的程序猿,python、golang、rust
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
关于数据库选择和写爬虫的思路
mongodb mysql redis的区别和使用场景 mysql是关系型数据库, 支持事务 mongodb, redis是非关系型数据库(noSQL), 不支持事务 mysql, mongodb, redis的使用根据如何方便进行选择 希望速度快的时候, 选择mongodb或者是redis 数据量过大的时候, 选择频繁使用的数据存入redis, 其他的存入MongoDB MongoDB不用提前...原创 2018-12-23 11:19:03 · 1360 阅读 · 1 评论 -
Node.js 写爬虫
示例代码 使用request配合cheerio实现简单爬虫 let request = require('request'); // 需要先安装request库 let cheerio = require('cheerio'); // 需要先安装cheerio let url = "http://example.webscraping.com/places/default/view/china...原创 2019-01-23 16:24:58 · 193 阅读 · 0 评论