首先分享一个很棒的github开源项目,收集各种爬虫 (默认爬虫语言为 python)
facert/awesome-spider
https://github.com/facert/awesome-spider
A
暗网爬虫(Go)
alexaTop500
爱丝APP图片爬虫
B
Bilibili 用户
Bilibili 视频
博客园(node.js)
百度百科(node.js)
北邮人水木清华招聘
百度云网盘
琉璃神社爬虫
C
cnblog
caoliu 1024
D
豆瓣读书
豆瓣爬虫集
豆瓣害羞组
DNS记录和子域名
E
E绅士
G
Girl-atlas
girl13
github trending
I
Instagram
J
京东
京东搜索+评论
机票
煎蛋妹纸
今日头条,网易,腾讯等新闻
K
看知乎
课程格子校花榜
konachan
L
链家
拉勾
炉石传说
leetcode
M
马蜂窝(node.js)
MyCar
漫画喵 一键下载漫画~
美女写真套图爬虫
P
Pixiv
PornHub
Q
QQ空间
QQ 群
清华大学网络学堂爬虫
去哪儿
R
人人影视
RSS 爬虫
rosi 妹子图
reddit 壁纸
S
soundcloud
Sta