临时记录01

爬虫技术与资源汇总
本文档汇总了爬虫技术的学习资源与实践案例,包括Python爬虫教程、爬虫实战项目、常用爬虫框架如Scrapy等介绍,并分享了一些常用的免费IP代理资源及IP代理池项目的实现。

带爬网站

 

SIEW_main项目之外
#23: python爬虫ppt课件(二):准备培训其他人。项目之外
#24: 在前程无忧上,关注时候数据分析的人员项目之外
#29: 学习kibana的使用项目之外
#30: 季度考核Q1功能
#31: 和西安张文奇沟通,发源码给他,让他先熟悉一下python和项目项目之外
#18: 准备培训ppt,5月8日讲V0.5.3功能
#14: 打标签功能02:用白名单关键词匹配分词列表功能
#13: 打标签功能:不区分大小写功能
#15: 打标签功能03:嵌入项目(里程碑,m分支)V0.5.4功能
#25: 爬取第2/3个安全资讯类网站V0.5.5功能
#28: 提供api

 

 

scrapy中文:

http://scrapy-chs.readthedocs.io/zh_CN/0.24/intro/overview.html

 

ip代理池master学习

https://github.com/jhao104/proxy_pool

免费ip代理

http://www.data5u.com/

 ip代理学习项目:

https://github.com/WiseDoge/ProxyPool

 

 uml建模语言学习文档:

http://www.jb51.net/books/61369.html#download

http://www.jb51.net/books/487915.html#download

http://www.jb51.net/books/60365.html#download

http://www.jb51.net/books/61659.html#download

 

http://blog.youkuaiyun.com/x_i_y_u_e/article/details/49475411

 

学习:

进程间的通讯:管道、套接字

http://blog.chinaunix.net/uid-26833883-id-3227144.html

 

https://jingyan.baidu.com/article/fc07f98976710e12ffe519de.html

草稿箱

https://i.cnblogs.com/posts?postConfig=IsDraft

 框架、架构

https://www.toutiao.com/a6508888687890137603/?tt_from=mobile_qq&utm_campaign=client_share&timestamp=1515506738&app=news_article&utm_source=mobile_qq&iid=22868850977&utm_medium=toutiao_android

 

在线编程

萌呜实验室

https://lab.monwu.com/

 

python基础系统学习

http://python.usyiyi.cn/translate/python_352/tutorial/index.html

 

工作目标 

 

安全学习网站;

Linux SSH扫描暴力分析的防御视频教程
http://www.icoolxue.com/album/show/331

高级渗透视频教程
http://www.icoolxue.com/album/show/347

浅蓝渗透视频教程
http://www.icoolxue.com/album/show/355

Redhat Linux服务器基础视频教程
http://www.icoolxue.com/album/show/304

红客攻防视频教程
http://www.icoolxue.com/album/show/338

大型网站技术揭秘视频教程
http://www.icoolxue.com/album/show/255

 

csdn下载

http://download.youkuaiyun.com/my

 

经典爬虫项目

https://github.com/zhangsir293/web_spider

https://github.com/facert/awesome-spider

https://github.com/xianhu/PSpider

转载于:https://www.cnblogs.com/andy9468/p/8052301.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值