爬虫
关注
分享
扫一扫
H华华
这个作者很懒，什么都没留下…
展开
-
爬虫 url error : HTTP 403 Forbidden
用Jsoup爬取内容的时候， 一开始的程序，不知道怎么回事，线程应该也不是问题，频繁出现 Http 403 Forbidden .在提交请求get 或者post 的时候，也都加了headers ，不过还是大量抛出403 异常；解决方法： http://blog.youkuaiyun.com/shomy_liu/article/details/38269281原创 2017-10-26 10:13:46 · 8140 阅读 · 0 评论 -
爬虫使用代理防封IP：HTTP Error 403: Forbidden
在写爬虫爬取数据的时候，经常遇到如下的提示,HTTPError403: Forbidden之前已经写了一个使用多个headers 的笔记，但是这种还是只有一个IP 只不过是伪装为不同的浏览器而已，所以想做到更近一步防止被封，还是需要及时更换不同IP，下面记录一下python 使用代理爬取的过程。PS: 爬虫尽量不要太频繁的说。。。解决方法原创 2017-10-26 10:16:53 · 3974 阅读 · 0 评论 -
python下载安装与配置环境
1.https://www.python.org/downloads/windows/ 下载适合自己电脑的python安装包 2.下载后安装即可3.配置环境4.配置好后进入python安装目录进行测试在空白处按住shift键，同时鼠标右击，选中打开命令窗口。输入python 若是没报错说明配置成功，输入print 打印一句话测试，看输出结果4.进...原创 2018-09-28 19:51:51 · 1274 阅读 · 0 评论