m0_63721153的博客

原创 pyhton爬虫受限，求助

我请求方式是get加上手动复制的cookie，我发现爬一会就报错访问不了了，经过检查我发现打开网址时会提示“今日访问次数已达上限”。有办法绕过这个反爬手段吗？（似乎是通过限制访问次数来的，time.sleep可能没用？还有一个问题就是，我发现报错之后加个透明代理ip就能接着爬了，但是透明ip不是不做加密吗？大佬们，我写了个爬虫来爬微博上的信息，用途是用作数据分析。恳请大佬们指点一二，不胜感激！