爬虫实践
文章平均质量分 50
记录爬虫中的实际问题
Hank___Chen
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
xpath获取不到元素的原因
xpath获取不到元素的原因:浏览器自动加了节点,导致路径解析错误原创 2021-11-17 17:11:41 · 4190 阅读 · 5 评论 -
fake-useragent提示FakeUserAgentError: Maximum amount of retries reached解决方案
解决方法,直接将文本文件下载下来再导入 之前一些用户使用的方法包括:更新版本,对我而言没用。其次是设置ua的参数,里面将一些验证设置为Flase,我没用。 最直接的方法是下载json文件保存到本地,再调用。因为如果是在线访问的话,这个访问量是非常吓人的,所以打不开是很正常的。保存本地是最优解。 需要注意的是,大多数文章提到的下载地址是:https://fake-useragent.herokuapp.com/browsers/0.1.11http://fake-useragent.herokuapp.原创 2021-10-20 13:03:17 · 491 阅读 · 0 评论
分享