- 博客(4)
- 收藏
- 关注
原创 XPath 在浏览器开发者工具可用但代码中失效的原因及解决方案
问题背景在使用 XPath 定位网页元素时,经常遇到以下矛盾:● 在浏览器 F12 开发者工具中:XPath 能正确选中元素。● 在代码中请求页面后:XPath 无法定位或报错。以下是常见原因及系统性解决方案:一、原因 1:JS 动态加载内容(核心问题)现象● 示例:商品详情页的多张图片由 JavaScript 动态加载,原始 HTML 中仅有占位符(如● 后果:代码直接请求的 HTML 中无目标元素,XPath 无法定位。解决思路。
2025-03-04 10:04:29
1085
原创 针对网站反selenium爬虫的应对方法
以下是通过自定义浏览器驱动配置绕过网站反自动化检测的核心方法,适用于Chrome和Edge浏览器。该方法通过隐藏浏览器自动化特征(如属性)和优化配置实现反检测。
2025-02-16 23:06:14
1937
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅