selenium设置了启动配置,但是window.navigator.webdriver的结果依然为true

本文探讨使用Selenium做爬虫时遇到的window.navigator.webdriver特性识别问题,详细解析为何ChromeDriver79.0.3945.36版本及后续版本无法仅通过配置解决此问题,提供回滚浏览器版本、采用mitmproxy或Pyppeteer模块等解决方案。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

selenium做爬虫能解决很多反爬问题,但是selenium也有很多特征可以被识别,比如用selenium驱动浏览器后window.navigator.webdriver值是true,而正常运行浏览器该值是未定义的(undefined),如下:

网上的各种文章往往告诉大家把selenium做一下启动配置即可,如下:
option.add_experimental_option("excludeSwitches", ['enable-automation'])
但是实际操作后发现并没有用,不管怎么配置window.navigator.webdriver的值还是true

出现这种情况的原因ChromeDriver 79.0.3945.36版本无法通过更改enable-automation设置解决window.navigator.webdriver==true的问题。谷歌浏览器修复了非无头模式下排除“启用自动化”时window.navigator.webdriver是未定义的问题。


简单来说就是ChromeDriver 79.0.3945.36到目前的这些版本(如果不是在无头模式下)就无法通过修改启动配置来达成我们的目的

要想正常使用,得把把Chrome回滚一个版本,并找到对应的ChromeDriver版本。这样才可以!此外,你还可以采用mitmproxy中间人的方式或者Pyppeteer模块来解决这问题,但是之前没接触过的话时间成本有点高!


所以简单的解决办法就是回滚浏览器和驱动的版本或者换个浏览器

一言以蔽之,window.navigator.webdriver无效的问题是因为浏览器版本不同所以配置没起作用。

附上驱动的下载链接和版本对应的表的链接:

            - 驱动程序:http://chromedriver.storage.googleapis.com/index.html
            - 版本的映射关系:https://blog.youkuaiyun.com/huilan_same/article/details/51896672
 

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值