qq_38839677的博客

如果大家对Python爬虫有所了解的话，想必你应该听说过Selenium这个库，这实际上是一个自动化测试工具，现在已经被广泛用于网络爬虫中来应对JavaScript渲染的页面的抓取。但Selenium用的时候有个麻烦事，就是环境的相关配置，得安装好相关浏览器，比如Chrome、Firefox等等，然后还要到官方网站去下载对应的驱动，最重要的还需要安装对应的PythonS...

首先，一切使用自动化框架的项目，或者说代码，或者说爬虫都会碰到某些网站刚刚打开页面就被判定为：非人类行为。为啥？？----------因为很多网站有对selenium的js监测机制。比如：navigator.webdriver，navigator.languages，navigator.plugins.length......很多很多。比如美团，大众，淘宝这些'无良'商家。。就有对...