废人一枚的博客

chromedriver的下载和配置使用selenium时，需要用到不同浏览器的driver。 我常用chromedriver，所以先记录chromedriver的使用和配置。其他浏览器的driver配置大同小异。第一步、 确定浏览器的版本如果你没有安装谷歌浏览器，点击下载安装 https://www.google.cn/chrome/打开浏览器输入chrome://settings/he...

博主最近有点小忙，敬请期待！

敬请期待！！！！

最近在研究爬虫，爬取好多网站的数据，下面就以爬取美女网站照片为例，来让大家学习，希望大家多交流。总的来说爬虫不难，会python的简单语法，会xpath提取网页需要的信息，就可以很快的爬取网站的图片，同时也希望以此来激起大家学习的兴趣。文章导航一、环境二、源码三、部分源码分析3.1 获取网站html网页数据源码3.2 返回网页源码信息数据3.3 提取网页中自己需要的信息--有多少页3.4 循环进...

尽情等待，很快就会更新，谢谢大家的观看。

前言User-Agent：简称UA，它是一个特殊的字符串头，可以使服务器识别客户使用的操作系统及版本、浏览器及版本等信息。在做爬虫时加上此信息，可以伪装为浏览器；如果不加，很可能会被识别出为爬虫。1、如何确定自己浏览器的User-Agent信息1.1、打开一个浏览器，我这里以360极速浏览器为主1.2、输入chrome://version/后，浏览器会跳出图中的界面，红框标出的“用户代理”...