python爬虫之自动化测试selenium 模仿用户操作

最新推荐文章于 2025-07-21 21:25:27 发布
最新推荐文章于 2025-07-21 21:25:27 发布
阅读量2.3k 收藏 10
点赞数 1
CC 4.0 BY-SA版权
分类专栏： python 文章标签： 自动化测试 爬虫 selenium python xpath
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/Tong_11/article/details/81907007
本文介绍了Selenium自动化测试工具的使用，通过Python结合XPath进行网页元素的精准和模糊定位。讲解了Selenium的基础知识、安装步骤、XPath语法以及常用API，提供代码实例演示了如何进行页面交互和浏览器控制。

小示例效果，程序操控哦

先科普一下selenium，这是一个用于Web应用程序测试的工具，支持多种浏览器多种语言

框架底层使用JavaScript模拟真实用户对浏览器进行操作，Selenium测试直接运行在浏览器中，代码执行时，可以自动打开浏览器/表单输入/按钮点击，就像真实用户在操作的一样

真真是反爬虫的一大神器啊

先附上文档了解一些基础知识：

              官方文档：https://selenium-python.readthedocs.io/index.html

              中文文档：https://selenium-python-zh.readthedocs.io/en/latest/installation.html

关于安装

cmd命令：pip3 install selenium

下载谷歌驱动安装：https://sites.google.com/a/chromium.org/chromedriver/downloads 

放在谷歌文件夹C:\Program Files (x86)\Google\Chrome\Application下再把这路径加入环境变量

基础知识

Xpath是非常强大的元素查找方式，它可以定位到页面上的任

最低0.47元/天 解锁文章

200万优质内容无限畅学
python爬虫之selenium自动化——谷歌驱动（chrome webdriver），超详细！（13）
@优快云盲敲代码的阿豪的博客
10-11 1280
selenium是模仿人的行为，一种自动化驱动浏览器的工具，当我们运行相应代码，python就会通过安装的谷歌驱动（webdriver）打开谷歌浏览器，执行相应的动作；selenium 抓取的是浏览器渲染后的网页，而不是网页源码，所以只要浏览器能够看到的数据，selenium都能抓取；
Python爬虫实战：模拟登录百度网盘 – 自动化登录并下载文件
2201_76125261的博客
03-09 1209
由于百度网盘的反爬虫机制较为严格，直接使用爬虫获取文件会面临一定的挑战，因此模拟登录并进行文件下载是一个复杂但有趣的任务。等库，来模拟登录百度网盘，并通过模拟用户操作进行文件下载。例如，密码可能是通过某种加密算法（如MD5或SHA256）进行处理的，我们需要用正确的方式加密密码并提交。不过需要注意的是，本文中的技术和方法仅供学习和研究使用，实际应用中需要遵守各个网站的使用条款和反爬虫政策。登录成功后，用户可以通过百度网盘获取文件的下载链接。通过设置合理的请求头，可以伪装成真实用户的请求，降低被检测的概率。
Python之Selenium知识总结
-
08-15 7464
Selenium是一个用于测试网站的自动化测试工具，支持各种浏览器包括Chrome、Firefox、Safari等主流界面浏览器，同时也支持phantomJS无界面浏览器，支持Windows、Linux、IOS、Android等操作系统。
【软件测试】selenium API讲解
耀的博客
05-09 3607
目录 一、第一个脚本 二、元素的定位 1，id 和name 定位 2，tag name 和class name 定位 3，CSS 定位 4，XPath 定位 5，link text定位 三、操作测试对象 1，鼠标点击与键盘输入 2，text 获取元素文本 3，打印信息 四、浏览器的操作 1，浏览器最大化 2，设置浏览器宽、高 3，操作浏览器的前进、后退 4，控制浏览器滚动条 五、键盘事件 1，键盘按键用法 2，键盘组合键用法 六、鼠标事件 1，定位一组元素 2，多
【爬虫】06 - 自动化爬虫selenium
最新发布
qq_43350524的博客
07-21 1587
【爬虫】06 - 自动化爬虫selenium
爬虫之selenium
Yietong的博客
12-06 2570
目录selenium介绍基本使用selenium用法元素操作等待元素被加载元素各项属性执行js代码切换选项卡浏览器前进后退无界面浏览器xpath的使用简单介绍selenium中使用异常处理登录获取cookie保存动作链打码平台使用(验证码破解)由于requests模块不能执行js，有的页面内容，我们在浏览器中可以看到，但是请求下来没有。selenium模块：模拟操作浏览器，完成人的行为。selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持
Python爬虫常见的反爬措施和应对方案
lyy2017175913的博客
05-25 2293
爬虫是 Python 的一个常见应用场景，很多练习项目就是让大家去爬某某网站。爬取网页的时候，你大概率会碰到一些反爬措施。这种情况下，你该如何应对呢？本文梳理了常见的反爬措施和应对方案。
2万字带你了解Selenium全攻略
可以叫我才哥
01-06 7157
大家好，我是才哥。 今天带大家一起学(复)习模拟浏览器运行的库Selenium，它是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera和Edge等。 这里我将以Chrome为例进行Selenium功能的演示~ 目录： 文章目录0. 准备工作0.1. 安装selenium库0.2. 安装浏览器驱动1. 基本用法1.1. 初
Python自动化爬虫实战与高级架构技巧
06-22
Selenium是一个强大的自动化测试工具，它可以模拟真实用户的行为，尤其在处理动态加载内容、登录验证、JavaScript渲染等方面具有显著优势。通过结合WebDriver，我们可以控制浏览器执行各种操作，如点击按钮、填写...
python selenium爬虫自动登录实例
qq_52394459的博客
04-22 5315
一、概述 我们要先安装selenium这个库，使用pip install selenium 命令安装，selenium这个库相当于机器模仿人的行为去点击浏览器上的元素，这时我们要用到一个浏览器的驱动（这里我用的是谷歌浏览器）。 二、安装驱动 确认浏览器版本 首先我们先要查看自己浏览器的版本，谷歌浏览器的话点右上角三个点--帮助--关于 Chrome 我们会看到自己的浏览器版本，可以看到我的浏览器版本为100.0.4896.127（正式版本） 下载驱动 打开网页 ：CNPM Binaries
Selenium基本操作
ljq1998的博客
08-13 423
1.声明浏览器对象 browser = webdriver.Chrome() browser = webdriver.Firefox() browser = webdriver.Edge() 2.访问页面 from selenium import webdriver browser = webdriver.Chrome() browser.get('https://www.baidu.c...
【软件测试】selenium元素定位方式大全！
2301_77709772的博客
02-23 1705
本文主要介绍了selenium常用的几种元素定位方法，灵活地使用元素定位方法对于提高我们查找元素定位效率，提升测试脚本的健壮性有很大帮助，希望本文能够帮到大家。下面是配套资料，对于做【软件测试】的朋友来说应该是最全面最完整的备战仓库，这个仓库也陪伴我走过了最艰难的路程，希望也能帮助到你！最后： 可以在公众号：自动化测试老司机！免费领取一份216页软件测试工程师面试宝典文档资料。以及相对应的视频学习教程免费分享！
学习日记—selenium自动化操作浏览器
小 y 同 学的博客
08-20 4269
学习日记—selenium自动化操作浏览器
Selenium之元素定位几种方式
热门推荐
mihaoyun.com的专栏
12-09 6万+
Selenium之元素定位几种方式 阅读目录 通过id获取元素 为指定元素的属性赋值 模拟短信验证操作 自动化注册Pythonav网站 name 通过class name获取单个元素属性 通过class name获取多个元素属性 限定span标签范围 循环绑定click事件 处理弹出框 通过link text定位 通过partial link text定位 css selector XPath 选取节点 谓语（Predicates） 选取未知节点
11.8.2 在页面中寻找元素
china365love的博客
12-21 1336
WebDriver 对象有好几种方法，用于在页面中寻找元素。它们被分成find_element_*和 find_elements_*方法。find_element_*方法返回一个 WebElement 对象，代表页面中匹配查询的第一个元素。find_elements_*方法返回 WebElement_*对象的列表，包含页面中所有匹配的元素。 表 11-3 展示了 find_element_*和 find_elements_*方法的几个例子，它们在变量 browser 中保存的WebDriver 对象上调..
软件测试/人工智能|selenium元素定位方式大全
霍格沃兹测试学院的博客
12-14 266
当我们在使用selenium进行自动化测试工作时，元素定位是非常重要的一环，因为我们是借助脚本模拟我们通过鼠标和键盘对元素进行点击、输入内容和滑动操作的，所以准确的元素定位是我们执行测试脚本的重要一环。本文就来给大家介绍一下selenium的元素定位方式。本文主要介绍了selenium常用的几种元素定位方法，灵活地使用元素定位方法对于提高我们查找元素定位效率，提升测试脚本的健壮性有很大帮助，希望本文能够帮到大家。更多Python基础语法趣味学习视频，请点击！
【软件测试】selenium元素定位方式大全！_selenium findelement()用法(3)
asdakdnfh的博客
05-10 774
现在我也找了很多测试的朋友，做了一个分享技术的交流群，共享了很多我们收集的技术文档和视频教程。可以加入我们一起交流。而且还有很多在自动化，性能，安全，测试开发等等方面有一定建树的技术大牛。如果你不想再体验自学时找不到资源，没人解答问题，坚持几天便放弃的感受。qq群号：691998057【暗号：csdn999】分享他们的经验，还会分享很多直播讲座和技术沙龙。
【学习笔记】Selenium WebDriver的基本运用（二）
软件测试相关知识点记录与分享
04-06 4207
查找页面元素 前置条件：①Firefox浏览器 ②例子里的网页为https://www.baidu.com 1.按id属性查找 一般作为查找元素的首选属性 注意特殊情况-动态id from selenium import webdriver # 从selenium库导入网络驱动包 from time import sleep # 从time库导入sleep from selenium.webdriver.common.by import By # 用于对象的定位 bro...
Python---selenium 使用及定位
weixin_57999977的博客
03-14 2424
selenium 使用摘录 Stable Diffusion 页面抓取
Python爬虫之selenium登录
01-16
### 使用 Selenium 实现 Python 爬虫自动登录 为了实现使用 Selenium 进行 Python 爬虫自动登录的功能，可以按照如下方法编写代码： #### 导入必要的模块并初始化 WebDriver 首先需要导入 `webdriver` 模块来控制...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值