selenium爬虫

最新推荐文章于 2024-10-11 19:18:38 发布

莫待花无空折枝

最新推荐文章于 2024-10-11 19:18:38 发布

阅读量236

点赞数

分类专栏：大数据文章标签： selenium 爬虫 python

本文链接：https://blog.youkuaiyun.com/yshysh8/article/details/126430744

版权

7 篇文章

订阅专栏

本文介绍了如何配置Selenium自动化测试环境，包括安装chromedriver和升级pip，然后展示了如何使用Python的Selenium库启动Chrome浏览器、访问网页以及进行页面元素的操作，如输入数据、触发事件等。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、环境安装

1）安装chromedriver

将文件放在如/usr/local/bin/特定目录下

2）安装selenium

pip3 install selenium

安装时有可能报错，需要升级pip3到最新版本:pip3 install--upgrade pip

二、selenium使用

1、引入selenium包

from selenium import webdriver
from selenium.webdriver.common import by
from selenium.webdriver.common.keys import Keys

2、加载chrom浏览器

driver='/usr/local/bin/chromedriver'
brows=webdriver.Chrome(executable_path=driver)

3、访问网页

brows.get('https://tool.lu/ip/') #request post方法爬取失败

4、解析

1）下面是详细的元素查找方法
# ID
# Name
# Class Name
# Tag Name
# Link Text
# Partial Link Text
# XPATH

input=brows.find_element(by.By.NAME,"ip")
input.clear()
input.send_keys('101.231.211.66')
input.send_keys(Keys.ENTER)

2、交互方法

input.send_keys('101.231.211.66')#文本框输入数据
input.clear()#文本框清空数据
input.send_keys(Keys.ENTER)#文本框enter事件
submit.click()#按钮点击事件

3、获取控件值

input.text
input.tag_name
input.get_attribute('class')