python爬虫之selenium的安装使用

本文介绍了爬虫利器Selenium，它可爬取requests库无法获取的内容，能使爬虫过程拟人化。以Chrome浏览器为例，说明了Selenium的安装方法，包括安装Selenium模块、下载同版本ChromeDriver并复制到Python目录，还提及后续会在代码中介绍其函数和用法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

selenium是爬虫几大利器之一，他可以用来爬取一些使用requests库爬取不了的东西，它是打开一个浏览器，并且操作这个浏览器，使其爬虫过程拟人化，下面来介绍selenium的安装方法，这里以chrom浏览器为例子
1、安装selenium模块，在控制台输入pip install selenium
2、确保电脑安装了chrom，并且下载同版本的chromdrive.exe,并复制到python的目录里
在这里插入图片描述
3、接下来就可以去试试selenium模块了，在代码里介绍相应的函数和用法

from selenium import webdriver
#导入selen包
brwser = webdriver.Chrome()
#加载和打开chrom浏览器
brwser.get('http://www.baidu.com')
#打开百度网页
inputs = brwser.find_element_by_css_selector('#kw')
#获取百度首页输入框
#此处用的为css选择器，除此之外还有
#brwser.find_element_by_class_name() class选择器
# brwser.find_element_by_id()   id选择器
#还有其他一些选择器，都类似于JavaScript的选择器
inputs.click()
#点击输入框
inputs.send_keys('python的selenium')
#向输入框中输入python的selenium
print(brwser.page_source)
#brwser.page_source可以获取网页源码
brwser.execute_script('window.open()')
#使用JavaScript代码，相当于在控制台输入window.open()
brwser.switch_to_window(brwser.window_handles[0])
#切换到第一个窗口
#brwser.window_handles[0]是获取浏览器当前窗口，返回为列表

在这里插入图片描述