selenium和bs4的联合使用

Selenium可以模拟浏览器点击或登录网站的行为。但在获取网站文本上并不方便。可以尝试使用Selenium+bs4获取文本信息。

1. 导入相关库

from selenium import webdriver
import time
from bs4 import BeautifulSoup

2. 打开网页

url = "https://www.xxx.com"
driver.get(url)
driver = webdriver.Chrome()

3. 模拟浏览器活动

点击