StaleElementReferenceException find_element in a for loop python

最新推荐文章于 2025-02-07 16:06:15 发布
原创 最新推荐文章于 2025-02-07 16:06:15 发布 · 312 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文探讨了在循环中如何有效清除字符串，并重新开始元素查找功能。通过掌握这些技巧，可以提升代码效率，确保程序运行流畅。

just clear the string you find in the loop before, then start the find_element function in a new loop

Selenium报错：StaleElementReferenceException异常
风口IT猪的成长录
07-22 1007
StaleElementReferenceException问题报错解决方法 问题报错 # 点击下一页 web.find_element_by_xpath('//*[@id="nexthehe"]').click() The element is no longer attached to the DOM：元素不再附加到DOM上 解决方法 元素不再附加到DOM上 分析原因 有可能是引导了不再附加到DOM树的元素（比如，document.documentElement） 也可是是页面内容没有加载出来，
StaleElementReferenceException 不再是问题：Google Colab 上的 Selenium 技巧
ip16yun的博客
07-01 590
在现代网页数据抓取领域，Selenium 是一款强大的工具，它使得自动化浏览和数据提取变得异常简单。然而，当面对动态页面时，许多爬虫开发者常常会遇到一个令人头疼的问题——。这一异常的出现，往往会让我们的爬虫任务陷入停滞。今天，我们将在 Google Colab 环境中，结合代理 IP 技术，深入探讨如何有效解决这一问题，并以澎湃新闻的热点新闻页面为示例，进行实际操作。
【python自动化报错】StaleElementReferenceException
m0_66501929的博客
02-07 325
这两天在尝试自己编写增删改查的自动化测试脚本，发现执行到查看的时候会报错：StaleElementReferenceException，查了一下说可能是因为页面刷新导致历史定位失效，需要重新定位元素才能进行操作。解决的方法大概就是三种，第一就是增加显式等待；第二就是使用try-except捕获异常并重试；第三种方式就是 使用 JavaScript 点击元素。
Stale Element Reference Exception
Action
01-19 673
WebElement result = new WebDriverWait(driver, 10).until( ExpectedConditions.presenceOfElementLocated( By.xpath("//*[@id='content']/tr/td[1]") )
【selenium】 异常 StaleElementReferenceException
欢迎来到无尾君的小窝
08-16 8769
StaleElementReferenceException 页面元素未刷新出来，就对元素进行捕获，因此引发该异常。 // 此时，如果文本元素未加载，则会引发异常。 driver.findElement(By.cssSelector(parmeter1)).getText(); 解决：多等会儿。 // 1、检测元素是否存在 public static boolean elementExi...
Use the method find_all() to find all hyperlinks in soup, remembering that hyperlinks are defined by the HTML tag <a> but passed to find_all() without angle brackets; store the result in the variable a_tags. The variable a_tags is a results set: your job now is to enumerate over it, using a for loop and to print the actual URLs of the hyperlinks; to do this, for every element link in a_tags, you want to print() link.get('href').
07-08
To find all hyperlinks in the soup using ... We then use a for loop to iterate over each element in `a_tags`. Within the loop, we use `link.get('href')` to retrieve and print the URL of each hyperlink.
没有爬取到数据，请重新改这个代码，根据上面说的报错信息from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.common.exceptions import WebDriverException from selenium.webdriver.support import expected_conditions as EC from selenium.webdriver.edge.service import Service from openpyxl import Workbook, load_workbook import time # 初始化Edge webdriver s = Service(r"C:\Program Files\Python312\edgedriver_win64\msedgedriver.exe") driver = webdriver.Edge(service=s) driver.get('https://esgratings.ccxgf.com/#/home') # 尝试加载或创建工作簿 file_path = "ESG_Ratings.xlsx" try: wb = load_workbook(file_path) ws = wb.active except FileNotFoundError: wb = Workbook() ws = wb.active ws.append(['股票代码', 'ESG评级']) # 添加标题行 # 股票代码范围 stock_codes = [ "000528.SZ", "000529.SZ", "000530.SZ", "000531.SZ", "000532.SZ", "000533.SZ", "000534.SZ", "000536.SZ", "000537.SZ", "000538.SZ", "000539.SZ", "000541.SZ", "000543.SZ", "000544.SZ", "000545.SZ", "000546.SZ", "000547.SZ", "000548.SZ", "000550.SZ", "000551.SZ", "000552.SZ", "000553.SZ", "000554.SZ", "000555.SZ", "000557.SZ", "000558.SZ", "000559.SZ", "000560.SZ" ] try: for code in stock_codes: try: # 查找输入框并输入股票代码 input_element = driver.find_element(By.CSS_SELECTOR, '.ant-input.ant-input-borderless') input_element.clear() input_element.send_keys(code) # 显式等待下拉列表可点击 wait = WebDriverWait(driver, 10) try: result_element = wait.until(EC.element_to_be_clickable((By.CSS_SELECTOR, '.style-module__inputListItem-2k4TW'))) result_element.click() except WebDriverException as inner_e: # 如果发生了任何WebDriver异常，重新查找并点击元素 print(f"Encountered an error: {str(inner_e)}, retrying...") result_element = wait.until(EC.element_to_be_clickable((By.CSS_SELECTOR, '.style-module__inputListItem-2k4TW'))) result_element.click() # 显式等待页面加载完毕 wait.until(EC.presence_of_element_located((By.CSS_SELECTOR, '.style-module__resultConRight2-16WxH'))) # 获取并解析ESG评级信息 rating_element = driver.find_element(By.CSS_SELECTOR, '.style-module__resultConRight2-16WxH') rating = rating_element.text.strip() ws.append([code, rating]) # 清除输入框内容 close_icon = driver.find_element(By.CSS_SELECTOR, '.style-module__inputClose-B3kTl') close_icon.click() time.sleep(1) # 等待清除动作完成 except Exception as e: print(f"An error occurred while processing stock code {code}: {str(e)}") except Exception as e: print(f"An error occurred outside the stock code loop: {str(e)}") finally: # 无论是否出现异常，都保存Excel文件并退出浏览器 wb.save("ESG_Ratings.xlsx") driver.quit()
最新发布
09-24
for code in stock_codes: try: # 查找输入框并输入股票代码 input_element = WebDriverWait(driver, 10).until( EC.presence_of_element_located((By.CSS_SELECTOR, '.ant-input.ant-input-borderless')) ) ...
i = 1 while i < 450: tbody = web.find_element(By.CLASS_NAME, "ng-star-inserted") # 获取所有行 rows = tbody.find_elements(By.TAG_NAME, "tr") data = [] # 提取数据 for row in rows: cells = row.find_elements(By.TAG_NAME, "td") row_data = [cell.text for cell in cells] data.append(row_data) # 写入 CSV 文件 with open("table_data.csv", mode="a+", newline="", encoding="utf-8") as f: writer = csv.writer(f) writer.writerows(data) # 定位包裹 SVG 的 <a> 标签并点击 web.find_element(By.XPATH, '/html/body/app-root/layout-default/section/div/app-mechanism/div/div[3]/nz-table/nz-spin/div/nz-pagination/ul/li[12]/a').click() time.sleep(5) print(i) i += 1为什么这个语句一直执行但是循环之间的语句没有执行
08-23
web.find_element(By.XPATH, '//a[@aria-label="Next Page"]').click() time.sleep(2) print(i) i += 1 except Exception as e: print(f"Error occurred: {e}") break ``` 在此例中，通过 `try...except` ...
Selenium异常StaleElementReferenceException
XerCis的博客
12-12 2319
问题描述 获取页面1的一批超链接，循环跳转进超链接后，再跳转回来容易引发StaleElementReferenceException异常 selenium.common.exceptions.StaleElementReferenceException: Message: stale element reference: element is not attached to the page do...
selenium之StaleElementReferenceException
仁化居之安
05-16 725
StaleElementReferenceException: Message: The element reference of is stale; either the element is no longer attached to the DOM, it is not in the current frame context, or the document has been refreshed 元素引用已经失效;要么元素不再附加到DOM中，要么不在当前框架上下文中，要么文档已经刷新 原因：机子太
web自动化异常，selenium.common.exceptions.StaleElementReferenceException（陈旧的元素引用异常）
weixin_42242910的博客
12-28 1516
解决后的代码（将元素定位封装在一个函数中，并return该元素，想用该元素时，直接调用该函数即可；这样的话元素赋值与操作元素之间就不会产生界面刷新了）获取元素赋值给变量，再通过变量操作元素，两个步骤之间，若产生了界面刷新。也就是说，若在获取元素赋值给变量，与通过变量操作元素之间发生了页面刷新。注意：有问题的代码和修复后的代码可在资源绑定中自行下载，如有问题可在评论区留言。则在界面刷新后，元素操作前，重新获取元素赋值给变量。则会在通过变量操作元素的时候，抛出此异常。每次操作元素前，实时获取元素赋值给变量。
selenium+python之异常StaleElementReferenceException
热门推荐
zby_hlx的博客
03-14 2万+
在做自动化测试的时候，遇到此问题多次：StaleElementReferenceException: Message: stale element reference: element is not attached to the page document 脚本先进行查询，然后获取查询结果        driver.find_element_by_id("searchname").send_k...
org.openqa.selenium.StaleElementReferenceException: stale elementreference: element is not attached
javaloverkehui的专栏
01-20 9236
场景：用 Selenium 渲染页面后，有一个 Div 是通过 Ajax 渲染出来的，然后碰到了这个异常。 StackOverflow 上的答案，看了一部分，基本都是在说如果第一次拿不到，报了这个异常，则在 catch exception 的时候，再执行一次。 这样做大部分情况可能没问题，但是逻辑始终是有问题的。比如说就算执行两次，但是这两次执行的时间很快，而想要获取的元素此时仍然没有渲染出来怎么办？理论上这个概率挺大的。之所以很多人附议这个答案，我理解还是因为对爬虫的结果精度不那么高，所以有时候拿不
Selenium中遇到 StaleElementReferenceException 异常
shixiu_yuan的博客
04-16 755
现在开始，不定期更新所学所知。以便更好的检阅自己的成长。 在自动化测试过程中，代码并没有任何错误，可运行过程中多次遇到遇到如下报错: selenium.common.exceptions.ElementNotInteractableException: Message: element not interactable 目前我只用第三种解决方法如下: 方法一： 使用time.sleep()可降低发生此异常的概率，但是并非百分百有效，并且浪费时间。 方法二： 使用driver.fresh()刷新页面后再重新定
StaleElementReferenceException问题及解决
m0_60562759的博客
08-07 650
StaleElementReferenceException
python+selenium StaleElementReferenceException-- selenium烦人错误之二
qq_36415969的博客
07-10 2493
StaleElementReferenceException，成功解决！！
关于selenium模块出现异常：selenium.common.exceptions.StaleElementReferenceException: 的解决方案
紫夜的博客
12-22 4428
从selenium.common里导入exception模块，然后将代码放入try...except...结构，其中except结构体里面放页面刷新的代码
selenium关于selenium.common.exceptions.StaleElementReferenceException异常处理
lw的博客
04-18 3327
异常在使用Selenium时出现，意味着尝试与一个页面元素进行交互，但这个元素已经不再是当前页面的一部分了。在这个示例中，使用了WebDriverWait和expected_conditions来确保在交互之前元素是存在并且可交互的。可以通过执行一个简单的JavaScript脚本来刷新页面，或者使用WebDriver的refresh()方法。使用显式等待（Explicit Wait），在尝试交互之前确保元素是可交互的。如果在循环中操作元素，确保循环的每次迭代都使用最新的元素引用。
就是这么简单，Selenium StaleElementReferenceException 异常分析与解决
霍格沃兹测试学院的博客
03-25 1257
Selenium 是一个流行的自动化测试工具，用于模拟用户与网页交互。然而，当我们在使用 Selenium 时，可能会遇到一个常见的异常，即。这个异常通常在我们尝试与网页上的元素交互时抛出，可能会导致我们的自动化测试脚本运行失败。本文将深入探讨异常的原因以及如何解决它。是 Selenium 中的一个异常类，用于表示当尝试与一个元素交互时，该元素已经不再附加到 DOM（文档对象模型）中的情况。简而言之，该元素已经变得“陈旧”（stale），无法再直接访问。当页面上的元素在我们访问它之前已经被修改或重新加载。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值