XPATH错误方法未知：contains(@” 的解决办法

最新推荐文章于 2025-02-14 16:01:21 发布
最新推荐文章于 2025-02-14 16:01:21 发布
阅读量7.2k 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： string 存储
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/zk_2000/article/details/4682837
本文介绍了如何使用XPath进行精确和模糊查询，包括属性值的查询方法。提供了详细的查询字符串示例，帮助读者快速掌握XPath的使用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

创建xmlDom后加上“xmlDom.setProperty('SelectionLanguage','XPath');
xPath查询如：等值查询：String xPath = "users/user[username='huo' and password='123']";模糊查询：String xPath = "users/user[contains(username,'huo') and contains(password,'123')]";
 ---------------------------------------------------------------------------------------------------------- 
XML第二种存储方式 .xml xPath查询如：加"@" 用以查询属性值等值查询：String xPath = "users/user[@username='huo' and @password='123']";模糊查询：String xPath = "users/user[contains(@username,'huo') and contains(@password,'123')]";
xpath的contains使用方法
Lemon_rio的博客
11-28 2555
xpath的contains使用方法。
解析库的基本使用（BeautifulSoup、Xpath(重点)、PyQuery）
二八定律法则
07-10 602
解析库的基本使用
xpath contains_XPath
weixin_39764487的博客
11-24 426
1、什么是XPah1.解析XML的一种语言（html其实是XML的子级），广泛用于解析html数据2.几乎所有语言都能用XPath3.除了XPath还有其他手段用于XML解析，比如：BeautifulSoup、lxml、DOM等等2、XPath语法XPath语法归纳起来就是三大类：层级：/ 直接子级 、 // 跳级属性：@ 属性访问函数：contains() 、 text() 等3、使用XPath...
xpath的contains的用法
weixin_33788244的博客
01-03 962
为什么80%的码农都做不了架构师？>>> ...
xpath使用contains文本定位不到元素的原因及解决方法
qq_35999017的博客
12-13 3630
在某些情况下，开发可能有如下的写法 <span>"中国"<i class="country">(chinese)</i></span> <span>"日本"<i class="country">(chinese)</i></span> <span>"印度"<i class="count...
xpath的contains用法
热门推荐
qq_35810838的博客
02-22 5万+
xpath('//div[contains(@class,"a") and contains(@class,"b")]') #它会取class含有有a和b的元素 xpath('//div[contains(@class,"a") or contains(@class,"b")]') #它会取class 含有 a 或者 b满足时，或者同时满足时的元素   starts-with 顾名思义，匹配一...
Python爬虫笔记——xpath的contains用法
Fo*(Bi)的博客
07-13 5606
xpath(’//div[contains(@class,“a”) and contains(@class,“b”)]’) #它会取class含有有a和b的元素 xpath(’//div[contains(@class,“a”) or contains(@class,“b”)]’) #它会取class 含有 a 或者 b满足时，或者同时满足时的元素 starts-with 顾名思义，匹配一个属性开始位置的关键字 contains 匹配一个属性值中包含的字符串 text（） 匹配的是显示文本信息， 此处也可以
import requests from lxml import etree import csv import time import random import re import os # 固定请求头配置（需替换为实际值） FIXED_USER_AGENT = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/137.0.0.0 Safari/537.36 Edg/137.0.0.0' FIXED_COOKIE = 'll="118161"; bid=l5ki4SOlbBM; dbcl2="244638424:dLHXPIU8S0M"; push_noty_num=0; push_doumail_num=0; __utmv=30149280.24463; _pk_id.100001.4cf6=42b01014d5c31947.1748938983.; _vwo_uuid_v2=D9E78C6D9D4E71BBB6EC73B8583864961|9da3be87da4a6d3be6203809b085d4a9; __yadk_uid=2Zr6yzTnllQxMzDhrQB82h7doa8gM4Ku; ck=ILlj; ap_v=0,6.0; frodotk_db="dd9f2f5023b9a95198dd8df06b2cfbf3"; __utma=30149280.1697373246.1748938900.1749979892.1750127075.8; __utmc=30149280; __utmz=30149280.1750127075.8.6.utmcsr=cn.bing.com|utmccn=(referral)|utmcmd=referral|utmcct=/; __utmt=1; __utmb=30149280.2.10.1750127075; __utma=223695111.238348316.1748938983.1749979902.1750127082.8; __utmb=223695111.0.10.1750127082; __utmc=223695111; __utmz=223695111.1750127082.8.7.utmcsr=douban.com|utmccn=(referral)|utmcmd=referral|utmcct=/; _pk_ref.100001.4cf6=%5B%22%22%2C%22%22%2C1750127082%2C%22https%3A%2F%2Fwww.douban.com%2F%22%5D; _pk_ses.100001.4cf6=1' # 需从浏览器获取 # 基础URL和请求头 base_url = "https://movie.douban.com/subject/27181010/reviews" headers = { 'User-Agent': FIXED_USER_AGENT, 'Cookie': FIXED_COOKIE, 'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7', 'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6', 'Connection': 'keep-alive', 'Upgrade-Insecure-Requests': '1', 'Referer': 'https://movie.douban.com/subject/27181010/', 'Sec-Fetch-Dest': 'document', 'Sec-Fetch-Mode': 'navigate', 'Sec-Fetch-Site': 'same-origin', 'Sec-Fetch-User': '?1', } # 创建输出目录 os.makedirs('douban_data', exist_ok=True) # 创建CSV文件并写入表头 csv_file = open('douban_data/douban_reviews_fixed.csv', 'w', newline='', encoding='utf-8-sig') writer = csv.writer(csv_file) writer.writerow(['昵称', '星级评分', '评论时间', '文本评论', '点赞数', '回应数', '页面位置']) def extract_content(element): """提取评论内容，处理展开情况""" # 尝试提取短评内容 short_content = element.xpath('.//div[contains(@class, "short-content")]/text()') if short_content: return ''.join(short_content).strip() # 尝试提取完整评论内容 full_content = element.xpath('.//div[@class="review-content clearfix"]/text()') if full_content: return ''.join(full_content).strip() # 尝试提取折叠内容 folded_content = element.xpath('.//div[@class="folded"]/text()') if folded_content: return ''.join(folded_content).strip() return "无内容" # 爬取多页数据 for page in range(0, 125): # 构造URL参数 params = { 'start': page * 20, 'sort': 'new_score', 'status': 'P' } try: print(f"开始爬取第 {page+1} 页...") # 发送请求（禁止重定向以检测验证） response = requests.get( url=base_url, params=params, headers=headers, timeout=15, allow_redirects=False # 禁止重定向以检测验证 ) # 检查重定向状态码（302表示需要验证） if response.status_code == 302: location = response.headers.get('Location', '未知位置') print(f"⚠️ 第 {page+1} 页触发验证，重定向至: {location}") # 保存重定向页面供分析 with open(f'douban_data/redirect_page_{page}.html', 'w', encoding='utf-8') as f: f.write(response.text) continue response.encoding = 'utf-8' if response.status_code == 200: # 解析HTML html = etree.HTML(response.text) # 检查是否有验证码提示 captcha = html.xpath('//input[@name="captcha-id"]') if captcha: print(f"⚠️ 第 {page+1} 页需要验证码，跳过") # 保存验证码页面供分析 with open(f'douban_data/captcha_page_{page}.html', 'w', encoding='utf-8') as f: f.write(response.text) continue # 检查页面是否包含评论容器（使用更灵活的选择器） review_container = html.xpath('//div[@class="review-list"]') if not review_container: # 尝试备用选择器 review_container = html.xpath('//div[contains(@id, "content")]//div[contains(@class, "review")]') if not review_container: # 保存异常页面用于分析 with open(f'douban_data/error_page_{page}.html', 'w', encoding='utf-8') as f: f.write(response.text) print(f"❌ 第 {page+1} 页无评论容器，已保存页面供分析") continue # 提取评论项（更新后的选择器） comments = html.xpath('//div[contains(@class, "review-item")]') # 备用选择器：尝试抓取评论项 if not comments: comments = html.xpath('//div[contains(@class, "main") and contains(@class, "review-item")]') if not comments: comments = html.xpath('//div[@class="review-list"]/div[contains(@class, "review")]') if not comments: print(f"❌ 第 {page+1} 页找到0条评论，可能触发反爬") # 检查反爬提示 anti_spider = html.xpath('//div[contains(text(), "检测到异常请求")]') if anti_spider: print("⚠️ 检测到反爬提示，请更换Cookie或IP") # 保存页面供分析 with open(f'douban_data/antispider_page_{page}.html', 'w', encoding='utf-8') as f: f.write(response.text) continue print(f"✅ 第 {page+1} 页找到 {len(comments)} 条评论") for idx, comment in enumerate(comments): try: # 提取昵称 username = comment.xpath('.//a[contains(@class, "name")]/text()') if not username: username = comment.xpath('.//span[@class="author"]/a/text()') username = username[0].strip() if username else "无昵称" # 提取星级评分 rating = comment.xpath('.//span[contains(@class, "rating")]/@title') if not rating: rating = comment.xpath('.//span[contains(@class, "main-title-rating")]/@title') rating = rating[0] if rating else "无评分" # 提取评论时间 comment_time = comment.xpath('.//span[contains(@class, "main-meta")]/text()') if not comment_time: comment_time = comment.xpath('.//span[@class="review-date"]/text()') comment_time = comment_time[0].strip() if comment_time else "无时间" # 提取文本评论 content = extract_content(comment) # 提取点赞数 useful_count = comment.xpath('.//button[contains(@data-count, "useful")]/span/text()') if not useful_count: useful_count = comment.xpath('.//button[contains(@class, "useful")]/span/text()') useful_count = useful_count[0].strip() if useful_count else "0" # 提取回应数 reply_count = comment.xpath('.//a[contains(@class, "replythis")]/text()') if not reply_count: reply_count = comment.xpath('.//span[contains(@class, "reply-count")]/a/text()') reply_count = re.sub(r'\D', '', reply_count[0]) if reply_count else "0" # 写入CSV writer.writerow([ username, rating, comment_time, content, useful_count, reply_count, f"第{page+1}页第{idx+1}条" ]) except Exception as e: print(f"⚠️ 处理评论时出错: {e}") continue else: print(f"❌ 请求失败，状态码: {response.status_code}") except Exception as e: print(f"❌ 请求异常: {e}") # 随机延迟，避免频繁请求 delay = random.uniform(3, 8) print(f"⏳ 等待 {delay:.2f} 秒后继续...") time.sleep(delay) csv_file.close() print("✅ 爬取完成！数据已保存到 douban_data/douban_reviews_fixed.csv")，帮我在此代码基础上修改提取评论时间、点赞数和回应数相应代码，使得能够输出相应内容，并添加负赞数这一数据列
最新发布
06-19
short_content = element.xpath('.//div[contains(@class, "short-content")]/text()') if short_content: return ''.join(short_content).strip() # 尝试提取完整评论内容 full_content = element.xpath('./...
next_page = driver.find_element(By.XPATH,'//button[contains(@class, "vui_button vui_pagenation--btn vui_pagenation--btn-side") and text()="下一页"]') next_page.click() python判断这个元素是否存在，存在就点击
03-09
有时候，class名称可能会变化，或者有其他空格分隔的类名，contains方法在这种情况下可能更可靠。不过，用户已经提供了具体的XPath，所以暂时可以认为这个表达式是正确的。 接下来，我应该将思路转化为具体的代码...
xpath的contains用法干货
Worldsion的博客
03-17 2139
xpath(’//div[contains(@class,“a”) and contains(@class,“b”)]’) #它会取class含有有a和b的元素 xpath(’//div[contains(@class,“a”) or contains(@class,“b”)]’) #它会取class 含有 a 或者 b满足时，或者同时满足时的元素 starts-with 顾名思义，匹配一个属性开...
如何沉淀自动化流程资产，让RPA发挥最大价值？
weixin_47269032的博客
08-11 322
机器人流程自动化（RPA）在企业内越来越流行，对于组织而言，软件机器人可以自动执行繁琐的人工操作、减少人为失误并提高工作效率。Gartner RPA研究调查报告显示，87％的大型组织已经实施或正在实施RPA项目。 然而，组织在寻求通过机器人流程自动化（RPA）提高流程效率和质量时，他们常常难以确定最合适的案例以及确定流程的优先级。这也导致了很多企业难以发现RPA的最大价值机会。 RPA在企业中的应用 首先，我们来看一下RPA在几个主要领域的应用场景。 财务中的RPA应用 财务职能部门中存在的大量数据计算和
XPath定位中and、or、not、contains、starts-with和string(.)用法
机器学习
02-19 3万+
下文总结了XPath常用的text()、and、or、not、contains，当然也还有类似的position、last、ends_with、starts_with等等。 另外，举个例子解释下string(.)的用法： &amp;amp;amp;amp;amp;amp;amp;lt;div id=&amp;amp;amp;amp;amp;amp;quot;test3&amp;amp;amp;amp;amp;amp;quot;&amp;amp;amp;amp;amp;amp;
xpath定位不包含某种属性的元素
kxltsuperr的专栏
09-18 1398
唯一不同的是，一图中的input有一个comps="[object Object],[object Object]"的属性和属性值，二图则没有。我要定位的是二图中的input，并且输入内容。今天定位一个页面中的input文本框，发现竟然有两个几乎一模一样的html代码的input文本框。not(@comps)即代表定位不包含叫做comps属性的元素。还可以用and或者or来指定多个属性值。
xpath获取不到数据
u013021184的博客
01-23 1306
你是否也遇到过，在浏览器中选中了某个元素后，再copy xpath，想在代码中获取到你选中的元素，但是代码中显示结果为空。不要看现在页面内容显示不全，这丝毫不影响我们copy xpath，两次copy xpath的结果如下，一个是原网页的，一个是下载到本地的，可以看到两个xpath有差异。如果有ID选择器，我们最好使用ID选择器，因为具有唯一性，类选择器的话，结果就不好说了。使用xpath插件，能获取到正确的数据，为什么就是到代码中就不行了呢？下载到本地后，我们再使用浏览器打开，获取xpath。
Xpath判断某个属性是否包含或不包含指定的属性或值
caorya的博客
08-19 3万+
结合Xpath路径来提取循环列表中的一个HTML标签的InnerText，提取的时候需要判断是这个标签的class属性是否包含某个指定的属性值，利用Xpath的contains可以解决，代码如下： //选择不包含class属性的节点 var result = node.SelectNodes(".//span[not(@class)]"); //选择不包含class和id属性的节点 var r...
C# HTML解析工具HtmlAgilityPack XPath 模糊查询not()函数和contains()函数
天马3798
10-01 7262
如果想使用Xpath过滤属性中含有或不含有等逻辑判断，需要以下两个函数 Xpath 的not()函数 不含后指定属性等 contains() 属性中含有指定字符串的过滤 实例说明1 //选择不包含class属性的节点 var result = node.SelectNodes(".//span[not(@class)]"); //选择不包含class和id属性的节点 var result
sql xpath 查找包含
weixin_33810302的博客
06-12 269
select xcontent.query('/root//*[contains(text()[1], ''中'')]'), column1 from table
XPATH 找不到 Web 上包含的文本 - 使用 contains(text(),‘包含文本‘)时找不到元素
xing_gy的博客
02-14 333
当contains()作为它的第一个参数（在div[argument]中）给出时，它采用第一个节点的字符串值，但是查询的文本不在第一个。导致 xpath 不起作用。调整contains参数顺序改为：//div[text()[contains(.,‘网页-测试-111’)]] 使用 text() 作为第一个参数，它将获取当前上下文下的所有文本节点，然后contains()用作条件来检查text()将匹配其值包含的任何 text() 节点的值 ‘网页-测试-111’。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值