u014197417的博客

def parse(self, response): # collect `item_urls` for item_url in item_urls: yield Request(url=item_url, callback=self.parse_item) def parse_item(self, response):

element = wait.until ( EC.visibility_of_element_located((By.CSS_SELECTOR,'.quc-main .quc-field-captcha img')))  #获取验证码browser.save_screenshot('screenshot.png')left = element.location['x']

from selenium import wendriverchrome_options = webdriver.ChromeOptions()prefs = {"profile.managed_default_content_settings.images": 2}chrome_options.add_experimental_option("prefs", prefs)browser

```pythonfrom bs4 import BeautifulSoup```# # 标签选择总结：获取tag时，总是获取第一个，若返回结果只有一个，则直接返回元素，若结果有多个，以迭代器返回，通过enumerate返回，两个标签之间若有换行，则有一个"\n "标签# 标签选择器### 选择元素(只返回第一个匹配标签)```pythonhtml = """

Fiddler的基本介绍　　Fiddler的官方网站:  www.fiddler2.com      Fiddler的官方帮助：http://docs.telerik.com/fiddler/knowledgebase/quickexec　　Fiddler官方网站提供了大量的帮助文档和视频教程， 这是学习Fiddler的最好资料。　　Fiddler是最强大最好用的Web调试工具

Firefox中设置代理ip 　　method_1 from selenium import webdriver profile = webdriver.FirefoxProfile() profile.set_preference(‘network.proxy.type’, 1) profile.set_preference(‘network.proxy.http’, ‘127.0.0.