爬虫
文章平均质量分 75
DedicationYu
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
【爬虫】在 xpath路径中插入变量的正确姿势
举例说明"""说明:要在列表a中分别插入三个内容,且这三个内容只有tbody[1]中的数字不同,分别为1, 2, 3"""//源代码a = []a.insert(0, dom.xpath("//div[@class='listWraper']/table[2]/tbody[1]/tr[1]/td[1]/p[1]/text()"))a.insert(1, dom.xpath("//div[@class='listWraper']/table[2]/tbody[2]/tr[1]/td[1]/p[1]/原创 2020-08-02 20:59:37 · 6527 阅读 · 0 评论 -
【爬虫】查看代理IP是否有效
代码格式如下:# 查询代理ip是否有效import telnetlibprint('------------------------connect---------------------------')# 连接Telnet服务器try: tn = telnetlib.Telnet('211.147.226.4',port='8118',timeout=20)except: print('该代理IP 无效')else: print('该代理IP 有效') p.原创 2020-07-26 22:02:27 · 6247 阅读 · 1 评论 -
【爬虫】selenium+chromedrive 添加代理
代码格式如下:from selenium import webdriverchromeOptions = webdriver.ChromeOptions()# 设置代理chromeOptions.add_argument("--proxy-server=http://222.73.144.63:80")# 一定要注意,=两边不能有空格,不能是这样--proxy-server = http://222.73.144.63:80browser = webdriver.Chrome(chrome.原创 2020-07-26 22:00:29 · 6423 阅读 · 0 评论
分享