爬虫
关注
分享
扫一扫
qq_36522728
这个作者很懒，什么都没留下…
展开
-
使用selenium做一个小说下载器爬虫
执行的时候是这样的。执行前需安装chrome driver。放置在chrome安装目录，并把安装目录添加到path环境变量中。下载地址：https://sites.google.com/a/chromium.org/chromedriver/downloads代码：#coding=utf-8from selenium import webdrive原创 2017-01-15 10:16:48 · 656 阅读 · 0 评论 -
关于PhantomJs打开某些网站时返回空的问题
前几天使用PhantomJs爬w3cschool的题目时发现网页爬下来为空，且current_url是about:blank最后发现该问题是由PhantomJs版本导致的，当时装的版本是1.9.7，后面重装版本2.1.1之后该问题不存在。不知道具体原因。原创 2017-07-14 10:28:53 · 1728 阅读 · 0 评论 -
Phantomjs selenium python爬虫alert confirm 弹窗处理方法
由于phantomjs不支持弹窗，所以无法使用driver.switch_to_alert().accept()方法。正确做法是使用js代码执行捕获到弹窗事件，直接进行处理代码如下：driver.execute_script("window.confirm = function(msg) { return true; }")原创 2017-07-14 10:23:01 · 2898 阅读 · 2 评论