
爬虫
heybob
这个作者很懒,什么都没留下…
展开
-
ubuntu14.04学习selenium之一:安装
环境:ubuntu14.04, python2.71,安装(好像是这样安装的)$ sudo pip install selenium查看版本>>> import selenium>>> print selenium.__version__3.0.12,测试from selenium import webdriverdriver = webdriv原创 2016-10-25 15:27:51 · 12832 阅读 · 1 评论 -
You are using an unsupported command-line flag --ignore-certificate-errors. Stability and security w
环境:ubuntu14.04,python2.7, selenium3.0.1, Google Chrome 52.0.2743.116(64-bit)在学习selenium时拷贝别人的代码执行报错,原因应该在这一句:driver = webdriver.Chrome()在打开的chrome窗口中显示错误:You are using an unsupported command-line原创 2016-10-25 17:12:28 · 3723 阅读 · 0 评论 -
scrapy学习(1)安装
环境:ubuntu14.04 python2.7资料:http://scrapy-chs.readthedocs.io/zh_CN/latest/intro/install.html#scrapy1,python2.7,pip,setuptools都是已经安装完成2,lxml和OpenSSLsudo apt-get install python-openssls原创 2016-09-29 15:00:12 · 775 阅读 · 0 评论 -
BeautifulSoup 中文乱码
1,参考:https://blog.youkuaiyun.com/sentimental_dog/article/details/52661974ret = requests.get(url, headers=headers)ret.encoding='gb18030'print(ret.text)可以获取正确中文但是之前已经将ret.text使用base64加密保存,重新提取解析不能这样,2,使...原创 2018-09-19 17:12:37 · 4036 阅读 · 0 评论 -
selenium.webdriver使用chrome打开网页,看不到验证码图片
ubuntu14下, selenium.webdriver使用chrome打开网页,看不到验证码图片。难道被识别了?换了firefox可以看到,但是我的firefox版本太新有其他问题,网上说降版本太麻烦了,geckodriver和selenium都要改。不取。换另一台的win下测试,却可以打开,对比了下,chrome都是62.0.3202,但是我的chromedriver是2.33,他的是2...原创 2018-09-19 17:21:09 · 3461 阅读 · 1 评论