
scrapy
jingsongs
这个作者很懒,什么都没留下…
展开
-
phantomjs笔记
一、基本简介(1)一个基于webkit内核的无头浏览器,即没有UI界面,即它就是一个浏览器,只是其内的点击、翻页等人为相关操作需要程序设计实现。 (2)提供JavaScript API接口,即通过编写js程序可以直接与webkit内核交互,在此之上可以结合Java语言等,通过java调用js等相关操作,从而解决了以前c/c++才能比较好的基于webkit开发优质采集器的限制。 (3)提供windo转载 2017-02-28 21:59:25 · 341 阅读 · 0 评论 -
Scrapy爬取图片: raise ValueError('Missing scheme in request url: %s' % self._url)
Scrapy爬取图片 raise ValueError('Missing scheme in request url: %s' % self._url)原创 2017-02-13 13:42:27 · 6293 阅读 · 1 评论 -
Scrapy中的Rules理解
Scrapy CrawlSpider Rules转载 2017-02-25 15:06:20 · 27180 阅读 · 7 评论