wqh_jingsong的专栏

一、基本简介（1）一个基于webkit内核的无头浏览器，即没有UI界面，即它就是一个浏览器，只是其内的点击、翻页等人为相关操作需要程序设计实现。 （2）提供JavaScript API接口，即通过编写js程序可以直接与webkit内核交互，在此之上可以结合Java语言等，通过java调用js等相关操作，从而解决了以前c/c++才能比较好的基于webkit开发优质采集器的限制。 （3）提供windo

Scrapy爬取图片 raise ValueError('Missing scheme in request url: %s' % self._url)

scrapy爬取的数据存入mysql，mongoDB

Python爬取ajax动态加载图集

淘宝的页面很复杂，如果使用分析ajax或者js的方式，很麻烦 用Python+Selenium方式抓取