C_son的专栏

一、前言        最近的一个项目需要用到爬虫，虽然以前用JAVA也写过爬虫，不过实现的都是一些简易的功能，比如我开发的一个微信公众号（叫“妈妈再也不担心”，大家可以关注下），里面比如的NBA赛事查询功能，热播电影查询等。不过从许多论文里面提及的，以及很多人推荐的，好像python更适合做爬虫，又了解到python里面有个框架叫scrapy，所以最近想研究下这个，去爬取批量的数据。这次我先拿

一、前言        上一篇博文http://blog.youkuaiyun.com/c_son/article/details/43267551对亚马逊商品的爬取，这次在上一篇的基础之上，对爬取到的商品，我们再进行用户评论的爬取。源码见github https://github.com/jerry-sc/AmazonIphone6CommentsSpider.git 二、items.py