http://www.shenjianshou.cn/blog/?p=302今天我们要聊点什么呢，之前说要聊去哪儿的，不过暂且咱们再放一放，先聊一聊去哪儿的干爹携程吧，上次我记得看了携程工程师霸气回应说懂爬虫的来去哪儿，懂反爬的来携程。我觉得特别棒，这种开放的心态和自信，正是一个开放的互联网环境所需要的。所以今天这节课虽然咱们以携程为例，但是我们还是以学习的目的

定向爬虫基本原理定向爬虫就是指定某一些网站的数据源做为数据来源，进行页面数据的抓取，这里有别于传统的搜索引擎爬虫，传统的搜索引擎爬虫主要是针对整个互联网的数据进行爬取以及数据分析，难度更大，不论是从抓取的调度，还是性能要求，又或者是数据的存储都有很大的区别。定向爬虫只有单个或者少量的网站做为数据源头，抓取整个网站有用的数据以及图片等信息，本文主要介绍利用Java开源库用于处理http请求以