学道

前端工程师面试题 *{padding:0;margin:0;} a{outline:none;text-decoration:none;} body{font: 14px/1.5 arial} .w960{width:560px;margin:0 auto;} .hd{background: #059ed3;color:#fff;} .hd,.ft{padd

最近一直在考虑怎样让目前的爬虫更高效，出错率更低。主要的问题就是要兼容url和JS这两种操作方式，所以想了一些关于JS在爬虫方面的应用。 首先，看看这个NEOCrawler比较完善的爬虫开源项目，虽然是用JS写的，但项目的架构很完整，很有参考价值。其中提到了phantomjs可以无需图形界面环境的网页浏览器实现，利用它可以抓取需要js执行才产生内容的网页。通过js语句执行页面上的用户动作，实现表