使用requests和xpath爬取猫眼TOP100电影
技术路线:requests-xpath
- 使用 requests 获取网页内容
使用 try...except 获取网页内容
- 使用 xpath 解析网页
对主要信息使用 xpath 进行提取
- 翻页及反爬处理
猫眼的翻页处理是 url 处进行翻页的
http://maoyan.com/board/4?offset=0
http://maoyan.com/board/4?of...
原创
2018-04-10 22:20:47 ·
2749 阅读 ·
1 评论