java爬虫之爬百度贴吧

最新推荐文章于 2021-03-20 20:42:25 发布

zhi8zhi1zhi

最新推荐文章于 2021-03-20 20:42:25 发布

阅读量3k

点赞数

分类专栏：爬虫文章标签： java 爬虫百度 java爬虫

本文链接：https://blog.youkuaiyun.com/zhi8zhi1zhi/article/details/50231879

版权

本文介绍了一个使用Java和jsoup爬取百度贴吧的简单实验。通过设置URL，利用jsoup选择器抓取帖子标题、用户名和楼层信息。目前爬虫限制为爬取每个吧的前50个帖子。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

java要期末考试了，老师竟然说不考试卷，要我们写程序来打分......我没有一点点防备...
言归正传，我准备写一个百度贴吧爬虫给他，为了方便，使用jsoup来进行解析爬取。
用我们学校贴吧进行试验（桂林理工大学吧），这个只是个简单的试验品，不喜勿喷。
使用jsoup来进行解析爬取。
 
 
  Document doc = Jsoup.connect("http://tieba.baidu.com/f?ie=utf-8&kw=%E9%83%91%E7%A7%80%E5%A6%8D")//桂工吧网址    
    .userAgent(                          "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.15)")  
   .timeout(