DRNB666的博客

因为个人需要爬取某个吧内的所有帖子并保存下来，但是无奈不会写python，于是就想到了利用java的jsoup去做爬虫，尝试了多次后终于获取成功，主要遇到的问题还是百度的反爬机制，解决了后，整理一篇文章，以便日后查阅。通过Jsoup爬取百度贴吧数据提取吧内所有帖子数据，并输出为.txt或者md文件导入依赖 <!-- jsoup解析HTML --> <dependency> <groupId>org.jsoup<

RDB：一次数据快照，相当于把当前的数据保存到硬盘中，分为save和bgsave，