爬虫之jsoup入门指南

本文介绍如何使用Java库jsoup进行网页数据抓取。通过创建连接、获取状态码确保连接成功,然后解析HTML文档,利用DOM、CSS选择器或jQuery风格的方法提取所需数据。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

jsoup 是一款Java 的HTML解析器,可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API,可通过DOM,CSS以及类似于jQuery的操作方法来取出和操作数据。
当时使用它是为了爬某个数据。
Connection con= Jsoup.connect("url");// 传入一个有效的url地址,创建一个连接对象

// 当然,需要判断此次连接是否成功
int code = 0;
try {
      code = con.excute().statusCode();
}
if (code != HttpStatus.SC_OK){// HttpStatus.SC_OK是HttpClient包中的常量,也可以直接写成200
      return;
}

Document doc = con.get();// 获取到了当前页面的Document对象,这个对象包含了完整的页面信息
Element[] classElememts = doc.getElementsByClass("标签的class名字");
Element[] tagElememts = doc.getElementsByTag("div");
Element element = doc.getElementById("标签的id");
// 每个element对象都有Document对象的方法。由于暂时没有去看源码,所以就没有去了解Element
// 和Document的关系
// jsoup的使用方法,详见官方文档,挺简单的,感觉和写js差不多
// 转载请附上原文链接
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值