使用Jsoup工具解析页面数据

原创

已于 2023-06-19 16:02:25 修改 · 477 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#java

于 2023-06-19 16:00:08 首次发布

本文介绍了如何利用F12浏览器控制台找到需要爬取的数据，并通过添加Jsoup依赖来解析网页。示例代码展示了如何抓取京东搜索页面的商品信息，包括图片、价格、店铺和商品名称。

前提是需要联网

F12打开浏览器控制台，通过元素找到需要爬取的数据

1、添加网页解析依赖

<!--解析网页依赖-->
<dependency>
   <groupId>org.jsoup</groupId>
   <artifactId>jsoup</artifactId>
   <version>1.10.2</version>
</dependency>

2、编写工具类

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import java.io.IOException;
import java.net.URL;

public class HtmlParseUtil {


    public static void main(String[] args) throws IOException {
        search("java");
    }

    public static void search(String na