使用jsoup去解析历史在今天的html内容

最新推荐文章于 2021-06-05 10:04:27 发布

iteye_4442

最新推荐文章于 2021-06-05 10:04:27 发布

阅读量108

点赞数

分类专栏： Jsoup 文章标签： jsoup

Jsoup 专栏收录该内容

14 篇文章

订阅专栏

本文介绍如何利用Java库Jsoup实现对指定网站的数据抓取。通过两个示例展示了不同方式获取页面内容的方法，包括连接网站并解析文档，以及通过抓取特定类别的元素来提取所需信息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

package com.test;

import java.net.URL;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

/**
*@Author:liangjilong
*@Date:2014-2-27
*@Version:1.0
*@Description:
*/
public class Test1 {

	public static void main(String[] args) throws Exception{
		
		String url="http://www.todayonhistory.com/";
		
		URL _url=new URL(url);
		Document doc=Jsoup.parse(_url, 3000);
		//从class=gong样式下面抓取
		Elements lists = doc.getElementsByAttributeValue("class", "gong");
		 
		for(Element e:lists){
			System.out.println(e.select("em").html()+e.select("i").html());
		}
	}
}

package com.test;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;
/**
*@Author:liangjilong
*@Date:2014-2-27
*@Version:1.0
*@Description:
*/
public class Test {

	/**
	 * @param args
	 */
	public static void main(String[] args) throws Exception {

		String url = "http://www.rijiben.com/";

		Document doc = Jsoup.connect(url).get();
		if (doc != null) {
			// 取出div的class="listren"的所有内容
			Elements listrens = doc.getElementsByAttributeValue("class", "listren");
			for (Element listren : listrens) {
				String text = listren.select("li").select("a").html();
				System.out.println(text);
			}
		} else {
			System.err.println("网络出异常！");
		}
	}
}