java爬虫(Jsoup)爬取某新闻站点标题

本文介绍如何利用Java库Jsoup抓取指定网站的文章标题,并提供了完整的代码示例。通过连接到目标网址并解析HTML文档,能够有效地提取出所需的信息。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

需要一个包:jsoup-1.7.3.jar
有一定的java和js基础的人,一看就懂了!
一个不错的Jsoup中文文档下载地址http://download.youkuaiyun.com/detail/apache2011/4517327


import java.io.IOException;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

public class JsoupTest {

    /**
     * @param args
     * @throws Exception 
     */
    public static void main(String[] args) throws Exception {
        getWuMaoW();
    }


    //获取5毛网上的文章标题
    public static void getWuMaoW(){
        String url = "http://www.wumaow.com";
        Document doc = null;
        try {
            doc = Jsoup.connect(url).get();
            Elements listDiv = doc.getElementsByAttributeValue("class", "post");
            for(Element element : listDiv){
                Elements texts = element.getElementsByTag("h4");
                for(Element text:texts){
                    String ptext = text.text();
                    System.out.println("标题:"+ptext);
                }
            }
        } catch (IOException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
    }
}

2016-6-8 下午5点,五毛网的第一页新闻的标题如下:
这里写图片描述


下一遍 抓评论
地址:http://blog.youkuaiyun.com/disiwei1012/article/details/51678977

评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值