java获取页面源代码

最新推荐文章于 2025-05-23 15:47:24 发布

wooden_people

最新推荐文章于 2025-05-23 15:47:24 发布

阅读量766

点赞数 1

本文档提供了一个使用Java实现的简单示例，展示如何从豆瓣电影网站抓取特定电影的数据。通过创建URL对象并设置请求属性，利用HttpURLConnection进行网络连接，再通过InputStreamReader和BufferedReader读取网页内容，最后将读取到的每一行数据打印出来。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

public void getData(){
   String urlStr = "https://movie.douban.com/subject/3718279/"; // 网址
    try { //创建一个url对象来指向要采集信息的网址
        URL url = new URL(urlStr); //将读取到的字节转化为字符
        HttpURLConnection connection = (HttpURLConnection) url.openConnection();
        connection.setRequestProperty("User-Agent", "Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)");
        InputStream a = url.openStream();
        InputStreamReader inStrRead = new InputStreamReader(a, "utf-8"); //读取InputStreamReader转化成的字符
        BufferedReader bufRead = new BufferedReader(inStrRead); //读到的内容不为空
        String line;
        while ((line = bufRead.readLine()) != null) {
        System.out.println(line);
        }
        bufRead.close();
    } catch (IOException e) {
        e.printStackTrace();
    }
}