用Java代码抓取“天津环境空气质量数据”

最新推荐文章于 2023-04-02 13:29:56 发布

原创

最新推荐文章于 2023-04-02 13:29:56 发布 · 2.5k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#java #http #页面抓取

本文介绍如何利用Java代码，通过分析HTTP请求，模拟POST包来从http://air.tjemc.org.cn/handler/siteInformation.ashx获取天津环境空气质量数据，并展示抓取到的数据内容。

首先，天津市环境空气质量GIS发布平台的Domain name为：http://air.tjemc.org.cn/

然后，用HTTP Analyzer针对打开上述网址的过程进行HTTP包分析，确定 http://air.tjemc.org.cn/handler/siteInformation.ashx 为请求获取空气质量数据的POST包。

最后，使用如下的Java代码模拟上述POST包，并抓取和显示返回的内容。

package edu.yuanlu.aqi;

import java.io.*;
import java.net.*;

public class CaptureWeb {
	
	/**
	 * 
	 * 
	 */
	public String captureTianjinAQI() throws Exception {

		String url = "http://air.tjemc.org.cn/handler/siteInformation.ashx";
		HttpURLConnection httpConn = (H