关于 jsoup解析链接时出现java.nio.charset.IllegalCharsetN...

2019独角兽企业重金招聘Python工程师标准>>>

昨天做一个爬网站的程序使用Jsoup.connect(String url) 时报java.nio.charset.IllegalCharsetNameException:utf-8错误

错误内容是:

java.nio.charset.IllegalCharsetNameException: UTF-8

    at java.nio.charset.Charset.checkName(Charset.java:284)

    at java.nio.charset.Charset.lookup2(Charset.java:458)

    at java.nio.charset.Charset.lookup(Charset.java:437)

    at java.nio.charset.Charset.isSupported(Charset.java:476)

    at org.jsoup.helper.DataUtil.getCharsetFromContentType(DataUtil.java:132)

    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:448)

    at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:393)

    at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:159)

    at org.jsoup.helper.HttpConnection.post(HttpConnection.java:154)

    at domain.Working.main(Working.java:18)

对于这个错误一开始莫名奇妙，一开始以为是SDK编码问题就去改Edit编码 Eclipse默认编码反正各种编码都试了一遍，结果错误一点都没变；后来请教大神，神说：加个请求头进去。于是在请求里添加了个类似这样的玩意 Accept-Language: zh-CN,zh;q=0.8 ，结果还是一样，过程各种复杂下午折腾了近三个小时，结果我去查api  发现这样一个方法

parse(InputStream in, String charsetName, String baseUri)

修改代码

url = new URL(htmlUrl);
HttpURLConnection connection = (HttpURLConnection) url.openConnection();
InputStream is = connection.getInputStream();
doc=Jsoup.parse(is,"utf-8",htmlUrl);
问题解决了- -...

转载于:https://my.oschina.net/u/919032/blog/95631