jsoup 1.8.3 重构，添加代理请求

Jsoup设置代理访问

最新推荐文章于 2022-08-19 08:32:50 发布

原创最新推荐文章于 2022-08-19 08:32:50 发布 · 3.2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#jsoup #proxy

java 专栏收录该内容

6 篇文章

订阅专栏

本文介绍如何使用Jsoup库通过指定IP地址和端口配置HTTP代理来访问网页。该方法适用于需要绕过直接连接限制的情况。

<span style="font-size:18px;">Connection connection = Jsoup.connect(url).userAgent(userAgent).<strong><span style="color:#ff0000;">proxy(ip,port)</span></strong>.execute();</span>

在connection 可以添加一个proxy(ip,port) ，参数为ip地址和端口，代码如上所示，红包代码。资源jar 请见下面链接。

http://download.youkuaiyun.com/detail/tangshengshan870823/9045537

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

编程答疑

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

Jsoup通过代理访问url地址

n009ww的博客

05-16

3057

package com.***; import org.apache.commons.lang3.StringUtils; import org.jsoup.Connection; import org.jsoup.Jsoup; import java.io.IOException; import java.net.Authenticator; import java.net.InetSoc...

jsoup 1.8.3（能通过代理访问）

08-25

能通过代理请求的jsoup Connection connection = Jsoup.connect(url).userAgent(userAgent).proxy(ip,port).execute()

参与评论您还未登录，请先登录后发表或查看评论

jsoup1.8.1集成代理IP最新版proxy ip

11-18

不知道官方作者为什么不加上代理功能，此版本正好加上了代理IP功能使用方法如:Jsoup.connect(urls).proxy(Proxy.Type.HTTP, "ip地址", 8080)

jsoup-1.8.3.zip

12-08

jsoup-1.8.3.zip，全套jsoup，包括jar包：jsoup-1.8.3.jar；源码：jsoup-1.8.3-sources；文档：jsoup-1.8.3-javadoc。

Jsoup集成代理ip设置功能

03-11

在Jsoup.jar中集成代理ip的设置功能，方便用户使用，例：Jsoup.connect("http://1212.ip138.com/ic.asp").proxy("test.proxy.mayidaili.com", 8123, null).header("Proxy-Authorization", authHeader).get();

jsoup-1.8.3（含源码）

11-26

Jsoup可以从网站URL，文件或字符串中获取或解析HTML，提供完整的方法操作HTML元素，属性和文本（含源码）

jsoup-1.8.3

01-19

**jsoup-1.8.3**: 这个标题指的是jsoup的一个特定版本，即1.8.3。Jsoup是一个Java库，它为HTML解析、提取和操作提供了强大的功能。这个版本可能包含了该库的核心功能，以及为开发者提供文档和源代码的额外资源。 **...

Jsoup 1.8.3 官方API文档详解

jsoup-1.8.3-javadoc 是 jsoup 这一 Java 库在 1.8.3 版本中发布的官方 API 文档，以 HTML 格式封装，专为开发者提供详尽的类、方法、接口及使用说明。该文档是学习和使用 jsoup 进行 HTML 解析与操作不可或缺的技术...

3.1.6 Jsoup代理服务器

Steven的博客

06-30

609

在一般情况下，使用浏览器可以直接连接Internet站点获取网络信息，而代理服务器(Proxy Server)是网络上提供转接功能的服务器。代理服务器是介于客户端和Web服务器之间的一台服务器，基于代理服务器，浏览器不再直接从Web服务器获取数据，而是向代理服务器发送请求，信号会先发送到代理服务器，由代理服务器取回浏览器所需要的信息。可以将代理简单理解为中介。在网络爬虫中，使用代理服务器访问网页内容，能够高度隐藏爬虫的真实IP地址，从而防止网络爬虫被服务器封锁。另外，普通网络爬虫使用固定的IP地址请求时，

jsoup1.8.1支持ip代理

03-04

虽然已经有人做了这工作，但木有积分，修改源码扩展了ip代理功能，虽然简单，如不吝啬，请赐点积分吧 String html = Jsoup.connect("http://www.ip138.com/ip2city.asp").proxy("114.112.91.97", 90).get().html(); System.out.println(html);

jsoup-1.8.3.jar

11-16

jsoup 是一款 Java 的HTML 解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于JQuery的操作方法来取出和操作数据。

Jsoup 网络爬虫（动态ip代理，突破ip访问次数限制）爬取全国各省市区数据

08-08

Jsoup实现省市区的爬取，突破ip的访问限制，实现动态ip代理，爬取最新的省市区信息

jsoup-proxy.jar

09-25

此版本是基于1.83的，可以带proxy的jsoup .

爬虫所需jsoup-1.8.3.jar

01-17

jsoup 是一款 Java 的HTML 解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于JQuery的操作方法来取出和操作数据

给Jsoup设置代理

neweastsun的专栏

08-19

3715

本文介绍如何给Jsoup增加代理，主要有两类原因需要增加代理：;当见到该异常时，我们需要给Jsoup设置代理，否则不能访问外部网络。防止IP被封：另外一种情况是防止网站封锁我们的IP地址。也就是说，使用代理（多个滚动代理）可以更可靠解析HTML，避免因为封锁IP地址让代码停止运行。...

爬虫Jsoup设置代理

开心就好

03-25

8479

公司局域网无法访问外网，需要配置代理，否则连接超时： package fun.ticsmyc.util; import org.jsoup.Jsoup; import org.jsoup.nodes.Document; import java.io.IOException; import java.net.Authenticator; i...

jsoup 设置代理ip

健康平安的活着的专栏

11-13

4561

Jsoup.connect("https://www.sina.com").proxy("123.100.89.100", 8123).header("Accept", "*/*") .header("Accept-Encoding", "gzip, deflate") .header("Accept

聊一聊爬虫那点事儿（二）

福尔摩东的博客

04-05

613

Jsoup详解和爬虫案例本文是学习java爬虫的第二篇，第一篇在爬虫入门第一篇