使用commons-pool2封装的sftp连接池和springboot启动器

最新推荐文章于 2025-04-01 16:36:25 发布
最新推荐文章于 2025-04-01 16:36:25 发布
阅读量2.2k 收藏 5
点赞数
CC 4.0 BY-SA版权
分类专栏： spring 文章标签： sftp
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_35433926/article/details/99488270
本文介绍如何使用SFTP连接池SpringBoot启动器，适用于springboot2.1.3.RELEASE版本，提供了Maven仓库直接引用方法及自定义配置流程。通过yml配置文件，可以详细设置连接池参数，包括主机、端口、用户名、密码等，并对连接池大小、空闲对象管理、对象有效性检测等进行定制。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

sftp连接池和springboot启动器

介绍

启动器基于springboot2.1.3.RELEASE

项目地址

使用方法

直接使用

项目已经发布到maven中央仓库，直接在pom.xml中引用即可

<dependencies>
    <dependency>
        <groupId>com.xzixi</groupId>
        <artifactId>sftp-pool-spring-boot-starter</artifactId>
        <version>1.0</version>
    </dependency>
</dependencies>

修改后使用

  1. 下载项目

    打开git bash窗口，执行命令git clone git@gitee.com:xuelingkang/sftp.git

  2. 编译并安装到本地maven仓库

    进入工程目录，打开cmd窗口，执行命令mvn clean install -Dmaven.test.skip=true

  3. 在自己的项目中引用

<dependencies>
    <dependency>
        <groupId>com.xzixi</groupId>
        <artifactId>sftp-pool-spring-boot-starter</artifactId>
        <version>1.0</version>
    </dependency>
</dependencies>

yml配置

sftp-pool:
  # 主机ip
  host: 192.168.234.201
  # 端口号
  port: 22
  # 用户名
  username: root
  # 密码
  password: root
  # 连接池配置
  pool:
    # 对象最大数量
    max-total: 20
    # 最大空闲对象数量
    max-idle: 10
    # 最小空闲对象数量
    min-idle: 5
    # 表示使用FIFO获取对象
    lifo: true
    # 不使用lock的公平锁
    fairness: false
    # 获取一个对象的最大等待时间
    max-wait-millis: 5000
    # 对象最小的空闲时间
    min-evictable-idle-time-millis: -1
    # 驱逐线程的超时时间
    evictor-shutdown-timeout-millis: 10000
    # 对象最小的空间时间，保留最小空闲数量
    soft-min-evictable-idle-time-millis: 1800000
    # 检测空闲对象线程每次检测的空闲对象的数量
    num-tests-per-eviction-run: 3
    # 在创建对象时检测对象是否有效
    test-on-create: false
    # 在从对象池获取对象时是否检测对象有效
    test-on-borrow: false
    # 在向对象池中归还对象时是否检测对象有效
    test-on-return: false
    # 在检测空闲对象线程检测到对象不需要移除时，是否检测对象的有效性
    test-while-idle: true
    # 空闲对象检测线程的执行周期
    time-between-eviction-runs-millis: 600000
    # 当对象池没有空闲对象时，新的获取对象的请求是否阻塞
    block-when-exhausted: true
    # 是否注册JMX
    jmx-enabled: false
    # JMX前缀，当jmxEnabled为true时有效
    jmx-name-prefix: pool
    # 使用jmxNameBase + jmxNamePrefix + i来生成ObjectName，当jmxEnabled为true时有效
    jmx-name-base: sftp
  # 废弃对象跟踪配置
  abandoned:
    # 从对象池中获取对象的时候进行清理
    remove-abandoned-on-borrow: true
    # 池维护（evicor）是否执行放弃的对象删除
    remove-abandoned-on-maintenance: true
    # 对象被获取后多长时间没有返回给对象池，则放弃对象
    remove-abandoned-timeout: 300
    # 是否记录放弃对象的应用程序代码的堆栈跟踪
    log-abandoned: false
    # 是否记录完整堆栈信息，当logAbandoned为true时有效
    require-full-stack-trace: false
    # 如果池实现了org.apache.commons.pool2.UsageTracking接口，是否记录完整堆栈信息用来辅助调试废弃对象，当logAbandoned为true时有效
    use-usage-tracking: false

详细用法请参考源码注释和案例工程sfpt-pool-demo

欢迎提出宝贵意见

如果我的代码对您有帮助，希望给我个star，谢谢！

springboot集成ftp连接池工具
04-18
springboot集成ftp连接池工具，很好的解决了并发大用户上传附件慢的问题
commons-pool2-2.8.1.jar
07-06
最新版本“commons-pool2-2.8.1.jar”带来了更稳定、更高效的对象池服务。 Apache Commons Pool 2 是其第二代产品，相比第一代，它在API设计、性能和可扩展性方面都有显著提升。2.8.1版本是对该库的一次更新，修复...
springboot+commons-pool2 连接池访问sftp
天码星空
09-21 644
直接上代码。
Apache-common-pool2实现sftp连接池
weixin_43316101的博客
07-26 2408
ApacheCommonPool2是Apache提供的一个通用对象池技术
使用jsch和commons-pool2为sftp创建连接池
文若书生的专栏
09-14 3090
使用jsch和common-pool2为sftp创建连接池
SpringBoot2.2+commons-pool2实现多Ftp连接池完整项目，开箱即用，经过长期生产使用稳定可靠
全栈行动派的博客
04-04 4516
SpringBoot2.2+commons-pool2实现多Ftp连接池完整项目，开箱即用，经过长期生产使用稳定可靠
commons-pool2-2.11.1-bin.zip
08-17
DBCP（DataBase Connection Pool）是 apache common上的一个 java 连接池项目，也是 tomcat 使用的连接池组件，依赖 于Jakarta commons-pool 对象池机制，DBCP可以直接的在应用程序中使用。 使用DBCP会用到commons-...
commons-pool 等jar包
06-21
DBCP（Database Connection Pool）是Apache Jakarta项目中的一个子项目，它利用了commons-pool对象池机制来实现数据库连接的复用，从而减少创建和释放数据库连接时的开销。Tomcat，一个广泛使用的Java应用服务器，...
commo-pool, commons-pool commons-pool commons-pool
01-28
Apache Commons Pool 2是该库的最新版本，这里提供的两个压缩文件`commons-pool2-2.11.1-bin.zip`和`commons-pool2-2.11.1-src.zip`分别包含了编译后的二进制库和源代码。`bin.zip`文件通常包含编译好的JAR文件和...
Spring下配置几种常用连接池及配置详解
01-10
Spring下配置几种常用连接池及配置详解，详细介绍了目前流行的几种连接池及其配置属性，并有示例讲解。
common pool实现sftp连接池
程序员日志
03-10 778
common pool实现sftp连接池
springboot整合SFTP，连接池连接
eternal_tc的博客
06-26 3142
springboot整合SFTP，连接池连接
springboot优化sftp文件服务器(自定义sftp连接池)
qq_41941256的博客
01-06 2859
项目中用的ftp上传文件发现上传的很慢， 在网上找到了自定义的ftp连接池，感觉不错，以此记录一下！ 如有侵权，联系我立即删除此贴 #文件服务器配置 spring.sftp.username=root spring.sftp.passwd=root spring.sftp.servert_type=sftp spring.sftp.servert_port=22 spring.sftp.serve...
springboot2.1.3配置sftp，自定义sftp连接池
薛凌康的博客
06-13 6154
springboot2.1.3配置sftp，自定义sftp连接池项目地址maven依赖application.yml配置SftpPropertiessftp连接工厂sftp连接池sftp辅助类主配置类使用方法 项目地址 项目地址：https://gitee.com/xuelingkang/spring-boot-demo 完整配置参考com.example.ftp包 maven依赖 ...
java Spring boot项目中FTP连接池及中文乱码和断点续传
最新发布
wei1234561的博客
04-01 336
如果本地文件已经且小于FTP上的文件client.size()，设置client.restartOffset(localFileSize)进行续传，本地文件输出流可追加写入 new FileOutputStream(file, true)。2. 自定义FTP客户端对象工厂类，继承org.apache.commons.pool2.BasePooledObjectFactory，重写create,wrap,destoryObject和validateObject方法。4.2 文件上传到FTP服务器。
SpringBoot设计对象池的那些事commons-pool2工具（注意事项）
gcglhd的博客
01-22 1655
背景： 现在开发过程中需要一个需求，那就是使用SpringBoot采用的是原生的单例模式进行设计，哪个类需要复用就直接将其注解注入容器，下次使用的时候直接进行@Autowired注入就可以了，很是方便。但是这种单例模式并不是适合所有的场景， 如果该类涉及到全局变量或者其他的可能调用修改一个地方而影响其他地方使用的时候，就非常的不安全，还有就是如果要保持tcp多个连接提高性能的话也是需要进行优化的，下面我们就针对这个问题，可以采用对象池的方式进行优化，也就是我们 的处理连接可以有多个连接同...
springboot使用commons-pool2实现对象池
刀林寻诗
05-04 1382
频繁的创建和销毁，会极大的降低系统的性能，而对象池会在初始化的时候会创建一定数量的对象，每次访问只需从对象池中获取对象,使用完毕后再放回对象池，并不是直接销毁，这样可以保证程序重复使用同一个对象而不需要每次访问都创建和销毁对象， 从而提高系统性能。pool2的组成PooledObject(池化对象) PooledObjectFactory(对象工厂) ObjectPool (对象池)需要池化的对象/*** 需要池化的对象*/TestObject 工厂。
SpringBoot笔记：SpringBoot集成FTP（连接池）、SFTP（连接池）
热门推荐
u011047968的专栏
07-20 1万+
即 文件传输协议（英语： 的缩写）是一个用于计算机网络上在客户端和服务器之间进行文件传输的应用层协议。完整的 FTP 是由 FTP 服务器 和 FTP 客户端组成的，客户端可以将本地的文件通过 FTP 协议上传到服务器，也可以将服务器的文件下载到本地。它是当今使用的最古老的文件传输协议之一，是一种非常便捷的移动文件的方式。 连接需要 FTP 服务器和客户端两方在网络上建立通信。建立 FTP 连接时会有两个不同的通信通道。一个被称为命令通道，它的作用是发出和响应指令。另一个为数据通道，用于客户端和服务
jcraft commons-pool2 实现sftp连接池管理
03-25
<think>好的，我需要回答用户关于使用JCraft的JSch和Apache Commons Pool 2实现SFTP连接池管理的问题。首先，我应该确认用户的需求是了解如何结合这两个库来管理SFTP连接池，以提高资源利用效率和性能。 首先，我应该介绍JSch和Commons Pool 2各自的作用。JSch是一个用于SSH连接的Java库，支持SFTP，而Commons Pool 2提供了对象池化的功能，可以管理连接的创建、验证和回收。 接下来，需要说明为什么需要连接池。频繁创建和断开SFTP连接会有较大的开销，连接池可以复用连接，减少资源消耗，提高效率。这一点需要简明扼要地解释清楚。 然后是实现的步骤，这部分需要分点详细说明。首先是添加依赖，用户需要在项目中引入JSch和Commons Pool 2的库。这里要给出Maven的依赖代码示例，确保用户能够正确添加。 第二步是创建SFTP连接工厂。这里需要继承BasePooledObjectFactory，并重写创建、验证、销毁等方法。需要说明在create()方法中如何配置JSch的会话和SFTP通道，包括主机名、端口、用户名、密码等参数的处理。 第三步是配置连接池参数，比如最大连接数、最小空闲数、最大等待时间等。这里需要解释各个参数的意义，帮助用户根据实际需求调整。 第四步是使用连接池进行操作。这里需要展示如何从池中借用和归还连接，强调异常处理的重要性，确保连接在发生异常时也能正确归还，避免泄漏。 第五步是关闭连接池，释放资源。通常在应用关闭时执行，防止资源未释放导致的问题。 然后，给出一个简单的代码示例，展示关键部分的实现，比如工厂类、池配置、借还连接的过程。代码中的注释要清晰，帮助用户理解每一步的作用。 最后，需要总结连接池带来的好处，比如提升性能、避免资源浪费，以及正确管理连接的重要性。可能还需要提醒用户注意连接的有效性验证和超时设置，确保连接池的健壮性。 在整理过程中，要确保所有数学公式和代码块符合格式要求，使用正确的LaTeX语法，行内公式用$...$，独立公式用$$...$$，并且结构清晰，步骤明确。同时使用中文回答，保持口语化，避免使用专业术语过多，必要时进行解释。</think>以下是使用 **JSch**（来自JCraft）和 **Apache Commons Pool 2** 实现 SFTP 连接池管理的分步说明： --- ### 1. 核心组件 - **JSch**: 提供 SFTP 连接的基础功能。 - **Commons Pool 2**: 管理对象池化（如连接复用、销毁策略等）。 --- ### 2. 为什么需要连接池？ - **SFTP 连接开销大**：每次建立连接需经过 SSH 握手、认证等步骤。 - **资源复用**：池化可避免频繁创建/销毁连接，提升性能。 - **并发控制**：限制最大连接数，防止服务端过载。 --- ### 3. 实现步骤 #### 步骤 1：添加依赖 在 Maven 项目中引入： ```xml <dependency> <groupId>com.jcraft</groupId> <artifactId>jsch</artifactId> <version>0.1.55</version> </dependency> <dependency> <groupId>org.apache.commons</groupId> <artifactId>commons-pool2</artifactId> <version>2.11.1</version> </dependency> ``` #### 步骤 2：创建 SFTP 连接工厂 继承 `BasePooledObjectFactory`，实现连接创建、销毁逻辑： ```java public class SftpClientFactory extends BasePooledObjectFactory<ChannelSftp> { private final String host; private final int port; private final String username; private final String password; public SftpClientFactory(String host, int port, String username, String password) { this.host = host; this.port = port; this.username = username; this.password = password; } @Override public ChannelSftp create() throws Exception { JSch jsch = new JSch(); Session session = jsch.getSession(username, host, port); session.setPassword(password); session.setConfig("StrictHostKeyChecking", "no"); session.connect(); ChannelSftp channel = (ChannelSftp) session.openChannel("sftp"); channel.connect(); return channel; } @Override public void destroyObject(PooledObject<ChannelSftp> p) throws Exception { ChannelSftp channel = p.getObject(); if (channel.isConnected()) { channel.disconnect(); } Session session = channel.getSession(); if (session.isConnected()) { session.disconnect(); } } @Override public boolean validateObject(PooledObject<ChannelSftp> p) { return p.getObject().isConnected(); } @Override public PooledObject<ChannelSftp> wrap(ChannelSftp channel) { return new DefaultPooledObject<>(channel); } } ``` #### 步骤 3：配置连接池参数 ```java GenericObjectPoolConfig<ChannelSftp> config = new GenericObjectPoolConfig<>(); config.setMaxTotal(10); // 最大连接数 config.setMinIdle(2); // 最小空闲连接 config.setMaxWaitMillis(30000); // 获取连接最长等待时间（毫秒） ``` #### 步骤 4：初始化连接池 ```java SftpClientFactory factory = new SftpClientFactory("host", 22, "user", "password"); GenericObjectPool<ChannelSftp> pool = new GenericObjectPool<>(factory, config); ``` #### 步骤 5：使用连接池 ```java ChannelSftp channel = null; try { channel = pool.borrowObject(); // 从池中借用连接 channel.put("local.txt", "remote.txt"); // 执行SFTP操作 } catch (Exception e) { e.printStackTrace(); } finally { if (channel != null) { pool.returnObject(channel); // 归还连接 } } ``` --- ### 4. 关键优化点 - **异常处理**：若连接失效（如超时），需在 `validateObject` 中标记并销毁。 - **超时配置**：通过 `session.setTimeout(5000)` 设置 SSH 超时时间。 - **心跳机制**：定期执行 `channel.ls("/")` 保持连接活性。 --- ### 5. 关闭连接池 应用退出时调用： ```java pool.close(); ``` --- ### 总结 通过 **JSch + Commons Pool 2**： 1. 实现连接的**按需创建**和**复用**。 2. 避免频繁连接导致的**性能瓶颈**。 3. 提供**线程安全**的并发访问控制。
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值