ThreadPool full问题排查

最新推荐文章于 2025-05-22 14:43:27 发布

森伯416

最新推荐文章于 2025-05-22 14:43:27 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： Java 并发编程相关文章标签： java 多线程 ThreadPool

本文链接：https://blog.youkuaiyun.com/Dkangel/article/details/114028162

本文详细记录了一次遇到线程池满问题的排查过程，从问题背景、问题复现、问题处理三个方面进行阐述。在问题复现中，通过修改线程池配置、添加异步方法和测试用例，发现线程池配置不当导致任务被丢弃。最后，通过调整线程池参数，选择CallerRunsPolicy策略，成功解决了线程池满的问题，确保所有任务都能得到处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题背景

目前LEX业务场景包含两个模块：FM、LineHaulShuttle，都是通过ODPS离线同步然后通过Blink发送到gateway的MQ，两个QPS分别是：FM-1000/s，LineHaulShuttle-600/s，会对系统有个短暂的冲击，目前系统未经过压测，所以对于系统的抗压能力我们是不清楚的，如下就是接入LinHaul场景时发现的异常：线程池占满
在这里插入图片描述

问题排查

由于Lindorm入库、发风控是使用了线程池异步操作的，这样不仅能提高系统处理效率还能提高吞吐量，但是由于线程资源有限，所以就会发生如上的异常，查看代码：
可以发现两个问题：

当前线程缓冲队列大小为：200，当QPS超过200甚至更多的时候，就会触发创建最大线程
当前线程池使用的策略是：AbortPolicy，这将导致达到最大线程数时，新任务将直接被丢弃

@EnableAsync
@Configuration
public class AsyncThreadPoolConfig {
   
   
    /**
     * 核心线程数（默认线程数）
     */
    private static final int CORE_POOL_SIZE = 8;
    /**
     * 最大线程数
     */
    private static final int MAX_POOL_SIZE = 20;
    /**
     * 允许线程空闲时间（单位：默认为秒）
     */
    private static final int KEEP_ALIVE_TIME = 10;
    /**
     * 缓冲队列大小
     */
    private static final int QUEUE_CAPACITY = 200;
    /**
     * 线程池名前缀
     */
    private static final String THREAD_NAME_PREFIX = "async-task-pool-";
    /**
     * 当使用@Async注解时，需指定使用此线程池
     * @return 线程池实例
     */
    @Bean("asyncTaskExecutor")
    public ThreadPoolTaskExecutor asyncTaskExecutor() {
   
   
        ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
        executor.setCorePoolSize(CORE_POOL_SIZE);
        executor.setMaxPoolSize(MAX_POOL_SIZE);
        executor.setQueueCapacity(QUEUE_CAPACITY);
        executor.setKeepAliveSeconds(KEEP_ALIVE_TIME);
        executor.setThreadNamePrefix(THREAD_NAME_PREFIX);
        executor.setThreadFactory(new ThreadFactory() {
   
   
            // 线程计数器
            private final AtomicInteger threadNumber = new AtomicInteger(0);
            @Override
            public Thread newThread(@NotNull Runnable runnable) {
   
   
                Thread thread = new