java-多线程池同时执行注意事项

最新推荐文章于 2023-10-27 16:45:10 发布

weixin_33966095

最新推荐文章于 2023-10-27 16:45:10 发布

阅读量429

点赞数

CC 4.0 BY-SA版权

文章标签： java python

原文链接：https://my.oschina.net/u/3445128/blog/1527100

本文介绍了一个线上环境中出现的bug：当使用两个线程池处理不同任务时，由于一个线程池的任务数量过多，导致另一个线程池无法正常工作的问题。通过调整ArrayBlockingQueue阻塞队列的长度解决了该问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

2019独角兽企业重金招聘Python工程师标准>>>

今天线上发现一个bug,虽然程序用了两个线程池来处理不同的任务，但是每次执行批量任务后在数据库中查询发现，创建的任务数和线程数对不上，总是只对应A池中的线程数。B池没有同时执行。

但是在测试环境，任务比较少的情况下，是不存在这种情况的，看了下代码，发现问题所在。

因为在线程池中使用了ArrayBlockingQueue阻塞队列，拒绝策略中也使用了executor.getQueue().put(r);阻塞的方法。如果此时，A池中任务非常多，超过了队列长度，这时添加任务的步骤将阻塞，从而导致后面的B池的代码无法执行。

针对猜想，进行验证，将队列长度设置为大于任务数后，再运行。发现两池开始同时工作了。问题解决。

转载于:https://my.oschina.net/u/3445128/blog/1527100

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_33966095

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Java-分割list并执行多线程任务的工具类

兴趣是最好的老师

08-19

584

要创建一个用于分割列表并执行多线程任务的工具类，你可以使用 Java 的 ExecutorService 和。线程池创建：使用 Executors.newFixedThreadPool 创建一个固定大小的线程池。列表分割：splitList 方法接收一个列表和一个子列表大小参数，然后将列表分割成多个子列表。任务执行：确保正确处理任务的结果，例如使用 get 方法获取结果或处理异常。创建任务列表，每个任务都是一个 Callable 对象，表示一个计算任务。最后，定义一个方法来提交任务到线程池并执行。

用java实现一个线程池（可以使用java的数据结构），需要满足可以往前或者往后插入task，可配置最大同时执行的线程数，并对线程池中当前同一个类型的连续task进行合并执行

boguesfei的博客

08-21

416

在Android客户端上，用java实现一个线程池（可以使用java的数据结构），需要满足可以往前或者往后插入task，可配置最大同时执行的线程数，并对线程池中当前同一个类型的连续task进行合并执行（假设同一类型的task可以合并成一次执行） 1. 可以往前或者往后插入task：使用LinkedBlockingQueue阻塞队列，该阻塞队列结构为双向链表，满足前后插入task 2. 配置最大...

参与评论您还未登录，请先登录后发表或查看评论

java，同一个Runnable对象扔线程池多次和多个实例对象扔线程池有啥不同啊？

爱科学，爱生活

04-14

2678

ExecutorService executor = Executors.newCachedThreadPool(); for (int i = 0; i < 10; i++) { executor.submit(new TaskRunnable()); } ExecutorService executor = Executors.newCachedThreadPool(

多线程以及线程池

neuzhangno的博客

07-03

289

生产者消费者问题是一个经典的并发编程问题，涉及到多个生产者线程和消费者线程对一个共享的缓冲区进行访问。通过使用线程池，可以有效地利用线程资源，并提供对任务调度和线程管理的控制。线程池可以提高线程的创建和销毁效率，并限制同时运行的线程数量，从而避免资源竞争和过度开销。这只是一个简单的线程池示例，实际应用中可能还需要考虑任务的优先级、线程池的最大线程数、任务队列的大小等其他因素。在main函数中，我们创建了两个生产者线程和两个消费者线程，并分别调用join()函数等待线程的结束。

《Windows via C/C++》学习笔记 —— Windows 线程池

weixin_30819163的博客

08-25

293

　　线程池（thread pool），允许有多个线程同时存在，并发执行，并且这些线程受到统一管理。　　在Windows Vista中，提供了全新的线程池机制，一般这些线程池中的线程的创建的销毁是由操作系统自动完成的。　　Windows Vista 中重新设计了线程池，提供了一组新的线程池API。因此，本篇讨论的仅仅在Windows Vista系统，或其以上的Windows版本中有效。 ...

java 多线程池_Java ThreadPoolExecutor线程池同时执行50个线程

weixin_35792236的博客

02-20

1443

最近项目上有个需求，需要从FTP服务器中下载大批量的数据文件，然后解析该数据文件进行入库，数据库为oracle，最后在通过web工程，以报表和图表的形式进行展现。这些批量的数据文件为纯文本文件，每天产生数据文件大概有1500个，每个文件大概有500KB，且随着时间的推移这些数据文件会逐渐增多。之前的实现方式是，通过每天按时触发，建立一个FTP连接，使用这个连接读取文件，读取一个下载一个。部署到生成...

JAVA多线程的使用场景与注意事项总结

08-26

JAVA多线程的使用场景与注意事项总结 Java多线程是Java语言中的一种重要机制，允许程序同时执行多个任务，以提高程序的执行效率和响应速度。在Java中，多线程可以通过继承Thread类、实现Runnable接口或使用线程池来...

Java-多线程异步请求统一响应结果.docx

最新发布

04-08

在Java编程语言中，多线程异步请求是一种高级编程技术，它允许开发者通过创建多个独立运行的线程来同时处理不同的任务或请求。与同步请求相比，这种异步方法的主要优势在于它能够显著提升应用程序的性能，尤其是在...

Java多线程-线程间的通信

02-02

### Java多线程—线程间的通信 #### 一、线程间的通信 ##### （1）为什么要处理线程间的通信？在多线程环境中，不同的线程可能需要协同工作来完成一项任务。例如，一个线程负责生产数据，另一个线程负责消费这些...

详解Java多线程处理List数据

08-26

五、Java多线程处理List数据的注意事项 在使用Java多线程处理List数据时，我们需要注意以下几点： * 需要确保线程安全 * 需要确保数据的一致性 * 需要注意线程的调度和同步六、Java多线程处理List数据的应用场景...

Java并发与多线程-详解线程池

阿呆的专栏

07-05

470

Java并发与多线程-详解线程池 什么是线程池？在此，我们参考一下百科的定义： 线程池（英语：thread pool）：一种线程使用模式。线程过多会带来调度开销，进而影响缓存局部性和整体性能。而线程池维护着多个线程，等待着监督管理者分配可并发执行的任务。这避免了在处理短时间任务时创建与销毁线程的代价。 线程池的作用？了解线程池作用之前，我们先来看一下，CPU的上下文切换，有多费时间：拿一台主频2.6G的电脑来说，每秒可以执行 2.6*10^9个指令，每个指令只需要 0.38ns，为了方便理解，我

线程同步注意事项

tsh123321的博客

04-02

343

互斥器(mutex) 互斥器主要是为了保护共享数据的，保证同一时刻只有一个线程可以操作用RAII手法封装mutex（创建、销毁、加锁、解锁）只用非递归的mutex（就是不可重入的mutex）不手动调用lock和unlock函数，参照第一点的方式在每次构造MutexLockGuard的时候，思考调用栈上已经持有的锁，防止加锁顺序不同导致死锁不使用跨进程的mutex，进程间通信尽量只用TC...

Java多线程的线程同步需要注意的地方

weixin_30376163的博客

11-24

117

synchronized是对当前的实例进行加锁，要注意是“当前实例”，也就是说，假如你有两个实例化对象，那么可以同时访问这两个实例里面的 synchronized块。但是，当访问一个实例里面的一个synchronized块时，其余的synchronized是不可同时访问的，原因是整个实例都被加了锁。　　那假如说是static synchronized时会怎么样呢? 那么static s...

写给小白看的线程池，还有10道面试题

田维常

01-28

1591

如何搞定20k的面试小抄为什么要用线程池呢？下面是一段创建线程并运行的代码:for(inti=0;i<100;i++){ newThread(()-&...

【转载保存】java四种线程池的使用

dreamzuora的博客

12-21

133

https://blog.youkuaiyun.com/qq_31441667/article/details/78830395

Python中如何使用ThreadPoolExecutor一次开启多个线程

这家伙很懒，什么都没有留下

10-27

1447

通过本文的介绍，我们可以了解到是Python中用于实现多线程并发执行的类。通过使用，我们可以方便地创建线程池、提交任务、获取执行结果以及处理异常等。在使用多线程时，我们需要注意避免数据竞争、死锁等问题，并合理拆分和组合任务，设置优先级、异常处理、超时处理以及终止和重试机制等。希望本文能够帮助大家更好地掌握Python中的多线程并发执行技术。

面试-多线程-基础-线程-线程池-同步

LXMXHJ的博客

05-15

703

java多线程：开发基础（线程、进程、并发、并行）；线程安全；线程创建；线程池；

Java 线程池并行执行多个任务

m0_74288808的博客

05-03

1760

在上面的代码中，我们创建了一个 HelloWorldThreadPool 类，该类创建了一个线程池，并使用该线程池并行执行多个任务。每个任务都是一个简单的 Lambda 表达式，它打印出任务编号和当前线程的名称，然后睡眠 2 秒钟，最后再次打印任务编号和当前线程的名称。要运行此代码，您只需要使用 JDK 或 JRE 安装 Java 运行时环境，并将代码保存在名为 HelloWorldThreadPool.java 的文件中。然后，您应该可以看到多个任务并行执行，并在不同的线程中打印它们的编号和名称。

java 线程池的使用_Java 使用线程池执行若干任务

weixin_32312081的博客

02-20

842

在执行一系列带有IO操作(例如下载文件)，且互不相关的异步任务时，采用多线程可以很极大的提高运行效率。线程池包含了一系列的线程，并且可以管理这些线程。例如：创建线程，销毁线程等。本文将介绍如何使用Java中的线程池执行任务。1 任务类型在使用线程池执行任务之前，我们弄清楚什么任务可以被线程池调用。按照任务是否有返回值可以将任务分为两种，分别是实现Runnable的任务类(无参数无返回值)和实现Ca...