读完 RocketMQ 源码,我学会了如何优雅的创建线程

技术人十年成长路径:从写代码到定义问题的三次跃迁 软件工程师的成长,本质是从‘工具使用者’向‘系统构建者’演进的过程。它始于对基础编程能力的掌握,深化于对操作系统、网络、数据库等底层原理的理解,其技术价值在于将抽象知识转化为解决真实故障与业务瓶颈的确定性能力。典型应用场景包括线上事故快速定位、高并发系统权衡设计、跨职能需求本质挖掘等。这一过程高度依赖问题驱动的学习机制、可验证的知识沉淀和面向协作的技术表达——正如文中反复强调的‘画依赖图’‘算经济账’‘给财务讲备份’,正是技术人突破CRUD瓶颈、建立不可替代性的关键跃迁。 阅读详情

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 10:33 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:勇哥java实战分享


RocketMQ 是一款开源的分布式消息系统,基于高可用分布式集群技术,提供低延时、高可靠的消息发布与订阅服务。

这篇文章,笔者整理了 RocketMQ 源码中创建线程的几点技巧,希望大家读完之后,能够有所收获。

ea7ba41268a84fd3767a8b5d9d7ded28.png

1. 创建单线程

首先我们先温习下常用的创建单线程的两种方式:

  • 实现 Runnable 接口

  • 继承 Thread 类

▍一、实现 Runnable 接口

35f212aef32b2fe9324f8853542018e4.png

图中,MyRunnable 类实现了 Runnable 接口的 run 方法,run 方法中定义具体的任务代码或处理逻辑,而Runnable 对象是作为线程构造函数的参数。

▍二、 继承 Thread 类

b255b824bf06ab0ace9a193884d6e46a.png

线程实现类直接继承 Thread ,本质上也是实现 Runnable 接口的 run 方法。

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/ruoyi-vue-pro

  • 视频教程:https://doc.iocoder.cn/video/

2. 单线程抽象类

创建单线程的两种方式都很简单,但每次创建线程代码显得有点冗余,于是 RocketMQ 里实现了一个抽象类 ServiceThread 。

5002217a272c95ecca13eccee5b58269.png抽象类 ServiceThread

我们可以看到抽象类中包含了如下核心方法:

  1. 定义线程名;

  2. 启动线程;

  3. 关闭线程。

下图展示了 RocketMQ 众多的单线程实现类。

03967375bbcfc50952d5c1c5a938c766.jpeg

实现类的编程模版类似 :

793cb0daed507b7958b5a58c3a2160a4.png

我们仅仅需要继承抽象类,并实现 getServiceName 和 run 方法即可。启动的时候,调用 start 方法 , 关闭的时候调用 shutdown 方法。

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/yudao-cloud

  • 视频教程:https://doc.iocoder.cn/video/

3. 线程池原理

线程池是一种基于池化思想管理线程的工具,线程池维护着多个线程,等待着监督管理者分配可并发执行的任务。这避免了在处理短时间任务时创建与销毁线程的代价。线程池不仅能够保证内核的充分利用,还能防止过分调度。关注公z号:码猿技术专栏,回复关键词:1111 获取阿里内部性能调优手册

JDK中提供的 ThreadPoolExecutor 类,是我们最常使用的线程池类。

f1a61bb2bb39cb1d3a221015f1676aef.pngThreadPoolExecutor构造函数

参数名作用
corePoolSize队列没满时,线程最大并发数
maximumPoolSizes队列满后线程能够达到的最大并发数
keepAliveTime空闲线程过多久被回收的时间限制
unitkeepAliveTime 的时间单位
workQueue阻塞的队列类型
threadPoolFactory改变线程的名称、线程组、优先级、守护进程状态
RejectedExecutionHandler超出 maximumPoolSizes + workQueue 时,任务会交给RejectedExecutionHandler来处理
f47c84f83b40bfcdbca227d3b0924eb0.png

任务的调度通过执行 execute方法完成,方法的核心流程如下:

  1. 如果 workerCount < corePoolSize,创建并启动一个线程来执行新提交的任务。

  2. 如果 workerCount >= corePoolSize,且线程池内的阻塞队列未满,则将任务添加到该阻塞队列中。

  3. 如果 workerCount >= corePoolSize && workerCount < maximumPoolSize,且线程池内的阻塞队列已满,则创建并启动一个线程来执行新提交的任务。

  4. 如果 workerCount >= maximumPoolSize,并且线程池内的阻塞队列已满, 则根据拒绝策略来处理该任务, 默认的处理方式是直接抛异常。

f5207251dcea8d0c11ca36148ad144c2.png

4. 线程池封装

在 RocketMQ 里 ,网络请求都会携带命令编码,每种命令映射对应的处理器,而处理器又会注册对应的线程池。

a0a3440565bb20dbc52883d87098ad06.png

当服务端 Broker 接收到发送消息命令时,都会有单独的线程池 sendMessageExecutor 来处理这种命令请求。

113304e22b85e923c61f78f2a2ff9cff.png

基于 ThreadPoolExecutor 做了一个简单的封装 ,BrokerFixedThreadPoolExecutor 构造函数包含六个核心参数:

  1. 核心线程数和最大线程数相同 ,数量是:cpu核数和4比较后的最小值;

  2. 空闲线程的回收的时间限制,默认1分钟;

  3. 发送消息队列,有界队列,默认10000;

  4. 线程工厂 ThreadFactoryImpl ,定义了线程名前缀:SendMessageThread_ 。

RocketMQ 实现了一个简单的线程工厂:ThreadFactoryImpl ,线程工厂可以定义线程名称,以及是否是守护线程 。

ebf1f44694e51a82ef551209a79309f8.png线程工厂

开源项目 Cobar ,Xmemcached,Metamorphosis 中都有类似线程工厂的实现 。

5. 线程名很重要

线程名很重要,线程名很重要,线程名很重要 ,重要的事情说三遍。

我们看到 RocketMQ 中,无论是单线程抽象类还是多线程的封装都会配置线程名 ,因为通过线程名,非常容易定位问题,从而大大提升解决问题的效率。

定位的媒介常见有两种:日志文件 和堆栈记录 。

▍一、日志文件

经常处理业务问题的同学,一定都经常与日志打交道。

ff8ea515da4892327a3721897e5386d6.png
  • 查看 ERROR 日志,追溯到执行线程, 要是线程池隔离做的好,基本可以判断出哪种业务场景出了问题;

  • 通过查看线程打印的日志,推断线程调度是否正常,比如有的定时任务线程打印了开始,没有打印结束,推论当前线程可能已经挂掉或者阻塞。

▍二、堆栈记录

jstack 是 java 虚拟机自带的一种堆栈跟踪工具 ,主要用来查看 Java 线程的调用堆栈,线程快照包含当前 java 虚拟机内每一条线程正在执行的方法堆栈的集合,可以用来分析线程问题。

jstack -l 进程pid
4230a449f7449472d63ffb7428053302.png

笔者查看线程堆栈,一般关注如下几点:

  1. 当前 jvm 进程中的线程数量和线程分类是否在预期的范围内;

  2. 系统接口超时或者定时任务停止的异常场景下 ,分析堆栈中是否有锁未释放,或者线程一直等待网络通讯响应;

  3. 分析 jvm 进程中哪个线程占用的 CPU 最高。

6. 总结

本文是RocketMQ 系列文章的开篇,和朋友们简单聊聊 RocketMQ 源码里创建线程的技巧。

  1. 单线程抽象类 ServiceThread

    使用者只需要实现业务逻辑以及定义线程名即可 ,不需要写冗余的代码。

  2. 线程池封装

    适当封装,定义线程工厂,并合理配置线程池参数。

  3. 线程名很重要

    文件日志,堆栈记录配合线程名能大大提升解决问题的效率。

RocketMQ 的多线程编程技巧很多,比如线程通讯,并发控制,线程模型等等,后续的文章会一一为大家展现。



欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

f3bc5376109b8c4497d72d9d18353b5d.png

已在知识星球更新源码解析如下:

b791af2da3f3b289d95d7b298b9bbd8c.jpeg

d4a3b1d1b83b9639758af506680d9f1d.jpeg

f71ab1e9abf94226244d2265485f7e3b.jpeg

6a956d4138ae504745dd65eaf5639023.jpeg

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 101 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
SSM框架实现高并发火车票系统:数据库设计与订单状态机实战 在Java Web企业级开发中,数据库设计与并发控制是构建稳定系统的基石。其核心原理在于通过合理的表结构、事务隔离与锁机制来保障数据一致性,尤其在电商、票务等高并发场景下价值凸显。以在线票务系统为例,应用场景要求系统能精准处理余票查询、下单支付及退改签等复杂业务流。本文聚焦于利用SSM(Spring+SpringMVC+MyBatis)框架技术栈,深入探讨如何通过**乐观锁**机制解决库存超卖问题,并设计**订单状态机**来管理订单生命周期的状态流转,从而构建一个健壮、可扩展的火车票预售系统。 阅读详情

相关推荐

ARTIX-7 GTP 3G-SDI 工程构建与调试实战

本文详细介绍了基于ARTIX-7 FPGA和GTP收发器的3G-SDI工程构建与调试实战。从基础概念解析到Vivado工程创建、GTP IP核配置、SDI IP核集成,再到系统集成与时钟域处理,提供了全面的技术指导。文章还分享了调试技巧、常见问题排查方法以及性能验证步骤,帮助开发者快速掌握3G-SDI视频传输技术的实现与优化。

weixin_30443813的博客 256

芋道源码 yudao-cloud:构建全功能后台管理系统的技术探索

芋道,以开发者为中心,打造中国第一流的快速开发平台,全部开源,个人与企业可 100% 免费使用。master分支为 JDK 8 + Spring Boot 2.7,分支为 JDK 17/21 + Spring Boot 3.2管理后台的电脑端:Vue3 提供 element-plus、vben(ant-design-vue) 两个版本,Vue2 提供 element-ui 版本管理后台的移动端:采用 uni-app 方案,一份代码多终端适配,同时支持 APP、小程序、H5!

chenchuang0128的博客 1万+

本地部署Llama 3中文版:Ollama量化配置与调优指南

大模型本地部署正在成为数据敏感场景下的主流选择。本地运行开源大模型,既能保护隐私又能降低调用成本,但中文能力往往成为瓶颈。以Llama 3为代表的开源模型,需借助中文微调与量化技术,才能在消费级显卡上流畅运行。量化通过压缩模型权重减小显存占用,配合Ollama等推理框架,可快速搭建私有中文AI服务。该方案适用于知识库问答、内容生成、离线助手等场景,并可通过OpenAI兼容接口无缝对接Dify等应用平台。本文从硬件选型、量化等级到Modelfile配置,系统梳理本地部署中文大模型的全链路实战方法与排错思路,帮

weixin_29035405的博客 86

7000字+24张图带你彻底弄懂线程池

点击上方“芋道源码”,选择“设为星标”管她前浪,还是后浪?能浪的浪,才是好浪!每天 10:33更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2021超神之路,很肝~中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 RocketMQ 源码解析数据库中间件 Sharding-JDBC 和 MyCAT 源码解析作业调度中间件 E...

芋艿V 221

DRAM内存模拟持久化设备的方法

由于持久化内存介质NVM技术的发展,越来越多的科研工作者投身到NVM相关的研究当中。但由于目前工业界并没有推出广泛使用的NVM介质设备,所以科研工作都需要自己以现有的条件,模拟NVM设备使用场景。一个简单的方法是:通过修改DRAM模拟器,达到模拟NVM的目的(可以参考:DRAMSim2模拟器分析与应用)。更高端的方式是:在真实系统中,将内存划分出一块儿,用来模拟NVM设备(类似于传统的ramdis

酷炫人笨笨熊 1899

华北理工大学以升实验班蓝桥杯选拔赛题解

文章目录华北理工大学以升实验班蓝桥杯选拔赛题解A:期末考试题目描述题目讲解代码B:月份题目描述题目讲解代码C:打饭题目描述题目讲解代码D : 正弦波信号题目描述题目讲解代码E : 亲爱的长方形题目描述题目讲解代码F:挖金子题目描述题目讲解代码G : 金金的游戏题目描述题目讲解代码H : 区间和题目描述题目讲解代码详细视频讲解请关注华北理工大学b站账号。 华北理工大学以升实验班蓝桥杯选拔赛题解 A:期末考试 题目描述 Description 期末考试过去许多天了,如今成绩都出来了,那么现在让我们对成绩我分个类

Qq1739206233的博客 1131

读 RocketMQ 源码,学习并发编程三大神器

笔者是 RocketMQ 的忠实粉丝,在阅读源码的过程中,学习到了很多编程技巧。这篇文章,笔者结合 RocketMQ 源码,分享并发编程三大神器的相关知识点。

m0_73311735的博客 530

Podman修改镜像源教程(附最新docker镜像源)

Podman修改镜像源教程(附最新docker镜像源)

道长的博客 4143

面试官喜欢问RocketMQ,那就好好准备下

点击上方“芋道源码”,选择“设为星标”管她前浪,还是后浪?能浪的浪,才是好浪!每天 10:33更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2021超神之路,很肝~中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 RocketMQ 源码解析数据库中间件 Sharding-JDBC 和 MyCAT 源码解析作业调度中间件 E...

芋艿V 190

链接文件及功能安全:Hightec如何将Flash驱动放进RAM

Fls本身是无法操作自身的,犯冲突。Fls_WriteCmdCycles (预留300字节)与 Fls_EraseCmdCycles(预留200字节) 函数在执行之前将会Copy进RAM,Fls本身是不能操作Fls本身的,除非把最底层的驱动函数防止在RAM或者其他的Flash里面,假设Flash放置在PF0可以操作PF1。英飞凌的驱动有个规定写指令预留300字节,擦除指令预留200字节。

梦想技术家 2145

手把手教你学Simulink--进阶电机控制场景实例:基于Simulink的直流电机双闭环调速系统抗负载扰动仿真

摘要:本文基于Simulink平台构建直流电机双闭环调速系统,重点研究其在工业传送带场景下的抗负载扰动性能。系统采用转速外环(稳速)和电流内环(限流)的嵌套结构,通过工程法整定PI参数,实现了转速跌落<10%、恢复时间<0.5s的优异抗扰性能。仿真结果表明,相比单闭环系统,双闭环控制使转速跌落率降低47%,恢复时间缩短75%。文中详细介绍了数学模型建立、Simulink模块实现及参数优化方法,并提供了完整代码和模型文件,为电机控制系统设计提供实用参考。

MHD0815的博客 183

芋道源码的周八(2018.01.28)

1. 推荐文章2. 公众号文章3. 知识星球文章1. 推荐文章笔者在地铁有阅读公众号技术文章的习惯。给时间一点时间,给努力一点努力。《JVM堆外内存如何被回收,你知道么?》《NIO进阶之路,必须埋的坑》《分布式事务解决方案与适用场景分析》《从滴滴出行业务中台实践聊聊如何构建大中台架构》《电商系统中的商品模型的分析与设计—续》《做大事者,不委屈》2. 公众号文章公众号:芋道源码,纯源码解析公众号。《

芋道源码 662

C++从入门到进阶的系列书籍推荐(22本书)

要多读书,读好书!一本书要多读几遍才好,每次都可能有新的收获!特别在是有一定的工作年限和工作经验之后!读书百遍,其义自见! 下面就给大家推荐一下C++程序员进阶需要读的经典书籍: 1、C++入门书籍 C++是在C语言的基础上发展而来的,要学习C++之前需要先学习C语言。有了C语言基础之后再去学习C++。 1.1、C语言程序设计(谭浩强) 该书被公认为学习C语言程序设计的优秀教材,被全国大多数高校选用,是学习C语言的主流用书。本书比较通俗易懂,是初入者必备的书籍。 ........

dvlinker的技术专栏 4万+

六月份校招面试备战:面经拆解、算法攻坚与项目表达全攻略

技术面试考察的从来不只是知识点记忆,而是候选人对原理的理解、表达的结构化以及面对追问时的应变能力。在校招时间窗口里,系统拆解面经比盲目刷题更重要。面经中的追问链与考察路径能还原面试官的思维逻辑,帮助求职者建立精准的知识地图。通过将高频算法题、八股文与项目经历分类整理,并融入模拟实战与复盘迭代,才能把资料真正转化为面试战斗力。六月份正值秋招提前批启动前夕,利用这段时间完成基础复习、项目复盘与限时训练,将大幅提升后续面试的通过率。本文结合70+页校招面经,拆解高效备战方法,覆盖开发、算法、测开等岗位的差异化准备

weixin_34379433的博客 381

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

Java 并发源码合集

【死磕Java并发】—– 深入分析synchronized的实现原理【死磕Java并发】—– 深入分析volatile的实现原理【死磕Java并发】—– Java内存模型之happens-before【死磕Java并发】—– Java内存模型之重排序【死磕Java并发】—– Java内存模型之分析volatile【死磕Java并发】—– Java内存模型之从JMM角度分析DCL【死磕Java并发】

芋道源码 795

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

2018 —— 遇到你,芋道源码

一本正经状在工程师的世界里,概念、原理都是抽象的,唯有源码是巨象的。 随着我们阅读更多的优秀的源码,我们的想象力才会更加巨象,我们的理解才会更加干净。2017 年即将结束了,作为九零后数组第零位出生的小伙子,已经无限趋近于三十而立之年。或许后面我可以自我介绍,我叫芋艿,三十岁,而不是九零后。坚持写源码分享,也快满一年,真快,痛并快乐的过程吧。认识了一些志趣相投的人,帮助了一些上进的胖友,满足。希望

芋道源码 4135

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

阿里巴巴《rocketmq开发指南》_微服务开发的一站式解决方案Spring Cloud Alibaba

Spring Cloud Alibaba 致力于提供微服务开发的一站式解决方案。此项目包含开发分布式应用微服务的必需组件,方便开发者通过 Spring Cloud 编程模型轻松使用这些组件来开发分布式应用服务。依托 Spring Cloud Alibaba,您只需要添加一些注解和少量配置,就可以将 Spring Cloud 应用接入阿里微服务解决方案,通过阿里中间件来迅速搭建分布式应用系统。主要功...

weixin_39607473的博客 231

秀出新天际的SpringBoot笔记,让开发像搭积木一样简单

什么是 Spring Boot Java (面向对象编程语言)经过30多年的发展,产生了非常多的优秀框架。Spring (为解决企业应用程序开发的复杂性而创建的框架)曾是最受欢迎的Java框架之一, 但随着Node、Ruby、Groovy、PHP等脚本语言的蓬勃发展,使用Spring开发应用就显得繁琐了,因为它使用了大量的XML配置文件,配置繁琐,整合不易,开发和部署效率低下。这时急切需要一-种新的能解决这些问题的快速开发框架,于是Pivotal Software公司在2013开始了Spring Boot

翻肚鱼儿的博客 1097

实战:RocketMQ 削峰,这一篇就够了

点击上方“芋道源码”,选择“设为星标”管她前浪,还是后浪?能浪的浪,才是好浪!每天 8:55 更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2020 超神之路,很肝~...

芋艿V 600
上一篇: SpringCloud 的25连环炮!
下一篇: 图解 Redis 分布式锁,写得太好了!
公众号-芋道源码
博客等级 码龄10年 1640粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值