并发编程知识精要

📕我是廖志伟,一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》(基础篇)(进阶篇)、(架构篇)、《解密程序员的思维密码——沟通、演讲、思考的实践》作者、清华大学出版社签约作家、Java领域优质创作者、优快云博客专家、阿里云专家博主、51CTO专家博主、产品软文专业写手、技术文章评审老师、技术类问卷调查设计师、幕后大佬社区创始人、开源项目贡献者。

📘拥有多年一线研发和团队管理经验,研究过主流框架的底层源码(Spring、SpringBoot、SpringMVC、SpringCloud、Mybatis、Dubbo、Zookeeper),消息中间件底层架构原理(RabbitMQ、RocketMQ、Kafka)、Redis缓存、MySQL关系型数据库、 ElasticSearch全文搜索、MongoDB非关系型数据库、Apache ShardingSphere分库分表读写分离、设计模式、领域驱动DDD、Kubernetes容器编排等。

📙不定期分享高并发、高可用、高性能、微服务、分布式、海量数据、性能调优、云原生、项目管理、产品思维、技术选型、架构设计、求职面试、副业思维、个人成长等内容。

Java程序员廖志伟

💡在这个美好的时刻,笔者不再啰嗦废话,现在毫不拖延地进入文章所要讨论的主题。接下来,我将为大家呈现正文内容。

优快云

一、并发编程知识体系

线程基础

在并发编程领域,线程作为程序执行的最小单元,承载着程序并行执行的能力,极大地提高了程序的执行效率。以下是线程基础知识的详细解析:

  1. 线程生命周期:线程从创建到销毁,经历了多个阶段。这些阶段包括新建(New)、就绪(Runnable)、运行(Running)、阻塞(Blocked)、等待(Waiting)、超时等待(Timed Waiting)和终止(Terminated)。线程生命周期管理是确保线程安全、提高程序效率的关键。

    • 新建阶段:线程对象被创建,但尚未启动。
    • 就绪阶段:线程已准备好执行,等待CPU调度。
    • 运行阶段:线程正在CPU上执行。
    • 阻塞阶段:线程由于某些原因(如等待资源)无法继续执行。
    • 等待阶段:线程主动放弃CPU资源,等待特定条件满足。
    • 超时等待阶段:线程等待特定条件,但设置了一个超时时间。
    • 终止阶段:线程完成执行或被终止。
  2. 线程优先级:线程优先级决定了线程在CPU上的调度顺序。Java中线程优先级分为最高(10)、分高(7)、中(5)、分低(3)、最低(1)五个等级。线程优先级设置不当可能导致死锁、优先级反转等问题。

  3. 守护线程:守护线程是一类特殊的线程,它不干涉主线程的执行。当所有非守护线程结束时,守护线程也会自动结束。守护线程常用于执行后台任务,如垃圾回收。

  4. 线程池:线程池是管理一组线程的集合,可以有效地控制线程的创建、销毁和复用。线程池的核心参数配置包括核心线程数、最大线程数、存活时间、任务队列和拒绝策略。

    • 核心线程数:线程池中最小的工作线程数量,即使没有任务也会保持运行。
    • 最大线程数:线程池中最大的工作线程数量,当任务数量超过核心线程数时,线程池会创建新线程。
    • 存活时间:空闲线程在终止前可以存活的时间。
    • 任务队列:存储等待执行的任务,常见的队列类型有LinkedBlockingQueue、ArrayBlockingQueue、PriorityBlockingQueue、SynchronousQueue。
    • 拒绝策略:当任务队列已满时,如何处理新任务,常见的策略有CallerRunsPolicy、AbortPolicy、DiscardPolicy、DiscardOldestPolicy。
  5. 工作队列类型:工作队列是线程池中存储任务的队列,常见的队列类型有:

    • LinkedBlockingQueue:基于链表的阻塞队列,具有可预定的容量。
    • ArrayBlockingQueue:基于数组的阻塞队列,具有可预定的容量。
    • PriorityBlockingQueue:具有优先级的阻塞队列。
    • SynchronousQueue:同步队列,不存储元素,每个插入操作必须等待对应的移除操作。
  6. 同步机制:同步机制是保证线程安全的关键技术,包括以下几种:

    • 悲观锁:假设多个线程会同时访问共享资源,因此对共享资源进行加锁,直到某个线程完成操作才释放锁。Java中的synchronized关键字、ReentrantLock等都是悲观锁的实现。
    • 乐观锁:假设多个线程不会同时访问共享资源,因此不对共享资源进行加锁,通过版本号或时间戳等方式来保证线程安全。Java中的乐观锁实现有AtomicInteger、AtomicLong等。
    • 读写锁:允许多个线程同时读取共享资源,但只允许一个线程写入共享资源。Java中的读写锁实现有ReadWriteLock、ReentrantReadWriteLock等。
    • 条件变量:线程在等待某个条件成立时,会进入等待状态,当条件成立时,线程会被唤醒。Java中的条件变量实现有Condition接口。

并发集合

  1. ConcurrentHashMap:线程安全的HashMap,支持高并发访问。其内部采用分段锁技术,将数据分成多个段,每个段有自己的锁,从而提高并发访问性能。

  2. CopyOnWrite容器:当有线程进行写操作时,容器会创建一个新的副本,然后写入新副本,完成后再将原容器指向新副本。这种策略适用于读多写少的场景。

  3. BlockingQueue:线程安全的队列,支持生产者-消费者模型。常见的实现有ArrayBlockingQueue、LinkedBlockingQueue、PriorityBlockingQueue等。

并发工具类

  1. Phaser:用于协调一组线程的并发执行。Phaser提供了一种灵活的线程同步机制,可以方便地实现线程间的协作。

  2. Exchanger:允许两个线程交换数据。Exchanger常用于线程间的数据交换,如生产者-消费者模型中的缓冲区。

  3. FutureTask:用于异步执行任务,并获取结果。FutureTask是Future接口的实现,可以用于异步编程。

非阻塞算法

  1. CAS原理:Compare-And-Swap,比较并交换操作,用于实现无锁编程。CAS操作包含三个操作数:内存位置V、预期原值A和新值B。当内存位置V的值与预期原值A相同时,将内存位置V的值修改为新值B,否则不做任何操作。

  2. Atomic类:提供线程安全的原子操作。Java中的Atomic类包括AtomicInteger、AtomicLong、AtomicReference等。

  3. 无锁队列:基于CAS原理实现的线程安全队列。无锁队列通过CAS操作保证线程安全,适用于高并发场景。

并发框架

  1. Netty线程模型:Netty采用主从多线程模型,主线程负责接收客户端连接,从线程负责处理业务逻辑。这种模型提高了系统的吞吐量和并发处理能力。

  2. Akka Actor模型:Akka采用Actor模型,每个Actor是一个消息处理器,可以并发地处理消息。Actor模型具有高可用性、可伸缩性等特点。

  3. Disruptor环形缓冲区:Disruptor使用环形缓冲区存储数据,提供高并发、低延迟的数据处理能力。Disruptor通过减少锁的使用,提高了系统的并发性能。

二、MyBatis知识体系

SQL映射

  1. 注解映射:使用注解将Java对象与数据库表进行映射。MyBatis提供了一系列注解,如@Select、@Insert、@Update、@Delete等,方便地进行数据库操作。

  2. 结果集映射:将查询结果映射到Java对象。MyBatis通过配置XML文件或注解,将查询结果映射到Java对象,实现了对象关系映射(ORM)。

  3. 关联查询:处理多表关联查询,实现一对多、多对多等关系。MyBatis通过配置XML文件或注解,实现多表关联查询。

动态SQL

  1. OGNL表达式:表达式语言,用于动态生成SQL语句。OGNL表达式可以方便地实现动态SQL的编写。

  2. 分支语句:根据条件执行不同的SQL语句。MyBatis支持if、choose、when、otherwise等分支语句,实现动态SQL。

  3. 批量操作:一次性执行多条SQL语句。MyBatis支持批量插入、批量更新等操作,提高数据库操作效率。

缓存机制

  1. 一级缓存:MyBatis在SqlSession级别提供的一级缓存,用于存储最近执行的SQL语句及其结果。一级缓存可以提高查询效率,但无法跨SqlSession共享数据。

  2. 二级缓存:MyBatis在全局范围内提供的一级缓存,用于存储不同SqlSession之间的共享数据。二级缓存可以提高整个应用的数据查询效率,但配置和管理相对复杂。

  3. 自定义缓存:用户可以根据需求自定义缓存实现。自定义缓存可以扩展MyBatis的功能,满足特定场景的需求。

代理模式

  1. MapperProxy:MyBatis使用代理模式实现Mapper接口的动态代理。动态代理可以拦截Mapper接口的方法调用,实现SQL执行、结果集映射等操作。

  2. 插件拦截:MyBatis允许用户自定义插件,拦截SQL执行过程。插件可以扩展MyBatis的功能,如日志记录、性能监控等。

动态代理执行流程

  1. 创建SqlSession。

  2. 获取Mapper接口的代理实例。

  3. 调用代理实例的方法,执行SQL语句。

  4. 根据结果集映射规则,将结果集映射到Java对象。

SqlSession生命周期

  1. 创建SqlSession。

  2. 使用SqlSession执行数据库操作。

  3. 关闭SqlSession。

执行器类型

  1. SimpleExecutor:简单执行器,适用于单条SQL语句执行。SimpleExecutor直接执行SQL语句,不进行预处理。

  2. ReuseExecutor:重用执行器,适用于批量执行相同SQL语句。ReuseExecutor会重用预处理后的SQL语句,提高执行效率。

  3. BatchExecutor:批量执行器,适用于批量执行不同SQL语句。BatchExecutor将多条SQL语句合并成一条批量执行,提高执行效率。

延迟加载

  1. 延迟加载:在需要时才加载关联数据,提高程序执行效率。延迟加载可以减少数据库访问次数,提高系统性能。

扩展机制

  1. 类型处理器:将数据库类型转换为Java类型。类型处理器可以扩展MyBatis的功能,支持更多数据库类型。

  2. 拦截器链:拦截SQL执行过程,实现自定义功能。拦截器链可以扩展MyBatis的功能,如日志记录、性能监控等。

  3. 方言支持:支持不同的数据库方言。方言支持可以扩展MyBatis的功能,支持更多数据库。

优快云

博主分享

📥博主的人生感悟和目标

Java程序员廖志伟

📙经过多年在优快云创作上千篇文章的经验积累,我已经拥有了不错的写作技巧。同时,我还与清华大学出版社签下了四本书籍的合约,并将陆续出版。

面试备战资料

八股文备战
场景描述链接
时间充裕(25万字)Java知识点大全(高频面试题)Java知识点大全
时间紧急(15万字)Java高级开发高频面试题Java高级开发高频面试题

理论知识专题(图文并茂,字数过万)

技术栈链接
RocketMQRocketMQ详解
KafkaKafka详解
RabbitMQRabbitMQ详解
MongoDBMongoDB详解
ElasticSearchElasticSearch详解
ZookeeperZookeeper详解
RedisRedis详解
MySQLMySQL详解
JVMJVM详解

集群部署(图文并茂,字数过万)

技术栈部署架构链接
MySQL使用Docker-Compose部署MySQL一主二从半同步复制高可用MHA集群Docker-Compose部署教程
Redis三主三从集群(三种方式部署/18个节点的Redis Cluster模式)三种部署方式教程
RocketMQDLedger高可用集群(9节点)部署指南
Nacos+Nginx集群+负载均衡(9节点)Docker部署方案
Kubernetes容器编排安装最全安装教程

开源项目分享

项目名称链接地址
高并发红包雨项目https://gitee.com/java_wxid/red-packet-rain
微服务技术集成demo项目https://gitee.com/java_wxid/java_wxid

管理经验

【公司管理与研发流程优化】针对研发流程、需求管理、沟通协作、文档建设、绩效考核等问题的综合解决方案:https://download.youkuaiyun.com/download/java_wxid/91148718

希望各位读者朋友能够多多支持!

现在时代变了,信息爆炸,酒香也怕巷子深,博主真的需要大家的帮助才能在这片海洋中继续发光发热,所以,赶紧动动你的小手,点波关注❤️,点波赞👍,点波收藏⭐,甚至点波评论✍️,都是对博主最好的支持和鼓励!

🔔如果您需要转载或者搬运这篇文章的话,非常欢迎您私信我哦~

Delphi 12.3 作为一款面向 Windows 平台的集成开发环境,由 Embarcadero Technologies 负责其持续演进。该环境以 Object Pascal 语言为核心,并依托 Visual Component Library(VCL)框架,广泛应用于各类桌面软件、数据库系统及企业级解决方案的开发。在此生态中,Excel4Delphi 作为一个重要的社区开源项目,致力于搭建 Delphi 与 Microsoft Excel 之间的高效桥梁,使开发者能够在自研程序中直接调用 Excel 的文档处理、工作表管理、单元格操作及宏执行等功能。 该项目以库文件与组件包的形式提供,开发者将其集成至 Delphi 工程后,即可通过封装良好的接口实现对 Excel 的编程控制。具体功能涵盖创建与编辑工作簿、格式化单元格、批量导入导出数据,乃至执行内置公式与宏指令等高级操作。这一机制显著降低了在财务分析、报表自动生成、数据整理等场景中实现 Excel 功能集成的技术门槛,使开发者无需深入掌握 COM 编程或 Excel 底层 API 即可完成复杂任务。 使用 Excel4Delphi 需具备基础的 Delphi 编程知识,并对 Excel 对象模型有一定理解。实践中需注意不同 Excel 版本间的兼容性,并严格遵循项目文档进行环境配置与依赖部署。此外,操作过程中应遵循文件访问的最佳实践,例如确保目标文件未被独占锁定,并实施完整的异常处理机制,以防数据损毁或程序意外中断。 该项目的持续维护依赖于 Delphi 开发者社区的集体贡献,通过定期更新以适配新版开发环境与 Office 套件,并修复已发现的问题。对于需要深度融合 Excel 功能的 Delphi 应用而言,Excel4Delphi 提供了经过充分测试的可靠代码基础,使开发团队能更专注于业务逻辑与用户体验的优化,从而提升整体开发效率与软件质量。 资源来源于网络分享,仅用于学习交流使用,请勿用于商业,如有侵权请联系我删除!
# 【实战教程】Pytest从入门到进阶:基于FastAPI的测试开发全指南 13章体系化教程,从Pytest基础到企业级实战,结合FastAPI落地测试方案,附完整可运行代码与最佳实践! ## 核心内容 覆盖环境搭建、用例编写、Fixture系统、参数化测试、覆盖率分析、插件开发、CI/CD集成等13大核心模块,分入门→进阶→高级三阶段学习路径。每章配套FastAPI实战项目(用户认证、电商API、完整电商系统等),测试用例贴合实际业务,支持本地直接运行。聚焦高频难点:Fixture作用域管理、参数化数据源设计、测试并行执行、异常处理、自定义插件开发、覆盖率优化。落地工程化实践:测试目录规范、用例隔离、日志配置、测试报告可视化、CI/CD自动化集成。 ## 技术栈 FastAPI + Pytest + Pydantic + OAuth2/JWT + RESTful API + 测试覆盖率工具 + CI/CD ## 适用人群 Python开发者、测试工程师、后端开发者、DevOps工程师(零基础可入门,有经验可进阶) ## 学习收获 掌握Pytest全流程用法,能独立设计可维护测试体系,实现高覆盖率测试与报告可视化,开发自定义插件,落地TDD与持续集成流程。 ## 快速上手 1. 进入章节目录安装依赖:`pip install fastapi uvicorn pytest fastapi.testclient` 2. 运行应用:`uvicorn app:app --reload`,访问`http://localhost:8000/docs` 3. 执行测试:`python -m pytest test_app.py -v` 配套完整代码、测试用例与配置文件,助力快速落地实际项目!
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值