- 博客(54)
- 收藏
- 关注
RSS订阅原创 基于Kafka2.1解读Consumer原理
Producer的逻辑是把消息往外发，所以Sender运行的越快，client这边为了维护batch而消耗的资源（内存和CPU越少）；而如果Consumer也这么干，实际消费速度赶不上fetch速度的话，会需要额外的内存和CPU资源来维持更多的completedFetchs，更别说如果发生了rebalance的话，fetch过来的completedFetchs可能都是白fetch了。从Fetcher的数据结构里其实就可以猜到它的作用：缓存已Fetch到的records、去fetch更多的records。
2024-11-17 10:43:54
1164
原创 基于Kafka2.1解读Producer原理
相信现在的javer对于Kafka应该都很熟悉了，不管是八股文还是工作中使用。虽然Kafka server是scala写的，但是client是java写的，所以咱们理解client的代码还是比较容易的，今天先来基于源码解读下Kafka Producer的主体流程Kafka的消息发送其实就是一个RPC的过程，有自己的网络协议、消息协议、消息序列化方式、数据批量发送（增加吞吐量）、超时处理、底层网络模型。不过Producer对于batch的复用，其实还是有一定的厉害之处的，等下次有空分析下~
2024-10-09 13:05:37
1005
原创 通过JITWatch查看汇编代码，观测jdk17改动对代码的影响
我们可以使用JITWatch来观测线上代码实际运行逻辑，来进行一些问题分析和学习参考。虽然线上运行的是机器指令，但是为了方便阅读和理解，JITWatch执行的都是汇编代码，是ARM指令集的汇编代码，不过咱们可以借助chat-gpt或者豆包等大模型帮忙解读没有想到C2编译器相对于C1编译器的高级优化（激进优化）里还有「分支预测」这一步JIT的编译优化也是有可能误判（错误优化）导致实际代码运行过程中需要进行逆优化再编译的。
2024-10-06 09:21:53
1127
原创 Springboot结合Mockito写单元测试实践和原理
相信看我博客的都是javaer，工作中一般都是使用Springboot框架。之前介绍过，可以利用@Transactional注解实现单测方法回滚，其实大家都知道Springboot-Test里面集成了Mockito，今天我们来介绍下怎么使用，以及原理是什么。文章主要讲了Springboot中的@MockBean和@SpyBean的使用场景和简单原理。
2023-10-16 20:27:37
1426
原创 AQS源码解读
AQS是AbstractQueuedSynchronizer的缩写，也是大神Doug Lea的得意之作。今天我们来进行尽量简化的分析和理解性的代码阅读。竞争资源总体分三步1. 尝试获取资源，成功就返回2. 失败了的线程封装成Node，加入到队列3. 加入到队列的Node，不停经历（阻塞-非阻塞-tryAcquire），直到获取资源成功释放资源分两步4. 尝试释放资源，失败了就返回5. 释放成功了，需要把头结点的waitStatus置空，唤醒下一个非CANCELED的Node进行资源获取操作。
2023-08-19 12:05:12
463
原创 手写简单的spring（2）：实现循环依赖
文章目录前言一、前期辅助1.1 最朴素的想法1.2 真的这么丝滑么二、使用步骤1.引入库2.读入数据总结前言相信凡是写Java的同学都知道或者背过Spring实现循环依赖的方式吧，无非是三个缓存工厂，然后每个工厂放object的什么形态，bla-bla之类的。之前我也写过一篇博客，图解过 。不过，如果我们自己来实现，该如何写呢？接着我们上一篇的博客，继续探索一下。一、前期辅助1.1 最朴素的想法既然我们需要实现一个循环依赖，那么我们首先来写个demopublic class CycleSer
2022-04-04 19:30:11
648
原创 从硬件到软件去理解一致性
看了很多操作系统和软件中间件之类的知识之后发现，软件和硬件在大的方面有时候解决的是一样的问题软件层面需要解决的问题，其实在硬件层面早就解决过，在软件层面进行技术架构时可以进行参考。不过硬件层面比软件层面又好在没有网络因素在里面，所以需要对于具体的业务或者功能有相应的取舍。
2021-12-10 14:36:43
1588
原创 mac下配置PrintAssembly
有时候难免想看下对应的Java代码JIT编译之后的汇编代码是什么样有了printAssembly方式，咱们相当于可以查看JIT下class对应的执行的汇编指令。所以我们可以看看加了volatile的变量执行方式上具体有什么差异，相关内容已更新到这篇文章，欢迎不吝赐教。
2021-11-01 15:10:52
1417
原创 添加@Async注解，导致spring启动失败
文章目录前言一、异常表现，抛出内容1.1循环依赖的两个class1.2 启动报错二、原因分析2.1 主要原因2.2 循环依赖放入二级缓存处逻辑2.3 initializeBean生成的对象2.4 再次分析原因总结前言在这篇文章里，最后总结处，我说了会讲讲循环依赖中，其中一个类添加@Async有可能会导致注入失败而抛异常的情况，今天就分析一下。一、异常表现，抛出内容1.1循环依赖的两个classCycleService1@Servicepublic class CycleService1
2021-08-29 10:22:42
4025
4
原创 spring源码解读：@Async的原理——默认配置
文章目录前言一、如何使用@Async二、源码解读1.@EnableAsync的作用2. AsyncConfigurationSelector的作用3. adviceMode:PROXY(默认值)3.1 ProxyAsyncConfiguration3.2 AsyncAnnotationBeanPostProcessor3.3 AsyncAnnotationAdvisor3.3.1 buildAdvice3.3.1.1 AnnotationAsyncExecutionInterceptor，异步执行的原理3.
2021-08-22 21:38:29
1700
原创 spring循环依赖原理图解+bean的生命周期图解
Spring是如何处理循环依赖的，又是怎么做到，互相注入对方的proxy bean而不是raw bean的？现在就分析一下循环依赖其实耐下功夫读源码，也没有那么难。下次分享为什么循环依赖的其中一个类添加@Async有可能会导致注入失败而抛异常–这篇博客。
2021-08-15 12:20:57
447
原创 基于Spring，属性注入动态对象
文章目录前言一、思路二、使用步骤1.注入对象类型必须是接口2. 注入的实际对象必须是一个ObjectFactory3. 注入的对象属性必须在DefaultListableBeanFactory#resolvableDependencies里4. 测试实现三、ObjectFactory 和 FactoryBean3.1 ObjectFactory3.2 FactoryBean四、一个新方案（prototype + @Lazy）4.1 将WangObj的作用域scope改为prototype4.2 将WangO
2021-08-10 12:27:16
942
原创 关于Java的Interrupt的一些知识
文章目录前言一、interrupt()二、interrupted()和isInterrupted()1.interrupted()2. isInterrupted()3. isInterrupted(boolean ClearInterrupted)总结前言对于Java的InterceptException以及interrupt()等方法总会有疑惑，或者记不清，其实最好的解释就是方法的doc注释一、interrupt()咱们看看源码上，对于interrupt()方法的注释：/** *
2021-08-08 17:00:07
265
原创 spring源码解读：@Lazy延迟注入的逻辑
文章目录前言一、一个简单的小例子二、源码解读1. 注入2. 使用逻辑总结前言有时候我们会在属性注入的时候添加@Lazy注解实现延迟注入，今天咱们通过阅读源码来分析下原因一、一个简单的小例子代码如下：@Servicepublic class NormalService1 { @Autowired @Lazy private MyService myService; public void doSomething() { myService.getName(); }}作用
2021-08-03 18:11:39
1643
3
原创 为什么有了MESI还需要volatile关键字
MESI的概念此处不再累赘，有兴趣的可以搜索store buffer引入store buffer是为了将同步改为异步引入store forwarding技术是为了让CPU可以直接从store buffer里加载数据但是因此可能会发生乱序情况，譬如a在store buffer里，b在cache里，但是赋值操作虽然先设置了a，后设置了b，但是实际上却可能是b先被刷新到cache里，因为store buffer里的a在等待其他cpu返回invalid ack引入写屏障技术，添加smp_w
2021-07-08 10:45:45
1062
1
原创 java堆内堆外内存困惑
操作系统IO分为 直接IO和缓存IO可以参考：1. https://www.icode9.com/content-4-450323.html2. https://blog.youkuaiyun.com/lzh1179805109/article/details/79883523简单的理解缓存IO就是：可以把缓存IO认为是系统给磁盘增加的缓存，Linux的实现是通过内核缓存，这样的话，用户进程的数据write和read其实针对的就是内核缓存，至于内核缓存什么时候和磁盘同步，这个在此不多介绍。Linux系统默认.
2021-06-08 17:09:05
476
原创 阻塞/非阻塞IO和同步/异步IO
文章目录前言一、IO的理解二、IO的使用1.传统IO2.NonBlocking IO 非阻塞IO3. New IO : NIO4. 异步IO：AIO总结前言IO是个比较废人思量的东西，不管是自己理解，还是面试提问。一、IO的理解IO的作用一般分为，获取文件数据或网络请求数据。数据处理过程其实分为两阶段：A. 数据内核准备数据（把数据从网卡拷贝到内核的page cache或者把文件数据从磁盘拷贝到内核的page cache）；B. 把数据从内核的page cache拷贝给用户的用户进程（用户空间
2021-05-10 11:20:19
336
原创 利用AOP实现打印接口调用基本信息（统计接口调用时长）
文章目录前言一、AOP是什么二、打印接口调用信息1.why？2. code2.读入数据总结前言之前写过一篇博客，利用AOP进行接口调用频控设置；这次写一篇利用AOP打印接口调用基本信息。一、AOP是什么aop的基本使用和解释，可以参考其他博客，或者Spring的官网：https://docs.spring.io/spring-framework/docs/current/reference/html/core.html#aop-api二、打印接口调用信息1.why？有时候线上或者某个环境发
2021-04-30 14:59:26
908
原创 @ControllerAdvice和@ExceptionHandler的原理
文章目录前言一、简单使用1. jar的引入2. 废话不多说，上代码二、查看原理1.抽丝剥茧1.1 WebMvcAutoConfiguration2.读入数据总结前言现在大家都习惯使用Spring框架了，而且平时的业务系统中的异常捕捉及处理都是靠@ControllerAdvice和@ExceptionHanlder两个注解配合使用的。一、简单使用1. jar的引入其实我不写，哈哈哈哈。看了下这两个注解都是spring-web里的，不过因为现在一般项目都是使用springboot启动的，所以不用自
2021-04-22 20:43:05
1196
1
原创 利用ThreadLocal和StopWatch实现一个简单的埋点计时工具
文章目录前言一、一般做法二、更优雅的做法1. 考虑线程的概念2. 考虑如何计时3. 优化的计时方法类总结前言写代码的时候，我们有时候需要获取方法调用详细耗时。一、一般做法一般情况下，对于接口调用耗时，简单的做法都是通过System.currentTimeMillis()来获取时间，然后分别相减，获取某个代码块的执行耗时； public ApiResponseEntity exTest() { long start = System.currentTimeMillis();
2021-04-21 21:50:13
1178
原创 IDEA 2020.3启动项目：java: java.lang.IllegalArgumentException
java: java.lang.IllegalArgumentException
2021-04-17 17:46:15
23321
14
原创 @Autowired注解的原理、源码
文章目录前言一、@Autowired怎么使用？二、注入干了啥1.查找一个类的所有注入点1.1 在Spring中Bean的生态位置1.2 detail，源码解读2.读入数据总结前言@Resource注解和@Autowired注解是咱们使用Spring的两大利器，用来进行属性注入。在上一篇文章中，我们解析了@Resource的源码，同时在总结里解释了下为什么@Resource被称为先按byName后按byType进行依赖注入。今天咱们来分析下@Autowired注解的源码和原理。一、@Autowired
2021-03-24 11:55:32
721
原创 @Resource注解的原理、源码
文章目录前言一、@Resource怎么用？二、那么注入做了些啥1.查找一个类的所有注入点1.1 在Spring中Bean的生态位置1.2 detail，源码解读2. 注入2.1 在Spring中bean的生态的位置总结前言@Resource注解和@Autowired注解是咱们使用Spring的两大利器，用来进行属性注入。这篇文章来简单分析下@Resource的原理一、@Resource怎么用？很简单的啦，譬如如下：@Servicepublic class TestService {
2021-03-15 21:07:38
1450
原创 Spring源码解读：Spring的Event编程以及实现原理
文章目录前言一、使用传统方式观察者模式二、源码解读1.引入库2.读入数据总结前言要想代码写得好，设计模式不可少。Spring框架启动过程中，有两个设计模式使用较多，一个是观察者模式，一个是processor处理时用的链式模式。今天我们来介绍观察者模式的Event一、使用传统方式咱们写业务代码，经常会涉及到某种业务场景，譬如A的改变，B或者C需要知道，以便改变。一般程序员写代码可能会写成下面这种@Servicepublic class AService { @Autowired pr
2021-02-02 18:08:54
996
1
原创 Spring源码解读：@Transactional原理（2）
文章目录前言一、类图二、MethodInterceptor#invoke1.方法拦截器？2.TransactionInterceptor#invoke3. TransactionAspectSupport#invokeWithinTransaction3.1 createTransactionIfNecessary3.1.1 AbstractPlatformTransactionManager#getTransaction，获取事务状态TransactionStatus3.1.1.1 调用当前事务方法前，已
2021-01-26 19:39:31
617
原创 基于AOP+Redis实现一个简单频控拦截器
文章目录前言一、定义注解二、Aspect三、使用示例总结前言为了实现频控，并且可插拔形式，那么AOP无疑是一个非常好的选择。咱们这个Aspect实现依赖了redis一、定义注解今天咱们做一个简单的频控组件，可以实现某个接口针对某个用户某个时间段只能调用1次注解如下：@Inherited@Documented@Target(ElementType.METHOD)@Retention(RetentionPolicy.RUNTIME)public @interface FrequencyC
2021-01-26 15:27:31
1472
原创 线上问题引发的对于Map.values()的探究思考
项目场景：项目场景：我们的数据需要同步到es，以供列表页查询。产品反映修改了数据之后，列表页显示的字段可能是修改之前的甚至更老版本的数据。问题描述：我们目前做的一个系统，表单数据会有多个版本，但是不同版本字段不一定相同。需要把所有数据同步到es，在es进行列表搜索显示。上线几天后发现一个诡异的事儿是，某些表单，在经过多次编辑之后，从es查到的列表数据某些字段会展示位旧数据，而表单详情是最新数据。定位问题，问题一定出现在表单多版本数据融合，然后同步到es的地方查看代码 List<S
2021-01-19 18:01:35
901
2
原创 Spring源码解读：@Transactional原理（1）
文章目录前言一、@Transactional的作用二、@Transactional如何生效的1.@EnableTransactionManagement2. AutoProxyRegistrar3 ProxyTransactionManagementConfiguration3.1 advisor中的pointCut总结小结AOP前言这篇文章来讲讲Spring的重要组成部分@Transactional注解是如何生效的一、@Transactional的作用写java的都知道，这个注解是用来给方法添加
2020-12-31 15:41:27
709
原创 Spring源码解读：Spring注入Request原理
文章目录前言一、来个例子二、解析一下1. 为啥会打印Current HttpServletRequest2. 既然是Spring注入的对象，为啥能做到动态变化3. 为啥此ObjectFactory.getObject()能够拿到不停变化的对象总结前言之前我在这篇文章说过Spring往容器里管理了Request对象，所以你可以在spring的任何实例里面注入HTTPRequest对象。具体是怎么实现的呢？今天就来更详细地分析下~一、来个例子示例：pandas 是基于NumPy 的一种工具，该工具是
2020-12-08 15:53:05
1402
原创 Spring源码学习(四)：容器ApplicationContext的refresh（2）- 执行BeanFactoryPostProcessor
文章目录前言一、BeanFactoryPostProcessor和BeanDefinitionRegistryPostProcessor是什么二、Spring执行这些PostProcessor的步骤1. BeanDefinitionRegistryPostProcessor优先级高2. 开始执行Spring容器里的BeanDefinitionRegistryPostProcessor2.1 执行了PriorityOrder接口的BeanDefinitionRegistryPostProcessor2.2 C
2020-12-01 18:39:51
305
原创 Spring源码学习(三)：容器ApplicationContext的refresh（1）
文章目录前言一、Springboot中的refreshContext二、AbstractApplicationContext的refresh1.引入库2.读入数据总结前言第一篇地址，主要讲ApplicationContext的初始化-create：Spring源码学习(一)：Spring容器创建和初始化工作准备第二篇地址，主要讲ApplicationContext的准备工作-prepare：Spring源码学习（二）：Spring容器之prepareContext和BeanFactoryPostPr
2020-11-17 11:44:03
393
原创 Spring源码学习(二)：Spring容器之prepareContext和BeanFactoryPostProcessor的介绍
文章目录前言一、Springboot中prepareContext1.1 获取提前放入的sources1.2 把sources生成BeanDefinition放入到spring容器中二、BeanFactoryPostProcessor的介绍2.1 BeanFactoryPostProcessor2.2 BeanDefinitionRegistryPostProcessor2.3 ConfigurationClassPostProcessor总结继续跟随Springboot的启动过程分析spring的源码
2020-11-10 18:56:12
411
1
原创 Spring源码学习(一)：Spring容器创建和初始化工作准备
文章目录前言一、Spring是什么？二、探究1. Spring容器启动1.1 容器类型（contextClass）的判断1.2 容器的实例化2. 容器的创建及实例化过程2.1 构造方法读下去2.1.1 scanner的作用2.1.2 reader的作用总结前言基于学习遗忘曲线收敛太快，决定将Spring源码的解读记录下来。今天是第一篇，容器的启动那就开始吧~一、Spring是什么？用java的应该都清楚Spring框架是什么，目前市面上的主流java框架也都会做和Spring的结合。Sprin
2020-11-09 11:54:43
492
2
原创 @EnableAutoConfiguration的使用和原理
Springboot @EnableAutoConfiguration原理Springboot是如何加载@EnableAutoConfiguration1. 如何把自己的配置类加入到Spring容器中呢？1.1 spring.factories2. 探究Springboot是如何加载我们的配置类的2.1 注解介绍2.1.1 @SpringbootApplication注解是什么2.1.2 @SpringbootConfiguration注解2.1.3 @EnableAutoConfiguration注解2.
2020-11-08 18:46:53
3845
原创 线上问题排查1
大背景介绍：项目A之前从产品-开发-测试全是外包进行开发的，后来由于部门的一些人事变动，外包全被裁了。很不幸，需要负责该项目用户反馈问题：审批流程节点，审批人点击查看详情时，报服务器内部错误。处理步骤：1.查询后端日志：grep 'exception' xxx.lognested exception is org.apache.ibatis.exceptions.TooManyResultsException: Expected one result (or null) to be retu
2020-11-05 19:02:12
155
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人