JavaEE
关注
分享
扫一扫
文章平均质量分 69
后端进阶
作者张乘辉，擅长消息中间件技能，负责公司百万 TPS 级别 Kafka 集群的维护，微信公众号「后端进阶」不定期分享 Kafka、RocketMQ 系列不讲概念直接真刀真枪的实战总结以及细节上的源码分析；同时作者也是阿里开源分布式事务框架 Seata Contributor，因此也会不定期分享关于 Seata 的相关知识；当然公号也会不定期发表 WEB 相关知识比如 Spring 全家桶等。不一定面面俱到，但一定让你感受到作者对于技术的追求是认真的！
展开
-
探讨缓存行与伪共享
最近项目中有个需求，需要用到有界队列对访问请求量进行流量削峰请求，同时作为一个缓冲层对请求处理进行后续处理，Java 内置有界队列 ArrayBlockingQueue 可以满足这方面的需求，但是性能上并不满足，于是使用了 Disruptor，它是英国外汇交易公司 LMAX 开发的一个高性能队列，了解到它内部解决伪共享问题，今天就和大家一起学习缓存行与伪共享相关的知识。缓存行（Cache line）对计算机组成原理相对熟悉的小伙伴都知道，CPU 的速度比内存的速度高了几个数量级，为了 CPU 更快从内存原创 2020-08-29 23:09:58 · 1044 阅读 · 1 评论 -
基于Jenkins Pipeline自动化部署
最近在公司推行Docker Swarm集群的过程中，需要用到Jenkins来做自动化部署，Jenkins实现自动化部署有很多种方案，可以直接在jenkins页面写Job，把一些操作和脚本都通过页面设置，也可以在每个项目中直接写Pipeline脚本，但像我那么追求极致的程序员来说，这些方案都打动不了我那颗骚动的心，下面我会跟你们讲讲我是如何通过Pipeline脚本实现自动化部署方案的，并...原创 2019-02-17 09:33:15 · 3853 阅读 · 0 评论 -
一次 kafka 消息堆积问题排查
收到某业务组的小伙伴发来的反馈，具体问题如下：项目中某 kafka 消息组消费特别慢，有时候在 kafka-manager 控制台看到有些消费者已被踢出消费组。从服务端日志看到如下信息：该消费组在短时间内重平衡了 600 多次。从 cat 查看得知，每条消息处理都会有 4 次数据库的交互，经过一番沟通之后，发现每条消息的处理耗时大概率保持在 200ms 以上。Kafka 发生重平衡的有...原创 2020-01-07 09:40:05 · 8400 阅读 · 3 评论 -
图解 Kafka 水印备份机制
高可用是很多分布式系统中必备的特征之一，Kafka 日志的高可用是通过基于 leader-follower 的多副本同步实现的，每个分区下有多个副本，其中只有一个是 leader 副本，提供发送和消费消息，其余都是 follower 副本，不断地发送 fetch 请求给 leader 副本以同步消息，如果 leader 在整个集群运行过程中不发生故障，follower 副本不会起到任何作用，问题就...原创 2019-12-27 11:11:56 · 5854 阅读 · 0 评论 -
Seata 动态配置订阅与降级实现原理
Seata 的动态降级需要结合配置中心的动态配置订阅功能。动态配置订阅，即通过配置中心监听订阅，根据需要读取已更新的缓存值，ZK、Apollo、Nacos 等第三方配置中心都有现成的监听器可实现动态刷新配置；动态降级，即通过动态更新指定配置参数值，使得 Seata 能够在运行过程中动态控制全局事务失效（目前只有 AT 模式有这个功能）。那么 Seata 支持的多个配置中心是如何适配不同的动态配置...原创 2019-12-22 21:50:29 · 5752 阅读 · 0 评论 -
记一次 Kafka 集群线上扩容
前段时间收到某个 Kafka 集群的生产客户端反馈发送消息耗时很高，于是花了一段时间去排查这个问题，最后该集群进行扩容，由于某些主题的当前数据量实在太大，在对这些主题迁移过程中话费了很长一段时间，不过这个过程还算顺利，因为在迁移过程中也做足了各方面的调研，包括分区重平衡过程中对客户端的影响，以及对整个集群的性能影响等，特此将这个过程总结一下，也为双十一打了一剂强心剂。排查问题与分析接到...原创 2019-12-19 20:41:44 · 14756 阅读 · 1 评论 -
关于 Kafka 的一些面试题目
上周客串了一下面试官，在这里就简单记录一下期间我问到的一些关于 Kafka 的面试题目，这些都是我平时在学习 Kafka 的一些总结要点。谈谈你对 kafka 的整体认识？问这个问题主要是想知道面试者对 Kafka 的整体认识如何，能够大致了解清楚面试者对 Kafka 的相关概念的熟悉程度，比如消息、topic、partition、replica、offset、重平衡、lead...原创 2019-12-17 20:33:33 · 5353 阅读 · 0 评论 -
Seata 配置中心实现原理
Seata 可以支持多个第三方配置中心，那么 Seata 是如何同时兼容那么多个配置中心的呢？下面我给大家详细介绍下 Seata 配置中心的实现原理。配置中心属性加载在 Seata 配置中心，有两个默认的配置文件：file.conf 是默认的配置属性，registry.conf 主要存储第三方注册中心与配置中心的信息，主要有两大块：registry { # file 、nacos 、...原创 2019-12-16 20:43:05 · 5072 阅读 · 0 评论 -
Seata 客户端需要同时启动 TM 和 RM 吗？
在分析启动部分源码时，我发现 GlobalTransactionScanner 会同时启动 RM 和 TM client，但根据 Seata 的设计来看，TM 负责全局事务的操作，如果一个服务中不需要开启全局事务，此时是不需要启动 TM client的，也就是说项目中如果没有全局事务注解，此时是不是就不需要初始化 TM client 了，因为不是每个微服务，都需要 GlobalTransactio...原创 2019-12-14 14:54:36 · 2256 阅读 · 0 评论 -
Seata AT 模式启动源码分析
从上一篇文章「分布式事务中间件Seata的设计原理」讲了下 Seata AT 模式的一些设计原理，从中也知道了 AT 模式的三个角色（RM、TM、TC），接下来我会更新 Seata 源码分析系列文章。今天就来分析 Seata AT 模式在启动的时候都做了哪些操作。客户端启动逻辑TM 是负责整个全局事务的管理器，因此一个全局事务是由 TM 开启的，TM 有个全局管理类 GlobalTr...原创 2019-12-12 19:22:43 · 1903 阅读 · 0 评论 -
基于 Jenkins Pipeline 自动化部署
最近在公司推行Docker Swarm集群的过程中，需要用到Jenkins来做自动化部署，Jenkins实现自动化部署有很多种方案，可以直接在jenkins页面写Job，把一些操作和脚本都通过页面设置，也可以在每个项目中直接写Pipeline脚本，但像我那么优秀，那么追求极致的程序员来说，这些方案都打动不了我那颗骚动的心，下面我会跟你们讲讲我是如何通过Pipeline脚本实现自动化部署方案的，并且...原创 2019-11-11 07:09:48 · 2247 阅读 · 0 评论 -
Dubbo 全链路追踪日志的实现
微服务架构的项目，一次请求可能会调用多个微服务，这样就会产生多个微服务的请求日志，当我们想要查看整个请求链路的日志时，就会变得困难，所幸的是我们有一些集中日志收集工具，比如很热门的ELK，我们需要把这些日志串联起来，这是一个很关键的问题，如果没有串联起来，查询起来很是很困难，我们的做法是在开始请求系统时生成一个全局唯一的id，这个id伴随这整个请求的调用周期，即当一个服务调用另外一个服务的时候，会...原创 2019-11-07 01:00:32 · 4797 阅读 · 1 评论 -
我对支付平台架构设计的一些思考
我在前一家公司的第一个任务是开发统一支付平台，由于公司的业务需求，需要接入多个第三方支付，之前公司的支付都是散落在各个项目中，及其不利于支付的管理，于是聚合三方支付，统一支付平台的任务就落在我手上，可以说是完全从 0 开始设计，经过一翻实战总结，我得出了一些架构设计上的思考，之前就一直很想把自己的架构设计思路写出来，但一直没动手，前几天在技术群里有人问到相关问题，我觉得有必要把它写出来，以帮助到...原创 2019-06-04 08:05:00 · 6638 阅读 · 3 评论 -
关于RocketMQ消息消费与重平衡的一些问题探讨
其实最好的学习方式就是互相交流，最近也有跟网友讨论了一些关于 RocketMQ 消息拉取与重平衡的问题，我姑且在这里写下我的一些总结。关于 push 模式下的消息循环拉取问题之前发表了一篇关于重平衡的文章：「Kafka 重平衡机制」，里面有说到 RocketMQ 重平衡机制是每隔 20s 从任意一个 Broker 节点获取消费组的消费 ID 以及订阅信息，再根据这些订阅信息进行分配，然后...原创 2019-11-06 20:49:05 · 2849 阅读 · 1 评论 -
Java 后端自学之路
微信公众号「后端进阶」，专注后端技术分享：Java、Golang、WEB框架、分布式中间件、服务治理等等。老司机倾囊相授，带你一路进阶，来不及解释了快上车！最近有些网友问我如何自学 Java 后端，还有些是想从别的方向想转过来，但都不太了解 Java 后端究竟需要学什么，究竟要从哪里学起，哪些是主流的 Java 后端技术等等，导致想学，但又很迷茫，不知从何下手。我就以过来人的经历，写在这篇...原创 2019-05-31 23:33:27 · 3587 阅读 · 1 评论 -
数据库总结图
学习了两个星期数据库有关知识总结出来的一张图。原创 2016-12-19 00:28:34 · 1113 阅读 · 0 评论 -
操作dom对象模型思路
<!DOCTYPE html><html> <head> <meta charset="UTF-8"> <title></title> </head> <body> <input id=...原创 2016-11-02 21:29:00 · 1069 阅读 · 0 评论 -
js函数再总结
<!DOCTYPE html><html> <head> <meta charset="UTF-8"> <title></title> </head> <body> <script t...原创 2016-11-09 12:45:41 · 1059 阅读 · 0 评论 -
Js new一个函数和直接调用函数的区别
不实用new，也就是普通的函数调用而已，所以若是函数本身没有返回值，普通的函数调用没有什么意义如：var person=new Person();//person是一个对象var person = Person();//这只是一次普通的函数调用并赋值而已。例一：function Person(name,age){this.name=name;this.age=ag...原创 2016-11-04 20:09:59 · 10767 阅读 · 0 评论