Java架构-spring+springmvc+kafka分布式消息中间件集成方案

最新推荐文章于 2023-07-02 17:21:11 发布
原创 最新推荐文章于 2023-07-02 17:21:11 发布 · 427 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

该博客介绍了将Kafka作为分布式消息中间件，替代ActiveMQ，采用Spring和SpringMVC进行集成的方案。详细内容包括使用2.1.0.RELEASE版本的spring-integration-kafka，Zookeeper和Kafka集群的配置，以及Java代码示例展示消息消费者的配置和MessageListener的实现。此外，博主还分享了关于Spring Cloud微服务架构的搭建和实践经验，邀请架构师和技术爱好者加入交流社区，共同探讨和学习。

Honghu的消息服务平台已经抛弃了之前的ActiveMQ，改用高吞吐量比较大的Kafka分布式消息中间件方案：
kafka消息平台使用spring+kafka的集成方案，详情如下：

  1. 使用最高版本2.1.0.RELEASE集成jar包：spring-integration-kafka

  2. Zookeeper、Kafka分布式集群使用init.properties配置化方案。

Java代码

  1. 使用消息消费者spring-context-producer配置化方案。

    Java代码

  1. 使用注解方式注入消息类型

@Autowired
private KafkaTemplate<xxx, ooo> kafkaTemplate;

  1. 重写MessageListener 的getMessage方法获取消息（业务实现）

  2. RestFul服务方式测试消息服务
    Java代码

最低0.47元/天 解锁文章
Java进阶之路（七）分布式中间件（集群、分布式、CAP、SpringCloud、Dubbo、Redis、消息队列MQ）
你微笑时好美丶的博客
04-12 850
概念 集群 同一个业务，部署在多个服务器上 分布式 同一个业务，拆分为多个子业务，部署在不同的服务器上 CAP理论 C：数据一致性(consistency) 所有节点拥有数据的最新版本 A：可用性(availability) 数据具备高可用性 P：分区容错性(partition-tolerance) 容忍网络出现分区，分区之间网络不可达。 SpringCloud 基础功能 服务治理： Spring Cloud Eureka 客户端负载均衡： Spring Cloud Ribbon 服务容错保护： Sprin
spring+springmvc+kafka分布式消息中间件集成方案
Java烂猪皮
09-08 894
onghu的消息服务平台已经抛弃了之前的ActiveMQ，改用高吞吐量比较大的Kafka分布式消息中间件方案： kafka消息平台使用spring+kafka的集成方案，详情如下： 1. 使用最高版本2.1.0.RELEASE集成jar包：spring-integration-kafka 2. Zookeeper、Kafka分布式集群使用init.properties配置化方案。   Ja...
《分布式中间件技术实战：Java版》学习笔记（二）：RabbitMQ死信队列/延迟队列实现商品扣库存
liuffei的专栏
07-02 637
lua脚本实现多个redis命令的原子操作。RabbitMQ利用普通队列消息过期+死信队列实现延迟队列功能
Java分布式系统---消息中间件
javalingyu的博客
06-06 1922
消息中间件也可以称消息队列，是指用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息队列模型，可以在分布式环境下扩展进程的通信。当下主流的消息中间件有RabbitMQ、Kafka、ActiveMQ、RocketMQ等。其能在不同平台之间进行通信，常用来屏蔽各种平台协议之间的特性，实现应用程序之间的协同。其优点在于能够在客户端和服务器之间进行同步和异步的连接，并且在任何时刻都可以将消息进行传送和转发。是分布式系统中非常重要的组件，主要用来解决应用耦合、
springMVC-kafka消息分发
12-17
Apache Kafka是一种分布式流处理平台，常被用作实时数据管道和消息中间件。它具有高吞吐量、低延迟、持久化、可分区和可复制等特性，使得Kafka成为大规模数据处理和实时数据流的理想选择。Kafka以主题（Topic）和...
微服务分布式企业框架 Springmvc+mybatis+shiro+Dubbo+ZooKeeper+Redis+KafKa
qq_42337832的博客
05-29 461
平台简介Jeesz是一个分布式的框架，提供项目模块化、服务化、热插拔的思想，高度封装安全性的Java EE快速开发平台。Jeesz本身集成Dubbo服务管控、Zookeeper注册中心、Redis分布式缓存技术、FastDFS分布式文件系统、ActiveMQ异步消息中间件、Nginx负载均衡等分布式技术使用Maven做项目管理，项目模块化，提高项目的易开发性、扩展性以springFramework...
Java中间件(1)--分布式系统&中间件从入门到精通（五）
ke1ying的博客
01-19 944
上篇文章说了，当业务数据量大的时候，可以考虑业务和数据分离，当还解决不了的时候，可以考虑把数据库读写分离，缓存，还可以考虑把表垂直拆分，水平拆分。 大型网站架构(2)--分布式系统&中间件从入门到精通（四） 中间件为软件应用提供了操作系统所提供的服务之外的服务，中间件不是操作系统的一部分，也不是数据库的一部分，而是让软件开发者方便的处理通信输入和输出。 我的理解中间件主要分为三大类，当然这三大类肯定没有涵盖业内所有的中间件。 远程访问时候的中间件，只要解决分布式环境互相访问问题。 消息
JAVA-消息中间件-kafka
SmallIPPig的博客
11-22 704
高吞吐低延迟的高并发、高性能的KAFKA原理 kafka在大数据领域有着极其广泛的应用。一个配置好的kafka集群能够达到几十万甚至上百万的并发写入。 kafka的这种高性能可以从两个方面来进行描述： 写 在kafka进行数据写入时，采用 页缓存技术和磁盘顺序写。 页缓存技术： 在kafka每次接收到数据都会往上磁盘进行写数据。 但是这样是有一个问题：把数据写入到磁盘上，这样的工作效率是很低的。...
springMVC+多线程+kafka的 demo基于maven
07-07
多次整理精简，得出基于maven 的springmvc 框架搭载 ：多线程（线程池式）和 kafka（集群下生产者消费者）；demo 下载导入改下kafka集群IP地址即可使用。
分布式中间件.zip
09-09
这个文档供初学者或者有开发经验的人共享，在未经允许的情况下不能转载
JAVA技术体系之分布式篇（五）——Kafka消息中间件
qsmiley10的博客
04-19 7706
1
Java中间件(2)--分布式系统&中间件从入门到精通（六）
ke1ying的博客
01-20 529
不怕慢，就怕停
Java工程师 中间件 分布式（一） 面试题（Day26）
学习日常分享
05-09 1816
1 什么是CAP原则？ 参考答案 CAP定理又称CAP原则，指的是在一个分布式系统中，Consistency（一致性）、 Availability（可用性）、Partition tolerance（分区容错性），最多只能同时三个特性中的两个，三者不可兼得。 Consistency (一致性)： “all nodes see the same data at the same time”，即更新操作成功并返回客户端后，所有节点在同一时间的数据完全一致，这就是分布式的一致性。一致性的问题在并发系统中不可避免，对
【java-分布式系统】消息中间件学习
qq523786283的博客
05-27 659
中间件是一类连接软件组件和应用的计算机软件，它包括一组服务。以便于运行在一台或多台机器上的多个软件通过网络进行交互。该技术所提供的互操作性，推动了一致分布式体系架构的演进，该架构通常用于支持并简化那些复杂的分布式应用程序，它包括web服务器、事务监控器和消息队列软件。 中间件(middleware)是基础软件的一大类，属于可复用软件的范畴。顾名思义，中间件处于操作系统、网络和数据库与用户的应用软件
centos7 Spring mvc配置kafka教程+两种kafka配置方式+spring xml配置+java代码配置+kafka sasl安全认证（配置账号密码生产消费）
发光棒的博客
01-06 3000
kafka安装,以及开启认证请看上一篇文章！ 链接 Spring 版本:4.2.5.RELEASE kafka版本：kafka_2.12-2.2.0 (由于Spring版本问题，无法使用kafka最新版，2.3需要spring 5，经测试2.2.0可以正常使用) 经过几天的配置测试，kafka接入spring有两种方式。 1.完全用java代码接入，优点：方便，灵活，创建监听消费方便自由。可以用注...
分布式系统与java中间件
qq_41703522的博客
02-21 247
应用服务器集群后的Session问题： 1.Session Sticky方式： 2.Session Replication方式： 3.
Java架构面试资料全攻略：从基础到分布式技术
8. 分布式通讯面试专题系列：ActiveMQ、RabbitMQ、Kafka：这部分文档可能涉及消息队列在分布式系统中的应用，以及这三种消息中间件的原理、特性对比和使用场景。 9. 分布式限流面试专题系列：Nginx、zookeeper：...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值