
Kafka
文章平均质量分 82
kafka
five小点心
阳光开朗孔乙己
展开
-
日志收集系统:将应用产生的数据通过flume收集后发送到Kafka,整理后保存至hbase
日志收集系统:将应用产生的数据通过flume收集后发送到Kafka,整理后保存至hbase原创 2023-05-04 18:11:00 · 986 阅读 · 0 评论 -
大数据技术之Kafka集成
(5)将log4j.properties文件添加到resources中,更改打印日志级别为error。(3)在main下创建scala文件夹,添加为源码包。(1)创建一个maven项目spark-kafka。(1)创建一个Spring Initializr。(2)在项目spark-kafka上添加框架支持。(3)在浏览器中给/atguigu接口发送数据。1)在IDEA中安装lombok插件。2)SpringBoot环境准备。(3)检查自动生成的配置文件。1)scala环境准备。2)spark环境准备。原创 2023-04-23 18:34:36 · 790 阅读 · 0 评论 -
大数据技术之Kafka——Kafka的安装与部署
(2)也可以用命令下载(直接下载到服务器哦!):将安装包下载到/opt/monitor/kafka文件夹下面下载命令:手动下载移动到/opt/soft/kafka目录下也可以。原创 2023-04-13 20:06:12 · 2175 阅读 · 0 评论 -
大数据技术之Kafka——Kafka入门
传统定义:Kafka是一个分布式的基于发布/订阅模式的消息队列(Message Queue)主要应用于大数据实时处理领域。发布/订阅:消息的发布者不会将消息直接发送给特点的订阅者,而是将发布的消息分为不同的类别,订阅者只接收感兴趣的消息。最新定义:Kafka是一个开源的分布式事件流平台(Event Streaming Platform)被公司用于高性能数据管道流分析数据集成和关键任务应用。原创 2023-04-20 23:11:16 · 10377 阅读 · 1 评论