
大数据
文章平均质量分 74
简丶致
这个作者很懒,什么都没留下…
展开
-
kafka生产者
kafka-生产者1、生产者案例使用Java程序编写kafka生产者程序案例:package cn.kafka.producer;import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.ProducerRecord;import java.util.Properties;public class kafkaProducer { /**原创 2022-02-06 22:12:19 · 885 阅读 · 0 评论 -
MaxWell的使用
Maxwell的使用1、Maxwell的概述1.1 官网简介 This is Maxwell’s daemon, an application that reads MySQL binlogs and writes row updates as JSON to Kafka, Kinesis, or other streaming platforms. Maxwell has low operational overhead, requiring nothing but mysql and a原创 2022-01-28 15:15:17 · 8092 阅读 · 1 评论 -
解决HA模式下NameNode切换导致HMaster挂掉
解决HA模式下NameNode切换导致HMaster挂掉问题:在我们自己搭建大数据集群学习的时候,往往因为机器配置不够高,导致虚拟机卡顿,节点莫名其妙挂掉。在Hadoop的高可用集群下,机器配置不够两个namenode一直自动切换状态,导致了HBase集群的Hmaster节点挂掉。问题产生的原因:我们查看HBase的master日志:# 进入日志文件目录[root@hadoop001 ~]# cd /opt/module/hbase-1.3.1/logs/[root@hadoop001原创 2021-08-06 10:59:57 · 1106 阅读 · 2 评论 -
kafka的基本应用
文章目录kafka的基本应用1、命令操作1.1 创建主题1.2 查询主题1.3 创建生产者1.4 创建消费者2、Java API操作2.1 创建Java工程2.2 生产者2.3 消费者2.4 配置日志2.5 测试3、案例(kafka生产者拦截器)3.1 简介3.2 创建拦截器3.3 配置拦截器3.4 演示结果kafka的基本应用1、命令操作1.1 创建主题我们可以直接利用kafka提供的脚本(kafka-topics.sh)创建主题[hadoop@spark001 kafka]$ bin/ka原创 2021-07-09 09:47:13 · 1156 阅读 · 0 评论