
大数据
文章平均质量分 53
大数据相关文章
一只干测试的兔子
好看的皮囊千遍一律,有趣的灵魂万里挑一。
展开
-
kafka挂掉或者崩溃的时候自动检测到并将其启动
将cron任务加入开启自启动,在 /etc/rc.local 文件中加入:systemctl restart crond。#获取kafka进程数量,正常情况下一台机器一个kafka,所以kakfa正常运行的时候肯定大于1。备注:如何查看是centos几: cat /etc/centos-release。如果上图的脚本有问题,可以采用sh -x command进行调试。#当进程小于等于1的时候启动kafka。2、将启动脚本加入定时任务。原创 2023-11-07 10:48:17 · 306 阅读 · 0 评论 -
primary key(id) NOT ENFORCED的含义
'username' = '${userName}', --JDBC 用户名。--'scan.incremental.snapshot.chunk.key-column' = 'name' 没有主键的情况需打开注释。'connector' = 'mysql-cdc', --指定使用什么类型的连接器。'database-name' = '${databaseName}', --库名。'table-name' = 'sop1' --表名。原创 2023-07-28 14:14:21 · 930 阅读 · 0 评论 -
超简洁步骤安装kafka(linux环境)
4、在zookeeper的conf目录下修改配置文件名(启动zookeeper的时候会去找zoo.cfg)4、在config目录下修改配置文件server.properties。2、通过rz命令将zookeeper安装包上传到linux。一、查看jdk是否安装(如果没有安装,可自行百度安装)5、在zookeeper的bin目录下启动zk。2、通过rz命令上传到linux服务器。3、在bin目录下启动kafka。4、在bin目录下创建topic。二、安装zookeeper。原创 2023-06-20 16:17:48 · 3012 阅读 · 0 评论 -
kafka相关命令
/kafka-topics.sh -zookeeper 10.10.10.10:15520 --create --partitions 5 --replication-factor 1 --topic test(test为要创建的topic名称)./kafka-console-consumer.sh --bootstrap-server 10.10.10.10:15500 --topic test --from-beginning(--from-beginning代表从头消费数据)原创 2023-05-05 10:49:41 · 78 阅读 · 0 评论