dukangming的博客

目录1.Kafka中的术语解释1.1　概述1.2　broker1.3　Topic1.4　Partition1.5　Producer1.6　Consumer1.7　Consumer Group1.8　Leader1.9　Follower2.Kafka数据消费策略3.Kafka数据生产策略4.Kafka集群配置5.python操作Kafka 1.Kafka中的术语解释 1.1　概述 在深入理解Kafka之前，先介绍一下Kafka中的术语。下图展示了Kafka的相关术语以及之间的关系： 上图中一个topic配置了

https://www.cnblogs.com/qingyunzong/p/9004509.html#_label3_1 目录 一、简介 1.1　概述 1.2　消息系统介绍 1.3　点对点消息传递模式 1.4　发布-订阅消息传递模式 二、Kafka的优点 2.1　解耦 2.2　冗余（副本） 2.3　扩展性 2.4　灵活性&峰值处理能力 2.5　可恢复性 2.6　顺序保证 2.7　缓冲 2.8　异步通信 三、常用Message Queue对比 3.1　RabbitMQ 3.2　Redis 3.3　Ze

./bin/zkServer.sh start ./bin/zkServer.sh stop 1、启动Kafka bin/kafka-server-start.sh config/server.properties & 2、停止Kafka bin/kafka-server-stop.sh 3、创建Topic bin/kafka-topics.sh --create --zookeeper 118.178.254.35:2181 --replication-factor 1 --partitions

1.hive新建表 create table demo2(elapsedtime_max double,elapsedtime_min double,elapsedtime_avg double,elapsedtime_std double); 2.hive给表加字段 alter table demo add columns(synackcount_max bigint,synackcount_min bigint,synackcount_avg bigint,synackcount_std bigint

vim /ect/profile source /etc/profile

在CentOS7上安装mysql时，出现了以下的提示： 原因是： CentOS7带有MariaDB而不是MySQL，MariaDB和MySQL一样也是开元的数据库，您可以使用yum -y install mariadb-server mariadb命令安装 解决方案： 如果必须要安装MySQL，首先必须添加mysql社区repo通过输入命令：sudo rpm -Uvh http://dev.mys...

https://blog.youkuaiyun.com/ytangdigl/article/details/79796961

1. start-dfs.sh start-yarn.sh 2. [root@hadoop1 bin]# ./hive --service metastore 3. [root@hadoop1 ~]# cd /opt/spark/spark-2.2.0-bin-hadoop2.6/ [root@hadoop1 spark-2.2.0-bin-hadoop2.6]# ./sbin/start-...

1.hive 1.解压 tar -zxvf .tar -C 指定目录 2.hive-env.sh文件 cp hive-env.sh.template hive-env.sh vi hive-env.sh HADOOP_HOME=/opt/bigdata/hadoop/hadoop-2.8.4 (你HADOOP_HOME路径) export HIVE_CONF_DIR=/opt/bigdata/...

1.jdk tar -zvxf jdk-8u211-linux-x64.tar.gz -C /opt/bigdata/java vi /etc/profile export JAVA_HOME=/opt/bigdata/java/jdk1.8.0_211 export JRE_HOME=/opt/bigdata/java/jdk1.8.0_211/jre export CLASSPATH=.:$...

虚拟机安装centos7 参考vm安装 centos7安装 centos7网络配置

1.卸载 https://blog.youkuaiyun.com/zhwyj1019/article/details/80274269 2.安装 https://blog.youkuaiyun.com/qq_36582604/article/details/80526287 https://blog.youkuaiyun.com/wohiusdashi/article/details/89358071 https://www.cnb...

1.删除