学海无涯的博客

一、安装scala 2.11.4 1、将课程提供的scala-2.11.4.tgz使用WinSCP拷贝到spark1的/usr/local目录下。 2、对scala-2.11.4.tgz进行解压缩：tar -zxvf scala-2.11.4.tgz。 3、对scala目录进行重命名：mv scala-2.11.4 scala 4、配置scala相关的环境变量 vi .bashrc export ...

一、Kafka名词解释和工作方式 1.1:Producer ：消息生产者，就是向kafka broker发消息的客户端。 1.2:Consumer ：消息消费者，向kafka broker取消息的客户端 1.3:Topic ：可以理解为一个队列。 1.4:Consumer Group （CG）：这是kafka用来实现一个topic消息的广播（发给所有的consume...

安装环境： centos 6.5 64位 所需软件版本： jdk1.8.0_171 nginx-1.12.2.tar.gz kafka_2.11-0.10.2.1.tgz zookeeper-3.4.5.tar.gz scala-2.11.4.tgz 所需服务器：4台（三台安装scala、zookeeper和kafka，一台安装nginx） 【A:部署kafka集群】 1.安装jdk yum...