Jessie_show的博客

下载hadoop2安装包解压hadoop安装包进入解压目录下的etc目录修改以下文件（一个节点配了，可以将该配之后的hadoop解压文档scp到其他节点）：yarn-env.sh和hadoop-env.sh中加上jdk路径（JAVA_HOME）core-site.xml按照加上图中内容hdfs-site.xml增加如下内容从mapred-site.xml.template模板中拷贝一份到mapred-site.xml，并增加如下内容：修改yarn-site.xml,增加如下内容：.

一、Kafka概念及特性1. 概念Kafka是一种高吞吐量的分布式发布订阅消息系统。Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一个或多个服务组成，每个服务叫做一个broker.producers通过网络将消息发送到Kafka集群，集群向消费者提供消息。然每个程序都在自己的线程里只缓存了一份数据，但在操作系统的缓存里还有一份，这等于存了两份

参考：https://cshihong.github.io/2018/05/10/HDFS%E6%8A%80%E6%9C%AF%E5%8E%9F%E7%90%86/