m0_74433188的博客

log.dirs：注意：这个目录不是存储日志的，是存储Kafka中核心数据的目录，这个目录默认是指向的tmp目录，所以建议修改一下。如果kafka和zookeeper在同一台机器上，并且zookeeper监听的端口就是那个默认的2181端口。zookeeper.connect：kafka依赖的zookeeper。listeners:默认9092端口。broker.id:单机不修改。先启动zookeeper。

3.修改zookeer AdminServer端口。这里主要是因为Spark web会占用8080端口。2.重命名zoo.cfg并配置dataDir参数。4.操作zookeeper。5.停止zookeeper。

1.解压spark-2.4.3-bin-hadoop2.7.tgz。2.重命名spark-env.sh.template 并配置。3.重命名slaves.template 并配置。7.往Hadoop集群中提交Spark任务测试。在spark-env.sh下添加一行。1.解压scala 2.12.11。6.配置Spark on Yarn。10.部署Spark。5.8080端口查看。

选择一个[Apache 下载镜像]（建议点击顶部链接，进入点击stable的文件夹，然后下载将以tar.gz结尾的二进制文件到本地。暂时不要下载以src.tar.gz结尾的文件。解压缩，然后进入到那个要解压的目录.在启动 HBase 之前，您需要设置JAVA_HOME环境变量。您可以通过操作系统的常用设置来设置变量，HBase 也提供了一个中心机制。编辑此文件，取消注释以JAVA_HOME开头的行，并将其设置为适合您的操作系统的路径。应将JAVA_HOME变量设置为包含可执行文件。

失败的软件包是：mysql-community-icu-data-files-8.0.30-1.el7.x86_64GPG 密钥配置为：file:///etc/pki/rpm-gpg/RPM-GPG-KEY-mysql。ALTER USER 'root'@'localhost' IDENTIFIED BY '你的密码';mysql -u root -p 你的密码。12.使用Navicat测试连接。看到active状态表示正常。13.初始化hive元数据。11.开启mysql远程。重新导入密钥并执行安装。

Hive/lib目录下拷贝jdbc驱动。进入hadoop目录。

通过sftp上传jdk文件到指定linux目录下。4.java -version 查看版本。3.配置环境变量，方便全局访问jdk。2.解压JDK并改名。

mac安装centos环境

hadoop之MapReduce 计算模型

hadoop hdfs 常见知识点

hadoop之--Java操作hdfs上传，下载，删除

hadoop之大数据从wordcount开始

虚拟机安装hadoop

hadoop序列化和inputformat

hadoop学习之--基础概念知识