win71的博客

由HDFS和Mapreduce组成的大数据处理框架；HDFS为海量的数据提供存储功能MapReduce为海量的数据提供计算功能。

【代码】大数据运维软件链接。

执行这些命令时，系统可能会提示你输入远程服务器的密码，以完成公钥的复制过程。- RSA密钥，这是SSH中最传统的密钥类型。默认长度是2048位，但推荐使用更长的密钥（例如3072位或4096位）以提高安全性。它支持不同的曲线，如。- Ed25519密钥，这是目前推荐使用的密钥类型，因为它提供了非常好的性能和安全性。这一步，首先在master上做，随后通过工具将更改的文件同步到另外几台机器。- DSA密钥，但这个选项已经不被推荐使用，因为它被认为不够安全。根据自己的情况，更改主机名，或使用IP地址。

ZooKeeper 的所有日志和输出都会直接显示在控制台上，而不是写入日志文件。该命令用于启动 ZooKeeper 服务，并且在前台运行。通常用于调试和检查 ZooKeeper 运行时的异常情况。若不想关闭防火墙，则需要放行防火墙的。

【代码】搭建分布式Spark集群。

【代码】搭建分布式HBase集群。

（Kafka Raft）模式，可以使Kafka在不依赖外部。语言发展而来，所以需要JVM的运行环境。版本以前，运行Kafka需要预先安装。在当前控制台前台启动Kafka，使用。服务器来存储元数据信息。

如果选择方案一部署，则数据库信息填写master主机的信息，hive服务器填写master主机。若使用方案一，则在master节点上进行”准备工作“在master主节点上执行。

【代码】搭建MongoDB。

这两条需要按照自己的路径修改，并创建test文件和1.log文件用于测试。