rick_zyl的博客

一. 创建新用户并修改密码与相应权限 1.1 创建一个新用户(以hadoop为例) # 可以使用cat /etc/group | grep hadoop 查看hadoop用户是否存在 $ cat /etc/group | grep hadoop hadoop:x:1000: # 用户名为hadoop(可取符合规则的任意用户名)，使用/bin/bash作为shell sudo useradd -m hadoop -s /bin/bash # 添加用户时同时指定用户组，id，以及用户主目录 # sudo use

一、什么是Hadoop The Apache™ Hadoop® project develops open-source software for reliable, scalable, distributed computing. 设计原则：移动计算，而不是移动数据, 即计算向数据移动。 二、hadoop特点 扩容能力（Scalable）：能可靠地（reliably）存储和处理千兆字节（...

Hadoop集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起。 HDFS集群：负责海量数据的存储，集群中的角色主要有 NameNode / DataNode / SecondaryNameNode。 YARN集群：负责海量数据运算时的资源调度，集群中的角色主要有 ResourceManager/NodeManager MapReduce：它其实是一个应用...