midori的博客

2.x系列已经没有hadoop-core的jar包了，变成一个个散的了，分布在$HADOOP_HOME/share/hadoop下vim /etc/profileHADOOP_HOME=/home/finch/hadoop-2.7.export  CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$HADOOP_HOME/shar...

问题：hadoop fs -mkdir /tmp/hadoop/data（版本 hadoop 2-7-5）报错：mkdir '/tmp/hadoop/data' No such file or directory解决方案：加一个-p

https://mirrors.tuna.tsinghua.edu.cn/help/ASOP

在hadoop1,hadoop2,hadoop3中执行   sudo yum install ssh sudo yum install rsync root@hadoop1:~$ ssh-keygen -t rsa //一路回车就好 用户名@主机名     在 Hadoop1（master角色） 执行，将~/.ssh/下的id_rsa.pub公私作为认证发放到hadoop1,hado...

ssh相关命令： ssh-add ssh-agent ssh-copy-id ssh-keygen ssh-keyscan ① ssh-copy-id，将本机的公钥拷贝到远端，实现免密登录 ② ssh-keygen，生成公钥和私钥 重要文件： -rw-r--r-- 1 yuting staff 156 6 29 11:38 config -rw------- 1...

过程记录 查看硬盘及分区信息 fdisk -l | grep sd sda为第一块硬盘，sdb为第二块硬盘 sda1为第一块硬盘的第一块分区 获取文件系统类型、UUID blkid /dev/sdb 格式化大容量磁盘 sudo mkfs.ext4 /dev/sdb 设置自动挂载 vi /etc/fstab 将/etc/sdb挂载在指定新建目录下 UUID=xxxxxxxxxx...