hpccph15的博客

问题 近来刚入门hadoop，搭建完集群后，新建maven工程通过java api在hdfs上创建一个文件夹，通过如下代码，运行不报错，但一直不能在hdfs上创建，反而该文件夹在windows系统上创建了 package hpc.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Fil...

查询分布式文件系统根目录：hadoop fs -ls hdfs://ip:9000/ 若已在配置文件中默认为hdfs，上一条还可写为：hadoop fs -ls / 查询本地文件系统根目录：hadoop fs file:/// 查询：hadoop fs -ls [-h] [-R] 具体文件路径 [-h] 表示显示文件时文件大小会带上具体单位，比如kb。 [-R] 表示递归显示，比如文件夹中还有...

hadoop3的配置和hadoop2的配置不完全相同。 配置完一台机器上的hadoop配置文件后迁移到其他机器上： scp -r …/hadoop 另一台机器名称：要拷贝到的路径 hadoop集群启动和停止： 启动hdfs：start-dfs.sh 启动yarn：start-yarn.sh 停止hdfs：stop-dfs.sh 停止yarn：stop-yarn.sh ...