
hadoop
h-p_c-h
多思考
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
配置没问题,但通过java api仍然操作不了hdfs的问题。
问题近来刚入门hadoop,搭建完集群后,新建maven工程通过java api在hdfs上创建一个文件夹,通过如下代码,运行不报错,但一直不能在hdfs上创建,反而该文件夹在windows系统上创建了package hpc.hdfs;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Fil...原创 2020-02-22 20:23:47 · 625 阅读 · 0 评论 -
部分常用操作hadoop的shell命令
查询分布式文件系统根目录:hadoop fs -ls hdfs://ip:9000/若已在配置文件中默认为hdfs,上一条还可写为:hadoop fs -ls /查询本地文件系统根目录:hadoop fs file:///查询:hadoop fs -ls [-h] [-R] 具体文件路径[-h] 表示显示文件时文件大小会带上具体单位,比如kb。[-R] 表示递归显示,比如文件夹中还有...原创 2020-02-10 19:53:44 · 297 阅读 · 0 评论 -
hadoop杂记
hadoop3的配置和hadoop2的配置不完全相同。配置完一台机器上的hadoop配置文件后迁移到其他机器上:scp -r …/hadoop 另一台机器名称:要拷贝到的路径hadoop集群启动和停止:启动hdfs:start-dfs.sh启动yarn:start-yarn.sh停止hdfs:stop-dfs.sh停止yarn:stop-yarn.sh...原创 2020-02-10 18:22:05 · 150 阅读 · 0 评论