
HDFS
Hadoop由三个模块组成:分布式文件存储HDFS、分布式计算MapReduce、资源调度引擎Yarn
飞少fly
你想要的时间会给你,但是你需要给时间的又何止千万!
展开
-
HDFS常用命令
hadoop fs类似于hdfs dfs1. 如何查看hdfs子命令的帮助信息,如rmdir子命令hdfs dfs -help rmdir2. 查看hdfs文件系统中已经存在的文件hdfs dfs -ls /hadoop fs -ls /3. 在hdfs文件系统中创建文件hdfs dfs -touchz /a.txt4. 从本地路径上传文件至HDFShdfs dfs -put /本地路径 /hdfs路径5. 在hdfs文件系统中下载文件hdfs dfs -get原创 2020-05-24 13:55:01 · 272 阅读 · 0 评论 -
HDFS分布式文件存储系统
1. Hadoop是什么1.1 Hadoop架构Hadoop由三个模块组成:分布式文件存储HDFS、分布式计算MapReduce、资源调度引擎Yarn1.2 分布式是什么分布式:利用一批通过网络连接的、廉价普通的机器,完成单个机器无法完成的存储、计算任务1.3 HDFS是什么Hadoop分布式文件系统1.4 为什么使用HDFS高可用、容错、可扩展2.核心概念block2.1 数据块block2.1.1 HDFS block块HDFS3.x上的文件,是...原创 2020-05-24 14:11:38 · 508 阅读 · 0 评论