
hdfs
化明
人生苦短
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
1.HDFS 笔记
一,HDFS 前言HDFS:Hadoop Distributed File System Hadoop 分布式文件系统,主要用来解决海量数据的存储问题1、 设计思想分而治之:将大文件,大批量文件,分布式的存放于大量服务器上。以便于采取分而治之的方式对海量数据进行运算分析要把存入进HDFS集群的所有的数据要尽量均匀的分散在整个集群中如果有100G 的数据①集群有100个节...原创 2019-04-23 00:13:53 · 364 阅读 · 0 评论 -
2.hdfs 的命令
hadoop fs === hdfs dfshadoop namenode -formathdfs namenode -formathdfs dfsadmin -printTology查看hdfs 的机架信息hdfs dfsadmin report查看整个集群相关信息的报告(各个信息是心跳机制发送过来的)hdfs dfsadmin -safemode get查...原创 2019-04-23 00:14:30 · 189 阅读 · 0 评论 -
3.eclipse 查看 hdfs 的插件
HDFS 的 的 Java API 操作hdfs 在生产应用中主要是客户端的开发,其核心步骤是从 hdfs 提供的 api 中构造一个 HDFS的访问客户端对象,然后通过该客户端对象操作(增删改查)HDFS 上的文件一、用 利用 eclipse 查看 hdfs 集群的文件信息1、 下载一个 eclipse 开发工具 eclipse-jee-luna-SR1-win32-x86...原创 2019-04-23 00:15:57 · 300 阅读 · 0 评论