hadoop-HDFS
关注
分享
扫一扫
鑫火
永不言弃
展开
-
1、hadoop简单介绍及架构介绍
hadoop-hdfs-角色介绍 hadoop-hdfs-fsimage与edits合并 hadoop-hdfs-读写流程 读流程：1、读的时候namenode会对datanode排好序，根据距离优先，会先读取距离近的datanode.2、hdfs分布式读取系统可以根据排好的序选择最近的datanode进行读取，很好的解决了本地化读取文件的流程 ...原创 2019-07-16 10:00:04 · 258 阅读 · 0 评论 -
2、Hadoop 高可用集群及java API
单机伪分布式hadoop的搭建 参照：https://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/SingleCluster.html node01ssh远程登录node02来远程操作node02节点的内容，此过程是不会加载/etc/profile文件的。 1、 进行免密钥操作 2、安装jdk 配置环境变...原创 2019-07-17 17:34:14 · 472 阅读 · 0 评论