DIDI___的博客

目录NN和2NN工作机制工作流程详细解释：CheckPoint时间设置NameNode故障处理NN和2NN工作机制工作流程第一阶段：NameNode启动（1）第一次启动NameNode格式化后，创建Fsimage和Edits文件。如果不是第一次启动，直接加载编辑日志和镜像文件到内存（2）客户端对元数据进行增删改的请求（3）NameNode记录操作日志，更新滚动日志（4）NameNode在内存中对元数据进行增删改第二阶段：Secondary NameNode工作（1）Seconda

HDFS写数据流程总体流程：  客户端通过对DistributedFileSystem对象调用create()来新建文件，DistributedFileSystem对NamNode创建一个RPC调用，在文件系统的命名空间中新建一个文件，此时该文件中还没有相应的数据块，NamoNode执行各种不同的检查以确保这个文件不存在以及客户端有新建改文件的权限。  如果这些检查均通过，NameNode就会为创建新文件记录一条记录，否则文件创建失败，并向客户端抛出一个IOEx

安装Vmware Tools工具1.挂载VMware Tools光驱 【设置】-->【CD/DVD】-->【使用ISO镜像文件】-->选择VMware安装目录下的Liunx.iso镜像2.安装VMware Tools工具 【虚拟机】-->【安装VMware Tools工具】打开光驱-->将VMwareTools-10.0.10-4301679.t...

Linux学习第二天修改机器名1.说明：[hadoop@localhost Desktop]$@之前的hadoop为用户名@之后的localhost为机器名，也可以理解为IP映射地址2. 进入到【/etc】下的hosts文件，修改IP与主机名的映射关系在文件中追加：192.168.14.39 master（IP为虚拟机中VMnet8的静态IP，master为机器名）3.修改【/et...

Linux学习第三天（Linux常用命令）cd 进入到目录基本语法：cd … - / ~ 绝对路径 相对路径… ：返回上一级目录- ：返回上次操作的目录~ ：返回home目录/ ：返回至根目录pwd 打印当前所在目录基本语法：pwdtouch 创建文件基本语法：touch 文件名cat 打印问价你内容输出到终端，从第一行开始基本语法： c...

搭建完全分布式1.安装jdk2.安装hadoop3.配置环境变量4.设置无密登录5.设置hadoop配置文件6.克隆三个虚拟机右键—>管理—>克隆---->创建完整克隆—>设置虚拟机路径7. 关闭防火墙$>chkconfig iptables --list8. 修改静态IP+修改主机名查看IP、网关、子网掩码8.修改静态IP+修改主机名1.查...