chuang_z的博客

hadoop配置lzo支持

Linux下编译hadoop-lzo-0.4.21-SNAPSHOT.jar

错误一、找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster2022-01-12 16:15:02,559 INFO impl.YarnClientImpl: Submitted application application_1641975214047_00012022-01-12 16:15:02,604 INFO mapreduce.Job: The url to track the job: http://node04:8088/

nameNode1、完全基于内存存储文件元数据、目录结构、文件block的映射2、需要持久化方案保证可靠性3、提供副本fang zhi

1、HDFS是主从(master/slaves)架构2、由一个NameNode和一些DataNode组成3、面向wen

1、文件线性按字节切割成块（block）,具有offset、id

错误详情：解决方案：hdfs-site.xml<property> <name>dfs.ha.fencing.methods</name> <value>sshfence</value></property>由于dfs.ha.fencing.methods参数的value是sshfence，需要使用的fuser命令yum -y install psmisc...