
Hadoop
文章平均质量分 73
火玄子
这个作者很懒,什么都没留下…
展开
-
Hadoop namenode重新格式化需注意问题
hadoop重新格式化意味着集群的数据会被全部删除,格式化前需考虑数据备份或转移问题。格式化前需要进行一些特别的文件删除操作,否则将导致格式化后hadoop无法正常启动。原创 2016-10-15 11:25:15 · 38230 阅读 · 4 评论 -
MapReduce:详解Shuffle过程
MapReduce Shuffle过程详解转载 2016-10-27 16:13:00 · 372 阅读 · 0 评论 -
Hadoop 数据节点DataNode异常
使用start-all.sh脚本或者先后执行start-dfs.sh、start-yarn.sh脚本启动Hadoop后,通过jps命令检测DataNode节点进程发现有DataNode进程,数秒后DataNode进程莫名其妙“消失”了,只有Jps、NodeManager两个进程。简而言之就是DataNode进程异常,由于某种原因导致无法启动或者启动后数据节点DataNode进程自动关闭。原创 2016-09-27 13:13:47 · 13087 阅读 · 10 评论 -
Hadoop BindException
Hadoop BindExceptionHadoop节点daemon无法启动,报BindException,启动日志如下:2018-03-12 10:16:56,057 INFO org.apache.hadoop.http.HttpServer2: HttpServer.start() threw a non Bind IOExceptionjava.net.BindExcepti...原创 2018-03-13 17:19:39 · 768 阅读 · 0 评论