
hadoop
文章平均质量分 70
摩天崖FuJunWANG
今天的你,要比昨天优秀。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hive报错
主要是因为粗心导致的报错信息Exception in thread “main” java.lang.RuntimeException: com.ctc.wstx.exc.WstxUnexpectedCharException: Unexpected character ‘l’ (code 108) in prolog; expected ‘<’at [row,col,system-id]: [1,4,“file:/home/export/servers/apache-hive-3.1.2-bi原创 2022-05-25 10:36:17 · 2932 阅读 · 1 评论 -
阿里云部署hadoop集群
题记: 好记性不如烂笔头。搞一个稳定的hadoop部署方式,给以后的人生省点打游戏的时间。环境介绍两台阿里云服务器server1,server2,还有一台华为云服务器。准备将两台阿里云服务器器分别记为:master,slave1;将华为云服务器记为slave2。masterip,masterip_分别表示master的公网ip和内网ip;slave1ip表示slave1的公网ip;slave2ip表示slave2的公网ip;第一步:服务器间ssh无密码登录1.1 更改/etc/hosts文原创 2022-05-23 21:59:13 · 1189 阅读 · 0 评论 -
hadoop在阿里云上主节点没有datanode进程
问题描述用三台服务器组成了一个hadoop集群。我暂且简单的记作master,slave1,salve2。配置和初始化都没有任何问题。在最后用行start-dfs.sh (后来用start-all.sh启动)命令,发现slave1和slave2上都有datanode进程,但唯独master上没有datanode进程,甚至logs下都没有datanode的日志。依据离谱加挖槽。解决办法试了很多很多种办法,更新了所有的配置文件,发现只要再单独的启动一下datanode就行了。。。。。 hadoop-原创 2022-05-23 19:25:30 · 772 阅读 · 1 评论 -
hadoop 在阿里云上dataNode无法启动,并报错:java.net.BindException: Port in use: master:50070 at org.apache.hadoop
报错信息发现hadoop没有启动NameNode和dataNode,并生成如下的报错:java.net.BindException: Port in use: master:50070 at org.apache.hadoop.http.HttpServer2.constructBindException(HttpServer2.java:1344) at org.apache.hadoop.http.HttpServer2.bindForSinglePort(HttpServer2.java:13原创 2022-05-23 14:39:53 · 760 阅读 · 0 评论