- 博客(10)
- 收藏
- 关注
原创 MetaException(message:file:/user/hive/warehouse/xxx is not a directory or unable to create one) 解决方法
3、windows环境下,用户无hive写权限,需要打Jar包上传至虚拟环境,spark-submin命令运行。2、之前用IDEA创建的是临时表、库,在HDFS路径下不存在,需要重新删除,建真实路径表、库。1、hdfsRPC端口应为8020,而非9870或9000。
2024-11-24 21:08:39
225
原创 关于org.apache.hadoop.hbase.MasterNotRunningException问题解决思路
IDEA 连接HBase创建命名空间出错解决思路
2022-11-10 21:08:44
979
原创 HIVE 输入稍复杂sql语句,内存不足,reduce=0%,ERROR解决方法
出错信息:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask解决方法,参考csdn大神方法:yarn-site.xml添加此属性:<property><name>yarn.nodemanager.vmem-check-enabled</name><value>false</value></pro
2022-01-16 17:40:25
2020
原创 hadoop运行flume出错,原因分析
利用flume进行hive日志数据收集上传hdfs时,报错,错误信息为:HDFS IO errorjava.io.IOException: Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data length; Host Details : local host is: "hadoop102/192.168.10.102"; destination host is:
2022-01-08 16:30:58
1733
1
原创 配置HDFS-HA自动故障转移出错,解决方法
编辑好core-site.xml、hdfs-site.xml配置信息后,输入start-dfs.sh启动hdfs后,仅仅只有三台机器中的一台namenode启来了,其余两台起不来,出错信息:Retrying connect to server: hadoop102/192.168.10.102:8485. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTi
2022-01-04 09:22:41
1402
原创 【无标题】搭建yarn自动故障时,报错解决方法
报错信息:Service ResourceManager failed in state INITEDorg.apache.hadoop.HadoopIllegalArgumentException: The HA Configuration has multiple addresses that match local node's address.配置的三台机器,只有一台resourcemanager和nodemanager启来了,其余两台的resourcemanager没启动,nodemanag
2022-01-04 08:58:09
1325
原创 问题:Permission denied: user=dr.who, access=WRITE, inode=“/“:hadoop:supergroup:drwxr-xr-x
搭建Hadoop HA集群时,遇到的问题:Permission denied: user=dr.who, access=WRITE, inode=“/“:hadoop:supergroup:drwxr-xr-x 即在HDFS提供的网页上新建文件等其他操作、Linux系统的hdfs fs -mkdir /input 等其他操作时,提示报错,不能实现操作解决方法:采用在Linux系统编辑opt/ha/hadoop-3.1.3/etc/hadoop/core-site.xml添加:<prope.
2021-12-26 21:12:41
3310
转载 靠谱的论文查重检测平台
推荐大家一个靠谱的专业论文检测平台:http://www.gezida.com/,他们的检测算法更加接近知网,哦对了,他们现在还在做毕业季活动,赠送超多免费字数,可以说是十分划算了,推荐大家有时间去看一下。...
2019-06-23 21:35:32
261
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人