
大数据
Eider1998
这个作者很懒,什么都没留下…
展开
-
hadoop查看hdfs目录大小,以MB为单位
hadoop查看hdfs目录大小,以MB为单位/bin/hadoop fs -du `hdfs目录名` | awk -F ' ' '{printf "%.2fMB\t\t%s\n", $1/1024/1024,$2}' | sort -n原创 2021-01-11 20:14:08 · 3148 阅读 · 0 评论 -
hive启动出现类似springboot错误的解决方法
1.认真查看hadoop-env.sh的path是否正确2.(jdk8的情况下启动hadoop所有节点都能起来)原创 2019-12-18 10:31:37 · 213 阅读 · 0 评论 -
关于hama-0.7.1的配置
要注意非常重要的一点:配置hama-env.sh时,注意java_home必须是jdk8!!(因为jdk版本不对,耗费一天半的时间找错误。)原创 2019-12-10 22:46:04 · 346 阅读 · 0 评论 -
Ubuntu中设置JAVA_HOME路径
今天刚刚在Ubuntu中下载了jdk-13,但是在终端输入java -version却提示java命令找不到。解决方法:(普通用户下)vim ~/.bashrc在最后加上export JAVA_HOME=/usr/lib/jvm/jdk-13export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib...原创 2019-09-19 22:40:21 · 17539 阅读 · 1 评论 -
Ubuntu搭建hadoop出现的问题
在搭建hadoop的时候,用root进行./start-all.sh出现permission denied果断用了试了一下ssh localhost,发现输入密码之后也不对于是进入普通用户模式,进行ssh localhost就成功了于是运行./start-all.sh出现显示找不到JAVA_HOME的路径于是进入hadoop-env.sh看了一下JAVA_HOME前面的...原创 2019-09-21 13:56:34 · 5240 阅读 · 3 评论 -
如何解决Cannot execute /home/hadoop/hadoop2.8/libexec/hadoop-config.sh.的方法
刚刚在centos用./hadoop version遇到了一个错误:Cannot execute /home/hadoop/hadoop2.8/libexec/hadoop-config.sh.首先要知道/home/hadoop是一个不存在的路径解决方法:在/etc/profile中找到了这个HADOOP_HOME全局变量,将其删除运行source /etc/profile在~/....原创 2019-09-23 13:29:12 · 11911 阅读 · 0 评论