chenkun5885的专栏

master错误： n org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /data/hadoop-root-namenode-master.log._COPYING_ could only be replicated to 0 nodes instead of minReplication (=1).  Ther

1、创建目录 package hdfs.operation; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; pu

1、在你的学习阶段，记住先关闭防火墙。     centos： systemctl stop firewalled.service 2、windows本地配置eclipse，远程调测阶段：      第一： 还是先关闭防火墙      第二： 本地配置文件位置放对      第三： 配置的时候端口和master Ip不要弄错      第四： 最为关键的是： h

1、hadoop会以块的形式存储在HDFS系统。通过命令可以查看所在节点和块的位置： [root@master softpackage]# hadoop fs -put scala-2.10.4.tgz / [root@master softpackage]# hadoop fsck /scala-2.10.4.tgz  -files -locations -blocks DEPRECA

0、An internal error occurred during: "Map/Reduce location status updater". java.lang.NullPointerException 解决方法： 关闭防火墙 1、Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop

参阅： http://www.cnblogs.com/freeweb/p/5179410.html  非常感谢 注意集群的启动顺序以及概念。 整体比较顺利，出现了下面一个小问题： at clojure.lang.RT.load(RT.java:436) at clojure.lang.RT.load(RT.java:412) at clojure.core$load$fn

1、一直处理running状态 2、 at com.sun.proxy.$Proxy14.submitApplication(Unknown Source) at org.apache.hadoop.yarn.client.api.impl.YarnClientImpl.submitApplication(YarnClientImpl.java:253) at org.apache.hado

1、几行命令 ./kafka-console-consumer.sh --zookeeper 192.168.86.133:2181,192.168.86.132:2181,192.168.86.134:2181 --topic shuaige --from-beginning ./kafka-console-producer.sh --broker-list 192.168.86.1