calu的专栏

hadoop+hbase集群搭建

首先搭建hadoop集群。参看之前的文章： https://note.youdao.com/share/?token=6B7AD80F6F904C1982B92E03C61B637C&gid=30499526首先把/hadoop/etc/hadoop下面的几个文件复制到/nutch-2.3.1/confcore-site.xmlhadoop-env.shhbase-site.xmlhdf

问题 Container killed on request. Exit code is 143然后提示memory 2.7g in 2.1g used 这里是表示内存不够，所以修改hadoop/etc/hadoop/mapred.site<property> <name>mapreduce.map.memory.mb</name> <value>4096</value>

启动zookeeper后日志显示找不到路由 日志在bin文件夹下的zookeeper.out里 解决方法： 关闭防火墙：systemctl stop firewalld.servicesystemctl disable firewalld.service查看状态：firewall-cmd --state不同版本linux关闭防火墙Ubuntu（ubuntu-12.04-desktop-amd6

Operation category READ is not supported in state standby解决 hdfs写的那台机器是待机状态的，所以不支持，要在active 机器中写才行。 hdfs haadmin -transitionToActive –forcemanual nn1 再次访问就变一active，一个standyHMaster自动关闭 —-问题解决思路：j

1.安装jdk2.安装hadoop3.添加hadoop的环境变量4.初始化HDFS5.启动hadoop6.为了免密码登录要配置ssh7.datanode 未启动1.安装jdk在java官网http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads