郝丽锋的专栏

Spark集群安装1      环境准备网上的资料真的是太混乱了，写的都是乱七八糟。还得自己动手1.1   机器环境使用vmware准备三台机器192.167.2.10 Master192.167.2.11 Slave1192.167.2.12 Slave2注意一定要在/etc/sysconfig/network和hosts中修改主机名称和ip映射。在spark中是通过主机名称来找master。 ...

spark集群安装1      集群规划Hadoop-master1 192.168.2.100 Spark主 Hadoop-master2 192.168.2.101 Spark备 Hadoop-slave1 192.168.2.102 Zookeeper Hadoop-slave2 192.168.2.103 Zookeeper Hadoop-slave3 192.168.2...

hive安装1      集群规划1.1   软件包mysqlapache-hive-2.1.1-bin.tar.gzmysql-connector-java-5.1.40.zip1.2   物理部署Hadoop-master1 192.168.2.100 Mysql/hive       2      mysql设置2.1   root用户设置在安装之初，root用户没有密码。为了安全起...

hbase集群安装1      集群规划Hadoop-master1 192.168.2.100 Hbase主 Hadoop-master2 192.168.2.101 Hbase被 Hadoop-slave1~hadoop-slave2   Zookeeper集群  2      linux内核调整2.1   用户限制vim /etc/security/limits.confroot...

Zookeeper集群安装1      集群规划构建高可用的大数据集群需要使用zookeeper实现hdfs和hbase的自动切换。所以第一步首先是安装zookeeper，我采用了数据与安装程序分离的策略。zookeeper进程是轻量化进程，安装在datanode中Hadoop-slave1 192.168.2.102 Zookeeper Hadoop-slave2 192.168.2.10...