
hadoop
文章平均质量分 89
胖蚂蚁_alleyz
大厂8年老猿
展开
-
快速搭建hadoop+hbase分布式集群
目录 目录 hadoop集群部署 zookeeper集群部署 HBase部署 结语hadoop集群部署1、 准备三台机器,如10.8.177.23,10.8.177.24,10.8.177.25 2、 修改主机名称,配置hosts文件(root用户下操作):# 每台机器执行,我这里hd开头,后边的数字与机器ip的最后一个组一致 hostnamectl set-hostname hd-23 hos原创 2016-07-25 16:15:13 · 818 阅读 · 1 评论 -
Centos7下安装Cloudera Manager以及Hadoop
安装HadoopCM 安装前准备 系统设置 安装CM 安装CDH-HADOOP 相关页面安装Hadoop(CM) 警告: 在执行以下命令时,如果出现ssh相关命令(此处只记录了一次),则需要在操作机器上向每台机器都发起一次,如: cat ip-mapping | ssh hd-26 'cat - >> /etc/hosts' cat ip-mapping | ssh hd-27 'cat -原创 2017-09-04 15:58:20 · 1505 阅读 · 0 评论 -
Spark2.x集群安装
Spark安装(非ClouderaManager) 由于cloudera Manager自带的Spark版本为1.6,所以此处单独安装Spark-2.1.1 1. scala环境 scp scala-2.11.11.tgz hd-26:/usr/local/ssh hd-26 "cd /usr/local/; tar xf scala-2.11.11.tgz; \ rm -rf scala原创 2017-09-04 15:59:16 · 470 阅读 · 0 评论 -
Zeepline-0.7.2安装
Zeppelin 安装 cp zeppelin-0.7.2-bin-all.tgz /opt/soft cd /opt/soft tar xf zeppelin-0.7.2-bin-all.tgzcd zeppelin-0.7.2-bin-all/conf cp zeppelin-env.sh.template zeppelin-env.sh cp zeppelin-site.xml.templat原创 2017-09-04 16:00:38 · 1155 阅读 · 0 评论 -
kylin2.0 安装与 Spark2.1 集成
kylin 安装 # 解压 tar xf apache-kylin-2.0.0-bin/ ln -s soft/apache-kylin-2.0.0-bin/ kylinecho "export KYLIN_HOME=/opt/kylin" source /etc/profile# 修改find-spark-dependency.sh #由于spark2.x中并无 `lib/spark-assemb原创 2017-09-04 16:02:01 · 1028 阅读 · 0 评论