[大数据]Ambari 搭建

本文详细介绍了如何使用Ambari在Linux环境中搭建大数据集群,包括修改SSH免密、开启NTP服务、配置DNS、关闭防火墙和SELinux、制作本地YUM源、安装Ambari Server、创建数据库、配置并启动Ambari Server,以及解决配置过程中的常见问题。

1 修改主节点172.7.24.40的ssh 免密 

ssh-keygen

输入要存入的文件名 /root/.ssh/id_rsa.pub

输入密码 password

 存入到该文件中 cat id_dsa.pub >> ~/.ssh/authorized_key

修改权限

chmod 600 authorized_keys

chmod 700 -R .ssh

将authorized_key文件拷贝到从节点的  cd /root/.ssh  下 172.25.35.139 172.25.35.140

 

2 主从节点 开启NTP服务  yum install ntp

chkconfig ntpd

service ntpd start

3 ambari在安装时需要配置全域名,所以需要检查DNS  修改/etc/hosts

172.24.7.40  YZ-24-7-40.h.chinabank.com.cn 

172.25.35.139  YZ-25-35-139.h.chinabank.com.cn 

172.25.35.140  YZ-25-35-140.h.chinabank.com.cn 

 

5 所有关闭防火墙

chkconfig --list  iptables 查看

 chkconfig iptables off

/etc/init.d/iptables stop

chkconfig --list  iptables 再次查看

6 所有节点关闭SELinux

查看SELinux状态  sestatus 如果是关闭状态 不处理

如果是enable状态 setenforce 0

7 在主节点上制作本地源

安装HTTP 服务器,

添加 Apache 服务到系统层使其随系统自动启动

安装本地源制作相关工具  yum install yum-utils createrepo

8 下载安装相关软件

CentOS 7HDPBase URLhttp://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.4.2.0
CentOS 7HDPRepo Filehttp://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.4.2.0/hdp.repo
CentOS 7HDPTarball md5 aschttp://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.4.2.0/HDP-2.4.2.0-centos7-rpm.tar.gz
CentOS 7HDP-UTILSBase URLhttp://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos7
CentOS 7HDP-UTILSRepo Filehttp://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos7/HDP-UTILS-1.1.0.20-centos7.tar.gz

在windows下载 通过sftp传到linux上

制作.repo文件,并将文件copy到/etc/yum.repos.d下

9  启动httpd服务器,services start httpd  80端口可能会被占用,因为在后续安装中必须使用到80端口,如果被占用,关闭占用的程序。

10 yum clean all

 yum list update

yum makecache

yum repolist

11 安装 yum install ambari-server  

12  修改/etc/profile 增加jak环境变量 ,

13 创建数据库,并添加表  创建表结构文件 /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

14 配置ambari  ambari-server setup

15 配置后启动ambari server     ambari-server start

16  登录http://172.24.7.40:8080/ambari  ,用户名admin  密码 admin  配置HDP

17 配置过程中出现的问题  

1 find / -name mysql*.jar   ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java-5.1.17.jar  设置mysql驱动 (在后面配置节点时需要用到)

2 提示主节点与从节点不通,可能是hosts没配置正确,查看hosts配置

3  提示没有 python-argparse  安装 此文件

4 hive配置时要链接数据库,最好链接mysql ,

18 参考方法  http://blog.youkuaiyun.com/daiyutage/article/details/52210830

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值