
ambari
TURING.DT
科技改变世界,技术改变人生。
展开
-
ambari中ganglia服务端启动不了
近期ganglia监控服务器有点异常,从ambari中看到Server端服务和本机Client端服务都是关闭状态,启动后过一会也会自动关闭,查看日志信息:Sep 9 05:58:31 localhost kernel: ip_tables: (C) 2000-2006 Netfilter Core TeamSep 9 06:06:17 localhost nagios: Aut原创 2016-04-13 14:08:24 · 1799 阅读 · 0 评论 -
ambari增加journalnode服务节点
ambari默认3个journalnode节点,但是如果一个节点出现问题,需要增加补充,ambari界面没有操作的选项,所以只能通过其他命令方式操作,看到之前有个文章是将HA降级,之后重新做HA,这样的风险太高了,操作负载,从网上找到了其他方式,分享给需要的朋友,也希望ambari新版本可以将这个增加journalnode功能,添加进去。操作前提示:如果你对ambari这些操作一点都不原创 2016-04-13 14:31:06 · 2608 阅读 · 0 评论 -
ambari中删除journalnode节点
之前谈过如何在ambari中增加journalnode节点服务,这篇将说明如何删除journalnode服务说明:hadooptest 为集群的名字,不是HA的名字http://10.11.32.53 为ambari管理界面hadooptest.bj 为需要删除服务的主机正常情况,首先journalnode服务最少需要3个节点,保障在删除操作的开始,你的journalnod原创 2017-03-27 14:26:11 · 1532 阅读 · 0 评论 -
ambari2.1离线安装HDP2.1实践教程
说明:此文档是讲解ambari离线安装HDP的方法,这里的离线安装说的是ambari组件、HDP组件这些大的文件从网站上下载好避免网络不好中间中断,但是有些小文件如PostgreSQL、系统初始化yum更新、mysql之类的包也需要网络,当然可以本地yum源,只是麻烦些,建议还是需要服务器可以访问外网。在线安装可参考:http://blog.youkuaiyun.com/levy_cui/articl原创 2017-04-12 11:30:44 · 756 阅读 · 0 评论 -
ambari版本升级1.7升级到2.1版本
之前写过一篇,ambari2.1升级到2.4的步骤,下面将ambari1.7升级到2.1的步骤汇总下,升级到2.1后可以继续升级到2.4版本。重要:不要将ambari1.7直接升级为2.4,不能直接升级,需要先升级到2.1,之后再升级到2.4官方升级版本说明http://docs.hortonworks.com/HDPDocuments/Ambari-2.4.0.1/b原创 2017-03-01 14:57:33 · 2230 阅读 · 0 评论 -
Ambari1.7.0 + HDP2.1安装记录
一、准备工作免秘钥修改hostname、hosts文件NTP设置停止iptabels、selinux停止THP修改limit限制yum install -y openssl bash lrzsz(以上内容请自行搜索)二、下载yum源cd /etc/yum.repos.d/wget -nv http://public-repo-1.hortonwo原创 2017-03-01 15:12:47 · 689 阅读 · 0 评论 -
升级ambari、HDP版本(ambari 2.1升级到2.4、HDP2.3升级到2.5)
官方升级版本说明http://docs.hortonworks.com/HDPDocuments/Ambari-2.4.0.1/bk_ambari-installation/content/determine_stack_compatibility.html官方升级步骤http://docs.hortonworks.com/HDPDocuments/Ambari-2.4.0.1/b原创 2016-09-07 17:14:37 · 10254 阅读 · 5 评论 -
apache、CDH、HDP hadoop源码下载
apache源码http://hadoop.apache.org/releases.htmlCDH源码http://archive-primary.cloudera.com/cdh5/cdh/5/HDP源码http://s3.amazonaws.com/public-repo-1.hortonworks.com/index.html#/HDP/centos6/2.x/u原创 2016-05-27 16:05:45 · 5294 阅读 · 1 评论 -
hadoop hdfs.xml权限问题导致App Timeline Server服务无法正常启动
近期操作ambari重启ResourceManager的App Timeline Server 服务无法正常启动,ambari界面报错如下:4 - File['/var/run/hadoop-yarn/yarn/yarn-yarn-timelineserver.pid'] {'action': ['delete'], 'not_if': 'ls /var/run/hadoop-yarn原创 2016-04-20 11:57:57 · 4127 阅读 · 0 评论 -
重启ambari-agent服务器报错: Failed to start ping port listener of
维护过程中重启ambari-agent服务器 报错:INFO 2016-03-08 13:04:24,070 main.py:74 - loglevel=logging.INFOINFO 2016-03-08 13:04:24,076 DataCleaner.py:39 - Data cleanup thread startedINFO 2016-03-08 13:04:24,08原创 2016-04-13 14:30:36 · 3561 阅读 · 1 评论 -
ambari客户端一直lost状态(UnicodeDecodeError: 'utf8' codec can't decode)
近期ambari有 一台客户端一直为lost状态,各服务无法操作,查看ambari-agent状态正常。# service ambari-agent statusFound ambari-agent PID: 1313ambari-agent running.Agent PID at: /var/run/ambari-agent/ambari-agent.pidAgent ou原创 2016-04-13 14:27:24 · 2101 阅读 · 0 评论 -
Ambari卸载已安装的服务组件
Ambari 常用的 REST API 介绍Ambari 借鉴了很多成熟分布式软件的 API 设计。Rest API 就是一个很好地体现。通过 Ambari 的 Rest API,可以在脚本中通过 curl 维护整个集群。并且,我们可以用 Rest API 实现一些无法在 Ambari GUI 上面做的操作。下面是一些实例。实例 1,通过 API 卸载已安装的 Service目原创 2016-04-13 14:27:18 · 7229 阅读 · 0 评论 -
ambari安装报错Registration with the server failed.
ambari2.1HDP 2.3安装ambari过程中,遇到个问题,耗费了我很长时间,在此记录此问题是在安装第二步,注册主机时遇到的Registering with the server...Registration with the server failed.解决方法:Platforms: RHEL / CentOS 6.5 Amba原创 2016-04-13 14:26:14 · 4467 阅读 · 0 评论 -
ambari server调整IP的经历,部署前一定要检查环境
使用ambari安装群集的时候,安装系统人员将eth0(192.168.201.20)和eth1(192.168.20.20)的网卡都设置IP地址了,实际上应该只设置eth1(192.168.20.20),hosts文件都是指向eth1(192.168.20.20),所以可以正常安装hadoop群集,但是ambari监控界面,显示的是(192.168.201.20)IP地址,我将ambari的原创 2016-04-13 14:25:56 · 3679 阅读 · 0 评论 -
ambari操作节点supervisor无法正常启动
ambari监控界面看到的信息:stderr: /var/lib/ambari-agent/data/errors-11891.txt/usr/lib/python2.6/site-packages/jinja2/__init__.py:31: UserWarning: Module jinja2 was already imported from /usr/lib/python2原创 2016-04-13 14:25:16 · 1021 阅读 · 0 评论 -
ambari管理界面服务显示问题
ambari管理界面发现一个zookeekper显示stoped状态,启动后还是如下状态,如下:登录到服务器,查看进程发现zookeeper的状态是启动的,尝试命令重启zk,结果还是一样,后来尝试root和zookeeper用户停止、启动,发现停止后zookeeper进程还在,直接kill进程,在使用ambari启动,终于正常了。ambari服务的用原创 2016-04-13 14:25:11 · 3327 阅读 · 0 评论 -
ambari安装Namenode HA
默认状态ambari安装完成后,Namenode并不是HA状态,需要手动增加HA服务,操作如下:How To Configure NameNode High Availability1.Check to make sure you have at least three hosts in your cluster and are running at least three Zoo原创 2016-04-13 14:25:02 · 3793 阅读 · 0 评论 -
ambari安装storm后,所有supervisor无法正常启动
ambari安装storm后,所有supervisor无法正常启动,报错如下:Error while executing command 'start':Traceback (most recent call last): File "/usr/lib/python2.6/site-packages/resource_management/libraries/script/scr原创 2016-04-13 14:25:00 · 1886 阅读 · 0 评论 -
ambari动态添加datanode和nodemanager
在运行中的ambari hadoop集中中动态添加或删除节点1. 下线节点1) namenode节点上dfs.exclude文件,看配置文件怎么配置的,里每行添加一个服务器名,如我要下线server7,server8,server9,则如下:server7server8resourcemanager节点上yarn.exclude文件里每行添加一个服务器名,如我要下线se原创 2016-04-13 14:24:29 · 4448 阅读 · 0 评论