
CM
文章平均质量分 66
Junjie_M
这个作者很懒,什么都没留下…
展开
-
Cloudera Manager(CM)自动和手动安装Linux系统环境的前提
本文介绍的是CentOS6或RedHat6以上等相对新的版本安装Cloudera Manager的前提操作。1、修改主机名(可做可不做)修改文件,执行vi /etc/sysconfig/network,修改新的主机名后,保存退出;执行命令 hostname 查看新的主机名。2、绑定ip与主机名(可做可不做)执行vi /etc/hosts,增加一行记录如:192.原创 2014-12-29 12:13:54 · 899 阅读 · 0 评论 -
重装CDH遇到的几个问题
1、HDFS启动失败原因:dfs目录下数据版本是老的。操作:删除dfs目录,重新初始化新的目录。2、Hbase Master启动失败原因:zookper 链接信息过期了。操作:进入zookeeper控制台:.../zookeeper/bin/zkCli.sh,查看目录:ls /,然后删除hbase目录:rmr /hbase,重启zk和hbase。原创 2015-01-12 12:30:28 · 1514 阅读 · 0 评论 -
卸载Cloudera Manager(CM)和Cloudera Data Hub(CDH)
1、先在Manage管理端移除所有服务。2、删除Manager Server在Manager节点运行$ sudo /usr/share/cmf/uninstall-cloudera-manager.sh如果没有该脚本,则可以手动删除,先停止服务:sudo service cloudera-scm-server stop sudo service cloud原创 2015-01-12 12:24:12 · 1895 阅读 · 0 评论 -
手动安装Cloudera Manager
手动安装前需要先开启HTTPD服务执行/usr/sbin/apachectl start,开启后可以通过url访问/var/www/html下的目录。1、下载cloudera manager的repo资源下载 http://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/5.2.1/RPMS/x86_64/ 下的资源到 /原创 2015-01-12 11:44:52 · 717 阅读 · 0 评论 -
离线升级Cloudera Manager(CM)和Cloudera Data Hub(CDH)
升级Cloudera Manager(CM)管理界面点击“主机”,点击“重新运行主机升级向导”,添加Httpd的url路径,如:http://192.168.1.201/cm/5.2.0。升级Cloudera Data Hub(CDH)管理界面点击右上角像礼物包一样的图标,在右侧点击“编辑设置”,在“远程Parcel存储库URL”中添加http://192.168.1.201/原创 2015-01-12 12:38:34 · 3660 阅读 · 0 评论 -
Cloudera Manager的备份和灾难恢复
注:只有Cloudera Manager企业版才有Cloudera Manager的备份和灾难恢复功能一、 概述Cloudera Manager提供了一个集成的、易于使用的管理解决方案,使数据保护在Hadoop的平台。Cloudera Manager提供了丰富的功能旨在复制存储在HDFS数据和通过Hive跨数据中心的灾难恢复场景。当关键数据存储在HDFS,Cloudera Mana原创 2015-01-13 10:29:11 · 7614 阅读 · 2 评论 -
【配置CDH和管理服务】关闭DataNode前HDFS的调优
配置CDH和管理服务关闭DataNode前HDFS的调优角色要求:配置员、集群管理员、完全管理员 当一个DataNode关闭,NameNode确保每一个DataNode中的每一个块根据复制系数(the replication factor)跨集群仍然是可用的。这个过程涉及到DataNode间小批次的块复制。在这种情况下,一个DataNode有成千上万个块,关闭后集群间还原备份数可能翻译 2015-01-16 11:06:47 · 6359 阅读 · 0 评论 -
YARN动态资源池配置案例
EDH作为统一的企业级数据中心,往往是一个多租户的应用环境。在该环境中,不同用户会同时使用集群资源。如何保证用户数据不被任意篡改?如何保证任务的权限控制 (例如用户A不能任性地取消用户B的任务)?如何确保用户资源使用不超过他们的配额?1. 开启HDFS权限检查 (默认是开启的)"Check HDFS Permissions"选中2.转载 2015-04-08 09:17:03 · 5944 阅读 · 0 评论