虾哔哔的博客

在部署CDH的时候，难免会遇到一些问题需要重新安装，在重新安装前必要删除旧的CDH。在删除CDH前，注意要备份好数据。先备份或转移集群中的重要数据，再进行集群的卸载。像一些重要的用户数据，默认的存储路径是在/var/lib/下面，一些组件如HDFS/Impala/Kudu的数据根据安装时的目录来查看。 下面开始卸载CDH。1. 停止所有的服务1.1 停止组件服务打开 Clou...

当cdh出现报错 主机的 NTP 服务未同步至任何远程服务器。 可以采取以下方式解决 选择ntp时间服务器 : 10.0.61.4Step1 : 进入linux ntpd 配置目录,并修改配置文件如下:vim /etc/ntp.conf # For more information about this file, see the man pages...

1.文档编写目的 Sentry在CDH平台中定位为统一的授权框架，即所有的组件都要受Sentry的管理，当然也是为了方便用户的操作，一个入口为所有数据相关进行授权。Fayson在前面的文章中介绍了大量Sentry与Hive/Impala的集成文章，其实Sentry除了可以给Hive/Impala表授权外，还可以管理HDFS ACL，Kafka，Solr，Kudu等。前两天Fayson也介绍过如...

为了能够方便的查看及管理Kafka集群，yahoo提供了一个基于Web的管理工具（Kafka-Manager）。这个工具可以方便的查看集群中Kafka的Topic的状态（分区、副本及消息量等），支持管理多个集群、重新分配Partition及创建Topic等功能。项目地址：https://github.com/yahoo/kafka-manager 前提：JDK1.8环境1、编译（必...

由于脚本中显示指定了运行sqoop的jdk版本为1.8,CDH集群的jdk为1.7，导致执行sqoop时报错:Unsupported major.minor version 52.0。出现该问题是由于cloudera manager和系统的jdk版本不一致导致的，更具体点是cm使用的是低版本的jdk（我的是1.7）,而操作系统通过java -version出来的版本是高版本的jdk(我的是1....