
大数据
文章平均质量分 67
HarSenZhao
这个作者很懒,什么都没留下…
展开
-
CDH5.15离线搭建简易版集群(完整版)
运用CDH5.15离线搭建简易版集群关于CDH和ClouderaCDH(Cloudera的发行版,包括Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境.Cloudera Manager则是为了便于在集群中进...原创 2018-07-19 17:55:28 · 2697 阅读 · 0 评论 -
CDH集成kerberos权限之后对集群操作
CDH集成kerberos权限之后对集群操作一.在集群中创建秘钥表执行以下命令kadmin.local: xst -k test.keytab -norandkey hdfs@for_cdh...原创 2018-09-05 14:13:53 · 320 阅读 · 0 评论 -
HDFS操作随笔
HDFS操作随笔目录 HDFS操作随笔一、Hadoop的hdfs dfs命令一、Hadoop的hdfs dfs命令参数 作用 示例 返回值 appendToFile ...原创 2018-08-30 13:46:33 · 349 阅读 · 0 评论 -
mariadb主从复制及互为主从配置过程
mariadb主从复制及互为主从配置过程实验环境:两台电脑一台的ip地址为192.168.153.133 一台为192.168.153.133 主从复制1.先安装mariadb数据库 yum install mariadb-server2.修改配置文件/etc/my.conf增加如下代码主服务器:server-id= 1...原创 2018-08-25 09:11:08 · 428 阅读 · 0 评论 -
Kafka操作随笔
Kafka操作随笔一.kafka简介Kafka是一种分布式的,基于发布/订阅的消息系统。二.kafka shell 命令1.创建kafka topicbin/kafka-topics.sh --zookeeper node01:2181 --create --topic t_cdr ...原创 2018-08-28 11:02:38 · 860 阅读 · 1 评论 -
集群遇见的问题及解决方案
集群遇见的问题及解决方案原创 2018-08-17 09:21:48 · 643 阅读 · 0 评论 -
Hive操作随笔
Hive操作随笔原创 2018-08-15 18:54:17 · 218 阅读 · 0 评论 -
CDH 集成Sentry权限控制
CDH 集成Sentry权限控制1.hue集成sentry服务首先登陆如下界面我的是http://master:7180/cmf/home然后点击hue组件进入下面的界面,点击配置搜索Sentry将Sentry服务的Sentry勾选上2. hive和impala启用Sentry和上面的步骤一样这里就...原创 2018-08-02 14:05:44 · 3241 阅读 · 2 评论 -
HBase简单操作
HBase学习随笔 HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce...原创 2018-08-02 11:07:21 · 255 阅读 · 0 评论 -
CDH配置Kerberos
# Configuration snippets may be placed in this directory as wellincludedir /etc/krb5.conf.d/[logging] default = FILE:/var/log/krb5libs.log kdc = FILE:/var/log/krb5kdc.log admin_server = FILE:/var/log/kadmind.log[libdefaults]default_realm = for_cdh原创 2018-07-26 16:33:45 · 708 阅读 · 0 评论 -
CDH kudu master 迁移和新增
目录一.CDH kudu master新增流程一.首先对已经拥有的kudu1 的master做准备工作二.为每个新主站执行以下准备步骤二.CDH kudu 当msater节点宕机做master服务迁移一.对每个存活的master获取uuid二.对reference master做以下操作三.准备恢复一.CDH kudu master新增流程以下的操作...原创 2019-06-27 16:45:38 · 1374 阅读 · 0 评论