
CDH
muyingmiao
这个作者很懒,什么都没留下…
展开
-
CDH的卸载
1.卸载前的规划 1.1 做镜像备份 1.2 关闭集群 及 MySQL服务 1.3 删除部署文件夹 /opt/cloudera* 1.4 删除数据文件夹 2.卸载集群 2.1 确认各服务组件的存储数据目录,以HDFS YARN ZK为例 /dfs/nn /dfs/dn /dfs/snn YARN /yarn/nm ZK /var/lib/zookeeper 2.2 关闭集群 及 MySQL服...原创 2019-10-25 14:56:18 · 1173 阅读 · 0 评论 -
CDH配置邮件预警服务
1 打开CMS(Cloudera Management Service)的配置页2 在CMS配置页,点击"Configuration",配置邮箱参数 邮箱要先去开通授权码,Hostname不同的邮箱不一样 126:smtp.126.com 163:smtp.163.com qq:smtp.qq.com 去第二页配置465端口5.保存成功,给出提示 6.重启CM服务,使之生效 点击Finish...原创 2019-10-25 13:24:43 · 610 阅读 · 0 评论 -
CDH的启动和停止步骤
一 启动 1.启动MySQL服务 [root@hadoop001 ~]# su - mysqladmin Last login: Thu Oct 24 14:23:45 CST 2019 on pts/0 hadoop001:mysqladmin:/usr/local/mysql:>service mysql start Starting MySQL..[ OK ] hadoop0...原创 2019-10-25 12:35:44 · 8642 阅读 · 0 评论 -
CDH之CDS部署与测试:CDH 部署Spark2.4.0(Centos7.2 | CDH5.16.1 | Spark2.4.0)
0 CDH的Spark CDH上面Spark的版本都是1.6的版本1.查看官网部署文档https://docs.cloudera.com/documentation/spark2/latest.html 官网给出的一些建议和前置条件,https://docs.cloudera.com/documentation/spark2/latest/topics/spark2_requirements.ht...原创 2019-10-24 14:10:09 · 652 阅读 · 1 评论 -
CDH之CDK案例(创建topic、发送消息,消费消息,删除topic、在HomePage创建Kafka的Charts)
1.创建tocpic ./kafka-topics \ --create \ --zookeeper hadoop001:2181,hadoop002:2181,hadoop003:2181/kafka \ --replication-factor 3 --partitions 3 --topic testCDH2.创建producer ./kafka-console-producer \ --b...原创 2019-10-24 12:30:12 · 413 阅读 · 0 评论 -
CDH之CDK部署:CDH添加Kafka服务(Centos7.2|CDH5.16.1|kafka_2.11-2.2.1-kafka-4.1.0.jar)
1.下载依赖文件https://docs.cloudera.com/documentation/kafka/latest/topics/kafka_packaging.html kafka版本的介绍说明 kafka_2.11-2.2.1-kafka-4.1.0.jar 2.11 scala 版本 2.2.1 apache kafka版本 4.1.0 cdk版本 下载三个文件,如果Linux版本是...原创 2019-10-24 09:11:11 · 1772 阅读 · 0 评论 -
CDH(5.16.x)的常规使用
1.各组件版本之间的的选择https://www.cloudera.com/downloads/manager/5-16-2.htmlhttps://docs.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#c516_supported_os CDH5.16.2的文档地址 从下图...原创 2019-10-24 09:18:21 · 867 阅读 · 0 评论 -
CDH5.16.1集群企业真正离线部署(三台阿里云主机按量付费)
一.准备工作 1.集群规划 节点 MySQL部署组件 Parcel文件离线源 CM服务进程 大数据组件 hadoop001 MySQL Parcel Activity Monitor NN RM DN NM hadoop002 Alert Publisher Event ...原创 2019-10-06 00:30:42 · 852 阅读 · 0 评论