
CDH
文章平均质量分 79
大数据技术与数仓
欢迎关注我的公众号【大数据技术与数仓】
回复【资料】领取大数据书籍与视频
展开
-
CDH集群之YARN性能调优
本文主要讨论CDH集群的YARN调优配置,关于YARN的调优配置,主要关注CPU和内存的调优,其中CPU是指物理CPU个数乘以CPU核数,即Vcores = CPU数量*CPU核数。YARN是以container容器的形式封装资源的,task在container内部执行。集群配置集群的配置主要包括三步,第一是先规划集群的工作主机以及每台主机的配置,第二是规划每台主机的安装的组件及其资源分配,...原创 2019-12-03 17:48:13 · 2441 阅读 · 0 评论 -
CDH5.15.0中的hue集成Hbase
CDH5.15.0中的hue集成Hbase1.确认hbase-site.xml配置文件中的如下内容 <property> <name>hbase.thrift.support.proxyuser</name> <value>true</value> </property> ...原创 2018-10-18 15:25:22 · 3568 阅读 · 0 评论 -
Oozie调度使用案例--使用命令行方式
Oozie调度使用案例环境准备CDH5.15.0,hue3.9.0+cdh5.15.0,oozie4.1.0+cdh5.15.0 2.使用案例(1)在oozie-4.1.0-cdh5.15.0.tar.gz的解压目录中存在一个oozie-examples.tar.gz的tar包 [root@sdw1 software]# tar -xzvf oozie-4.1....原创 2018-10-19 13:38:33 · 845 阅读 · 0 评论 -
CDH5.15.1安装部署
目录一、软件环境二、安装前准备2.1配置网络名称(hostname)2.2配置SSH免密登录2.3集群时间同步2.4关闭防火墙2.5关闭SELINUX2.6安装JDK2.7安装和配置数据库2.7.1安装MySQL2.7.2为Cloudera组件创建数据库2.8Linux参数配置2.8.1设置swappiness2.8.2关闭透明大页面2....原创 2018-12-30 23:12:42 · 1823 阅读 · 0 评论