cloudera CDH5正式版（与CDH4比较）

最新推荐文章于 2020-03-14 11:13:16 发布
原创 最新推荐文章于 2020-03-14 11:13:16 发布 · 472 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #java

本文介绍了Hadoop 2.2稳定版的主要特性，包括对JDK7及以上版本的支持、推荐使用的YARN (MR2)、HDFS快照功能以及Spark集成等内容。

 

要求JDK7以上，JDK6不被支持

 

 基于apache hadoop2.2稳定版

 

YARN(MR2) 推荐使用（具备生成环境使用条件），MR1和MR2同时被支持

 

HDFS快照（ Snapshots）

 

集成Spark

 

Resource Manager HA

 

CDH5与CDH6对比.pdf
07-30
CDH6相对于CDH5是一次各个组件的大版本升级，要理解大版本更新，这里先解释一下Hadoop相关组件的版本说明。比如版本号是x.y.z，z代表的一般是Maintenance Version或Patch Version，这种版本升级主要修复bug，不改动API，也不涉及新的功能，y代表的是Minor Version，这种版本升级主要是增加新的功能和新的API，x代表的是Major Version，往往会新增全新的功能，甚至改动API。那么CDH5到CDH6就是一次Major Version的升级，新增了很多功能，API的更改有可能导致你旧有的程序的不兼容而需要修改或者重新开发，但根据软件开发迭代的原则，往往新版本会向下兼容一段时间，你只需要经过严格的测试，在一段时间内应用开发的修改理论不会太大，但还是要结合实际情况，进行严格的测试后再行判断和评估。
Cloudera CDH集群运维手册
01-09
《Cloudera CDH集群运维手册》是一份深入解析Cloudera CDH集群管理与运维的详尽指南，尤其适合已经或计划使用Cloudera CDH进行大数据处理的团队参考。Cloudera CDH（Cloudera Distribution Including Apache Hadoop...
hadoop版本总结
jimmylsp的专栏
02-21 368
hadoop有两个分支：0.20.x 和0.23.x。其中0.20.x是比较稳定的版本，0.23.x中新特性更多，但相对不稳定。 其中从0.20.x 分支发展出来的是：hadoop1.0，CDH3 从0.23.x 分支发展出来的是：hadoop-alpha，CDH4 下面具体说hadoop1.0、2.0 和CDH3、CDH4： Apache Hadoop  2012
Cloudera Manager 和 CDH 4 终极安装
weixin_30548917的博客
02-26 182
转载请注明出处：http://www.cnblogs.com/thinkCoding/p/3567408.html 系统环境 　　操作系统：CentOS 6.5 　　Cloudera Manager 版本：4.8.1 　　CDH版本：4.5.0 各机器准备工作： 　　yum -y groupinstall "Development tools" 　　yum -y in...
Impala升级(CDH4->CDH5)踩坑经历
weixin_34248849的博客
08-26 253
首先按照CDH官方文档对Impala进行升级，但是升级后有几个小问题需要注意下。在shell环境下，输入正常的SQL语句，报错如下从报错信息上可以看出是在读取Hive Metadata过程中出了问题。由于在CDH5中配置了NameNode HA,而老版本CDH4中是单NameNode，所以在新版本中读取的时候，希望读取到新配置的fs.defau...
升级cdh4到cdh5
weixin_34375054的博客
04-08 154
本文主要记录从CDH4升级到CDH5的过程和遇到的问题，当然本文同样适用于CDH5低版本向最新版本的升级。 1. 不兼容的变化 升级前，需要注意 cdh5 有哪些不兼容的变化，具体请参考：Apache Hadoop Incompatible Changes。 2. 升级过程 2.1. 备份数据和停止所有服务 2.1.1 让 namenode 进入安全模式...
docker-cdh5.4:Cloudera CDH 5.4.0
05-23
使用所有CDH组件创建docker 此目录中的Docker脚本会生成CentOS 6 Docker VM并安装所有CDH组件（Hadoop，Spark，Hbase，Hive，Impala，Hue，Zookeeper，Oozie等）。 如何建立cdh容器？ docker build -t docker-cdh...
离线安装ClouderaManager5和CDH5
02-26
CDH(Cloudera'sDistribution,includingApacheHadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的ApacheHadoop构建，并集成了很多补丁，可直接用于生产环境。ClouderaManager则是为了便于在集群中...
ClouderaManager和CDH4终极安装
02-26
4.5.0各机器准备工作：Cloudera-manager压缩包地址：http://archive.cloudera.com/cm4/cm/4/cloudera-manager-el6-cm4.8.1_x86_64.tar.gzCDH下载地址：http://archive.cloudera.com/cdh4/parcels/IMPALA下载地址：...
cdh7.5 cloudera manager 安装全套软件和视频推荐
最新发布
02-23
1. **cloudera-manager-agent-7.2.4-7594142.el7.x86_64.rpm**：此RPM包提供了Cloudera Manager Agent，它是每个集群节点上的代理服务，负责与Cloudera Manager Server通信并执行管理命令。 2. **cloudera-manager...
Cloudera 5 Hadoop平台简介
07-26
作为业界最领先的企业级数据平台软件，Cloudera企业版除了包含业界最流行的基于开源Hadoop及其生态组件构建的CDH核心，还包含了大量为支撑企业级业务的高级管理特性。 借助于Cloudera企业版的整体解决方案，企业可以专注于自己的业务能力。
CDH6离线安装 -
04-01
CentOS7 下离线安装CDH6，绝对可用。 各种坑的解决，强烈建议收藏，因为CDH6和CDH5离线安装区别很大，官方网文档太混乱，这个是非常清晰的概括总结
cloudera cdh4 环境搭建
weixin_30828379的博客
04-11 135
最近cloudera hue 环境没有搭建成功，于是开始着手于cloudera 整套环境的搭建，发现网上也有一些文章， 于是借鉴了一些，开始自己着手安装： 1. 安装cloudera manager cloudera manager 可以通过它来安装cloudera 整个环境，于是先安装 cloudera manager 准备安装环境： 系统：centos 6...
Cloudera Hadoop 5&Hadoop高阶管理及调优
m0_46238479的博客
03-14 572
目录 ├─01.Hadoop2.0 动态增加节点 │├─01.01_怎样添加节点.mp4 │├─01.02_添加新的服务器节点.mp4 │├─01.03_新节点操作系统配置.mp4 │├─01.04_新节点Hadoop配置.mp4 │├─01.05_调整新节点副本数.avi ├─02.Hadoop2.0 动态删除节点 │├─02.01_怎样删除节点.avi │├─02....
CDH5-CDH环境准备
weixin_39182877的博客
01-13 389
提醒:集群的每个机器都要操作一次 1 关闭防火墙 执行命令 service iptables stop 验证: service iptables status 2 关闭防火墙的自动运行 执行命令 chkconfig iptables off 验证: chkconfig --list | grep iptables   $>vi /etc/selinux/con
Cloudera CDH4（含4.5） 卸载
yydcj的专栏
02-18 1187
记录卸载过程和问题。现有环境Cloudera Manager + (1 + 2 )的CDH环境。 1、先在Manage管理端移除所有服务。 2、删除Manager Server 在Manager节点运行 $ sudo /usr/share/cmf/uninstall-cloudera-manager.sh 如果没有该脚本，则可以手动删除，先停止服务： sudo service clou
Apache Hadoop(Cloudera CDH4)安装需要注意的几点
zzhua100的专栏
08-02 6584
Cloudera CDH4安装方法有三种： 1、通过Cloudera Manager自动安装（只支持64bit linux操作系统）； 2、通过资源包，利用Yum命令手工安装； 3、通过下载的tarball包，手工安装；          个人建议1、2两种都尝试，先2后1的方式对Hadoop的架构，内置的组件以及配置等会要一个比较清晰的了解。具体的安装可以参考官方文档（CDH4 In
CDH4安装实践HDFS、HBase、Zookeeper、Hive、Oozie、Sqoop
luobailian的专栏
12-27 1295
 目录： Hadoop集群(CDH4)实践之 (0) 前言 Hadoop集群(CDH4)实践之 (1) Hadoop(HDFS)搭建          Hadoop集群(CDH4)实践之 (2) HBase&Zookeeper搭建          Hadoop集群(CDH4)实践之 (3) Hive搭建          Hadoop集群(CHD4)实践之 (4) Oozie搭
离线安装ClouderaManager5与CDH5详细教程
在大数据处理领域，Cloudera's Distribution, including Apache Hadoop (CDH) 是一个广泛使用的Hadoop发行版，由Cloudera公司维护。CDH基于稳定的Apache Hadoop版本，同时包含了多个补丁，确保其在生产环境中具有...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值