
Hadoop
文章平均质量分 92
程序员老钟
这个作者很懒,什么都没留下…
展开
-
(史上最全傻瓜式教程)CM+CDH安装搭建全过程
一、安装前准备1.1、官网教程文档地址:https://docs.cloudera.com/documentation/enterprise/6/6.3/topics/install_cm_cdh.html1.2、安装环境 主机名 操作系统 角色 IP地址 cdh100 Centos 7.6 主节点 192.168.3.10原创 2021-07-02 11:32:47 · 7950 阅读 · 4 评论 -
CM+CDH安装搭建全过程(总结版)
目录第一次搭建CM、CDH第二次搭建CM、CDH搭建环境:搭建过程:报错过程:总结复盘:第三次搭建CM、CDH搭建环境:搭建过程:报错过程:总结复盘:第四次搭建CM、CDH搭建环境:搭建过程:报错过程:总结复盘:第一次搭建CM、CD...原创 2021-07-02 10:44:44 · 3317 阅读 · 0 评论 -
Hadoop安全保护机制(Kerberos&LADP)详解
第一章 信息安全理论基础CIA模型:机密性、完整性和可用性CIA模型能够帮助建议一些信息安全原则,但该模型并不是一个需要严格遵守的规划Hadoop平台可能涉及多个CIA模型组件,也有可能一个也涉及不到1.1、机密性机密性:信息只应该被期望的接收者看到身份标识:使A和B参与机密信息传递的属于自己的唯一标志身份验证:证明自己的身份加密:将数学算法应用于信息片段,使加密后输出内容对于非预期接收者不可读解密:只有期望的接收者能对加密消息进行解密,从而得到原始信息 ...原创 2020-10-26 22:34:36 · 5367 阅读 · 0 评论 -
大数据之Hadoop生态圈学习笔记
目录第一章大数据发展趋势第二章 HDFS技术原理第三章 MapReduce分布式离线批处理第四章 YARN资源管理器第五章 ZooKeeper集群分布式协调服务第六章 HBase分布式NoSQL数据库第七章Hive数据仓库第八章Kafka第九章Flume第十章Loader第十一章Streaming第十二章Spark第十三章Flink...原创 2019-09-23 20:42:00 · 880 阅读 · 0 评论 -
Spark中Standalone、Yarn和Mesos三种资源管理和任务调度框架的对比
Spark on Standalone:Standalone是SparkCore自带的集群资源管理框架,类似于MR V1.0采用的模式(JobTracker),内部实现了容错性和资源管理。内部架构:Client、Master、Worker Spark on Standalone的运行流程是将程...原创 2019-09-27 12:05:44 · 2594 阅读 · 0 评论