
大数据
文章平均质量分 93
涉及hadoop、Hbase、ES、ZK等等
lixiangchibang
认真、严谨、自信、爱我所爱、无怨无悔
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
kerberos认证授权详解
目录 1. Kerberos简介 1.1. 功能 1.2. 概念 2. 3次通信 2.1. 你和验证服务 2.2. 你和TGS 2.3. 你和Http服务 3. 参考 1. Kerberos简介 1.1. 功能 1. 一个安全认证协议 2. 用tickets验证 3. 避免本地保存密码和在互联网上传输密码 4. 包含一个可信任的第三方 5. 使用对称加密 6. 客户端与服务器(非KDC)之间能够相互验证 Kerberos只提供一种功能——在网络上安全的完成用户的身份验证。它并原创 2021-10-09 11:51:00 · 1119 阅读 · 0 评论 -
yarn随笔笔记
1.yarn产生背景 mapreduce1.x存在单点故障: MapReduce:Master/Slave架构,1个JobTracker带多个TaskTracker JobTracker: 负责资源管理和作业调度 TaskTracker: 定期向JT汇报本节点的健康状况、资源使用情况、作业执行情况; 接收来自JT的命令:启动任务/杀死任务 ...原创 2020-04-06 16:10:20 · 165 阅读 · 0 评论 -
hadoop与hdfs随笔
hadoop生态常见组件: 1、flume:日志统一到hdfs处理; 2. sqoop:关系型数据到hdfs相互转换; 3. hive:hsql转换成mapreduce; 4. pig:脚本转换成MapReduce; 5. oozie:工作流管理; 6. zookeeper:管理员,负责hbase等单点问题; 7. hbase:基于bigtable的数据库 以上加上狭义...原创 2020-04-05 22:44:52 · 160 阅读 · 0 评论