
hadoop
学庭
沉下心来钻研,别浮躁就行。
展开
-
Hadoop(六)Hadoop-HA模式(超详细,剑指第一)
HDFS和Yarn在集群里只能有一个namenode和resourcemanager,那么如果有一天他俩挂了,我们究竟要怎么做,才能使新的namenode或resourcemanager以最短的时间接管集群。本文为hadoop系列博客最后一篇博客,下篇博客开启Hive篇章,敬请期待。原创 2020-09-13 23:33:42 · 1729 阅读 · 0 评论 -
Hadoop(二)HDFS API接口(一看就会)
HDFS api接口 代码+样例 从样例学习,一看就会,关注博主,持续更新!原创 2020-09-11 22:20:23 · 781 阅读 · 0 评论 -
Hadoop(四)MapReducer集群模式下运行WordCount的两种方式
集群模式下的两种运行程序的方法:1,在命令行上提交(jar包);2,直接在客户端提交原创 2020-09-11 19:48:34 · 315 阅读 · 0 评论 -
Hadoop(五)Yarn如何配置多队列提交(入门必看)
随着业务的增长,公司需要分业务限制集群使用率。这就需要我们按照业务种类配置多条任务队列,今天我们就一起看看如何配置多条任务队列。原创 2020-09-11 19:14:42 · 3870 阅读 · 3 评论 -
Hadoop(三)MapReduce本地模式下的WordCount编程实例(Mapreduce入门教程)
多敲几遍,熟能生巧!关注博主,持续更新!原创 2020-09-10 17:31:57 · 493 阅读 · 1 评论 -
HDFS详解(看书笔记)
当数据集大小超过一台独立的物理计算机的存储能力时,就有必要对他进行分区并存储在若干台单独的计算机上。管理网络中跨多台计算机存储的文件系统称为分布式文件系统(distributed filesystem)。Hadoop自带一个称为HDFS的分布式文件系统。HDFS以流式数据访问模式来存储超大文件,运行于商用硬件集群上。1. HDFS的设计超大文件超大文件的意思是hdfs能够处理的数据规模达到GB,TB,PB了。流式数据访问[数据就像水流一样流动访问]HDFS的构建思路是:一次写入,多次读取是最高原创 2020-09-08 22:54:00 · 226 阅读 · 0 评论 -
提高namenode容错的两种方式
点个赞,交个朋友把。原创 2020-09-08 22:38:07 · 248 阅读 · 0 评论 -
Hadoop(一)如何搭建大数据Hadoop集群?(大数据入门教程)
跟着我搭建你的第一个大数据框架,一篇博客带你入门大数据,快上车!记得三连哦,关注博主持续更新。原创 2020-09-04 23:49:56 · 1347 阅读 · 1 评论