
Hadoop
Cc_sai_sai
永远积极向上
展开
-
关于MapReduce的解压缩
这片海~原创 2022-06-13 22:06:37 · 213 阅读 · 0 评论 -
IDEA快捷键
IDEA快捷方式自动代码常用的有fori/sout/psvm+Tab即可生成循环、System.out、main方法等boilerplate样板代码 。例如要输入for(User user : users)只需输入user.for+Tab ;再比如,要输入Date birthday = user.getBirthday()只需输入user.getBirthday().var+Tab即可。...原创 2019-12-28 15:22:53 · 298 阅读 · 0 评论 -
Hadoop(HDFS)
HDFS 学习内容Hadoop(HDFS) 1.HDFS的概述 01. 为何会产生HDFS? 随着数据量越来越大,在一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统,HDFS只是分布式管理系统中的一...原创 2019-12-24 19:44:43 · 441 阅读 · 0 评论 -
Hadoop集群搭建(非高可用)
非高可用集群搭建 第一部分环境准备 =============================================================================== 1. 安装好linux 2. *安装VMTools 3. 关闭防火墙 sudo service iptables stop sudo chkconfig ipt...原创 2019-12-24 11:04:06 · 487 阅读 · 0 评论 -
伪分布及完全分布式
伪分布搭建以及改为完全分布式 #从0搭建伪分布式 ====================root用户================== 1.准备虚拟机 2.修改静态ip DEVICE="eth0" BOOTPROTO="static" HWADDR="00:0C:29:A2:3B:C9" IPV6INIT="yes" NM_CONTRO...原创 2019-12-24 11:00:15 · 554 阅读 · 0 评论 -
Hadoop入门(简单搭集群)
学习内容Hadoop(入门)重点搭集群 1.大数据概念 ·大数据(bigdata),IT行业术语, 是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合 是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 ·主要...原创 2019-12-24 10:53:20 · 308 阅读 · 0 评论 -
大数据之Hadoop
大数据之Hadoop入门一、Hadoop特点:volume(大量) velocity(高速) variable(多样) value(低价值密度)二、Hadoop优势: 1.高可靠性--hadoop底层维护多个数据版本,所以即使Hadoop某个计算元素或存储出现故障,也不会导致数据丢失...原创 2019-12-06 20:01:55 · 192 阅读 · 0 评论