
大数据Hadoop
ai_64
对互联网安全架构理论和安全建设非常感兴趣,不断提高自身职业发展所需的专业信息安全知识,希望早日成为安全界大咖!
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
HBase学习
《HBase 不睡觉》第一章 - 初识 HBase 《HBase 不睡觉书》是一本让人看了不会睡着的HBase技术书籍,写的非常不错,为了加深记忆,决定把书中重要的部分整理成读书笔记,便于后期查阅,同时希望为初学 HBase 的同学带来一些帮助。 目录 第一章 - 初识 HBase 第二章 - 让 HBase 跑起来 第三章 - HBase 基本操作 第四章 - 客户端 API ...转载 2019-10-11 23:19:31 · 620 阅读 · 1 评论 -
Hadoop基础篇(理论指导)
Hadoop基础之入门简介(1) 大数据的概念 1.多机并发进行处理数据 2.大数据的核心是样本=总体 为什么需要大数据? 答:样本抽查分析出来的结果不够可靠,我们希望可以从业务的海量数据中要提取出样本数据。 大数据几个特性: 大量性:数据G级别 快速性:数据变化快 多样性:结构多样 易变性:数据流波动 准确性:数据分析的结果可靠 复杂性:数据的各种抽取操作复杂 大数据的关键技术 1....原创 2019-09-08 22:00:33 · 3123 阅读 · 0 评论 -
Hadoop进阶篇(安装配置)
Hadoop进阶篇(安装配置)草稿。。。。。。。 windows平台上搭建hadoop2.7.4 准备工作1: 安装好jdk1.8,配置好java的环境变量, JAVA_HOME, 路径 :java路径, 比如 E:\Java\jdk1.8.0_191 path中,最前面加上%JAVA_HOME%\bin 注意javahome的program files用Progra~1代替,避免出现空格。 准备...原创 2019-09-13 00:13:54 · 1458 阅读 · 0 评论 -
Hadoop hadoop配置文件yarn-site.xml、mapred-site.xml、hdfs-site.xml 、core-site.xml、hadoop-env.cmd详解
前言: 配置hadoop,主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件。 上网找的配置可能因为各个hadoop版本不同,导致无法生效,这里需要经验积累。 参数繁多,不用过多纠结每个参数的含义,先照搬网上的参数, 用多几次,总会出现bug,需要反复调整的参数就是常用参数。 ±±±±±±±±±±±±±±±±±±±±±±±±±±±±±±±±...原创 2019-09-13 15:19:51 · 6569 阅读 · 0 评论