- 博客(5)
- 收藏
- 关注
RSS订阅原创 Hadoop2.x完全分布式环境搭建及测试验证
Hadoop2.x完全分布式环境搭建及测试验证 前置条件： [1]已制作好CentOS虚拟机模板。 [2] 该模板安装好Oracle JDK，且JAVA_HOME值为/usr/java/jdk1.8.0_171-amd64/jre。 准备三台虚拟机 [1] 搭建完全Hadoop...
2019-07-23 23:32:12
497
原创 Hadoop2.x伪分布式环境搭建及测试验证
Hadoop2.x伪分布式环境搭建及测试验证 前置条件： Linux虚拟机一台，版本为CentOS 7.4，假设IP地址为192.168.159.181，并修改如下： [1]修改/etc/hostname的内容为hadoop01 说明：修改了主机名之后需要重启才...
2019-07-22 23:05:42
375
原创 Hadoop环境搭建
Hadoop的环境可以有多种方式，比如本地模式（standalone）、伪分布式、完全分布式以及HA模式。 参考： [1] http://hadoop.apache.org/docs/r2.7.3/hadoop-project-dist/hadoop-common/SingleCluster.html [2]https://blog.youkuaiyun.com/qq_26442553/article...
2019-07-22 23:00:16
165
原创 什么是hadoop?
Hadoop简介 Hadoop的诞生 Hadoop是由Apache Lucene创始人Doug Cutting创建的。它起源于开源搜索引擎Apache Nutch。Nutch项目开始于2002年，是一个可以运行的网页爬取工具和搜索引擎系统，但是这个系统无法解决数十亿的搜索问题。 三篇划时代论文的诞生对Hadoop的诞生起到了决定性作用。 第一篇论文：GFS 2003年谷歌发表了“The...
2019-07-17 23:07:13
234
原创 什么是大数据？
大数据的背景 所谓大数据，就是通常所说的具有4V特征的数据：数据量大Volume、多样性Variety、价值密度低Value、处理速度快Velocity。它是信息技术发展到一定阶段的必然产物。信息化的过程同时也是数据累积的过程。 大数据的爆发有它的必然性。它主要有以下几个方面的因素： 首先，互联网和移动应用的兴起，让数据的产生呈现爆发式增长，数据的累积速度比以往任何时候都要快； 其次，各...
2019-07-17 22:56:13
469
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人