欢迎订阅 -- 小源笔迹

之前安装Hadoop是用VMWare创建虚拟机，然后安装伪分布式，因为虚拟机太慢，太卡，实在没有玩下去的心情了，现在想到Docker可以实现虚拟化，看看能不能安装Hadoop,网上查了查，果然可以，并且博客还不少，但都是有些小问题，并且过程不详细，没有问题解决的答案，在我踩了好多坑后，现在记录一下我在基于Docker的Hadoop完全分布式安装时的过程和遇到的问题，希望能帮到后来的童鞋． ###首...

之前基于docker搭建了Hadoop完全分布式架构，现在来试试如何使用．基于docker搭建了Hadoop完全分布式架构 Hadoop简单介绍 可能有的人目前为止对hadoop还不是太了解，首先进行简单的介绍.大白话，简单来说，hadoop就是个分布式文件系统．要了解的有三部分， １．hdfs(分布式文件系统), ２．mapreduce(面向大数据并行处理的计算模型、框架和平台), ３．yarn...

hadoop的安装有单机版本，伪分布式，完全分布式，个人学习过程中建议使用伪分布式版本，也可以用完全分布式，这样更符合实际应用环境，但你需要考虑个人的机子的配置． zookeeper配置yarn介绍

spark安装，Spark支持运行在Yarn或者Mesos上，同时也提供自己的资源管理系统，即Standalone模式．为了方便本地开发，Spark提供了Local运行模式．不同的环境的开发代码是相同的，只是在提交到不同的调度系统时参数不同而已．

sqoop安装和简单使用

ｈｉｖｅ安装

hbase安装,hbase是基于hdfs的面向列的分布式数据库．源于google的BigTable论文．