
大数据-Hadoop
大数据-Hadoop
敦格
愿众生都能开启智慧,我愿化作阳光和雨露,洒遍人间大地。
展开
-
Hadoop大象之旅001-安装VMware虚拟机
VMware虚拟机允许一台真实的电脑在一个操作系统中同时开启并运行数个操作系统,我的操作系统是Windows7x64,而Hadoop需要运行在Linux系统上。我们就需要在Windows7上安装VMWare虚拟机软件,再把Linux操作系统安装在VMWare中,虚拟出一个操作系统作为我们的Hadoop环境。我们这里使用VMWare10虚拟机。原创 2014-11-22 21:56:53 · 2550 阅读 · 0 评论 -
Hadoop大象之旅009-通过Shell操作hdfs
本文介绍如何使用shell命令方便的操作hadoop原创 2014-12-09 10:17:34 · 3103 阅读 · 0 评论 -
Hadoop大象之旅008-启动与关闭Hadoop
Hadoop是一个运行在Linux文件系统上的分布式文件系统,在使用之前需要启动。如何启动?遇到错误又如何分析?原创 2014-12-02 12:59:49 · 4717 阅读 · 0 评论 -
Hadoop大象之旅007-配置Hadoop伪分布模式
安装hadoop分为本地模式、伪分布模式、集群模式。本地模式是运行在本地,只负责存储,没有计算功能。伪分布模式是在一台机器上模拟分布式部署,方便学习和调试。集群模式是在多个机器上配置hadoop,是真正的“分布式”。原创 2014-12-02 09:18:06 · 2258 阅读 · 0 评论 -
Hadoop大象之旅006-安装Hadoop环境
关于Hadoop的安装,要注意硬件对虚拟化的支持。我们的硬件电脑上跑的是Windows7x64,并且在Windows7安装好了VMWare10虚拟机,VMWare中也安装配置了CentOS6.5操作系统,CentOS中也已经安装配置了jdk1.6.0_45,并也准备好了连接CentOS的工具软件SecureCrSecureFx。万事具备,应该安装Hadoop了,但是Hadoop有很多版本,我们怎么选择呢?原创 2014-12-02 08:28:39 · 1966 阅读 · 0 评论 -
Hadoop大象之旅003-配置CentOS操作系统
在VMWare虚拟机中安装好了CentOS操作系统,为了后面即将安装的Hadoop能够正常运行,还需要对CentOS操作系统进行相关的配置。原创 2014-11-24 21:21:16 · 3113 阅读 · 0 评论 -
Hadoop大象之旅005-安装JDK环境
由于Hadoop 需要运行在JAVA平台,所以我们还需要在CentOS中安装java的环境,在这里,我们选择java的版本是jdk-6u45-linux-i586.bin,演示如何安装。原创 2014-11-27 17:29:51 · 2234 阅读 · 0 评论 -
Hadoop大象之旅002-安装CentOS操作系统
上一章中,我们已经准备好了VMWare虚拟机环境,这一章,我们就在虚拟机中安装操作系统。由于Hadoop环境是建立在Linux系统下,所以需要在VMWare中虚拟一个Linux系统,这次采用的Linux系统为CentOS6.5。大家可以在CentOS官网http://www.centos.org/中下载到。原创 2014-11-24 08:49:43 · 2775 阅读 · 0 评论 -
Hadoop大象之旅004-认识一下常用的Linux工具
在企业开发中,对于Linux服务器的操作,一般是不会让人直接通过Linux桌面进行访问的,一般会由系统管理员分配账号和密码,然后通过工具登录服务器进行操作。现在连接Linux操作系统的工具很多,这一章,我们先来认识一下这些工具,为后面做好准备。本章所有讲到的工具都可以在下面地址下载到。原创 2014-11-27 17:20:50 · 2287 阅读 · 1 评论 -
Hadoop大象之旅010-使用eclipse查看hadoop源码
本文介绍如何使用eclipse查看和编译hadoop源码原创 2014-12-10 08:29:59 · 3873 阅读 · 0 评论