haoran_gao的博客

1.概述夜深了，这是本人的第一篇技术博客，写文章不是本人的长处，也会经常去问度娘，如果本文中记录的步骤侵犯了某些博主的权利，请联系我。本文只是记录了自己的编译过程。 为什么要编译hadoop源码呢？网上各种编译好的hadoop,拿来用就好了吗！因为在用别人hadoop时，别人的编译环境跟我们的不同，在使用过程中会有些报警。报警而已嘛，可我老师是个严厉的人，让我们自己编译一下。我是个遵守纪律的好学生

http://www.forbes.com/sites/danwoods/2011/11/03/explaining-hadoop-to-your-ceo/2/#3c1b2c0c4b54http://blog.youkuaiyun.com/huangyanlong/article/details/39718485

Related Books Hadoop in Practice Hadoop in Practice (2014) by Alex Holmes Pro Apache Hadoop Pro Apache Hadoop (2014) by Jason Venner, Sameer Wadkar, Madhu Siddalingaiah Hadoop For Dummies Hado

在做hadoop测试的时候,由于误操作，datanode不能启动了。查询日志也没有错误提示。我们先来看看hadoop文件的元文件目录结构. ├── data │?? ├── current │?? │?? ├── BP-1808523652-192.168.237.128-1451363010425 │?? │?? │?? ├── current │?? │?? │?? │?? ├── f

jobserver的配置在mapred-site.xml中<property> <name>mapreduce.jobhistory.address</name> <value>***:10020</value></property><property> <name>mapreduce.jobhistory.webapp.address</name> <value>***:19888

在安装完hadoop后，配置文件保存在etc/hadoop/下，通常需要我们做修改。 - core-site.xml 全局配置 - hadoop-site.xml - yarn-site.xml - mapred-site.xml 可以参看hadoop文档下的默认配置修改 常用的修改如下：core-site.xmlnamenode RPC 端口，域名设置(..*=hostname

这两天在Linux下安装eclipse并配置maven时，遇到了些问题，记录一下安装的过程和问题。eclipse安装将eclipse-jee-kepler-SR1-linux-gtk-x86_64.tar.gz解压到安装目录。 tar -zxvf eclipse-jee-kepler-SR1-linux-gtk-x86_64.tar.gz -c / 用命令./eclipse就可以在linux下启

HDFS是一种分布式存储系统， 它把大文件分块存储在网络的机器中，它采用主从结构（master/slave). 通过一些后台进程来管理文件的存储：Namenode, Datanode,SecondaryNamenode.NameNode结构图如下： NameNode维护着文件系统树(filesystem tree)以及文件树中所有的文件和文件夹的元数据(metadata)。管理这些信息的文件

http://my.oschina.net/u/1378204/blog/471338?p=1

海量Web日志分析 用Hadoop提取KPI统计指标 http://blog.fens.me/hadoop-mapreduce-log-kpi/http://my.oschina.net/leejun2005/blog/292709http://blog.youkuaiyun.com/clever101/article/details/16969943http://zhidao.baidu.com/link?