君子不器

解析：

1、总体概况 2、HDFS架构： 3、yarn架构 3、mapreduce架构 5、storm架构

1、java语言编写的框架 2、分布式存储（HDFS hadoop distribulated file system ）让用户感觉不到数据分散到多台机器中存储的（例如：云盘存储），好像在一台机器上操作一样。因为数据量的巨大的，一台机器是不能存储完的，因此必须分多台计算机存储。 3、分布式计算（MapReduce）指的是一套程序在很多台机器中运行，协同完成一件事情。并不是所有的程序都能分布式运

调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统，scheme是hdfs，对本地文件系统，scheme是file。其中scheme和authority参数都是可选的，如果未加指定，就会使用配置中指定的默认scheme。一个HDFS文件或目

1、hadoop的设计假设和目标 廉价机的磁盘容易坏。 2、hdfs的设计目标和假设 用户控件可以位于异构的操作系统中：

总体概述： 1、将这个5个目录到java工程的src下 2、 3.把lib中的jar包，放到java project中 accessible：

1、Hadoop 1.x目录结构

1、core-site                           fs.default.name hdfs://redhat5:9000 hadoop.tmp.dir /gaozhen/data/temp 2、hdfs-site                       dfs.replication 1

1、需要分析的文件放到/wc/input/       分析的结果放到    /wc/output/ 2、 3、 4、 4、

查看结果： 在地址栏：输入   主机名：50070 点击_logs 下面的进入统计单词的结果。

/gaozhen/jdk1.7.0_79/jre source hadoop-env.sh  将jdk变成jre的home目录： [root@redhat5 ~]# hadoop fs -rmr /wc/output/     --这个目录不删除 也会报错 [root@redhat5 hadoop-1.2.1]# hadoop jar h

下面的解决方案我亲自试了没有问题；可行，但是对于初学者来说肯定会有一个疑问；这个.bash_profile文件到底在哪呢；其实很简单： 当前用户的.bash_profile在/home/用户/下，系统的.bash_profile在/etc/skel目录下; 默认可能是隐藏的；有人会问了，隐藏的我怎么打开它，一个简单的办法，直接使用vi命令打开指定目录下的该文件就可以了；比如：vi /root/.

[root@redhat5 bin]# ./hadoop-daemons.sh Usage: hadoop-daemons.sh [--config confdir] [--hosts hostlistfile] [start|stop] command args... [root@redhat5 bin]#

root@redhat5 bin]# pwd /gaozhen/hadoop-1.2.1/bin [root@redhat5 bin]# cd .. [root@redhat5 hadoop-1.2.1]# ls bin                      hadoop-examples-1.2.1.jar     logs build.xml                had

最近一两年，云计算技术越来越受到IT人士的亲睐，很多人都开始在学习，比如hadoop，大数据处理技术等等，但是网上相关资料非常少，会的人也不多，很多企业都在需求这方面的技术人才，待遇也是相当可观。小编在此给大家推荐几套相关的视频教程，希望借此可以帮助到那些渴望学习但又苦于没有资料的朋友。有疑问的朋友可以咨询QQ：1192694399 　　1、首先第一套教程名为《大数据高并发系统架构实战方案(