huaweitman的专栏

教你如何迅速秒杀99%的海量数据处理面试题 http://www.cnblogs.com/v-July-v/archive/2012/03/22/2413055.html   hadoop面试可能遇到的问题 http://www.cnblogs.com/dlutxm/archive/2011/09/23/2185825.html   如何准备hadoop面试题

Avro作为Hadoop下相对独立的子项目，是一个数据序列化的系统。类似于其他序列化系统，Avro可以将数据结构或对象转化为便于存储或传输的格式，特别是在设计之初它可以用来支持数据密集型应用，适合于大规模数据的存储和交换。      总之，Avro可以提供以下一些特性和功能：     1.丰富的数据结构类型     2.快速可压缩的二进制数据形式     3.存储持久数据的文件容器

http://yankaycom-wordpress.stor.sinaapp.com/hbase/book.html?q=/wp-content/hbase/book.html

lk@lk-virtual-machine:~$ cd hadoop-1.0.1 lk@lk-virtual-machine:~/hadoop-1.0.1$ ./bin dfs -mkdir input bash: ./bin: 是一个目录 lk@lk-virtual-machine:~/hadoop-1.0.1$ ./bin/hadoop  dfs -mkdir input 14/05/

lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop dfs -rmr output Deleted hdfs://localhost:9000/user/lk/output lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/mytopk.jar top.Top  input out

lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/hadoop-1.0.1/to.jar top.Top input output 14/05/12 03:44:37 WARN mapred.JobClient: Use GenericOptionsParser for parsing the arguments. Applicat

http://wiki.apache.org/hadoop/FAQ

http://www.cnblogs.com/Dreama/articles/2178100.html

lk@lk-virtual-machine:~$ cd hadoop-1.0.1 lk@lk-virtual-machine:~/hadoop-1.0.1$ cd bin lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./stop_all.sh bash: ./stop_all.sh: 没有那个文件或目录 lk@lk-virtual-machine:~

dataNode 无法启动是配置过程中最常见的问题，主要原因是多次format namenode 造成namenode 和datanode的clusterID不一致。建议查看datanode上面的log信息。解决办法:修改每一个datanode上面的CID(位于dfs/data/current/VERSION文件夹中)使两者一致。

$ cygrunsrv -R sshd     删除ssd服务



http://www.36dsj.com/archives/6118

/usr/local/Cellar/hadoop/2.7.0/libexec/etc/hadoop/hadoop-env.sh,   /usr/local/Cellar/hadoop/2.7.0/libexec/etc/hadoop/mapred-env.sh and   /usr/local/Cellar/hadoop/2.7.0/libexec/etc/hadoop/yarn-env.sh