chao_ggggg的博客

从谷歌三剑客演进而来的mapreduce、 hdfs、hbase hbase是一个列式存储的数据库，适合存海量数据，事物性能不好 通过zookeeper做数据定位在文件尾部追加内容和在文件行尾追加内容，计算机都干了什么工作？有没有效率的不同？安装jdk的步骤： 1解压 2配置环境变量，方便使用 3配置软连接，这样jdk更新的时候就不用修改环境变量，修改软连接就可以了

brief of 步骤 规划：3台centos7.2，暂时不设置HA 1. ssh已经配置好 2. 解压到hadoop用户下，改名字（去掉版本号） 3. 配置环境变量 、、、、、、、、、、、、、、、、、、、、、、 nn节点： hadoop_home yarn_home hadoop_user_name 、、、、、、、、、、、、、、、、、

MapReduce用mapreduce选出NCDC收集到的某年的最高气温时，map function负责 从一行数据中筛出年份和气温数据hadoop的mapreduce框架会自动把key（年份）相同的pairs合并，对数据进行sort和group用reduce function选出每一年的最高气温

hbase1.2.5配置dfs.journalnode.rpc-address 0.0.0.0:8485 hdfs-default.xmlio.storefile.bloom.block.size 131072 hbase-default.xmlyarn.ipc.rpc.class org.apache.hadoop.yarn.ipc.HadoopYarnProtoRPC yarn-de