YongYu_IT的专栏

进入hbase hbase shell 可以查看命令如何使用 help 'put' 1、建表 hbase(main):002:0> create 't1',{NAME=>'cf1'} Created table t1 Took 1.0852 seconds hbase(main):022:0> create 'tb_t3','cf1','cf2','cf3' Created table tb_t3 Took 1.2607 seconds hbase(main):02

wget http://mirror.bit.edu.cn/apache/hbase/2.2.6/hbase-2.2.6-bin.tar.gz $ tar -zxvf hbase-2.2.6-bin.tar.gz $ cd hbase-2.2.6/conf $ gedit hbase-site.xml # #<property> # <name>hbase.cluster.distributed</name> # <value>true</val..

统计语文数学英语各学科的平均数，如果只考虑map和reduce的过程，就不要开启combiner,如果开启combiner ，就要考虑combiner的过程，即使combiner算法与reduce几乎一样，但是要注意数据从map端到reduce的结果，和数据从combiner端到reduce的结果会有一点不一样 如果开启combiner，但是combiner 过程与reduce过程一样，会有问题 例如： map端输出的数据 Math Bob 100 Math Alice 90 English A

1、mapreduce 计算各科成绩已经总分最高分的学生姓名和分数 2、开启Combiner，在map端局部汇总（合并小文件） job.setCombinerClass(CollectStuMRTest.benreduce.class); import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.LongWritable; import...

1、安装jdk （1）解压缩jdk包 tar xzvf jdk-8u211-linux-x64.tar.gz （2）配置JAVA环境变量并验证jdk是否安装成功 vi ~/.bashrc (~ 表示当前用户目录 如 /home/yong) export JAVA_HOME=/home/yong/jdk-8u211-linux-x64/jdk1.8.0_211 export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/l...