如何执行hbase 的mapreduce job

http://blog.youkuaiyun.com/xiao_jun_0820/article/details/28636309

执行hbase mapreduce的两种方法：
1 使用hadoop命令执行mapreduce job.
  采用此方式需要修改hadoop-env.sh,将hbase相关的jar包加入到HADOOP_CLASSPATH中去，写法如下：
  
export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HBASE_HOME/hbase-0.94.2-cdh4.2.2-security.jar


然后hadoop jar youjar.jar youclass in out来执行job,不然会报找不到hbase相关的类。


2 使用hbase 命令执行mapreduce job.
  采用此方法需要修改hbase-env.sh,将你的job jar包加入到HBASE_CLASSPATH中去，写法如下：
  export HBASE_CLASSPATH=$HADOOP_HOME/etc/hadoop:/home/hadoop/workspace/HFIleGenerator.jar


然后通过hbase youclass in out来执行job.


我觉得第二种方式比较好一些，第一种有点相互依赖的感觉了。
注意 youclass必须写类的全路径名。

顶

0

踩