sunrising_hill的专栏

安装Spark和Hbase，将Hbase的lib目录下的jar包复制到Spark目录的jars目录下：cp /apps/hbase/lib/metrics-core-2.2.0.jar /apps/spark/jarscp /apps/hbase/lib/hbase*.jar /apps/spark/jars撰写代码，从hbase中读取数据，再通过RDD转换成Dat

Hive在HBase的数据表上建立外联表时，尽量将HBase表中可以最快缩小范围的字段作为RowKey的起始字符串，经过测试，这样在查询hive时，如果指定了该字段作为where条件，可以大幅缩短SQL的执行时间。

package hbaseimport org.apache.hadoop.conf.Configurationimport org.apache.hadoop.hbase.{HBaseConfiguration, TableName}import org.apache.hadoop.hbase.client.{Connection, ConnectionFactory}/** *...

本次hbase从1.2.6升级至2.1.0遇到了两个问题，一个是htrace.jar报错，需要将旧的htrace-core-3.1.0-incubating.jar包上传至hbase-2.1.0的lib目录，另一个问题是jline版本问题，也需要下载高版本jline上传至hbase-2.1.0的lib目录，下载地址：cd /apps/hbase-2.1.0/libwget http:/...