oufuji的博客

Hive Metastore实践总结装上了CDH5，配置了Hive角色实例，然后建表了。那么元数据库里面有啥东西，大概是什么？3中模式，CDH5我安装用Remote模式：Configuring the Hive Metastore http://www.cloudera.com/content/www/en-us/documentation/archive/cdh/4-

参考：Sqoop中文手册1、列出mysql数据库：sqoop list-databases --connect jdbc:mysql://192.168.100.13:3306 --username hive --password hive[root@master sqoop]# sqoop list-databases --connect jdbc:mysql://192

对于熟悉Scala开发的人来说，对于spark-sql的使用，直接jar包中写入代码处理就能轻松实现动态语句的执行。但是对于我，不打算学习Scala和Java语言，但是又想定时执行时间推延的周期、定时任务，该肿么办？spark-sql CLI几个参数，完全满足我等非专业人员。CLI options: -d,--define          Variable subsit

Impala，Hive，SparkSQL数据清洗后对手续查询的影响比较SparkSQL和Impala执行的时间会比较快，Hive明显慢很多，但是这里比较不是执行单次查询效率，而是三种方式清洗后数据产生结果小文件对后续使用的影响。首先准备好2000万表记录，作为外部表建好。然后把出生日期星座划分，结果生成表格存放。三种方式存放3个不同表格。####################