Cheengvho的博客

Hive 、Impala的用法相同，Hive直接输入hive就能启动，Impala使用Impala-shell命令进行启动 下面用一道题进行讲解这个过程： 给定一个企业对员工进行的安全培训数据表TrainingRecord（如下图），包括姓名（Name），培训日期（Date）和培训小时数（Hours），请写出相应的SQL查询回答下列问题： （1）查询每个员工的总培训小时数，平均培训时长和培训...

本篇UDF函数使用IntelliJ IDEA进行编写和打包，使用的是Java语言，数据使用上一篇博客“HDFS、Hive（Impala）读取本地文件到HDFS，再使用Hive（Impala）从HDFS读取文件进行建表”中已经放入hive中的数据进行查询展示。 创建一个maven项目，导入依赖包 <!-- 根据Linux系统上安装的的hadoop和hive版本，设置版本参数，不一定和我的...

目录 日志数据 创建并编写2个Flume配置文件：kafka_morphline_in.conf、kafka_morphline_out.conf 在Flume配置文件存放的同目录下创建并编写Morphline配置文件：morphline.conf 启动Zookeeper 启动Kafka 以kafka_morphline_out.conf配置文件agent2启动Flume 以kafk...

新建表并从HDFS中导入数据： CREATE EXTERNAL TABLE webpage (page_id SMALLINT, name STRING, assoc_files STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LOCATION '/loudacre/webpage'  在Impala或者Hive中使用之前生成的、...