Hive实现WordCount的两种方式

1.数据准备

hadoop hadoop hadoop
spark spark spark
hive
impala

2.创建表

create table wordcount(rowdata string);

3.加载数据

load data local inpath '/opt/modules/data/word.txt' into table wordcount;

4.SQL编程实现WordCount

4.1explode函数

作用：为每个输入行生成零个或多个输出行，即行转列

例子：

select explode(split(rowdata," ")) word from wordcount;

--结果输出
hadoop
hadoop
hadoop
spark
spark
spark
hive
impala

4.2Lateral View 的使用

作用：Lateral View一般与用户自定义表生成函数（如explode()）结合使用，Lateral View 首先将UDTF应用于基表的每一行，然后将结果输出行连接到输入行，以形成具有提供的表别名的虚拟表。

例子：

select 
     word 
from wordcount lateral view explode(split(rowdata," "))