幸运的Alina的博客

在使用pyspark 将DataFrame的数据插入到HIve中时，遇到了root账号无法insert数据到hive中，报错信息如下： org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException): Permission denied: user=root, access=WRIT...

1. 将HDFS文件导入到HIVE中 1.1 创建内部表 create table result(user_id int ,product_id int ,rating float) commend "save user information" row format delimited fields terminated by ',' ; load data inpath "/ha...

背景，有一个需求就是有一张用户办理产品渠道表，表中的数据字段如下 用户ID 产品ID 渠道 ID 然后需要统计不同的产品ID下面哪一个渠道ID对应的用户数最多，把最大的那个渠道ID找出来和产品ID一一对应上。 在这个需求上使用了HIVE的开窗函数来实现，具体实现SQL语句如下 select pro_id,qudao_code from (select pro_id,qud...