row_number用法

最新推荐文章于 2021-03-29 16:06:44 发布

原创最新推荐文章于 2021-03-29 16:06:44 发布 · 135 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据

Hive 专栏收录该内容

12 篇文章

订阅专栏

本文介绍使用Hive SQL进行复杂数据处理的过程，包括加载特定的Jar包、定义临时函数来解析JSON数据，并通过一系列SQL操作筛选出指定日期、类型及用户ID的数据记录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >


/opt/hive-0.9.0/bin/hive -e "use ent;add jar /work/yule/online/fastjson-1.1.31.jar;add jar /work/yule/online/JsonValueByKey.jar; create temporary function jsonkey as 'cn.focus.hadoop.sohu.JsonValueByKey';select a.userid, a.time, a.ct, a.num from (select userid, time,jsonkey(jsonkey(dataInfo, 'dataInfo'),'content') ct, row_number() over (partition by userid order by userid, time) num from t_origin_ugc_stat_online where datecol = '2015-03-29' and ugctype = 't_chat' and userid in (478826264) order by userid,time) a where num = 1;" > 20150329KOF_CHAT_ALL_CONTENT_FIREST_ONE.csv

参考
http://www.cnblogs.com/fxgachiever/archive/2010/09/15/1826792.html