
HQL
ysksolution
这个作者很懒,什么都没留下…
展开
-
hive substr用法
hive substr用法原创 2023-10-21 09:41:01 · 395 阅读 · 0 评论 -
Caused by: org.apache.spark.SparkException: java.util.concurrent.ExecutionException: Exception throw
Caused by: org.apache.spark.SparkException: java.util.concurrent.ExecutionException: Exception throw原创 2023-10-20 10:48:06 · 395 阅读 · 0 评论 -
hive变更数据过程
hive变更数据过程原创 2023-10-12 08:10:33 · 620 阅读 · 0 评论 -
離線數倉:用戶拉鏈錶推導過程
離線數倉:用戶拉鏈錶推導過程原创 2023-09-13 14:27:14 · 110 阅读 · 0 评论 -
hive和datax數據採集數量對不上
hive和datax數據採集數量對不上原创 2023-07-06 10:14:30 · 803 阅读 · 0 评论 -
sqlserver,mysql到hive建表shell脚本
sqlserver,mysql到hive建表shell脚本原创 2023-07-04 15:03:46 · 325 阅读 · 0 评论 -
ranger:hive的權限問題
Error: Error while compiling statement: FAILED: RuntimeException Cannot create staging directory 'hdfs://mycluster/user/hive/warehouse/emp_dept/.hive-staging_hive_2023-04-08_06-22-49_861_7682272505026844891-1'原创 2023-04-08 18:30:46 · 338 阅读 · 0 评论 -
hiveserver2的beeline用法
hiveserver2的beeline用法原创 2023-04-08 18:19:31 · 132 阅读 · 0 评论 -
datax將同步mysql到hive的脚本和hive ods的full和orc建表語句
datax將同步mysql到hive的脚本和hive ods的full和orc建表語句原创 2023-03-11 11:02:28 · 481 阅读 · 0 评论 -
每個小組過去三個月的pert和
每個小組過去三個月的pert和原创 2023-03-11 10:38:40 · 67 阅读 · 0 评论 -
歷史至今匯總表
歷史至今匯總表原创 2023-03-01 19:36:05 · 87 阅读 · 0 评论 -
DWS層的構建過程
DWS層的構建過程原创 2023-03-01 18:54:34 · 111 阅读 · 0 评论 -
頁面瀏覽事實表確定session_id,last_value函數詳解
頁面瀏覽事實表確定session_id,last_value函數詳解原创 2023-03-01 12:15:33 · 77 阅读 · 0 评论 -
from_utc_timestamp,HQL中將maxwell的ts時間戳轉爲時間和日期
from_utc_timestamp,HQL中將maxwell的ts時間戳轉爲時間和日期原创 2023-03-01 12:09:40 · 222 阅读 · 0 评论 -
CBO:“struct is not null“ gets evaluated as ‘nullable‘ always causing filter miss in the query
CBO:"struct is not null" gets evaluated as 'nullable' always causing filter miss in the query原创 2023-02-28 17:56:33 · 90 阅读 · 0 评论 -
大數據環境搭建,數據採集,數倉環境準備(hive on spark) 01
大數據環境搭建,數據採集,數倉環境準備(hive on spark) 01原创 2023-02-22 14:19:32 · 225 阅读 · 0 评论 -
ods層數據量過大,實現先按月分區,再在按月分區的基礎山,按照天進行分區,可以每次同步三個月的數據,利用shell腳本實現
ods層數據量過大,實現先按月分區,再在按月分區的基礎山,按照天進行分區,可以每次同步三個月的數據,利用shell腳本實現原创 2023-02-21 16:22:08 · 119 阅读 · 0 评论 -
拉鏈錶的HQL
拉鏈表的HQL原创 2023-02-21 10:31:22 · 59 阅读 · 0 评论 -
累積事實表SQL
累積事實表SQL原创 2023-02-21 09:59:53 · 74 阅读 · 0 评论 -
离线数仓的概述
离线数仓的概述原创 2023-02-21 07:01:36 · 774 阅读 · 0 评论 -
maxwell增量采集去重SQL
maxwell进行bootstrap数据采集的时候,发现同时采集到了insert数据,如何进行数据去重?原创 2023-02-20 22:46:24 · 562 阅读 · 0 评论 -
chatgpt的強大
chatgpt修改SQL原创 2023-02-18 10:15:56 · 86 阅读 · 0 评论 -
hive on spark 时,executor和driver的内存设置,yarn的资源设置
hive on spark 时,executor和driver的内存设置,yarn的资源设置。原创 2023-02-18 08:15:23 · 2425 阅读 · 0 评论 -
Schema initialization FAILED! Metastore state would be inconsistent
Schema initialization FAILED! Metastore state would be inconsistent原创 2023-02-17 17:44:55 · 1579 阅读 · 2 评论 -
hive on spark ,執行HQL時,出現java.lang.NoClassDefFoundError: org/antlr/runtime/tree/CommonTree
hive on spark ,執行HQL時,出現java.lang.NoClassDefFoundError: org/antlr/runtime/tree/CommonTree原创 2023-02-17 17:22:07 · 465 阅读 · 0 评论 -
yarn報錯Lost executor等,required executor memory (4096 MB), offHeap memory (0) MB, overhead (384 MB),
yarn報錯Lost executor等,org.apache.hadoop.hive.ql.parse.SemanticException:Failed to get a spark session: org.apache.hadoop.hive.ql.metadata.HiveException: Failed to create Spark client due to invalid resource request: Required executor memory (8192 MB), offHe原创 2023-02-16 11:14:34 · 413 阅读 · 0 评论 -
hive動態分區
hive動態分區的設置原创 2023-02-17 08:28:56 · 318 阅读 · 0 评论 -
HQL动态分区
HQL动态分区原创 2023-02-16 07:56:55 · 111 阅读 · 0 评论 -
HQL题目25:各品类销量前三的所有商品
HQL题目25:各品类销量前三的所有商品原创 2022-09-08 18:57:30 · 2719 阅读 · 0 评论 -
HQL题目24:根据商品销售情况进行商品分类
HQL刷题:根据商品销售情况进行商品分类原创 2022-09-08 18:28:16 · 318 阅读 · 0 评论 -
HQL函数case when
HQL函数case when的语法规则和用法原创 2022-09-08 18:14:34 · 1380 阅读 · 0 评论