- 博客(3)
- 收藏
- 关注
原创 大数据每日一学---------------------------------------------sql编译流程
Hive SQL 的编译流程可以分为以下几个主要阶段:1. SQL 解析(Parse)2. 语义分析(Semantic Analysis)3. 逻辑计划生成(Logical Plan Generation)4. 逻辑计划优化(Logical Plan Optimization)5. 物理计划生成(Physical Plan Generation)6. 任务执行(Task Execution)
2025-02-13 19:05:16
1568
原创 开窗函数详解
开窗函数(Window Function)是 SQL 中的一种强大功能,它允许在查询结果集的基础上进行分区和排序,然后对每个分区内的数据进行计算,并且计算结果是基于分区内的行的某种顺序,而不是像聚合函数那样将整个数据集压缩为单个结果。开窗函数不会改变查询结果集的行数,这与普通聚合函数不同。源数据。
2025-02-12 20:11:05
1899
原创 数据开发每日一学---------------------------------------------hive函数
UDF 用于处理单个输入值并返回单个输出值。实现步骤**创建 Java 类**:继承 `` 类,并重写 `evaluate` 方法。**编译打包**:将 Java 类编译打包成 JAR 文件。**在 Hive 中加载 JAR 文件**:使用 `ADD JAR` 命令加载 JAR 文件。**创建临时函数**:使用 `CREATE TEMPORARY FUNCTION` 命令创建临时函数。java```// 实现 evaluate 方法```步骤 2:打包 Java 类。
2025-02-11 17:24:50
1796
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人