无

ETL是数据抽取（Extract）、清洗（Cleaning）、转换（Transform）、装载（Load）的过程。是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。    ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据到一起，为企业的决策提供分析依据...

事实表分成三种：事务事实表、周期快照事实表、累计快照事实表事务事实表官方定义是：发生在某个时间点上的一个事件。比如以订单为例：下单是一个事实、付款是一个事实、退款是一个事实，所有事实的累计就是事务事实表周期快照事实表如果需要对某一天或者某个月的数据进行分析，那么可以使用周期快照事实表，比如：以天举例，财务报表一般都是周期快照事实表，它的最细粒度主键就是：日期+订单累计快照事实表...

1.事实表2.维度表3.模型4.粒度5.层次

第一节互联网电商大数据环境如果你真正进入这个行业了！入职后你所在部门一般叫：数据平台、数据中心、数据部可能的团队：数据仓库组；BI（商业智能）组、某事业部数据组；架构组；数据专家组；...部门里重要的几拨人，一拨是搭建和保证hadoop系统每天正常运行和改进hadoop系统的架构人员，这批人对hadoop细节非常熟悉，另一拨是满足业务系统需求，每天都在开发应用的开发人员，这批人员开发经验...

摘要Hive内部提供了很多函数给开发者使用，包括数学函数，类型转换函数，条件函数，字符函数，聚合函数，表生成函数等等，这些函数都统称为内置函数。目录数学函数 集合函数 类型转换函数 日期函数 条件函数 字符函数 聚合函数 表生成函数  数学函数 Return Type Name (Signature) Des...

电商核心业务知识订单商品模块（9张表）--订单主要信息表drop table if exists itqsc.ods_b2c_orders;create external table itqsc.ods_b2c_orders(order_id  bigint, -订单ID（主键）order_no string, -订单号order_date timestamp, -订单日期use...

1.If函数:if和case差不多，都是处理单个列的查询结果语法: if(boolean testCondition, T valueTrue, T valueFalseOrNull)返回值: T说明:  当条件testCondition为TRUE时，返回valueTrue；否则返回valueFalseOrNull举例：if（条件表达式，结果1，结果2）相当于java中的三目运算符...

　文本文件有文件、内容、错误处理、过滤、字段和Additional output fields等几个页签，主要说一下内容和过滤两个页签。　　内容，如下　　　　　　　　　　1）文件类型，保持默认csv即可　　　　　　2）分隔符：指的是文本文件每个字段间的分区标志，如下　　　　　　　　　　　　　　　　　　不可见分隔符的输入方法：$[01]　　　　　　3）文本限定符：当文本字...

一、概述　　数据库表：　　　　• 表输出　　　　• 更新，删除，插入/更新　　　　• 批量加载（mysql，oracle）　　　　• 数据同步　　文件：　　　　• SQL 文件输出　　　　• 文本文件输出　　　　• XML 输出　　　　• Excel Output/Excel Writer　　其他（报表、应用）二、数据库输出　　1.表输出　　　　使用SQL的方式...