weixin_40612128的博客

数据仓库之【商品订单数据数仓】12：项目优化

数据仓库之【商品订单数据数仓】11：任务调度：Crontab任务调度器、Azkaban调度器、数仓使用Azkaban

数据仓库之【商品订单数据数仓】10：数据可视化工具：Zeppelin安装部署、Zeppelin使用

数据仓库之【商品订单数据数仓】09：商品订单数据数仓总结：数据库和表梳理、任务脚本梳理

数据仓库之【商品订单数据数仓】08：拉链表：什么是拉链表、创建拉链表

数据仓库之【商品订单数据数仓】07：需求4：漏斗分析

数据仓库之【商品订单数据数仓】06：需求3：商品相关指标

数据仓库之【商品订单数据数仓】05：需求2：电商GMV

一、用户信息宽表分析宽表主要是便于使用，在使用的时候不至于每次都要关联很多张表。用户信息宽表包括服务端中的user表、user_extend表。如果有需求的话其实还可以把用户的一些其他维度的数据关联过来，例如：当日的下单数量、消费金额等等指标。二、思路对dwd_user表和dwd_user_extend表执行left join操作，通过user_id进行关联即可，将结果数据保存到dws_user_info_all表中。三、dws层1、（1）源表（2）建表语句（3）映射关系四、开发脚本

数据仓库之【商品订单数据数仓】03：需求分析：数据准备--生成1个月数据、重新加载数据

数据仓库之【商品订单数据数仓】02：【dwd层】

数据仓库之【商品订单数据数仓】01：【ods层】

数据仓库【用户行为数仓】14：用户行为数据仓库总结

数据仓库【用户行为数仓】13：【dws层：数据汇总层】【app层：数据应用层】需求6：App崩溃相关指标

数据仓库【用户行为数仓】12：【dws层：数据汇总层】【appc层：数据应用层】需求5：操作系统活跃用户相关指标

数据仓库【用户行为数仓】11：【dws层：数据汇总层】【appc层：数据应用层】需求4：每日启动App次数相关指标

数据仓库【用户行为数仓】10：【dws层：数据汇总层】【appc层：数据应用层】需求3：用户7日流失push提醒

数据仓库【用户行为数仓】08：【dws层：数据汇总层】【appc层：数据应用层】需求1：每日新增用户相关指标

数据仓库【用户行为数仓】09：【dws层：数据汇总层】【app层：数据应用层】需求2：每日活跃用户（主活）相关指标

数据仓库【用户行为数仓】07：需求分析以及生成1个月的测试数据

数据仓库【用户行为数仓】06：【dwd层】明细数据层：清洗ods层之后的数据

数据仓库【用户行为数仓】05：【ods层】原始数据层创建

数据仓库【用户行为数仓】03：数据采集、存储、可视化、架构设计、资源规划

数据仓库【用户行为数仓】04：数据生成与采集：用户行为数据、商品订单相关数据

数据仓库介绍、数据仓库的特性、数据仓库基础、数据仓库分层、数据仓库系统架构、需求分析

数据仓库【用户行为数仓】01：项目效果展示、背景

Flume的进程监控

Flume的优化

Flume的各种自定义组件介绍

Failover Sink Processor 【故障转移】

Sink Processors 之 负载均衡

多Channel之Multiplexing Channel Selector

多Channel之Replicating Channel Selector

Flume的高级组件之Source Interceptors

采集网站日志上传至HDFS

使用Flume采集文件内容上传至HDFS

如何使用Flume-Hello Flume

Flume【手动】安装部署

Flume高级组件之Source Interceptors、Channel Selectors、Sink Processors

Flume介绍、应用场景、特性、三大组件