新零售数仓DM层实现操作

最新推荐文章于 2025-02-23 19:12:56 发布
最新推荐文章于 2025-02-23 19:12:56 发布
阅读量658 收藏 3
点赞数
分类专栏： Hive新零售离线数仓 大数据 文章标签： 零售
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/SDZNG666/article/details/124990343
版权

新零售数仓DM层实现操作

1.按周统计

insert into xxxx.dm_sale 
with  dim_date as (
	select
		date_code,
		year_code,
		year_month,
		month_code ,
		day_month_num ,
		dim_date_id ,
		year_week_name_cn 
	from hive.bj59_yp_dwd_jiale.dim_date
),
t1 as (
	select 
		'2022-05-10' as  date_time,
		'week' as time_type,
		year_code ,
		null as year_month,
		null as month_code,
		null as day_month_num ,
		null as dim_date_id,
		year_week_name_cn ,
		
		-- 处理维度:
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then 'store'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then 'trade_area'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then 'city'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then 'brand'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then 'min_class'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then 'mid_class'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then 'max_class'
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then 'all'
			else null
		end as group_type,
		s.city_id ,
	  	s.city_name ,
	  	s.trade_area_id ,
	  	s.trade_area_name,
	  	s.store_id,
	  	s.store_name ,
	  	s.brand_id,
	  	s.brand_name,
	  	s.max_class_id,
	  	s.max_class_name,
	  	s.mid_class_id,
	  	s.mid_class_name,
	  	s.min_class_id,
		s.min_class_name,
		
		-- 指标:  
			case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.sale_amt)
			else null
		end as sale_amt,
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.plat_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.plat_amt)
			else null
		end as plat_amt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.deliver_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.deliver_sale_amt)
			else null
		end as deliver_sale_amt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.mini_app_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.mini_app_sale_amt)
			else null
		end as mini_app_sale_amt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.android_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.android_sale_amt)
			else null
		end as android_sale_amt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.ios_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.ios_sale_amt)
			else null
		end as ios_sale_amt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.pcweb_sale_amt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.pcweb_sale_amt)
			else null
		end as pcweb_sale_amt,
		
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.order_cnt)
			else null
		end as order_cnt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.eva_order_cnt)
			else null
		end as eva_order_cnt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.bad_eva_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.bad_eva_order_cnt)
			else null
		end as bad_eva_order_cnt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 63  and  s.group_type = 'city'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 119  and  s.group_type = 'brand'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 120  and  s.group_type = 'min_class'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 121  and  s.group_type = 'mid_class'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 123  and  s.group_type = 'max_class'
				then sum(s.deliver_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 127  and  s.group_type = 'all'
				then sum(s.deliver_order_cnt)
			else null
		end as deliver_order_cnt,
		
		case 
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 15  and  s.group_type = 'store'
				then sum(s.refund_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.trade_area_id ,s.store_id,s.brand_id ,s.max_class_id ,s.mid_class_id ,s.min_class_id ) = 31  and  s.group_type = 'trade_area'
				then sum(s.refund_order_cnt)
			when grouping(d.year_week_name_cn,s.city_id ,s.
最低0.47元/天 解锁文章
【数仓设计】行为数仓分层案例ODS& DWD& DWS&DM& ADS
清平乐的技术专栏
05-21 6826
本案例只是举例了一个通常的模型，有的项目会比现有的层数多或者少。 一、数仓分层 ODS： Operation Data Store 原始数据 DWD(数据清洗/DWI) data warehouse detail 数据明细详情，去除空值，脏数据，超过极限范围的 明细解析 具体表 PS：DWB： data warehouse base 基础数据层，有的会进一步细分额外加一层 ，存储的是客观数据，一般用作中间层，可以认为是大量指标的数据层。 DWS(宽表-用户行为，轻度聚合) data warehouse se
数仓之新零售项目
SDZNG666的博客
05-11 2995
新零售项目1.新零售概述1.1行业背景1.2业务模块介绍1.3clouderamanager工具介绍1.4项目环境部署操作1.5数据仓库的基本概念2.维度分析2.1维度分析的基本介绍3.数仓建模3.1数仓建模概念3.2常见的数仓建模理论3.3事实表3.4维度表3.5数仓发展模型3.6缓慢渐变维3.7数仓分层介绍4.数仓工具的基本使用4.1使用 HUE 操作 oozie4.2如何使用oozie4.3sqoop的基本使用操作4.3.1sqoop的概述4.3.2基本操作4.3.3数据全量导入操作4.3.4数据条件
excel对比两边数据去重
夏天吹雪的博客
09-29 4191
需求:筛选重复数据，A列是1000条数据，C列是100条数据，删除重复的数据，只剩900条。 首先，A列数据要分列，因为数据格式不一样，会导致后面的问题，一直下一步到完成 第二步，在B和D列加数字1，相当于索引，相同的数据长度，做匹配，下图A和C的数据取反了 第三步，数据--筛选，然后过滤掉C列数据 最后复制A列的数据，已经处理好的数据，到其他页面，验证完成 ...
数仓搭建实操(传统数仓orale):DM数据集市层
最新发布
weixin_40121264的博客
02-23 389
用union all 把两张表的数据上下拼接>>增加伪列 1 , 2 区分客户类型>>为了简化sql, 使用CTE公共表达式(with as )CI_CIPH_HIGH_CUST_INFO 高端客户信息表>>获取高端客户信息。CI_CIPL_LOW_CUST_INFO 低端客户信息表>>获取低端客户信息。LN_LNP_CUST_CBCREDCUST 个贷客户额度管理表;LN_LNP_ACCT_AMWKPL06 个贷放款流水表;LN_LNP_CTRT_CBAPP 个贷申请信息表;
数仓分层架构：DM
大连赵哥的博客
09-02 1027
数仓分层架构：DM
数据仓库实践：数仓分层
the_singing_towers的博客
06-21 1189
数据仓库的分层依现状而定，并没有一个最佳实践，但即使数据的情况千千万万，也会至少有相互接近的实践方式，以减少实践成本。
数据仓库中的ODS、EDW、DM等分层是什么？
热门推荐
m0_62836810的博客
12-22 1万+
参考：数据仓库中的ODS、EDW、和DM层是什么？（系列3） (pmcaff.com) 数据仓库各层说明： 一、数据加载层：ETL（Extract-Transform-Load） 二、数据运营层：ODS（Operational Data Store） 三、数据仓库层：DW（Data Warehouse） 1. 数据明细层：DWD（Data Warehouse Detail） 2. 数据中间层：DWM（Data WareHouse Middle） 3. 数据服务层：DWS（Data Wa...
【电商数仓】数仓搭建之数据主题（data warehouse topic-- DWT）层（DWT层之访客、优惠券、活动、地区主题）
weixin_43923463的博客
10-11 712
【代码】【电商数仓】数仓搭建之数据主题（data warehouse topic-- DWT）层（DWT层之访客、优惠券、活动、地区主题）
2020.10.14课堂笔记(项目：新零售电商数据仓库系统项目)
超可爱慕之
10-14 896
相关项目文档： 链接：https://pan.baidu.com/s/1Wk9EfxkDTHdzshGBi6AGJQ 提取码：1124 将原始数据导入MySQL数据库： 3.新零售数仓项目\02-项目数据\01-原始数据\snbap_ods.sql source /root/day02/snbap_ods.sql
数据仓库—stg层_有赞数据仓库实践之路
weixin_39957805的博客
12-19 1683
原标题：有赞数据仓库实践之路一、大数据环境下的有赞数仓关于数据仓库，在维基百科中将它定义为 用于报表和数据分析的系统，是商务智能 Business Intelligence 的核心部分。在数据仓库诞生之初， 它只被设计成面向管理层所需要的决策支持系统，并不对业务方(这里指各应用系统)提供数据支持。然而在大数据环境的背景下，当 Hadoop 生态已然成为大数据现实意义上的载体，以 Hive 为基础的...
数仓分层ODS、DWD、DWM、DWS、DIM、DM、ADS
qq_73181349的博客
08-01 2728
数仓分层，数据源层：ODS（Operational Data Store），数据仓库层：DW（Data Warehouse）、数据明细层：DWD（Data Warehouse Detail）、数据中间层：DWM（Data WareHouse Midddle）、数据服务层：DWS（Data WareHouse Service）、 数据应用层：ADS（Application Data Service）、 维表层：DIM（Dimension）
数据仓库在零售行业中的应用
05-31
以3个案例为基础，描述了数据仓库在零售行业的应用情况
数仓架构实践1：阿里五层模型架构
云祁QI
04-22 1135
目录   1. ODS 数据准备层 2. DWD 数据明细层 3. DW(B/S) 数据汇总层 4. DM 数据集市层 5. ST 数据应用层 解码OneData，阿里的数仓之路 1. ODS 数据准备层 ...
数据仓库【分层设计】
xiayuhaisong的博客
03-01 6143
数据仓库，通过数仓建模更好的组织管理和存储数据，以便在性能、成本、效率和质量之间取得最好的平衡。
数仓分层模型|简练实用以及Impala使用
qq_36864672的博客
10-25 2457
分层案例 1.电信通讯 stage层 ->bdl层 ->analysis层 2.传统金融/保险 ods层 ->pdm层 ->dm层 3.互联网金融/电商 odl层 ->bdl层 ->idl层 ->adl层 尽管行业不同，套路却差不多。本次借鉴互联网分层模型，使用HIVE作为数据仓库，搭建数据平台。 专业术语 ODL层 （Operati...
新零售数仓项目实战（一）
qq_40333693的博客
10-13 766
–生成用户基本宽表 create table user_basic as select u.user_id,u.user_name,u.user_gender, u.user_birthday,u.user_age,u.constellation, u.province,u.city,u.city_level,u.e_mail,op_mail, u.mobile,u.num_seg_mobile,u.op_Mobile,register_time, u.login_ip,login_source,reque
数据仓库内容分享(十一)：大数据仓库开发规范示例
之乎者也·的博客
01-28 1839
该层使用DWD层数据，维度数据，对业务上有关联的实体做连接，形成统一粒度的，跨业务流程的，多业务实体的，轻度汇总数据。数仓主要包含ODS/DWD/DWS/DIM/DM几个标准化的分层，同时结合企业实际的情况，如补录的数据，在数据ETL过程中的临时处理数据等，根据用途汇总为贴源层、数据共享层、数据服务层。层数据，保留业务实体的原子粒度，并且通过数据清洗和一定程度的数据转换，保障数据质量。数据的完整性，包括实体的完整性（分段的业务表），数据行的完整性（不同阶段的业务周期的汇集），字段的完整性（关键业务字段）
Day08_DM层建设实战，本地视频+md，review第1遍,220625，
m0_48941160的博客
06-26 346
DM名称：数据集市层 Data Market功能：基于DWS层日统计宽表，上卷出周、月、年等统计宽表，即粗粒度汇总。解释从理论层面来说，数据集市是一个小型的部门或工作组级别的数据仓库。一些公司早期的数据集市后期可能会演变成为数仓系统。本项目中在数据集市层面主要进行粗粒度汇总，也可以将这些功能下放至DWS层完成。抛弃DM.使用DataGrip在Hive中创建dm层create database if not exists yp_dm;知识点03：DM层搭建--销售主题统计宽表--建模dm层:在dws的基础上，
【博学谷学习记录】超强总结，用心分享 | DM层构建
Onzswhite的博客
12-16 353
DM层构建
数仓从ods层到ads层的实现
06-11
数仓从ODS层到ADS层的实现，通常包括以下几个步骤： 1. ODS层：ODS层是数仓中的第一层，负责接收和保存来自各个业务系统的原始数据。在ODS层，需要进行数据清洗、去重、格式转换等处理，以确保数据的准确性和完整性。同时，ODS层需要为后续层提供数据源。 2. DW层：DW层是数仓中的核心层，主要用于数据的存储和处理。在DW层，需要进行数据的抽取、转换和加载（ETL）等过程，以将ODS层中的数据转换为可供分析的数据。DW层通常包括数据仓库、数据集市、维度表和事实表等组件。 3. DM层：DM层是数仓中的第三层，主要用于数据的分析和挖掘。在DM层，需要进行数据的汇总、统计和分析，以为业务决策提供支持。DM层通常包括数据挖掘模型、OLAP工具和报表系统等组件。 4. ADS层：ADS层是数仓中的最上层，主要用于数据的应用和展现。在ADS层，需要将DM层中的数据转换为可供用户使用的数据，以为业务决策提供最终结果。ADS层通常包括数据可视化工具、BI工具和应用系统等组件。 以上是数仓从ODS层到ADS层的实现步骤，其中每个层次都有其特定的功能和任务，需要根据具体业务需求进行实现。同时，数仓的实现需要采用合适的技术和工具，以确保数据的准确性和有效性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值