Flink从入门到精通100篇(二十)-跨境电商 Shopee 的实时数仓之路

本文详述了Flink在Shopee数据团队的应用,包括实时数仓建设背景、数据仓库挑战、Flink实时数据处理与Druid结合的实践,以及实时监控和SQL平台化。Shopee构建了涵盖数据收集、存储、计算引擎和应用的复杂数据仓库架构,以应对业务需求和实时化挑战。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

前言

本文讲述 Flink 在 Shopee 新加坡数据组 ( Shopee Singapore Data Team ) 的应用实践,主要内容包括:

  • 实时数仓建设背景

  • Flink 在实时数据数仓建设中结合 Druid、Hive 的应用场景

  • 实时任务监控

  • Streaming SQL 平台化

  • Streaming Job 管理

 

 

建设背景

 

Shopee 是东南亚与台湾领航电商平台,覆盖新加坡、马来西亚、菲律宾、台湾、印度尼西亚、泰国及越南七大市场,同时在中国深圳、上海和香港设立跨境业务办公室。

 

  • Shopee 在2020年第一季的总订单量高达4.298亿,同比增长111.2%。

  • 根据 App Annie, Shopee 在2020年第一季强势跻身全球购物类 App 下载量前三名。

  • 同时斩获东南亚及台湾市场购物类 App 年度总下载量、平均月活数、安卓使用总时长三项冠军,并领跑东南亚两大头部市场,拿下印尼及越南年度购物类 App 下月活量双冠王。

 

其中包括订单商品、物流,支付,数字产品等各方面的业

评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

文宇肃然

精神和物质鼓励你选一个吧

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值