进阶研学大咖说08期 |邵赛赛《Firestorm Remote Shuffle Service的实践和开源》

本文由邵赛赛分享Firestorm Remote Shuffle Service在大数据处理中的实践,探讨Shuffle的重要性、Firestorm RSS的架构设计及其优势,以及在Firestorm整体流程中 Coordinator 和 Shuffle Server 的角色。此外,还介绍了Remote Shuffle Service的高可用、通用化和数据校验等独特架构特点。

931750c606ed9e87d2ad82d038058f3b.png

.

开源无边界,分享有价值

Code is not cold

腾讯犀牛鸟开源人才培养计划

「进阶研学大咖说」栏目

将陆续邀请众多开源大咖做客

一起分享和交流开源道路中成长心得

以知识和分享为起点

传承开源的璀璨星光

共创开源、多元、包容的新时代

3f54300963ae49ef18c056efdf6da11a.png

分享嘉宾介绍

cdea886a5d6fd2036fc9b3180ad9d3fe.jpeg

以下为精彩分享片段

Part.1 Shuffle知多少

数据交换(Shuffle)

分布式计算框架的核心

它的整体流程是怎样的呢?

又具有怎样的优势?

现网Shuffle的痛点又有哪些?

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值