进阶研学大咖说08期 ｜邵赛赛《Firestorm Remote Shuffle Service的实践和开源》

.

开源无边界，分享有价值

Code is not cold

腾讯犀牛鸟开源人才培养计划

「进阶研学大咖说」栏目

将陆续邀请众多开源大咖做客

一起分享和交流开源道路中成长心得

以知识和分享为起点

传承开源的璀璨星光

共创开源、多元、包容的新时代

分享嘉宾介绍

以下为精彩分享片段

Part.1 Shuffle知多少

数据交换（Shuffle）

是分布式计算框架的核心

它的整体流程是怎样的呢？

又具有怎样的优势？

现网Shuffle的痛点又有哪些？

Part.2 Firestorm RSS的Shuffle架构

在Firestorm RSS中

Remote Shuffle Service的架构是怎样的？

它具有哪些架构优势？

又能实现怎样的目标呢？

Part.3 Firestorm的整体流程

Firestorm的工作流程具体是怎样的？

其中Coodinator集群和Shuffle Server集群

又分别起到怎样的作用呢？

Part.4 Firestorm中Remote Shuffle Service的架构优势

Firestorm中Remote Shuffle Service

具有很多独特的架构优势

其一是服务高可用的架构设计

其二创新点是通用化、可插拔的架构设计

其三创新点是数据校验的设计

下面就让我们一起来了解学习吧

关注更多精彩短视频，

👇关注「腾讯开源」视频号👇

一起开启探索开源新世界！