用户10859529 - 个人中心 - 腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

用户10859529

LV0

我关注的人

Spark系列 - (5) Spark Shuffle

有些运算需要将各节点上的同一类数据汇集到某一节点进行计算，把这些分布在不同节点的数据按照一定的规则汇集到一起的过程称为Shuffle。

码老思 2023-10-192023-10-19 20:27:28

spark、shuffle、磁盘、内存、数据

Spark系列 - (6) Spark 内存管理

在执行Spark的应用程序时，Spark集群会启动Driver和Executor两种JVM线程，前者为主控进程，负责创建Spark上下文，提交Spark作业（J...

码老思 2023-10-192023-10-19 20:27:54

存储、spark、内存、内存管理、数据

个人简介

暂未填写公司和职称
暂未填写个人简介
暂未填写技能专长
暂未填写学校和专业
暂未填写个人网址
暂未填写所在城市
加入社区时间：2023-11-28

个人成就

TA 很懒，什么都没有留下╮（╯＿╰）╭

关注了：1关注者：0