首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >深入剖析Spark UI界面:参数与界面详解|得物技术

深入剖析Spark UI界面:参数与界面详解|得物技术

作者头像
得物技术
修改2026-03-03 11:05:55
修改2026-03-03 11:05:55
1040
举报
概述
围绕 Spark UI 监控模块,解析 Executors、SQL、Stages 等核心入口与关键指标,结合表扫描慢、Shuffle 并行度不足等典型场景,给出基于内存、并行度及 AQE 参数的调优方案,为 Spark 性能诊断与优化提供严谨实践思路。
文章被收录于专栏:得物技术得物技术

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 一、概述
  • 二、Spark UI 一级入口
    • Executors
    • Environment
    • Storage
    • SQL
    • Stages
    • Jobs
  • 三、Spark UI 二级入口
    • SQL详情页
      • Exchange
      • Sort
      • Aggregate
    • Stages详情页
      • Stage DAG
      • Event Timeline
      • Task Metrics
      • Summary Metrics
      • Tasks
  • 四、实战环节
    • 案例一(scan表慢和内存问题)
    • 案例二(shuffle之后并行度不足)
  • 五、总结
  • 往期回顾
  • 文 /硕
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档