引擎用量洞察

最近更新时间:2025-04-28 15:27:52

我的收藏
当集群资源紧张时,会出现任务提交到了引擎,却在引擎内排队的情况,但用户无法感知,可能会继续提交任务,导致任务阻塞情况严重。
引擎用量洞察以引擎为维度,把引擎下的所有任务从提交到引擎内执行情况的分布情况统一展示出来,帮助客户可以快速分析引擎的使用大致情况。

前提条件

1. SuperSQL SparkSQL、Spark作业引擎:
1.1 2024年7月18日后新购引擎默认开启引擎用量洞察
1.2 2024年7月18日前的 Spark 内核版本,需升级引擎内核后可开启任务洞察,升级方式请参见下文 如何开启洞察功能
2. 标准Spark引擎:
2.1 2024年12月20日后购买引擎,默认支持引擎用量洞察。
2.2 2024年12月20日前购买引擎,暂不支持用户手动开启引擎用量洞察,请提交工单联系售后开启。
其余类型引擎暂不支持引擎用量洞察。

操作步骤

登录 数据湖计算 DLC 控制台,选择洞察管理功能后,切换至引擎用量洞察页面,选择需要查看的数据引擎,鼠标移至任务耗时瀑布图上即可查看。

灰色进度条代表排队耗时。
蓝色进度条代表引擎执行耗时。
绿色进度条代表获取结果耗时。
整体条状图随时间偏移。
注意:
SuperSQL 的 SparkSQL引擎支持实时的引擎执行耗时和数据扫描量数据。其余引擎类型需要等待洞察完成后,才有排队耗时及引擎内执行耗时数据。