问为什么火花环境参数与执行者不一致？
EN

Stack Overflow用户

提问于 2017-12-13 00:56:14

回答 1查看 25关注 0票数 0

我在EMR上运行我的火花应用程序。在星火历史UI中，在environment选项卡下，spark.executor.instances等于1。但是，在executors选项卡下，它显示了9执行程序的总数，包括1驱动程序。

这一切为什么要发生？

回答已采纳

发布于 2017-12-13 01:18:30

spark.executor.instances --这被设置为核心节点的初始数量加上集群中的任务节点数。

executors是每个执行器可以并行执行的任务数。

这个链接将有助于解释各种含义和选择：

票数 1

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/47783958

复制

相似问题

问为什么火花环境参数与执行者不一致？EN