首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Spark如何从故障节点恢复数据?

Spark如何从故障节点恢复数据?
EN

Stack Overflow用户
提问于 2017-12-08 18:04:24
回答 0查看 3.3K关注 0票数 4

假设我们有一个RDD,它被多次使用。因此,为了一次又一次地保存计算,我们使用rdd.persist()方法持久化这个RDD。

因此,当我们持久化这个RDD时,计算RDD的节点将存储它们的分区。

那么现在假设包含这个RDD持久化分区的节点出现故障,那么会发生什么呢?spark将如何恢复丢失的数据?有没有复制机制?或者其他一些机制?

EN

回答

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/47711940

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档