首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >Apache Livy中的容错

Apache Livy中的容错
EN

Stack Overflow用户
提问于 2018-04-17 22:13:13
回答 2查看 535关注 0票数 1

任何对在Apache Livy中实现容错有一些见解的人。例如,Livy服务器出现故障,我们如何实现HA。

EN

回答 2

Stack Overflow用户

发布于 2019-12-30 20:53:12

实际上,由于这个bug,在负载均衡器后面使用多个Livy服务器现在不起作用:https://issues.apache.org/jira/browse/LIVY-541

相比之下,对于需要高可用性的部署,Livy支持使用Zookeeper进行会话恢复,从而确保在Livy服务器发生故障时Spark集群仍然可用。重新启动后,Livy服务器可以连接到现有会话并回滚到失败前的状态。

票数 0
EN

Stack Overflow用户

发布于 2020-05-21 06:14:57

如果您希望Livy会话永久重启,那么只需在livy.conf中设置这些属性

代码语言:javascript
运行
复制
livy.server.recovery.mode = recovery
livy.server.recovery.state-store = filesystem
livy.server.recovery.state-store.url = file:///home/livy

您也可以使用hdfs://进行存储。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/49880449

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档