前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >配置 HMS 以实现高可用性

配置 HMS 以实现高可用性

作者头像
大数据杂货铺
发布2021-08-20 11:38:58
1.2K0
发布2021-08-20 11:38:58
举报
文章被收录于专栏:大数据杂货铺大数据杂货铺

要在主实例出现故障时提供到辅助 Hive Metastore 的故障转移,您需要知道如何在 Cloudera Manager 中添加 Metastore 角色并配置属性。

多个 HMS 实例以主动/主动模式运行。不发生负载平衡。HMS 客户端总是命中第一个实例,除非它关闭。在这种情况下,客户端会扫描hive.metastore.uris属性,该属性列出 HMS 实例列表以查找可用于替换的 HMS。如果hive.metastore.uri.selection设置为 SEQUENTIAL(推荐和默认),则第二个 HMS 是指定替换 ;否则,如果hive.metastore.uri.selection设置为 RANDOM,则从列表中随机选择替换 。

最低要求角色: 配置者(也由集群管理员、完全管理员提供)

  1. 在 Cloudera Manager 中,单击集群> Hive >配置。
  2. 采取以下措施之一:
    • 如果您有一个由 Kerberos 保护的集群,请搜索 Hive 委托令牌存储,它指定 Kerberos 令牌的存储,如下所述。
    • 如果您有一个不安全的集群,请跳过下一步。

3. 选择org.apache.hadoop.hive.thrift.DBTokenStore,然后保存更改。

Kerberos 委托令牌的存储由 hive.cluster.delegation.token.store.class属性定义。可用的选择是 Zookeeper、Metastore 和内存。Cloudera 建议通过设置 org.apache.hadoop.hive.thrift.DBTokenStore 属性来使用数据库。

  1. 单击实例>操作>添加角色实例
  1. 在分配角色中,在 Metastore 服务器中,单击选择主机。
  2. 在 Hosts Selected 中,滚动并选择要用作备份 Metastore 的主机,然后单击 OK。
  3. 单击继续,直到退出向导。
  4. 从“操作”菜单启动主机上的 Metastore 角色。

该hive.metastore.uris属性会自动更新。

  1. 要检查或更改hive.metastore.uri.selection 属性,请转到Clusters > Hive > Configurations,然后搜索 Hive Service Advanced Configuration Snippet (Safety Valve) for hive-site.xml。
  2. 添加属性和值(SEQUENTIAL 或 RANDOM)。

原文链接:https://docs.cloudera.com/cdp-private-cloud-base/latest/hive-metastore/topics/hive-hms-ha-configuration.html

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2021-08-03,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 大数据杂货铺 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档