专栏首页长远的EMREMR入门学习之EMR集群的常用操作(三)
原创

EMR入门学习之EMR集群的常用操作(三)

前言:上一篇我们了解了EMR集群的搭建,也了解到了集群节点的基本规格和硬件配置,那么本篇我们将学习一些集群的一些常用操作,比如集群的扩容、缩容以及COS对象存储的开启等一些注意事项。

一、集群的扩容、缩容操作

当您的集群资源(计算资源、存储资源)不足的时候,您可以将您的集群进行水平扩展。通过上一篇文章我们了解到,目前支持扩展您的 Core 节点和Task节点。

登录【控制台】,在【云产品】中选择【弹性MapReduce】,然后从左侧菜单中进入【运硬件管理】,如图:

扩容

  • 扩容节点类型只支持Core节点、Task节点
  • 按量计费集群,只能扩容按量付费的节点。
  • 包年包月集群,Core 节点只能扩容包年包月节点,Task 节点可选择包年包月节点或按量计费节点。 选择扩容节点的数量后,单击【确定】,并成功支付后,集群会开始扩容操作,扩容操作一般需要10-20分钟,请耐心等待。

缩容

目前Task直接缩容,您可以通过销毁Task节点来进行集群的缩容,通过在节点列表中单独勾选Task节点或者在在列表的操作一栏中对对应的节点进行缩容。

  • 按量计费节点会直接启动销毁流程。
  • 包年包月节点的销毁需通过提交工单启动退单流程。成功执行退单后(会有工作人员主动联系您),节点会销毁。节点销毁后,该节点上的数据不会保留,一旦您选择缩容(销毁)节点,即表明您已确认所选节点上的数据可被销毁。

注意: 如果含有弹性IP(含辅助网卡上的IP),机器退还后还会继续保留,闲置IP会继续产生费用,如不需保留,请到对应资源管理器页面进行释放。 销毁后实例将在回收站保留7天,请提前备份数据。

开启对象存储COS

如果您在创建集群的时候没有开启对象存储COS,那么可以通过以下步骤开通:

登录【控制台】,在【云产品】中选择【弹性MapReduce】,然后从左侧菜单中进入【集群列表】,进入集群列表的右侧【详情】,如图:

点击右上方的【设置】

SecretID、SecretKey通过【云产品】中选择【对象存储】,左侧的【密钥管理】,进行验证填写,即可开启COS对象存储。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • EMR入门学习之EMR初步介绍(一)

    Elastic MapReduce(EMR)是腾讯云提供的云上 Hadoop 托管服务,提供了便捷的 Hadoop 集群部署、软件安装、配置修改、监控告警、弹性...

    EMR入门学习
  • EMR入门学习之HDFS的运维操作(十三)

    HDFS是分布式文件系统。HDFS支持fsck命令来检查系统中的各种不一致状况。我们可以使用fsck 来查看当前文件系统的状态。该命令提供了若干选项,不同选项完...

    EMR入门学习
  • EMR入门学习之HBase数据迁移(九)

    从上面图中可看出,目前的方案主要有四类,Hadoop层有一类,HBase层有三类。下面分别介绍一下。

    EMR入门学习
  • Redis主从复制

    Redis的主从复制可以把数据复制多个副本部署到其他机器,从而避免了系统中的单点问题以及满足故障恢复和负载均衡等需求。

    Java学习录
  • Hadoop(三)搭建Hadoop全分布式集群

      上一篇介绍了伪分布式集群的搭建,其实在我们的生产环境中我们肯定不是使用只有一台服务器的伪分布式集群当中的。接下来我将给大家分享一下全分布式集群的搭建!

    大道七哥
  • Redis开发与运维学习笔记---(11)

    之前的文章中,我们讲述了redis的复制机制,通过复制,数据可以被备份,然后这些备份的副本可以用来做读写分离、负载均衡、故障转移等,在实际应用复制功能时,有一...

    AsiaYe
  • 【算法】堆排序学习笔记

    参考资料 《算法(第4版)》          — — Robert Sedgewick, Kevin Wayne 什么是二叉堆 在了解堆排序之前, 最重要的当...

    外婆的彭湖湾
  • Hadoop(三)手把手教你搭建Hadoop全分布式集群

    前言   上一篇介绍了伪分布式集群的搭建,其实在我们的生产环境中我们肯定不是使用只有一台服务器的伪分布式集群当中的。接下来我将给大家分享一下全分布式集群的搭建!...

    用户1195962
  • SpringBoot核心技术:你了解Actuator开放指定监控节点吗?

    之前章节SpringBoot核心技术:探究Actuator的默认开放节点 & 详细健康状态讲解了spring-boot-actuator默认开放的节点以及如何修...

    恒宇少年
  • Kubernetes 集群规模杂谈

    早在 Kubernetes 1.2 时候,就已经宣布达到 1000 节点的规模了,在 1.6 版本更达到了 5000 节点的规模。各大厂也都有了各自的超大规模单...

    崔秀龙

扫码关注云+社区

领取腾讯云代金券