前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >EMR入门学习之EMR集群的常用操作(三)

EMR入门学习之EMR集群的常用操作(三)

原创
作者头像
披荆斩棘
修改2019-11-14 10:40:50
1.5K0
修改2019-11-14 10:40:50
举报
文章被收录于专栏:乘风破浪乘风破浪

前言:上一篇我们了解了EMR集群的搭建,也了解到了集群节点的基本规格和硬件配置,那么本篇我们将学习一些集群的一些常用操作,比如集群的扩容、缩容以及COS对象存储的开启等一些注意事项。

一、集群的扩容、缩容操作

当您的集群资源(计算资源、存储资源)不足的时候,您可以将您的集群进行水平扩展。通过上一篇文章我们了解到,目前支持扩展您的 Core 节点和Task节点。

登录【控制台】,在【云产品】中选择【弹性MapReduce】,然后从左侧菜单中进入【运硬件管理】,如图:

扩容

  • 扩容节点类型只支持Core节点、Task节点
  • 按量计费集群,只能扩容按量付费的节点。
  • 包年包月集群,Core 节点只能扩容包年包月节点,Task 节点可选择包年包月节点或按量计费节点。 选择扩容节点的数量后,单击【确定】,并成功支付后,集群会开始扩容操作,扩容操作一般需要10-20分钟,请耐心等待。

缩容

目前Task直接缩容,您可以通过销毁Task节点来进行集群的缩容,通过在节点列表中单独勾选Task节点或者在在列表的操作一栏中对对应的节点进行缩容。

  • 按量计费节点会直接启动销毁流程。
  • 包年包月节点的销毁需通过提交工单启动退单流程。成功执行退单后(会有工作人员主动联系您),节点会销毁。节点销毁后,该节点上的数据不会保留,一旦您选择缩容(销毁)节点,即表明您已确认所选节点上的数据可被销毁。

注意: 如果含有弹性IP(含辅助网卡上的IP),机器退还后还会继续保留,闲置IP会继续产生费用,如不需保留,请到对应资源管理器页面进行释放。 销毁后实例将在回收站保留7天,请提前备份数据。

开启对象存储COS

如果您在创建集群的时候没有开启对象存储COS,那么可以通过以下步骤开通:

登录【控制台】,在【云产品】中选择【弹性MapReduce】,然后从左侧菜单中进入【集群列表】,进入集群列表的右侧【详情】,如图:

点击右上方的【设置】

SecretID、SecretKey通过【云产品】中选择【对象存储】,左侧的【密钥管理】,进行验证填写,即可开启COS对象存储。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 一、集群的扩容、缩容操作
    • 扩容
      • 缩容
        • 开启对象存储COS
        相关产品与服务
        弹性 MapReduce
        弹性 MapReduce (EMR) 是基于云原生技术和泛 Hadoop 生态开源技术的安全、低成本、高可靠的开源大数据平台。提供易于部署及管理的 Hive、Spark、HBase、Flink、StarRocks、Iceberg、Alluxio 等开源大数据组件,帮助客户高效构建云端企业级数据湖技术架构。
        领券
        问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档