弹性 MapReduce (EMR) 是基于云原生技术和泛 Hadoop 生态开源技术的安全、低成本、高可靠的开源大数据平台。提供易于部署及管理的 Hive、Spark、HBase、Flink、StarRocks、Iceberg、Alluxio 等开源大数据组件,帮助客户高效构建云端企业级数据湖技术架构。
下表为操作审计支持的弹性 MapReduce操作列表:
操作名称 | 资源类型 | 事件名称 |
---|---|---|
添加自动扩缩容规格 | emr | AddAutoScaleSpec |
新增配置组 | emr | AddConfigGroup |
添加扩缩容负载规则 | emr | AddMetricScaleStrategy |
增加节点规格配置 | emr | AddNodeResourceConfig |
新增用户自定义配置文件 | emr | AddServiceConfFile |
添加角色实例 | emr | AddServiceRoleInstance |
生成集群脚本任务 | emr | AddShellScriptTask |
新增用户列表(用户管理) | emr | AddUserManagerUserList |
新增用户列表 | emr | AddUsersForUserManager |
提交spark作业 | emr | ApplySparkApp |
集群分配至项目 | emr | AssignInstancesProject |
云盘挂载 | emr | AttachDisks |
取消流程作业 | emr | CancelJobFlow |
COS脚本检查 | emr | CheckCosInfo |
校验用户自定义配置参数 | emr | CheckCustomConfig |
校验自建Mysql数据库连接 | emr | CheckCustomDBConn |
校验数据库连接 | emr | CheckDatabaseConnection |
确认流程是否支持取消 | emr | CheckFlowCanBeCancelled |
检查EMR-MetaDB网络连通 | emr | CheckMetaDBNet |
校验角色和策略 | emr | CheckRoleAndPolicy |
安装服务关系校验 | emr | CheckSoftRelation |
检测服务是否支持添加角色实例功能 | emr | CheckSupportServiceRoleInstance |
校验账号是否是云梯账号 | emr | CheckYuntiAccount |
清理EMR集群元数据信息并销毁集群 | emr | ClearMetadata |
创建EMR容器集群实例 | emr | CreateCloudInstance |
创建EMR集群实例 | emr | CreateCluster |
新增挂载表(联邦管理) | emr | CreateFederationMountTables |
新增NameService(联邦管理) | emr | CreateFederationNameService |
创建EMR实例 | emr | CreateInstance |
创建EMR集群实例 | emr | CreateInstanceNew |
创建云原生资源 | emr | CreateNativeResource |
创建体外客户端 | emr | CreateOutsideClient |
服务高级操作-提交页面数据 | emr | CreateServiceOps |
CreateSparkLinkRss 关联RSS | emr | CreateSparkLinkRss |
删除自动扩缩容规格 | emr | DeleteAutoScaleSpec |
删除自动扩缩容规则 | emr | DeleteAutoScaleStrategy |
删除配置组 | emr | DeleteConfigGroup |
删除挂载表(联邦管理) | emr | DeleteFederationMountTables |
删除集群 | emr | DeleteInstance |
删除节点规格配置 | emr | DeleteNodeResourceConfig |
删除用户自定义配置文件 | emr | DeleteServiceConfFile |
移除角色实例 | emr | DeleteServiceRoleInstance |
删除集群脚本任务记录 | emr | DeleteShellScriptList |
DeleteSparkLinkRss取消关联 | emr | DeleteSparkLinkRss |
删除用户列表 | emr | DeleteUserManagerUserList |
获取AccessKey | emr | DescribeAccessKey |
获取所有集群 | emr | DescribeAllInstancesList |
查询节点可额外挂载云盘类型 | emr | DescribeAttachableDiskType |
查询节点支持额外挂载的云盘 | emr | DescribeAttachableDisks |
获取自动扩缩容全局配置 | emr | DescribeAutoScaleGlobalConf |
获取伸缩组全局配置 | emr | DescribeAutoScaleGroupGlobalConf |
获取自动扩缩容元数据 | emr | DescribeAutoScaleMetaRange |
获取自动扩缩容记录 | emr | DescribeAutoScaleRecords |
获取自动扩缩容规格 | emr | DescribeAutoScaleSpecs |
获取自动扩缩容规则 | emr | DescribeAutoScaleStrategies |
获取自动扩缩容白名单 | emr | DescribeAutoScaleWhiteList |
获取引导脚本 | emr | DescribeBootScript |
查询Cam用户列表 | emr | DescribeCamUserList |
拉取资源调度支持的默认设置 | emr | DescribeCapacityDefaultSettings |
描述CBS加密 | emr | DescribeCbsEncrypt |
查询CDB价格 | emr | DescribeCdbPrice |
获取CGW项目列表 | emr | DescribeCgwProjects |
集群详情 | emr | DescribeCloudInstance |
集群列表 | emr | DescribeCloudInstancesList |
客户端信息查看 | emr | DescribeClusterClients |
【云监控】告警回调获取集群名称 | emr | DescribeClusterEmergencyCallback |
地域集群事件查询 | emr | DescribeClusterEventsOverview |
地域集群健康状态 | emr | DescribeClusterGroupServiceStatus |
【云监控】获取集群主机列表 | emr | DescribeClusterHardwareInfo |
【云监控】获取集群主机类型 | emr | DescribeClusterHardwareType |
查询集群节点信息 | emr | DescribeClusterNodes |
【监控】查询集群概览 | emr | DescribeClusterOverview |
查询服务信息 | emr | DescribeClusterServiceInfo |
【监控】获取对比指标列表 | emr | DescribeCompareMetricsList |
获取配置文件列表(配置管理页) | emr | DescribeConfFileList |
查询配置组 | emr | DescribeConfigGroup |
查询节点类型的配置组 | emr | DescribeConfigGroupList |
列出cos桶 | emr | DescribeCosBucket |
查询账户的CVM配额 | emr | DescribeCvmQuota |
查询云服务器规格 | emr | DescribeCvmSpec |
默认节点规格接口 | emr | DescribeDefaultNodeSpec |
获取过期配置(配置管理页) | emr | DescribeDelayedServiceConfig |
销毁信息接口 | emr | DescribeDestroyInfo |
获取分散置放群组信息 | emr | DescribeDisasterRecoverGroup |
【监控218】返回磁盘具体信息 | emr | DescribeDiskInfo |
查询EKS集群列表 | emr | DescribeEKSInstances |
【监控】主机详情页查询进程状态 | emr | DescribeEMRHostOverview |
【云监控】控制台获取EMR实例列表信息 | emr | DescribeEMRInstancesExtra |
【监控】查询节点各进程部署状态 | emr | DescribeEMRNodeOverview |
【云监控】查询EMR节点类型 | emr | DescribeEMRNodeType |
【云监控】查询EMR节点 | emr | DescribeEMRNodes |
获取用户账号属性判断信息 | emr | DescribeEmrAccountAttribute |
查询YARN的任务统计信息 | emr | DescribeEmrApplicationStatics |
购买页拉取EMR-META | emr | DescribeEmrMetaDB |
查询监控概览页指标数据 | emr | DescribeEmrOverviewMetrics |
查询EMR角色 | emr | DescribeEmrRole |
获取EMR售卖信息(已废弃) | emr | DescribeEmrSaleInfo |
获取EMR售卖信息 | emr | DescribeEmrSaleInfoExtend |
用户自定义脚本信息 | emr | DescribeExecCustomScript |
查询导出配置 | emr | DescribeExportConfs |
查询支持导出配置文件的列表 | emr | DescribeExportConfsList |
获取导出文件列表配置 | emr | DescribeExportFileListConf |
获取失败配置(配置管理页) | emr | DescribeFailedServiceConfig |
获取挂载列表(联邦管理) | emr | DescribeFederationMountTables |
获取集群HDFS联邦类型 | emr | DescribeFederationMountType |
nameservice列表(联邦管理) | emr | DescribeFederationNameService |
配置页面拉取文件所在IP列表 | emr | DescribeFileIps |
查看EMR运行中任务数量 | emr | DescribeFlowNum |
查询EMR实例流程状态 | emr | DescribeFlowStatus |
查询EMR任务运行详情状态 | emr | DescribeFlowStatusDetail |
获取集群的扩缩容配置 | emr | DescribeGlobalScaleConf |
【监控218】获取HBase Region列表 | emr | DescribeHBaseRegionList |
获取Hbase表级监控数据概览 | emr | DescribeHBaseTableOverview |
查询集群Hbase监控元数据 | emr | DescribeHbaseMetricMeta |
hbaserit信息展示 | emr | DescribeHbaseStatus |
获取Hbase表级监控数据接口 | emr | DescribeHbaseTableMetricData |
获取Hbase表级监控数据概览接口 | emr | DescribeHbaseTableMetricDataOverview |
【监控218】返回集群热力图数据 | emr | DescribeHeatMapDistribution |
【监控218】返回集群主机聚合维度指标列表 | emr | DescribeHeatMapMetricList |
获取Hive查询语句 | emr | DescribeHiveQueries |
获取Impala查询列表 | emr | DescribeImpalaQueries |
获取洞察结果列表 | emr | DescribeInsightList |
获取安装组件信息 | emr | DescribeInstallSoftwareInfo |
展示告警信息 | emr | DescribeInstanceAlerts |
获取EMR实例别名 | emr | DescribeInstanceAlias |
拉取所有节点资源(仅提供给标签控制台使用) | emr | DescribeInstanceNode |
【监控218】获取集群主机信息 | emr | DescribeInstanceNodes |
获取实例操作日志 | emr | DescribeInstanceOplog |
查询待续费节点信息 | emr | DescribeInstanceRenewNodes |
【监控】获取服务概览摘要数据 | emr | DescribeInstanceServiceAbstract |
【监控】获取服务角色表名称列表 | emr | DescribeInstanceServiceRoleNames |
【监控】获取服务角色表数据 | emr | DescribeInstanceServiceRoleTable |
查询服务角色健康状态 | emr | DescribeInstanceServiceStatus |
查询集群实例信息 | emr | DescribeInstances |
查询集群列表 | emr | DescribeInstancesList |
地域集群统计 | emr | DescribeInstancesOverview |
容器集群白名单 | emr | DescribeIsCloudClusterWhite |
当前用户是否有默认eks集群 | emr | DescribeIsHasEks |
查询流程作业状态 | emr | DescribeJobFlow |
查询TKE或EKS集群扩容POD询价 | emr | DescribeK8sResourcePrice |
查询密钥 | emr | DescribeKeyPairs |
导出Keytab文件(用户管理) | emr | DescribeKeyTabFile |
获取Kubernetes账号策略 | emr | DescribeKubernetesAccountStrategy |
【监控】获取日志搜索文件列表 | emr | DescribeLogSearchFileNames |
【监控】获取日志搜索内容 | emr | DescribeLogSearchRecords |
【监控】获取日志搜索tab标签开关 | emr | DescribeLogSearchTabs |
获取托管伸缩全局配置 | emr | DescribeManagedScaleGlobalConf |
获取托管伸缩白名单 | emr | DescribeManagedScaleWhiteList |
获取emr集群实例Ip | emr | DescribeMasterIp |
获取数据库默认信息 | emr | DescribeMetaDatabase |
查询监控数据 | emr | DescribeMetricData |
【监控】获取监控数据,自动设置时间粒度 | emr | DescribeMetricDataAutoGranularity |
查询某个指标的具体含义和采集方式 | emr | DescribeMetricInfo |
查询集群监控元数据 | emr | DescribeMetricMeta |
获取不同级别监控的监控维度值 | emr | DescribeMetricsDimension |
获取指标设置信息 | emr | DescribeMetricsMetaSetting |
查询变配订单 | emr | DescribeModifyGoodsDetail |
集群按量转包年包月资源查询 | emr | DescribeModifyPayModeNodes |
查询变配规格 | emr | DescribeModifySpec |
获取新功能列表 | emr | DescribeNewFeatureList |
获取EMR节点别名 | emr | DescribeNodeAlias |
查询节点数据盘信息 | emr | DescribeNodeDataDisks |
【监控】查询主机基本配置 | emr | DescribeNodeHardwareInfo |
获取yarn的node label的web url | emr | DescribeNodeLabelWebUrl |
查看节点信息 | emr | DescribeNodeList |
资源调度-标签管理-nodemanager IP 列表 | emr | DescribeNodeManagerHosts |
获取节点规格配置 | emr | DescribeNodeResourceConfig |
快速获取节点规格配置 | emr | DescribeNodeResourceConfigFast |
查询节点规格 | emr | DescribeNodeSpec |
获取可用于部署联邦的节点 | emr | DescribeNodesForFeder |
获取可用于部署联邦的节点 | emr | DescribeNodesForFederation |
查询备选规格 | emr | DescribeOptionalSpec |
查询备选规格白名单 | emr | DescribeOptionalSpecWhiteList |
【监控】查询监控概览页概览指标数据 | emr | DescribeOverviewData |
获取父队列的标签列表 | emr | DescribeParentLabels |
获取容器资源规格 | emr | DescribePodSpec |
获取TKE,EKS容器资源规格 | emr | DescribePodSpecs |
获取售卖地域及可用区 | emr | DescribeRegionAndZone |
获取控制台及购买页的地域和可用区 | emr | DescribeRegionAndZoneSaleInfo |
获取可用区产品售卖信息 | emr | DescribeRegionProduct |
查询续费订单 | emr | DescribeRenewGoodsDetail |
查询YARN资源调度数据信息 | emr | DescribeResourceSchedule |
查询router节点订单 | emr | DescribeRouterGoodsDetail |
DescribeRssClusterList rss集群列表 | emr | DescribeRssClusterList |
查询扩容订单 | emr | DescribeScaleoutGoodsDetail |
描述可扩容的服务 | emr | DescribeScaleoutableService |
获取购买页集群场景、类型、产品及组件信息 | emr | DescribeSceneProductInfo |
获取EMR安全组 | emr | DescribeSecurityGroup |
获取某个安全组的策略 | emr | DescribeSecurityGroupPolicies |
查询已选备选规格 | emr | DescribeSelectedOptionalSpec |
描述容器集群角色信息 | emr | DescribeServiceComponentInfos |
【云监控】查询服务组件列表 | emr | DescribeServiceComponents |
获取组件配置筛选器(配置管理页) | emr | DescribeServiceConfCategories |
配置比对(配置管理页) | emr | DescribeServiceConfDiff |
获取全维度配置差异比对结果(配置管理页) | emr | DescribeServiceConfDimensionDiff |
配置状态新功能引导(配置管理页) | emr | DescribeServiceConfigStatusFeatureGuide |
查询服务配置 | emr | DescribeServiceConfs |
获取组件配置信息(配置管理页) | emr | DescribeServiceConfsNew |
查询服务可删除的角色实例列表 | emr | DescribeServiceDeletableRoleInstances |
服务组信息 | emr | DescribeServiceGroups |
服务高级操作-操作范围 | emr | DescribeServiceHosts |
查询EMR集群服务进程信息 | emr | DescribeServiceNodeInfos |
服务高级操作-获取页面数据 | emr | DescribeServiceOps |
【云监控】查询服务概览 | emr | DescribeServiceOverview |
描述服务角色Pod节点信息 | emr | DescribeServicePodNodeInfos |
获取服务移除角色实例约束信息 | emr | DescribeServiceRoleInstanceConstraints |
查询服务角色的部署节点列表 | emr | DescribeServiceRoleInstanceDeployableNodes |
获取服务角色名称列表 | emr | DescribeServiceRoleNames |
查看支持升级的服务小版本 | emr | DescribeServiceUpgradeVersion |
查询集群脚本任务的单个节点详细执行结果 | emr | DescribeShellScriptNodeDetails |
查询单个集群脚本任务的节点列表 | emr | DescribeShellScriptNodes |
查询集群脚本任务列表 | emr | DescribeShellScriptTaskList |
是否显示用户管理的Tab页(用户管理) | emr | DescribeShowUserManagerTab |
DescribeSparkAppStatus作业信息 | emr | DescribeSparkAppStatus |
获取数据查询的downsamples | emr | DescribeStepByTimeRange |
描述EMR子任务流程 | emr | DescribeSubJobFlowStatus |
新版描述EMR子任务流程 | emr | DescribeSubJobFlowStatusNew |
查询TKE集群接口信息 | emr | DescribeTKEInstances |
拉取集群所有标签 | emr | DescribeTags |
TKE白名单 | emr | DescribeTkeWhiteList |
[监控]概览页主机维度的TopN | emr | DescribeTopNByHost |
[监控]获取topn进程 | emr | DescribeTopNByProcess |
[监控]获取topn元数据信息 | emr | DescribeTopNMeta |
查询用户列表(用户管理) | emr | DescribeUserManagerUserList |
查询用户列表 | emr | DescribeUsersForUserManager |
查询vpc列表信息 | emr | DescribeVpcList |
获取Yarn的任务信息 | emr | DescribeYarnApplications |
部署生效-提示信息 | emr | DescribeYarnDeployMessage |
获取最新的标签信息 | emr | DescribeYarnLastestLabels |
yarn资源调度-调度历史 | emr | DescribeYarnScheduleHistory |
获取账户余额 | emr | DescribleAccountBalance |
查询硬件节点信息(已废弃) | emr | DescribleClusterNodes |
缩容接口 | emr | EmrDestroyTaskNodeWithAuth |
获取计费创建下单参数接口 | emr | GenerateCreateGoodsDetail |
生成变配订单 | emr | GenerateModifyGoodsDetail |
生成续费订单 | emr | GenerateRenewGoodsDetail |
生成扩容订单 | emr | GenerateScaleoutGoodsDetail |
获取计费创建下单参数接口V1(已废弃) | emr | GetCreateGoodsDetail |
获取计费创建下单参数接口 | emr | GetCreateGoodsDetailList |
详情页监控信息接口 | emr | GetMetricDataForMcController |
详情页节点信息获取接口 | emr | GetNodeListForMcController |
获取服务实时日志 | emr | GetRealtimeLog |
获取计费续费下单参数接口 | emr | GetRenewGoodsDetailList |
获取计费扩容下单接口 | emr | GetScaleoutGoodsDetailList |
详情页组件配置信息获取接口 | emr | GetServiceGroupForMcController |
获取标签键 | emr | GetTagKeys |
获取标签值列表 | emr | GetTagValues |
云盘创建询价 | emr | InquirePriceCreateDisks |
销毁节点退费金额查询 | emr | InquirePriceRefundEmr |
云盘续费询价 | emr | InquirePriceRenewDisks |
集群续费询价 | emr | InquirePriceRenewEmr |
云盘扩容询价 | emr | InquirePriceResizeDisks |
获取添加Router价格 | emr | InquiryPriceAddRouter |
创建实例询价 | emr | InquiryPriceCreateInstance |
续费询价 | emr | InquiryPriceRenewInstance |
扩容询价 | emr | InquiryPriceScaleOutInstance |
变配询价 | emr | InquiryPriceUpdateInstance |
后开启Cos | emr | InstallCos |
安装组件 | emr | InstallSoftware |
获取配置下发日志 | emr | ListConfLogs |
开启关闭自动续费接口 | emr | ModifyAutoRenewFlag |
更新自动扩缩容全局配置 | emr | ModifyAutoScaleGlobalConf |
修改自动扩缩容规格 | emr | ModifyAutoScaleSpecs |
修改自动扩缩容规则 | emr | ModifyAutoScaleStrategy |
修改引导脚本 | emr | ModifyBootScript |
修改配置组信息 | emr | ModifyConfigGroup |
datanode进入或退出维护模式 | emr | ModifyDataNodeMaintenance |
EMR Manager Agent更新 | emr | ModifyEmrManagerAgent |
更新EmrRole信息 | emr | ModifyEmrRole |
修改或添加导出文件list配置 | emr | ModifyExportFileListConf |
修改流程状态 | emr | ModifyFlowStatus |
集群扩缩容配置 | emr | ModifyGlobalScaleConf |
ModifyHbaseRit修复 | emr | ModifyHbaseRit |
修改集群名称 | emr | ModifyInstanceBasic |
更新托管伸缩全局配置 | emr | ModifyManagedScaleGlobalConf |
更新emr集群Ip | emr | ModifyMasterIp |
修改数据库连接 | emr | ModifyMetaDatabase |
【监控】用户自定义监控元数据 | emr | ModifyMetricMetaPerInstance |
取消保存yarn标签管理的编辑内容 | emr | ModifyOldLabelConfig |
修改备选规格 | emr | ModifyOptionalSpec |
修改备选规格状态 | emr | ModifyOptionalSpecStatus |
变配实例 | emr | ModifyResource |
刷新YARN的动态资源池 | emr | ModifyResourcePools |
修改YARN资源调度的资源配置 | emr | ModifyResourceScheduleConfig |
取消保存yarn资源调度的资源配置 | emr | ModifyResourceScheduleConfigForRollback |
切换yarn资源调度的开关 | emr | ModifyResourceScheduleSwitch |
修改YARN的资源调度器 | emr | ModifyResourceScheduler |
强制修改标签 | emr | ModifyResourcesTags |
【管控】修改集群安全组 | emr | ModifySecurityGroup |
差异配置覆盖(配置管理) | emr | ModifyServiceConfDiff |
修改服务组件参数 | emr | ModifyServiceParams |
服务小版本升级 | emr | ModifyServiceVersion |
修改主机登陆方式 | emr | ModifySshLoginSettings |
修改规则优先级 | emr | ModifyStrategyPriority |
修改用户信息(用户管理) | emr | ModifyUserManagerInfo |
修改用户密码(用户管理) | emr | ModifyUserManagerPwd |
部署生效 | emr | ModifyYarnDeploy |
资源调度-标签管理-指令生效 | emr | ModifyYarnLabelState |
同步yarn节点标签 | emr | ModifyYarnLabels |
修改资源调度中资源池 | emr | ModifyYarnQueue |
销毁EMR实例 | emr | ReleaseClusterForMC |
云盘扩容 | emr | ResizeDataDisks |
重启组件服务 | emr | RestartService |
重试节点失败的任务 | emr | RetryFailedAction |
回滚配置 | emr | RollBackConf |
创建流程作业 | emr | RunJobFlow |
扩容集群节点 | emr | ScaleOutCluster |
实例扩容 | emr | ScaleOutInstance |
扩容节点 | emr | ScaleOutInstanceNew |
扩容router节点 | emr | ScaleOutRouter |
设置节点规格配置默认属性 | emr | SetNodeResourceConfigDefault |
启动组件监控 | emr | StartMonitor |
启动组件服务 | emr | StartService |
用于启动或停止监控或服务 | emr | StartStopServiceOrMonitor |
停止组件监控 | emr | StopMonitor |
停止组件服务 | emr | StopService |
【控制台】下发配置 | emr | SubmitServiceParamsForMC |
同步原生Pod状态 | emr | SyncNativePodState |
EMR同步POD状态 | emr | SyncPodState |
同步配置组 | emr | SynchronizeGroupConfCheck |
销毁所有自动扩缩容节点 | emr | TerminateAutoScaleNodes |
销毁集群节点 | emr | TerminateClusterNodes |
销毁EMR实例 | emr | TerminateInstance |
销毁节点 | emr | TerminateNodes |
结束spark作业 | emr | TerminateSparkApp |
缩容Task节点 | emr | TerminateTasks |
解绑集群标签 | emr | UnbindInstanceAndNodesTags |
更新指标元数据配置 | emr | UpdateMetricsMetaSetting |
更改密码 | emr | UpdateWebProxyPassForMcController |
更新代理组件密码 | emr | UpdateWebproxyPassword |