小司机带你入门EMR

LV1
发表了文章

EMR(弹性MapReduce)入门之EMR集群的常用操作(四)

在上一章我们学习了EMR集群的监控和报警功能,其实EMR集群还有很多功能会经常用到,我带着大家一起去了解一些其他的常用操作吧!

小司机带你入门EMR
XMLBashBash 指令HiveYarn
关注了用户

南非骆驼说大数据

做20年代的DT人。

75 文章0 回答72 关注者
发表了文章

EMR(弹性MapReduce)入门之kafka实战(十五)

Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以...

小司机带你入门EMR
消息队列 CKafkaKafkaHBase消息队列 MQTCP/IP
发表了文章

EMR(弹性MapReduce)入门之组件Flume和Sqoop(十四)

连接传统关系型数据库和Hadoop的桥梁 把关系型数据库的数据导入到 Hadoop 系统 ( 如 HDFS、HBase 和 Hive) 中; 把数据从 Hado...

小司机带你入门EMR
大数据数据库日志数据SQLHadoop
发表了文章

EMR(弹性MapReduce)入门之组件Hue(十三)

Hue是一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,最后Cloudera公司将其贡献给Apache基金会的Had...

小司机带你入门EMR
spark大数据JARSQLHadoop
发表了文章

EMR(弹性MapReduce)入门之其他组件使用和排障(十二)

服务器启动时,Impalad与StateStore保持心跳。首先Impala节点会将自己节点的状态信息汇报给Statestore,Statestore实时监控i...

小司机带你入门EMR
SQLHiveHadoopApache大数据
发表了文章

EMR(弹性MapReduce)入门之数据仓库工具Hive组件使用(十一)

Apache Hive数据仓库软件可以使用SQL方便地阅读、编写和管理分布在分布式存储中的大型数据集。结构可以投射到已经存储的数据上。提供了一个命令行工具和JD...

小司机带你入门EMR
HiveMySQLMapReduceApache存储
发表了文章

EMR(弹性MapReduce)入门之HBase集群的使用(十)

Hbase单表可以有百亿行、百万列,数据矩阵横向和纵向两个维度所支持的数据量级都非常具有弹性

小司机带你入门EMR
HBase分布式数据库JavaScript缓存存储
发表了文章

EMR(弹性MapReduce)入门之流计算引擎Flink、Storm(九)

Flink通过实现Google Dataflow流式计算模型实现了高吞吐、低延迟、高性能兼具实时流式计算框架。同时Flink支持高度容错的状态管理,防止状态在计...

小司机带你入门EMR
MapReduceHadoop分布式spark大数据
发表了文章

EMR(弹性MapReduce)入门之计算引擎Spark、Tez、MapReduce区别(八)

Spark Core:包含Spark的基本功能;尤其是定义RDD的API、操作以及这两者上的动作。其他Spark的库都是构建在RDD和Spark Core之上的...

小司机带你入门EMR
sparkMapReduceHadoop
发表了文章

EMR(弹性MapReduce)入门之资源管理器YARN及其故障排除(七)

整个EMR的集群调度工具是YARN,那我们就继续学习下去吧。首先了解yarn的功能。

小司机带你入门EMR
Yarn
发表了文章

EMR(弹性MapReduce)入门之腾讯云存储对象COS(六)

在前面的几篇文章中大家已经跟着我了解了HDFS以及HDFS的一些基础排障,接下来我们呢继续学习。要学习到的产品是腾讯云产品中的对象存储COS。

小司机带你入门EMR
HTTP存储大数据网站对象存储
发表了文章

EMR(弹性MapReduce)入门之EMR集群的基础排障(五)

前面四节已经向大家介绍完,EMR集群的概括和搭建以及集群内的一些操作,在实际的生产过程中,又会出现各式各样的故障。接着就为大家介绍一些常见的故障已经解决方法。

小司机带你入门EMR
Node.js大数据Hadoop
发表了文章

EMR(弹性MapReduce)入门之EMR集群的监控和告警系统(三)

登录【控制台】,选择【弹性MapReduce】进入左侧的【集群监控】,可以看到监控分为服务监控与主机监控

小司机带你入门EMR
云服务器云监控
发表了文章

EMR(弹性MapReduce)入门之EMR集群的创建和集群的销毁(二)

确定地域:EMR集群搭建的地理位置,由于集群是通过公网访问,一般建议选择接近企业所在位置,网络传输效率会更快。

小司机带你入门EMR
弹性 MapReduce
发表了文章

EMR(弹性MapReduce)入门之初识EMR(一)

现在混迹技术圈的各位大佬,谁还没有听说过“大数据”呢?提起“大数据”不得不说就是Google的“三架马车”:GFS,MapReduce,Bigtable,分别代...

小司机带你入门EMR
弹性 MapReduce
创建了专栏

EMR冲鸭

15 文章20 关注者
订阅了专栏

云加头条

云头条,早报资讯。云+社区的管理动态和活动公告。

374 文章2.4M 关注者
订阅了专栏

云加推荐

105 文章2.4M 关注者

个人简介

个人成就

扫码关注云+社区

领取腾讯云代金券