大数据学习与分享-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大数据学习与分享

专注于大数据领域常用技术的学习与分享

专栏成员

170

文章

218678

阅读量

44

订阅数

如何获取Yarn和Spark UI界面指标信息

spark http hadoop tcp/ip yarn

ip和port：Yarn ResourceManager active节点的ip地址和端口号

大数据学习与分享

2021-09-24

9960

高级大数据研发工程师面试题总结

hbase TDSQL MySQL 版 node.js yarn 编程算法

4.groupByKey、reduceByKey、aggregateByKey、combineByKey区别

大数据学习与分享

2021-06-10

1.3K0

不可不知的资源管理调度器Hadoop Yarn

mapreduce yarn node.js

Yarn（Yet Another Resource Negotiator）是一个资源调度平台，负责为运算程序如Spark、MapReduce分配资源和调度，不参与用户程序内部工作。同样是Master/Slave架构。

大数据学习与分享

2020-08-10

6160

Spark集群和任务执行

spark yarn mapreduce node.js

Driver：Spark框架中的驱动器，运行用户编写Application 的main()函数。类比于MapReduce的MRAppmaster

大数据学习与分享

2020-08-10

3780

不可不知的资源管理调度器Hadoop Yarn

hadoop yarn 大数据

Yarn（Yet Another Resource Negotiator）是一个资源调度平台，负责为运算程序如Spark、MapReduce分配资源和调度，不参与用户程序内部工作。同样是Master/Slave架构。

大数据学习与分享

2020-07-30

8030

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态