distributedShell 样例源码详解

distributedShell是Yarn自带的应用程序，和MR类似，当前工具可以用来对Yarn进行压测。

【Hadoop仿真】如何在仿真NodeManager中实现心跳

Hadoop自带的hadoop-sls只能用于压测调度器，可在实际中影响ResourceManager性能的因素比较多，不能只看调度器。当前项目可构造海量的Fa...

container-executor 详解

container-executor 是NodeManager管理Container很重要的一个工具，是深入学习Yarn作业调度不可缺少的一个知识点，值得深入学...

Idea Hadoop 源码YarnServiceProtos无法补全问题

使用IDEA打开Hadoop源码之后，发现YarnServiceProtos部分代码无法补全，已经安装了protobuf相关的插件。

Capacity调度器源码解析

Capacity 调度器的核心类是CapacityScheduler。在初始化CapacityScheduler的时候，在构造函数initAsyncSchedu...

router启动详解

为了解决HDFS的水平扩展性问题，社区从Apache Hadoop 0.23.0版本开始引入了HDFS federation。HDFS Federation是指...

hadoop 主备倒换控制器：ZKFailoverController详解

HDFS的NameNode、Yarn的ResourceManager都是依靠ZK实现主备倒换的。核心的类为：ZKFailoverController.java,

Hadoop 认证模块详解

客户端的入口函数为 KerberosAuthenticator.authenticate函数

ContainerManager详解

ContainerManager主要负责NM中管理所有Container生命周期，其主要包含启动Container、恢复Container、停止Containe...

BPServiceActor详解

BPServiceActor 主要在DataNode中用于和NameNode沟通的类。主要功能如下：

BPServiceActor详解

BPServiceActor 主要在DataNode中用于和NameNode沟通的类。主要功能如下：

neovim 从0开始配置优化

neovim是从vim的一个分支fork出来的，从性能等方面来讲都比vim强很多，所以从vim转到neovim了。

docker stop container 报错：tried to kill container, but did not receive an exit event

jobhistory 作业缓存源码详解

jobhistory 一般会保存一部分作业信息到内存中，查询作业信息的时候一般会从内存查询，如果内存查询不到就会从磁盘上扫描。

NameNode客户端协议详解

根据交互对象的不同，将协议进行了不同的归类。要想了解协议内容，需要将其单独分开分析。

FSDirectory详解

Namenode最重要的两个功能之一就是维护整个文件系统的目录树（即命名空间namesystem） 。 HDFS文件系统的命名空间（namespace） ， ...