Hadoop 源码编译以及分布式集群搭建

想要入大数据的坑，集群搭建必须是第一步

本文旨在提供最基本的，可以用于在生产环境进行Hadoop、HDFS分布式环境的搭建，方便大家学习和和了解。

卜凡学院

01. 源码编译

官方提供的版本默认提供的版本是32位的，运行时会有一些警告。一般老司机在企业实际应用中都会在64位机器上自行编译源代码。

jdk和maven基础环境设置

安装protobuf

修改配置

由于墙内网络原因需要修改一下pom.xml中配置

4. 编译hadoop

02. 集群规划

编译好Hadoop之后就准备安装啦~

主机规划：

03. 时间同步

在实际部署过程中，Hadoop集群需要跟业务系统的服务器集群需要时间同步。

04. 配置Hosts

05. 关闭防火墙

06.免密码登录

07. 配置JDK

08. 配置Hadoop

09. core-site.xml

10.hdfs-site.xml

11. 配置Hadoop环境变量

12.格式化NameNode

13. 启动HDFS

·END·