Hadoop on k8s 快速部署进阶精简篇

一、概述

二、快速部署步骤如下

1）安装 git

2）部署 mysql

如果小伙伴已经有mysql了，这一步就可以忽略，如果想快速部署mysql可以参考我以下几篇文章：

这里以 docker-compose 部署 mysql 为例：

3）创建存储目录（所有节点）

：

：

5）修改 hadoop configmap

如果需要修改database和 nodemanager 的节点数，记得修改 comfigmap 配置：

6）修改 hive configmap （MySQL 配置）

如果需要修改hive 配置，记得修改hive comfigmap 配置：

7）安装 helm

8）开始部署

【温馨提示】上面还有几个pod没起来，那是因为资源不足导致，如果小伙伴资源足够是不会出现这个问题的。

9）测试验证

hdfs web：

yarn web：http://ip:

通过 hive 创建库表和添加数据验证集群可用性