前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >【大数据搭建HDP3.x】Ambari2.7.4+HDP3.1.4离线搭建教程(下)

【大数据搭建HDP3.x】Ambari2.7.4+HDP3.1.4离线搭建教程(下)

原创
作者头像
知否大数据
发布2022-06-17 11:07:40
9180
发布2022-06-17 11:07:40
举报
文章被收录于专栏:知否大数据知否大数据

【大数据入门:手把手教你搭建Hadoop】Ambari2.7.4+HDP3.1.4+CentOS7离线搭建详细图文教程(上)

    咱接着上篇来~~

图片
图片

    本次搭建选择的Ambari2.7.4和HDP3.1.4都是官网次最新的版本,也是有版本稳定性的考虑,并未选择最新版本。上一篇把搭建HDP环境的运维软件Ambari搞起来了,Ambari的优势就是可视化,相对纯开源搭建HDP,更易入手,后期管理运维也更方便。很多大规模的公司都是拿开源的Ambari进行二次开发后上生产的。

    跟之前的HDP2.6.3相比,经历了2.x到3.x的变革,版本和新特性上变化还是很大的。

图片
图片

好了,话不多说,Here we go~


1.Ambari登录

默认用户名密码登录admin/admin

图片
图片

点击安装向导

图片
图片

2、安装HDP3.1.4集群

step0:命名HDP集群名称

图片
图片

step1:选择HDP版本

选择HDP3.1,选择本地源配置

安装操作系统选择配合本地源地址(本案例为RedHat7),其他OS 移除掉。把上篇文章配置的HDP yum源配上,下一步;

图片
图片

step2:安装选项

这一步要填写已经规划好的FQDN,和ssh无密码登录的秘钥

图片
图片

step3:确认主机

验证无密码登录是否成功,并注册主机

图片
图片

step4:选择要安装的HDP服务组件

选择常用组件

图片
图片

step5:分配组件Master

尽量做到压力均分

图片
图片
图片
图片

step6:分配slave和客户端

注意:选择DataNode节点时需同时选择NodeManger和RegionServer,其他客户端不做特殊要求

step7:服务定制

凭证

将各组件的管理用户名密码设置,其中hive和ranger要将上篇文字提到的对应已建数据库用户名填上。

图片
图片

数据源:hive和ranger的数据源信息,可测试连通性

图片
图片
图片
图片

存放路径

注意尽量将大容量存储路径放到容量较大的磁盘路径下

服务组件账户:默认即可

图片
图片

所有配置:可考虑后期优化

图片
图片

step8:回顾review:无异议就开始装了~

step9:安装、启动、测试

等就是了,祈祷上天能给个绿

图片
图片

安装完毕,启动失败,下一步,手动搞起来吧

图片
图片

step10:做个小结~

图片
图片

让人有点崩溃的一片红,慢慢修复吧~按序启动,有问题,看日志,解决,在启动~神挡杀神、破挡杀佛

图片
图片

每个组件的操作在右侧Actions按钮处

图片
图片
图片
图片

首先按照zookeeper-ranger-hdfs-hbase顺序启动(存在组件依赖),其他组件基本没有要求的启动顺序,陆续启动,让飘红消失~

图片
图片

3、小结

后续可以根据需要进行Ambari本地化、二次开发、HDP各组件参数优化和研究。

开始你的大数据之旅吧~

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档