超详细hadoop系统安装教程(附步骤)

在前几篇的文章中分别就虚拟系统安装、LINUX系统安装以及hadoop运行服务器的设置等内容写了详细的操作教程,本篇分享的是hadoop的下载安装步骤。

在此之前有必要做一个简单的说明:分享的所有内容是以个人的操作经验为基础,有的人看完可能会说跟他做过的不一样。这个可能还是跟大家所使用的发行版hadoop不同造成的吧。我是下载的一个大快搜索的DKhadoop发行版,三个节点的标准版本,个人研究或者学习hadoop三节点完全够用。DKhadoop三节点的发行版我记得是现在应该也是免费开放下载的,之前专门就免费版和付费版有无区别的问题问过他们,免费版本和付费版本在后台功能上没有区别,所有权限都对免费版本开放。

本篇分享hadoop的安装步骤依然是也DKhadoop为例。DKhadoop的安装可以说真的是很简单。五月份的时候跟和大二、大三的几个学生聊hadoop的事情,他们吐槽点都集中在环境的搭建安装。一次性安装成功这种事情是不存在的,折腾到崩溃却是事实。我让他们去下载DKHadoop安装试一下,至于后来试没试就不得而知了。下面就切入正题,看完整个安装步骤你会发现hadoop安装原来也可以这么简单!

一、DKH安装包下载

安装包上传在了网盘,需要安装包的朋友可以留言索要!再次下载的步骤就省略不写了。

hadoop系统安装教程

二、DKH安装步骤

1、登录:启动成功后访问 IP,登陆默认用户名和密码: Username:admin

Password:123456

hadoop系统安装教程

2、使用条款:

hadoop系统安装教程

3、集群指定主机(安装过程中请不要刷新页面):

hadoop系统安装教程

4、集群安装(DKM各组件安装):这里有3种安装方式 “基本安装”,“完整安装”,“自定义安装”。

(1)基本安装:

hadoop系统安装教程

(2)完整安装:DKM集成了相对完整的大数据开发环境组件。

hadoop系统安装教程
hadoop系统安装教程

(3)自定义安装:用户可以根据自己的需求,选择安装的组件并且给组件分配角色。

hadoop系统安装教程
hadoop系统安装教程

(4)点击“继续”,可以查看各机器分配的角色。

hadoop系统安装教程

5、开始安装组件:我以“基本安装”方式来进行示例,其他方式类同,选择“下一步”会出现如下图的进度条。

hadoop系统安装教程

6、点击“完成安装”会转到 DKM 监控界面(ip:8998) ,首先需要登录, 用户名:admin ,密码:admin 。

hadoop系统安装教程

7、点击登录,进入到集群监控界面,如下图:

hadoop系统安装教程

进入到集群监控界面就表示安装成功了,关于集群监控界面的内容就留在后面在给大家分享吧。此部分内容最好与前面写的几篇结合起来看更容易明白!前面的几篇文章:

第一篇:《hadoop集群管理系统搭建规划说明》

第二篇:《最新虚拟机搭建hadoop环境详细图文教程》

第三篇:《Hadoop伪分布式环境搭建之Linux系统安装教程》

第四篇:《hadoop服务器基础环境搭建之Hadoop服务器配置教程》

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏互联网研发闲思录

实时监控系统设计

  随着系统业务复杂度的提升,系统复杂度提升,需要对整个系统的功能、性能、可用性,以及服务、 web、webservice、网页等等多个角度进行监控。     ...

87150
来自专栏北京马哥教育

网站打开太慢可能性及排查分析

一、网络问题 1、临时性 检查:ping, mtr,dig,dig+trace 等命令,检查网络状况,DNS等 解决:联系机房或视具体情况而定 eg:http:...

43960
来自专栏

即时通信服务器架构的一些思考

对于一个即时通信服务器来说,在用户量少的时候,一台服务器就足以提供所有的服务。而这种架构也最简单,举个例子,用户A与用户B互为好友,A向B发消息,服务器接收到消...

24750
来自专栏区块链

Cookie窃取与欺骗

Cookie窃取与欺骗 实验准备: 1、xss平台(http://manshow.xyz/xss) 2、黑客:172.18.199.27 3、目标:172.18...

22800
来自专栏java思维导图

后端架构高可用可伸缩

考虑一个问题,两台机器,两个公网IP,DNS把域名同时定位到两个IP,这算高可用吗

14620
来自专栏FreeBuf

[安全科普]你必须了解的session的本质

有一点我们必须承认,大多数web应用程序都离不开session的使用。这篇文章将会结合php以及http协议来分析如何建立一个安全的会话管理机制。 我们先简单的...

22970
来自专栏高性能服务器开发

关于即时通信服务器架构的一些思考

对于一个即时通信服务器来说,在用户量少的时候,一台服务器就足以提供所有的服务。而这种架构也最简单,举个例子,用户A与用户B互为好友,A向B发消息,服务器接收到消...

30550
来自专栏架构师之路

无线APP日志上报优化实践

昨天,和大家讨论了无线APP时代如何进行DNS速度优化,今天和大家一起讨论一下无线时代的日志上报流量优化。 缘起:无线时代,APP流量敏感,为了统计APP内用户...

637160
来自专栏Youngxj

微信透明头像

37450
来自专栏PHP在线

web缓存的作用和类型

前言&摘要 这段时间的工作内容主要是为一个客户端类型的产品增加文档在线存储和文档在线预览相关特性。由于测试的同事比较细心和专业,发现了项目实现中一些效 率低下的...

35750

扫码关注云+社区

领取腾讯云代金券