hadoop基础学习教程实操篇汇总

关于hadoop的分享此前一直都是零零散散的想到什么就写什么,整体写的比较乱吧。最近可能还算好的吧,毕竟花了两周的时间详细的写完的了hadoop从规划到环境安装配置等全部内容。写过程不是很难,最烦的可能还是要给每一步配图,工程量确实比较大。

原计划准备接上一篇内容写dkhadoop的监控页面的参数,突然觉得还是有必要把上两周写的内容做一个汇总,这样方便需要的朋友浏览。上两周写的五篇内容,汇总到一起就算是hadoop新手入门的一个基础性教程吧(持续更新中)。

五篇文章讲什么?

前两周时间写的五篇文章,其实都在讲一件事情——hadoop运行环境安装部署!可能口头描述几分钟就可以把整个过程说完了,但一旦使用文字来表述就发现每一个部分都写的好长。五篇文章分别介绍了集群管理系统的搭建规划、虚拟机安装、Linux操作系统安装、操作系统服务器配置、DKhadoop下载安装。这五篇文章按照上面的顺序汇总到一起才是完整。

1. 《hadoop集群管理系统搭建规划说明》

2. 《最新虚拟机搭建hadoop环境详细图文教程》

3. 《Hadoop伪分布式环境搭建之Linux系统安装教程

4. 《hadoop服务器基础环境搭建之Hadoop服务器配置教程》

5. 《超详细hadoop下载安装教程(附图文)》

适合什么人?

Hadoop的大神们可以直接忽略翻过的,当然对于能够无意中看完并且提供宝贵意见的甚是感谢!分享的这些内容只能说是适合hadoop新手入门以及hadoop爱好者吧!而且可能由于使用的hadoop发行版不同的原因,如果你直接按照分享的步骤操作可能也会有“惊喜”!毕竟所有的文章也是我个人操作时的步骤截图整理出来的,而且可能会在后续整理码字的时候忘掉了某些细微的设置,影响最终的执行效果!

Hadoop用的什么发行版

Hadoop版本是比较多的,目前用的是国产的一款发行版(免费的)DKHadoop。3月份的时候在大快搜索站点上下载的3节点的一个版本。好像大快网站在改版,下载链接目前不能用了。应该在改版完成后就可以正常申请下载了。如果有朋友要的可以留言说一下,我把下载的这个版本打包给你!

DKhadoop给我的感觉是对新手入门级的算是很友好的,简单来说就是易用性做的很好!你不需要每次用到一个新东西的时候就可能要重新配置环境。置于易用性到何种程度,以后有空写一篇对比的文章吧!

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Fundebug

想成为顶级开发者吗?亲自动手实现经典案例

为了保证可读性,本文采用意译而非直译。另外,本文版权归原作者所有,翻译仅用于学习。

17060
来自专栏技术小黑屋

关闭Mac屏幕右上角QQ通知

前段时间看到QQ提示更新,于是手贱了一次升级到了QQ for Mac V4.0.1,最不爽的一件事在屏幕的右上角多出来了一个横幅,内容就是别人发给你的消息的内容...

73420
来自专栏施炯的IoT开发专栏

Application Architecture Guide 2.0 - CH 19 - Mobile Applications(4)

本文翻译"Porting"、"Power"、"Synchronization"、"User Interface"和"Performance Considerat...

20050
来自专栏数据和云

五重备份无一有效,还有哪些 rm -rf 和GitLab类似的忧伤?

DBA的悲伤,不是没有做备份,就是没有做有效的备份。日光之下,并无鲜事。 都说一个没有删过数据库的DBA,职业生涯是不完整的,不过当你删过之后,你的DBA生涯可...

42750
来自专栏FreeBuf

第一只WiFi蠕虫的诞生:完整解析博通WiFi芯片Broadpwn漏洞(含EXP/POC)

过去的几个月里,Android 和 iOS 数十亿台设备中都曾出现过可怕的 WiFi 远程代码执行漏洞 BroadPwn。谷歌 7 月初发布了修复补丁,而苹果则...

52170
来自专栏安恒信息

新型Web劫持技术现身,专攻搜索引擎

近期,安全机构截获了一例利用script脚本进行Web劫持的攻击案例,在该案例中,黑客利用一批新闻页面重置了搜索引擎页面,并将搜索结果替换为自己制作的...

38350
来自专栏FreeBuf

“同形异义字”钓鱼攻击,钉钉中招

技术交流:allen.lan#hotmail.com(# > @) 同形异义字钓鱼攻击号称“几乎无法检测”,是最狡猾的钓鱼攻击!这种攻击产生的原因是国际化域名...

32270
来自专栏PHP在线

PHP7的优缺点及从当前版本升级到PHP7都遇见了哪些坑

优点就是快,相比5.6有一倍的提升,也有很多方便的新特性,缺点是目前相关的扩展支持还不完善,很多扩展(非官方)坑不少,万一踩到由于内核变化,很多人调试起来可能不...

54760
来自专栏农夫安全

【学习规划路线】如何成为一名web安全工程师

时间:1周 环境的搭建 熟悉基本的虚拟机配置, Kali linux,centos,Windows实验虚拟机 自己搭建IIS和apache 部署php或者asp...

43560
来自专栏FreeBuf

看看印尼黑客如何利用电影大片进行网络攻击

网络犯罪分子每天都在想尽各种办法来进行攻击,这对于信息安全从业者来说再正常不过了,而这一次印尼网络犯罪组织开始利用电影大片来欺骗目标用户访问已受感染的网站。

12500

扫码关注云+社区

领取腾讯云代金券