前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Hadoop基础教程-第2章 Hadoop快速入门(2.2 Hadoop下载与安装)

Hadoop基础教程-第2章 Hadoop快速入门(2.2 Hadoop下载与安装)

作者头像
程裕强
发布2022-05-06 18:29:46
8040
发布2022-05-06 18:29:46
举报
文章被收录于专栏:大数据学习笔记

2.1 Hadoop下载与安装

2.1.1 官网下载

打开Apache Hadoop官方网址http://hadoop.apache.org/

这里写图片描述
这里写图片描述

单击左侧菜单“Releases”将打开发行版页面http://hadoop.apache.org/releases.html

这里写图片描述
这里写图片描述

单击2.7.3版本下“binary”链接,将进入该版本的下载页面

这里写图片描述
这里写图片描述

单击最上方的建议链接: We suggest the following mirror site for your download: http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz

可以使用迅雷或QQ旋风等多线程下载工具来下载,支持断点续传。成功下载后得到hadoop-2.7.3.tar.gz压缩文件,204M。请检查压缩包是否204M,浏览器下载的话可能会中断。

2.1.2 上传至虚拟机

这里写图片描述
这里写图片描述

通过ll或ls命令可以查看到已经上传到虚拟机node1上的hadoop-2.7.3.tar.gz压缩文件

这里写图片描述
这里写图片描述

2.1.3 解压缩

按照《1.7 目录规划》http://blog.csdn.net/chengyuqiang/article/details/71512953节规划,需要将Hadoop安装到/opt目录下。 通过下面命令直接将hadoop-2.7.3.tar.gz解压缩到/opt目录下 tar -zxvf hadoop-2.7.3.tar.gz -C /opt

代码语言:javascript
复制
[root@node1 ~]# tar -zxvf hadoop-2.7.3.tar.gz -C /opt
这里写图片描述
这里写图片描述

通过cd /opt/hadoop-2.7.3命令切换到hadoop根目录,然后通过ll命令查看

这里写图片描述
这里写图片描述

2.1.4 目录结构分析

如上图Hadoop的目录结构:

  1. bin :Hadoop 最基本的管理脚本和使用脚本所在目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop 。
  2. etc :Hadoop 配置文件所在的目录,包括core-site.xml 、hdfs-site.xml 、mapred-site.xml 等从Hadoop 1.0 继承而来的配置文件和yarn-site.xml 等Hadoop 2.0 新增的配置文件。
  3. include :对外提供的编程库头文件(具体动态库和静态库在lib 目录中),这些头文件均是用C++ 定义的,通常用于C++ 程序访问HDFS 或者编写MapReduce 程序。
  4. lib :该目录包含了Hadoop 对外提供的编程动态库和静态库,与include目录中的头文件结合使用。
  5. libexec :各个服务对应的shell 配置文件所在目录,可用于配置日志输出目录、启动参数(比如JVM 参数)等基本信息。
  6. sbin :Hadoop 管理脚本所在目录,主要包含HDFS 和YARN 中各类服务的启动/ 关闭脚本。
  7. share :Hadoop 各个模块编译后的jar 包所在目录 。
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2017-05-11,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 2.1 Hadoop下载与安装
    • 2.1.1 官网下载
      • 2.1.2 上传至虚拟机
        • 2.1.3 解压缩
          • 2.1.4 目录结构分析
          相关产品与服务
          大数据
          全栈大数据产品,面向海量数据场景,帮助您 “智理无数,心中有数”!
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档