首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Hadoop2.2 Ubuntu64位 编译

Hadoop2.2 Ubuntu64位 编译

作者头像
星哥玩云
发布2022-06-29 20:05:13
发布2022-06-29 20:05:13
3240
举报
文章被收录于专栏:开源部署开源部署

Hadoop2.2作为release不支持Linux的64位版本,需要自己手工编译。下面是我自己的安装过程:

1. 复制一个虚拟机。

2. 下载hadoop-2.2.0-src.tar.gz解压缩,并且拷贝到Ubuntu的/opt文件夹下:

sujx@ubuntu:/opt$ cp -r /mnt/hgfs/F/hadoop/soft/hadoop-2.2.0-src ./

3.  下载protobuf-2.5.0.zip并且解压缩后拷贝到/opt目录下,而后编译

安装依赖包:

sudo apt-get install g++ autoconf automake libtool cmake zlib1g-dev pkg-config libssl-dev

编译protobuf

4.  修改hadoop2.2 BUG

目前的2.2.0 的Source Code 压缩包解压出来的code有个bug 需要patch后才能编译。否则编译hadoop-auth 会提示下面错误:

[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:2.5.1:testCompile (default-testCompile) on project hadoop-auth: Compilation failure: Compilation failure:

[ERROR] /home/chuan/trunk/hadoop-common-project/hadoop-auth/src/test/java/org/apache/hadoop/security/authentication/client/AuthenticatorTestCase.java:[84,13] cannot access org.mortbay.component.AbstractLifeCycle

[ERROR] class file for org.mortbay.component.AbstractLifeCycle not found         

处理方式:https://issues.apache.org/jira/browse/HADOOP-10110

5.  正式编译:

mvn clean package -Pdist,native -DskipTests -Dtar

6.  编译后的文件位置:/opt/hadoop-2.2.0-src/hadoop-dist/target

把 hadoop-2.2.0拷贝到/opt文件夹下就可以正常使用。

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档