博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
SUSE Linux 64位环境下编译hadoop2.2.0源码
阅读量:4121 次
发布时间:2019-05-25

本文共 1122 字,大约阅读时间需要 3 分钟。

OS环境:SUSE Linux Enterpriser Server 11 SP3 (64位)

Mission:由于apache官网所提供的编译好的Hadoop-2.2.0-tar.gz 只兼容32位系统,安装在64位系统下会出现各种兼容性错误。故,需要在64位系统下,对hadoop-2.2.0源码进行重新编译。

START:

准备工作:

步骤 :

1、安装JDK

     在oracle官网下载 最新的jdk包,eg:jdk-7u45-linux-x64.tar.gz

     解压,安装,添加环境变量。

测试:java -version

2、安装maven

     在apache官网上下载最新maven包,eg:apache-maven-3.1.1-bin.tar.gz

      解压,安装,添加环境变量。

   测试:mvn -version

3、为suse 添加软件源(方便用zypper命令安装各种包)

      打开:yast  -> Software Repositories ->Add->next->填写“源“的URL,以及给Repository命名-〉next

     具体参照网页:

4、安装protobuf

     首先用zypper命令安装protobuf所需要的依赖包:gcc*

    sudo zypper install gcc*

   然后下载最新的 protobuf包,解压,安装,设置环境变量

测试:protoc --version

5、检查与安装必要的依赖包(hadoop编译需要)

     cmake,openssl-devel,ncurses-devel、autoconf、automake、libtool

6、下载hadoop-2.2.0源码:hadoop-2.2.0-src.tar.gz

    解压 

由于hadoop-2.2.0源码包解压出来的code有个bug 需要patch后才能编译:

详见:

  按照上述官方patch,修改文件:hadoop-2.2.0-src/hadoop-common-project/hadoop-auth/pom.xml

7、在开始编译hadoop-2.2.0源码之前,建议先测试以上各种包是否安装成功

    如果之前修改过/etc/profile ,最好在编译hadoop的终端上 source /etc/profile

   然后cd进入hadoop-2.2.0源码解压目录中,开始编译(建议换到root权限下编译

  mvn package -Pdist,native -DskipTests -Dtar

等待大约30分钟,编译成功。

编译后的包在:hadoop-2.2.0-src/hadoop-dist/target/hadoop-2.2.0.tar.gz

转载地址:http://fsspi.baihongyu.com/

你可能感兴趣的文章
LeetCode第47题思悟—— 全排列 II(permutations-ii)
查看>>
LeetCode第48题思悟——旋转图像(rotate-image)
查看>>
驱动力3.0,动力全开~
查看>>
记CSDN访问量10万+
查看>>
Linux下Oracle数据库账户被锁:the account is locked问题的解决
查看>>
记CSDN访问20万+
查看>>
Windows 环境下Webstorm 2020.3 版本在右下角找不到Git分支切换部件的一种解决方法
查看>>
Electron-Vue项目中遇到fs.rm is not a function问题的解决过程
查看>>
飞机换乘次数最少问题的两种解决方案
查看>>
有向无回路图的理解
查看>>
设计模式中英文汇总分类
查看>>
WPF实现蜘蛛纸牌游戏
查看>>
单例模式
查看>>
工厂方法模式
查看>>
模板方法模式
查看>>
数据结构之队列、栈
查看>>
数据结构之树
查看>>
数据结构之二叉树
查看>>
二叉树非递归遍历算法思悟
查看>>
红黑树算法思悟
查看>>