千家信息网

Centos源码编译安装Hadoop2.6

发表于:2025-01-24 作者:千家信息网编辑
千家信息网最后更新 2025年01月24日,Centos6.5(64bit)jdk7ant1.9.4maven3.1.1findbugs3.0.0protobuf2.5.0hadoop2.5.1 源代码文件二、安装以上所需的所有软件1.yum可
千家信息网最后更新 2025年01月24日Centos源码编译安装Hadoop2.6
  1. Centos6.5(64bit)

  2. jdk7

  3. ant1.9.4

  4. maven3.1.1

  5. findbugs3.0.0

  6. protobuf2.5.0

  7. hadoop2.5.1 源代码文件

二、安装以上所需的所有软件

1.yum可安装的软件

[html] view plaincopy

  1. yum install svn ncurses-devel gcc* lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel

2.安装JDK

[html] view plaincopy

  1. rpm -ivh jdk-8-linux-x64.rpm

  2. vim /etc/profile

  3. export JAVA_HOME=/usr/java/jdk1.7.0

  4. export JRE_HOME=/usr/java/jdk1.7.0/jre

  5. export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH

  6. export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

3.安装ant

[html] view plaincopy

  1. tar zxvf apache-ant-1.9.4-bin.tar.gz

  2. vim /etc/profile

  3. export ANT_HOME=/usr/local/apache-ant-1.9.4

  4. export PATH=$PATH:$ANT_HOME/bin

4.安装findbugs

[html] view plaincopy

  1. tar zxvf findbugs-3.0.0.tar.gz

  2. vim /etc/profile

  3. export FINDBUGS_HOME=/usr/local/findbugs-3.0.0

  4. export PATH=$PATH:$FINDBUGS_HOME/bin

5.安装protobuf

[html] view plaincopy

  1. tar zxvf protobuf-2.5.0.tar.gz

  2. cd protobuf-2.5.0

  3. ./configure --prefix=/usr/local

  4. make && make install

6.安装maven

[html] view plaincopy

  1. tar -zxvf apache-maven-3.1.1-bin.tar.gz

  2. vim /etc/peofile

  3. export M2_HOME=/usr/local/apache-maven-3.1.1

  4. export PATH=$PATH:$JAVA_HOME/bin:$M2_HOME/bin

三、编译hadoop源码

[html] view plaincopy

  1. tar zxvf hadoop-2.5.1-src.tar.gz

  2. cd hadoop-2.5.1-src

  3. mvn package -Pdist,native,docs -DskipTests -Dtar


最后的文件就在hadoop-2.5.1-src/hadoop-dist/target中



至此,自己编译的hadoop2.5.1已经完成,经测试不会再在运行的时候出现warning了,确实让人开心!

另外:如果在编译的时候出现问题,不妨考虑一下jdk的版本以及各个软件的版本的问题,我最初用的是jdk8,一直报错,最后尝试了一下jdk7才算成功。


0