CentOS6.5源码编译安装Hadoop2.5.1

centos 6.5源码编译安装Hadoop2.5.1

一、编译环境

CentOS6.5(64bit)     
jdk7     
ant1.9.4 
maven3.1.1 
findbugs3.0.0 
protobuf2.5.0 
hadoop2.5.1 源代码文件 

二、安装以上所需的所有软件

1.yum可安装的软件

yum install svn ncurses-devel gcc* lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel 

2.安装JDK

rpm -ivh jdk-8-linux-x64.rpm 
 
vim  /etc/profile 
export JAVA_HOME=/usr/java/jdk1.7.0 
export JRE_HOME=/usr/java/jdk1.7.0/jre 
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH 
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 

3.安装ant

tar zxvf apache-ant-1.9.4-bin.tar.gz 
 
vim /etc/profile 
export ANT_HOME=/usr/local/apache-ant-1.9.4 
export PATH=$PATH:$ANT_HOME/bin 

4.安装findbugs

tar zxvf findbugs-3.0.0.tar.gz 
 
vim /etc/profile 
export FINDBUGS_HOME=/usr/local/findbugs-3.0.0 
export PATH=$PATH:$FINDBUGS_HOME/bin 

5.安装protobuf

tar zxvf protobuf-2.5.0.tar.gz 
cd protobuf-2.5.0 
./configure --prefix=/usr/local 
make && make install 

6.安装maven

tar -zxvf apache-maven-3.1.1-bin.tar.gz 
vim /etc/peofile 
export M2_HOME=/usr/local/apache-maven-3.1.1 
export PATH=$PATH:$JAVA_HOME/bin:$M2_HOME/bin 

三、编译hadoop源码

tar zxvf hadoop-2.5.1-src.tar.gz 
cd hadoop-2.5.1-src 
mvn package -Pdist,native,docs -DskipTests -Dtar 

最后的文件就在hadoop-2.5.1-src/hadoop-dist/target中

至此，自己编译的hadoop2.5.1已经完成，经测试不会再在运行的时候出现warning了，确实让人开心！

另外：如果在编译的时候出现问题，不妨考虑一下jdk的版本以及各个软件的版本的问题，我最初用的是jdk8，一直报错，最后尝试了一下jdk7才算成功。

下面关于Hadoop的文章您也可能喜欢，不妨看看：

标题名称：CentOS6.5源码编译安装Hadoop2.5.1
标题路径：http://www.mswzjz.cn/qtweb/news39/362689.html

攀枝花网站建设、攀枝花网站运维推广公司-贝锐智能，是专注品牌与效果的网络营销公司；服务项目有等

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 贝锐智能