1.在编译之前我们可能需要安装的工具如下:
- yum install lzo-devel zlib-devel gcc autoconf automake libtool ncurses-devel openssl-deve gcc-g++
2.需要 安装 ant 、 Maven、Findbugs 和protobuf
2.1 安装 maven
建议使用版本 Maven 3.0.5 ,高版本可能会存在一些问题。还有JAVA 版本建议使用1.6
下载官方地址http://maven.apache.org/docs/3.0.5/release-notes.html
解压后添加系统环境变量 vim /etc/profile
- export MAVEN_HOME=/opt/apache-maven-3.0.5
- export PATH=$PATH:$MAVEN_HOME/bin
命令:
mvn -version
- [hue@cloud-master FCCSDATA]$ mvn -version
- ApacheMaven3.0.5(r01de14724cdef164cd33c7c8c2fe155faf9602da;2013-02-1921:51:28+0800)
- Maven home:/usr/local/maven3.05
- Java version:1.6.0_45, vendor:SunMicrosystemsInc.
- Java home:/usr/local/jdk1.6/jre
- Default locale: zh_CN, platform encoding: UTF-8
- OS name:"linux", version:"2.6.32-431.el6.x86_64", arch:"amd64", family:"unix"
说明安装成功
2.2 安装Ant
- $ wget http://apache.dataguru.cn//ant/binaries/apache-ant-1.9.3-bin.tar.gz
- $ sudo tar zxf apache-ant-1.9.3-bin.tar.gz -C /opt
- $ sudo vim /etc/profile
添加环境变量
export ANT_HOME=/opt/apache-ant-1.9.3
export PATH=$PATH:$ANT_HOME/bin
2.3 安装Findbugs
- $ wget http://prdownloads.sourceforge.net/findbugs/findbugs-2.0.3.tar.gz?download
- $ tar zxf findbugs-2.0.3.tar.gz -C /opt
- $ vim /etc/profile
添加环境变量
export FINDBUGS_HOME=/opt/findbugs-2.0.3
export PATH=$PATH:$FINDBUGS_HOME/bin
2.4 安装protobuf
- $ wget https://protobuf.googlecode.com/files/protobuf-2.5.0.tar.gz
- $ tar zxf protobuf-2.5.0.tar.gz
- $ cd protobuf-2.5.0
- $ ./configure
- $ make
- $ make install
3. 从官方下载hadoop-2.0.0-cdh4.5.0 解压后
$ wget http://archive.cloudera.com/cdh4/cdh/4/hadoop-2.0.0-cdh4.5.0.tar.gz
$ tar xvfz hadoop-2.0.0-cdh4.5.0.tar.gz
$ cd hadoop-2.0.0-cdh4.5.0/src/
$ mvn package -DskipTests -Pdist,native -Dtar
可能出现的问题
undefined reference to `xdrmem_create’
我出现这个问题 可能是因为我升级了centos 的系统内核导致的。没有解决,换了一个节点按照上面的方法编译成功了。
下载包http://archive-primary.cloudera.com/cdh5/cdh/5/
- wget http://archive-primary.cloudera.com/cdh5/cdh/5/hadoop-2.3.0-cdh5.0.0.tar.gz
执行命令一样
解压
- tar xvfz hadoop-2.3.0-cdh5.0.0.tar.gz
- cd hadoop-2.3.0-cdh5.0.0/src
- mvn package-DskipTests-Pdist,native-Dtar
编译过程中 可能会出现出现 下载超时 可能是网络不好 重复执行 一下命令即可
如果出现
[ERROR] Failed to execute goal org.apache.maven.plugins:maven-antrun-plugin:1.6:run (dist) on project hadoop-hdfs-httpfs: An Ant BuildException has occured: exec returned: 2 -> [Help 1] |
这个原因是tomcat 包没有下载完毕 ,可能是网络问题, 去网站里手工下载 http://archive.apache.org/dist/tomcat/tomcat-6/v6.0.37/bin/
- cd hadoop-hdfs-project/hadoop-hdfs-httpfs/downloads
- wget http://archive.apache.org/dist/tomcat/tomcat-6/v6.0.37/bin/apache-tomcat-6.0.37.zip
然后重新执行 命令 ,基本上没有问题了
编译 eclipse
- mvn eclipse:eclipse -DdownloadSources=true-DdownloadJavadocs=true
相关推荐
官方CentOS-6.4-i386-bin-DVD1to2.torrent种子文件,可以使用迅雷下载
CentOS-6.4-i386-bin-DVD1(文档内附有下载链接)vmware镜像映射资源
64位centos6.5 hadoop-2.6.0-cdh5.9.0 新编译最新的native lib包。
CENTOS6.4 X64位 CentOS-6.4-x86_64-bin-DVD1.iso CentOS-6.4-x86_64-bin-DVD2.iso
hadoop大规模应用之CentOS6.4+DNS-BIND域名服务器配置基础详解 很不错的配置文档
详细介绍CentOS6.4版本的linux操作系统开启telnet终端服务的方法,详细步骤和截图说明
hadoop安装包centos6.5-hadoop-2.6.4.tar.gzhadoop安装包centos6.5-hadoop-2.6.4.tar.gz
CentOS-6.4-x86_64-minimal.iso
linux 系统为centos6.5 hadoop版本:2.5.0 cdh3.5.6环境下使用
CentOS-6.4-x86_64百度网盘下载连接,可以直接安装在vmware上,供实验使用
centos6.4的安装镜像。可以下一个VM,安装流程百度一大堆。
hadoop-2.5.0-cdh5.3.1 64位在centos6.4 64位编译好的本地库, 复制到native文件夹下就可以了,注意建立软链接。
kmod-oracleasm(centos6.4-6.9,centos7.1-7.6)下载,适用于ORACLE RAC的安装部署,其他的2个asmlib可以在oracle的官网下载
编译PHP5配置centos6.4
CentOS 6.4 i386的学习笔记-001 自定义安装图形界面
1、CentOS 6.4 系统镜像有两个,安装系统只用到第一个镜像即 CentOS-6.4-i386-bin-DVD1.iso(32 位) 或者 CentOS-6.4-x86_64-bin-DVD1.iso(64 位),第二个镜像是系统自带软件安装包; 2、安装 CentOS 6.4 ...
最近在学习大数据,自己手动编译native包。 操作环境: 1. Centos 6.5 2. hadoop-2.5.0-cdh5.3.6 现传上编译步骤和native包
oracle安装(网络yum redhat5.8和centos6.4)-详细笔记总结
CentOS 6.4下Mysql 5.7编译安装
在centos6.4下编译64位的hadoop 2.4.1