Mac下编译Hadoop2.6.0源码

1、环境搭建
(1)Hadoop官网下载Hadoop2.6.0源码(hadoop-2.6.0-src.tar.gz)
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.6.0/
解压缩命令:tar -xvzf hadoop-2.6.0-src.tar.gz
(2)按照building.txt文件中的内容安装jdk,maven,protobuf
安装jdk时,如果报错
Missing tools.jar at: /Library/Java/JavaVirtualMachines/JDK 1.7.0 Developer
修改:

cd $JAVA_HOME 
mkdir Classes  
cp lib/tools.jar Classes/classes.jar

maven安装:http://www.jianshu.com/p/191685a33786
protobuf安装:http://blog.csdn.net/sophie_stef/article/details/45500543
(3)源码导入eclipse
打开到解压的src文件夹下

$ cd hadoop-maven-plugins
$ mvn install
$ cd hadoop-2.6.0-src
$ mvn org.apache.maven.plugins:maven-eclipse-plugin:2.6:eclipse -DskipTests

如果导入报lib错误,可能是maven仓库配置问题
(4)根据需求修改源码
(5)打包需改后的源码

$ cd hadoop-2.6.0-src
$ mvn clean
$ mvn package -Pdist -DskipTests -Dtar

等待十几分钟后,显示success,即打包成功。
最终打包好的tar包位于hadoop-2.6.0-src/hadoop-dist/target下

你可能感兴趣的:(分布式系统,mac,hadoop,源码)