Hadoop之编译源码

一:服务器,jar包等准备

  1. 首先我们需要准备一台内存大约4G左右的服务器,2G的内存不一定够,4G的稳妥一点,并且
     最好是一个纯净版的服务器,就是除了网络,主机名之外其它什么都没有配置的。
  2. 采用root用户编译,减少文件夹权限出现问题
  3. 将准备好的包上传到服务器上           
     Hadoop之编译源码_第1张图片
  4. 安装JDK
    A:将jdk解压到module文件夹,并且配置JAVA_HOME路径在/etc/profile
           Hadoop之编译源码_第2张图片
           Hadoop之编译源码_第3张图片
           效果:
             Hadoop之编译源码_第4张图片

二:开始配置MAVEN

  1. 解压软件包到module
     Hadoop之编译源码_第5张图片
     Hadoop之编译源码_第6张图片
  2.  配置MAVEN的环境变量
     在/etc/profile中配置
     Hadoop之编译源码_第7张图片         
      Hadoop之编译源码_第8张图片   
      
      Hadoop之编译源码_第9张图片

三:开始配置ANT

  1. 解压软件包
           Hadoop之编译源码_第10张图片
           Hadoop之编译源码_第11张图片
  2.   配置ANT的环境变量
           Hadoop之编译源码_第12张图片
  3.   效果
          Hadoop之编译源码_第13张图片        

四:安装glibc-headers 和g++命令

  1. 安装glibc-headers
     命令:yum install glibc-headers
  2. 安装g++
      命令:yum install gcc-c++         
  3. 安装make
       命令:yum install make
  4. 安装cmake 
      命令:yum install cmake

五:开始配置protobuf

  1. 解压软件包
         Hadoop之编译源码_第14张图片
         Hadoop之编译源码_第15张图片
  2.  开始配置protobuf
      a:进入到/opt/module/protobuf-2.5.0目录下,执行./configure命令
            Hadoop之编译源码_第16张图片  
      b:在使用make命令编译一下
           
      c:使用make check命令
            Hadoop之编译源码_第17张图片
       d:执行make install
             Hadoop之编译源码_第18张图片
       e:执行ldconfig
             
       f:配置环境变量
              Hadoop之编译源码_第19张图片
              Hadoop之编译源码_第20张图片
            
  3. 安装openssl库
     命令:yum install openssl-devel
     Hadoop之编译源码_第21张图片
  4. 安装ncurses-devel库   
      命令:yum install ncurses-devel
          

六:开始编译源码

  1.  将hadoop-2.7.2-src.tar.gz源码包解压到/opt目录
     Hadoop之编译源码_第22张图片
    Hadoop之编译源码_第23张图片
  2.  进入到/opt/hadoop-2.7.2-src目录,通过MAVEN执行编译命令 (时间大约30分钟)
     命令:mvn package -Pdist,native -DskipTests -Dtar
     Hadoop之编译源码_第24张图片
  3. 效果
     Hadoop之编译源码_第25张图片
  4. 成功后的64位hadoop包在/opt/hadoop-2.7.2-src/hadoop-dist/target目录下
     Hadoop之编译源码_第26张图片​​​​​​​

你可能感兴趣的:(hadoop,hadoop)