Sqoop集群的搭建

准备环境

  HDFS集群的安装
  Hbase集群的安装
  Hive的安装（搭了，但是没写博客。。。。）
  Zookeeper的安装（链接里面第八步）
  sqoop安装包

操作步骤

  1、使用命令tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz解压该安装包。

  2、解压后的文件改名。命令：mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7。

  2、配置环境变量

  3、进入conf目录，目录如下：

  4、使用命令cp sqoop-env-template.sh sqoop-env.sh将sqoop-env-template.sh复制一份，命名为sqoop-env.sh。

  5、编辑配置文件sqoop-env.sh。

export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HBASE_HOME=$HBASE_HOME
export HIVE_HOME=$HIVE_HOME
export ZOOCFGDIR=$ZOOKEEPRER_HOME/conf

  6、把mysql的jar放到sqoop的lib目录下（mysql-connector-java-5.1.35-bin.jar）。

  7、使用sqoop连接mysql，并且显示mysql的tables。命令：sqoop list-tables --connect jdbc:mysql://node01/test --username root --password 123。