安装包下载地址
1.上传sqoop到master的/home/hadoop目录
2.把sqoop压缩文件解压到/usr/local中,使用以下命令:
sudo tar -xvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local
bin后面的下划线是两个
3. 进入/usr/local目录,使用以下命令:
cd /usr/local
4.重命名sqoop:
sudo mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop
5.授权当前用户Hadoop拥有sqoop
目录的所有者权限,使用以下命令:
sudo chown -R hadoop sqoop
6.进入sqoop安装目录下的conf目录,使用以下命令:
cd /usr/local/sqoop/conf/
7.重命名sqoop-env-template.sh为sqoop-env.sh,使用以下命令:
mv sqoop-env-template.sh sqoop-env.sh
8.编辑sqoop-env.sh,解除第23,26,29,32,35行的注释符号后,分别设置为hadoop,hadoop,hbase,hive和zookeeper的安装目录,如图:
cd /usr/local/sqoop/lib/
10.上传MySQL的驱动文件到lib目录:
进入SFTP传输连接,切换路径
cd /usr/local/sqoop/lib
拖拽驱动文件进行上传
如图:
11.拷贝hive的jar文件到lib目录,使用以下命令:
cp /usr/local/hive/lib/hive-common-2.3.7.jar /usr/local/sqoop/lib/
12.编辑环境变量文件,使用以下命令;
vim /home/hadoop/.bashrc
13.编辑环境变量文件,在最后添加以下内容:
export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SQOOP_HOME/bin
14.刷新环境变量,使用以下命令:
source /home/hadoop/.bashrc
15.验证是否安装成功,使用以下命令:
sqoop version
16.查看MySQL管理员的账户和密码,使用以下命令:
sudo cat /etc/mysql/debian.cnf
如图:
17.使用管理员账户和密码登录MySQL,使用以下命令:
mysql -u debian-sys-maint -p
18.创建sqoop数据库,使用以下命令:
CREATE DATABASES IF NOT EXISTS sqoop;
19.创建sqoop用户,设置密码为123456,使用以下命令:
CREATE USER 'sqoop'@'%' IDENTIFIED BY '123456';
20.授予sqoop用户操纵sqoop数据库的权限,使用以下命令:
GRANT ALL PRIVILEGES ON sqoop.*TO 'sqoop'@'%';
FLUSH PRIVILEGES;
21.退出MySQL,使用以下命令:
exit