sqoop安装与配置

相关配置版本

环境准备

一下只是用于测试，所以环境就简单一点

• Hadoop 伪分布式（可在本站搜索 Hadoop）

安装 Sqoop

解压 & 重命名

tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7

修改配置文件

进入 sqoop-1.4.7/conf 目录下

复制模板文件

[root@node conf] cp sqoop-env-template.sh sqoop-env.sh

修改文件 sqoop-env.sh

取消注释，加上 Hadoop 的路径 & 设置MR的路径

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/usr/local/src/hadoop-2.9.2

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/usr/local/src/hadoop-2.9.2

# 保存退出，记得  source sqoop-env.sh

添加环境变量

# sqoop
export SQOOP_HOME=/usr/local/src/sqoop-1.4.7
export PATH=$PATH:$SQOOP_HOME/bin:

# 保存退出，记得  source /etc/profile

安装完成 查看版本

会报出没有配置 HBASE_HOME, HIVE_HOME 等警告，如果不用这些，就无需配置。

[root@node conf] sqoop-version
20/06/07 20:41:36 INFO sqoop.Sqoop: Running Sqoop version: 1.4.7
Sqoop 1.4.7
git commit id 2328971411f57f0cb683dfb79d19d4d19d185dd8
Compiled by maugli on Thu Dec 21 15:59:58 STD 2017