hive
pig
sqoop
三者都是hadoop中间键
下载地址http://sqoop.apache.org/
稳定版1.4.7
通过本地文件放入Linux环境里(本人放在/home/hadoop/下面)
tar -xvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /home/hadoop/hadoop_home/
然后配置环境变量
vi ~/.profile
添加内容为
export SQOOP_HOME=/home/hadoop/hadoop_home/sqoop-1.4.7.bin__hadoop-2.6.0
export PATH=$PATH:$SQOOP_HOME/bin
然后更新环境变量
source ~/.profile
在之后进入sqoop所在文件路径,配置环境
cd /home/hadoop/hadoop_home/sqoop-1.4.7.bin__hadoop-2.6.0/conf
cp sqoop_env_template.sh sqoop_env.sh
ls 一下
然后编辑 vi sqoop_env.sh
保存退出
接下来配置mysql
加入mysql的jdbc驱动包
cp -a /home/hadoop/mysql-connector-java-5.1.47/mysql-connector-java-5.1.47-bin.jar /home/hadoop/hadoop_home/sqoop-1.4.7.bin__hadoop-2.6.0/lib
然后启动即可
sqoop help