一、Sqoop概述

Sqoop是一款开源数据迁移工具，主要用于在Hadoop（Hive）与传统数据库（MySQL……）间进行数据的传递，可将一个关系型数据库（MySQL……）中的数据导入到Hadoop的HDFS中，也可将HDFS的数据导入到关系型数据库中。

Sqoop项目开始于2009年，最早是作为Hadoop的一个第三方模块存在，后来为了让使用者能够快速部署，也为了让开发人员能够更快速地迭代开发，Sqoop独立成为一个Apache项目。

二、下载、安装和配置Sqoop

1、下载sqoop-1.4.4.bin__hadoop-2.0.4-alpha.tar.gz
链接：点击下载
提取码：faph

2、将sqoop-1.4.4.bin__hadoop-2.0.4-alpha.tar.gz 上传到目录
[root@hadoop129 software]# /opt/software
解压到
#tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/module
改文件夹名
#mv sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz sqoop-1.4.4

3、下载mysql-connector-java-5.1.38-bin.jar包，放在/opt/module/sqoop-1.4.4/lib包里

链接：点击下载
提取码：jn6w

4、给sqoop配置环境变量

[root@hadoop129 lib]# vim /etc/profile

存盘退出，执行 source /etc/profile，让配置生效。

三、利用Sqoop查看MySQL数据库

1、查看MySQL全部数据库

[root@hadoop129 sqoop-1.4.4]# sqoop list-databases --connect jdbc:mysql://hadoop129:3306/ -username root -password 1  

2、查看指定数据库的全部表
比如我们要查看hive数据库的全部表：

[root@hadoop129 sqoop-1.4.4]# sqoop list-tables --connect jdbc:mysql://hadoop129:3306/hive -username root -password 1 

四、将数据从关系数据库迁移到HDFS

1、在MySQL的test数据库里创建tabx表

mysql> scrate database test;
mysql> use test;

mysql> create table tabx(id int,name varchar(20));

2、在tabx表里插入几条记录

mysql> insert into tabx values (1, 'Mike'), (2, 'Brown'), (3, 'Alice'), (1, 'Black'), (2, 'Smith'), (3, 'Amy');

3、查询tabx表全部记录

mysql> select * from tabx;