WHCSRL 技术网

7.1.2. Sqoop_

1、上传并解压

tar  -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha -C /usr/local/soft/
  • 1

2、修改文件夹名字

mv  sqoop-1.4.6.bin__hadoop-2.0.4-alpha/ sqoop-1.4.6
  • 1

3、修改配置文件

# 切换到 sqoop 配置文件目录

cd /usr/local/soft/sqoop-1.4.6/conf/
  • 1

#复制配置文件并重命名

cp  sqoop-env-template.sh sqoop-env.sh
  • 1

# vim sqoop-env.sh 编辑配置文件,并加入以下内容

导出 HADOOP_COMMON_HOME=/usr/local/soft/hadoop-2.7.6
export HADOOP_MAPRED_HOME=/usr /local/soft/hadoop-2.7.6/share/hadoop/mapreduce
export HBASE_HOME=/usr /local/soft/hbase-1.4.6
export HIVE_HOME=/usr /local/soft/hive-1.2.1
export ZOOCFGDIR=/usr /local/soft/zookeeper-3.4.6/conf
export ZOOKEEPER_HOME=/usr /local/soft/zookeeper-3.4.6
  • 1
  • 2
  • 3
  • 4< /li>
  • 5
  • 6
  • < /ul>

#切换到bin目录

cd /usr/local/soft/sqoop-1.4.6/bin
  • 1

# vim configure-sqoop 修改配置文件,注释掉没用的内容(就是为了去掉警告信息)
内插入图片描述

4、修改环境变量


vim /etc/profile
**#将sqoop的目录加入环境变量**
  • 1
  • 2
  • 3

5、添加MySQL连接驱动

#从HIVE中复制MySQL连接驱动到$SQOOP_HOME/lib

cp  /usr/local/soft/hive-1.2.1/lib/mysql-connector-java-5.1.49.jar /usr/local/soft/sqoop-1.4.6/lib/
  • 1

6、测试

#打印sqoop版本

sqoop 版本
  • 1

#测试MySQL连通性

sqoop list-databases -connect jdbc:mysql: //master:3306?useSSL=false -username root -password 123456
  • 1

7、准备数据

登录mysql数据库
mysql -u root -p123456;

创建学生数据库
创建数据库 student;

切换数据库并导入数据
#mysql shell中执行
使用 student;
source /usr/local/data/student.sql;
source /usr/local/data/score.sql;

添加导入数据的方式
# linux shell中执行
mysql -u root -p123456 student</root/student.sql
mysql -u root -p123456 student</root/score.sql

导出mysql数据库
mysqldump -u root -p123456 数据库名>任意一个文件名.sql
  • 1
  • 2
  • 3
  • 4< /li>
  • 5
  • 6
  • < li style="color: rgb(153, 153, 153);">7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • li>
  • 18
  • 19
推荐阅读