Sqoop导出脚本 1）编写Sqoop导出脚本 在/opt/bin目录下创建脚本sqoop_export.sh vim sqoop_export.sh 在脚本中填写如下内容 #!/bin/bash db_name=gmall export_data() { /opt/sqoop/bin/sqoop export \ --connect "jdbc:mysql://hadoop001:3306/${db_name}?useUnicode=true&characterEncoding=utf-8"

一、sqoop介绍 Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。 二、Sqoop原理 将导入或导出命令翻译成mapreduce程序来实现。 在翻译出的mapreduce中主要是对inputformat和outputformat进行定制。 三、Sqoop安装