第七阶段:sqoop部署
导入数据:将MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统
导出数据:从Hadoop的文件系统中导出数据到关系数据库
第一步:上传并解压
将我们下载好的安装包上传到服务器的/bigdata/soft路径下,然后进行解压
cd /bigdata/soft/
tar -zxf sqoop-1.4.6-cdh5.14.2.tar.gz -C /bigdata/install/
第二步:修改配置文件
更改sqoop的配置文件
cd /bigdata/install/sqoop-1.4.6-cdh5.14.2/conf
mv sqoop-env-template.sh sqoop-env.sh
vi sqoop-env.sh
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/bigdata/install/hadoop-2.6.0-cdh5.14.2
#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/bigdata/install/hadoop-2.6.0-cdh5.14.2
#set the path to where bin/hbase is available
export HBASE_HOME=/bigdata/install/hbase-1.2.0-cdh5.14.2
#Set the path to where bin/hive is available
export HIVE_HOME=/bigdata/install/hive-1.1.0-cdh5.14.2
第三步:添加两个必要的jar包
sqoop需要两个额外依赖的jar包,将课件资料当中两个jar包添加到sqoop的lib目录下
第五步:配置sqoop的环境变量
vi /etc/profile
export SQOOP_HOME=/bigdata/install/sqoop-1.4.6-cdh5.14.2
export PATH=:$SQOOP_HOME/bin:$PATH
source /etc/profile
软件及视频链接:https://pan.baidu.com/s/1pEHcwWB51BhiYT8S7AQ1Lg
提取码:2580